KR100698986B1 - 정보 처리 장치 - Google Patents

Abstract

본 발명은 외국어를 번역하기 위한 번역 데이터의 데이터 사이즈는 작게 하고, 번역의 개요와 상세 내용 모두 표시할 수 있는 수단을 구비한 휴대 전화를 제공하는 것이다. 상기 과제를 해결하기 위해서, 예를 들면 다른 장치와 통신하는 통신부와, 화상 정보를 출력하는 촬상부와, 그 촬상부에 의해 출력된 화상 정보에 포함되는 식별 정보를 인식하는 인식부와, 그 인식부에 의해 인식된 식별 정보에 관련한 관련 정보의 취득을 지시하는 관련 정보 취득 지시부와, 그 관련 정보 취득 지시부에 의해 상기 관련 정보의 취득이 지시된 경우에 상기 관련 정보를 상기 통신부를 통하여 취득하여 표시하도록 제어하는 제어부를 구비한다.

휴대 전화, 서버, CPU, 개요 번역, 상세 번역 URL, 공기 관계 데이터베이스

Description

정보 처리 장치{INFORMATION PROCESSING APPARATUS}

도 1은 제1 실시예에 따른 휴대 전화의 구성 블록도.

도 2는 사전 데이터의 내용예를 도시하는 도면.

도 3은 사전 데이터의 내용예를 도시하는 도면.

도 4는 제1 실시예에서의 처리 수순을 도시하는 흐름도.

도 5는 제1 실시예에서의 표시 화면예.

도 6은 제2 실시예에서의 표시 화면예.

도 7은 제3 실시예에 따른 이력표의 예.

도 8은 제3 실시예에서의 처리 수순을 도시하는 흐름도.

도 9는 제3 실시예에서의 표시 화면예.

도 10은 문자 패턴 데이터를 다운로드하는 실시예의 처리 흐름도.

도 11은 문자 패턴 데이터를 다운로드하는 실시예의 표시 화면예.

도 12는 사전 데이터에 ID/패스워드가 관련되어 있는 실시예의 이미지도.

도 13은 사전 데이터에 ID/패스워드가 관련되어 있는 실시예의 처리 흐름도.

도 14는 제4 또는 제5 실시예에서의 휴대 전화의 개관도.

도 15는 제5 실시예에서의 처리 수순을 도시하는 흐름도.

도 16은 제5 실시예에서의 휴대 전화의 표시 화면예.

도 17은 제6 실시예에서의 휴대 전화의 표시 화면예.

도 18은 제7 실시예에서의 휴대 전화의 표시 화면예.

도 19는 제8 실시예에서의 전체 시스템도.

도 20은 공기(共起; cooccurrence) 관계 데이터베이스예.

도 21은 제8 실시예의 휴대 전화의 처리 수순을 도시하는 흐름도.

도 22는 제8 실시예의 서버의 처리 수순을 도시하는 흐름도.

도 23은 제8 실시예에서 촬상 화상, 인식 대상 단어, 공기 단어의 위치 관계를 설명하는 도면.

도 24는 제8 실시예에서의 휴대 전화와 서버의 처리 시퀀스도.

도 25는 제8 실시예에서의 휴대 전화의 표시 화면예.

<도면의 주요 부분에 대한 부호의 설명>

100 : 휴대 전화

101, 1408a, 1408b : 입력부

102 : CPU

103 : 촬상부

104 : 기억부

105 : 화상 인식부

106 : 사전 데이터

107 : 표시부

108 : 통신부

109 : 검색부

110 : 사전 플래그

200 : 메인 표시부를 갖는 케이싱

300 : 입력부를 갖는 케이싱

201 : 외국어

202 : 개요 번역

203 : 상세 번역 URL

204 : URL 공통 부분

205 : URL 작성 방법

701 : 단어

702 : 인식 횟수

703 : 최종 인식 시각

704 : 확인 횟수

705 : 최종 확인 시각

1401 : 통상 촬상 버튼

1402 : 인식 촬상 버튼

1403 : 힌지부

1407 : 서브 표시부

1900 : 서버

1902 : SV-CPU

1903 : 공기 관계 데이터베이스

1904 : SV 기억부

1905 : SV 화상 인식부

1906 : SV 사전 데이터

1908 : SV 통신부

1909 : SV 검색부

1910 : 사용자 등록 데이터베이스

2301 : 인식 대상 외의 단어

2303 : 인식 대상 단어

본 발명은, 예를 들면 휴대 전화, PHS(Personal Handy-phone System), PDA(Personal Digital Assistant)나 PC(Personal Computer) 등의 정보 처리 장치에 관한 것이다.

일본 특개 2002-252691호 공보에는, OCR(Optical Character Recognition) 기능에 의해, 촬상한 화상 정보에 포함되는 문자를 문자 정보로 변환하고, 인쇄물에 게재된 주소나 이름, 전화 번호, URL(Uniform Resource Locator) 등을 입력할 수 있는 휴대 전화가 제안되어 있다. 또한, 일본 특개평 5-274346호 공보에는, 지면 상에 인쇄된 문자열의 이미지를 판독하고, OCR 기능을 이용하여 그 이미지로부터 문자열을 인식하여 문자 정보로 변환하고, 번역 사전을 참조하여 그 문자열에 대응하는 번역을 표시부에 표시하는 전자 사전이 제안되고 있다.

특허 문헌 1 : 일본 특개 2002-252691

특허 문헌 2 : 일본 특개평 5-274346

그러나, 상기 특허 문헌 1에서는, 인쇄물에 게재된 주소 등의 정보를 입력할 수 있는 OCR 기능을 탑재한 휴대 전화가 개시되어 있지만, 그 입력된 정보를 어떻게 사용할지 등의 사용성 면에서의 검토가 불충분하였다. 또한, 상기 특허 문헌 2에서는, 예를 들면 OCR 기능에 의해 입력된 단어의 번역을 표시할 때, 간단한 번역밖에 표시되지 않아, 보다 자세한 번역이나 그 단어의 사용 방법 등을 알고자 하는 경우에는, 별도로 영일 사전을 찾아 고쳐야만 하여, 사용하기 불편하다고 하는 문제가 있었다.

그래서, 본 발명은 사용성이 향상된 정보 처리 장치, 정보 처리 방법 및 소프트웨어를 제공하는 것을 목적으로 한다.

상기 과제를 해결하기 위해서, 예를 들면 다른 장치와 통신하는 통신부와, 화상 정보를 출력하는 촬상부와, 그 촬상부에 의해 출력된 화상 정보에 포함되는 식별 정보를 인식하는 인식부와, 그 인식부에 의해 인식된 식별 정보에 관련한 관련 정보의 취득을 지시하는 관련 정보 취득 지시부와, 그 관련 정보 취득 지시부에 의해 상기 관련 정보의 취득이 지시된 경우에 상기 관련 정보를 상기 통신부를 통 하여 취득하여 표시하도록 제어하는 제어부를 구비한다.

<실시 형태>

이하, 본 발명의 실시 형태를 도면을 이용하여 설명한다. 또, 이하의 도면에서, 동일한 구성부에 대해서는 동일 부호를 이용한다.

도 1은 본 실시예(제1 실시예)에 따른 휴대 전화의 구성 블록도이다. 본 실시예에서는, 휴대 전화에 탑재된 화상 인식 기능(OCR 기능)을 이용하여, 지면 등에 게재된 영어 단어의 일본어 번역을 출력하는 경우를 상정한다.

휴대 전화(100)는, 입력부(101), CPU(102), 촬상부(103), 기억부(104), 화상 인식부(105), 사전 데이터(106), 표시부(107), 통신부(108), 검색부(109) 등을 포함한 것으로 구성된다.

입력부(101)는 전화 번호, 그 외의 정보를 입력하는 입력부로서, 휴대 전화의 전원을 ON/OFF할 때, 피사체를 촬상할 때 등, 사용자가 휴대 전화에 입력을 할 때 사용하는 것이다. CPU(102)는 기억부(104)에 기억된 프로그램에 기초하여 동작하여, 예를 들면 입력부(101)로부터의 입력에 따라 각 부를 제어하는 것이다.

촬상부(103)는, 예를 들면 카메라 등으로 구성된 것으로, 피사체인 사람의 얼굴이나, 경치, 문자 등을 촬상하여, CPU(102)에서 취급할 수 있는 화상 정보로 변환하고, 변환된 화상 정보를 필요에 따라 표시부(107) 등에 출력한다. 사용자는, 표시부(107)에 출력된 화상 정보를 모니터하면서 촬상하고자 하는 화상을 선택하여 셔터 등에 의해 촬상의 지시를 행한다. 셔터가 눌러지면, 촬상된 화상 정보는 기억부(104)에 기억된다. 또한, 기억부(104)는 휴대 전화(100)에서 취급하는 데이터나 소프트웨어 등도 기억한다.

화상 인식부(105)는, 화상 정보에 포함되는 문자나 기호 등의 식별 정보를 인식한다. 여기서, 식별 정보란, 문자, 기호 등으로 표시된 정보로, 예를 들면 홈 페이지의 어드레스, 메일 어드레스, 주소, 전화 번호, 지도 정보 혹은 영어의 단어 등과 같이 문자나 기호 등으로 표현된 것으로, 사물을 식별할 수 있는 정보이면 상기한 예 이외의 것이어도 된다.

또한, 여기서, 인식이란, 촬상부(103)에 의해 촬상된 화상 정보에 포함되는 식별 정보를 추출하고, 그 식별 정보를 소정의 영역마다 분할하고, 분할된 영역을 소정의 파라미터값으로 변환하고, 그 파라미터값에 기초하여 분할된 영역이 어떠한 정보인지를 결정하는 것을 말한다.

보다 구체적으로 말하면, 예를 들면 화상 정보 내의 「abc」라는 문자를 「인식」하는 경우를 생각하면, 우선 「abc」가 화상 정보 내의 어떤 위치의 정보인지를 특정하고, 다음으로 「a」 「b」 「c」로 분할하고, 「a」를 소정의 파라미터값(예를 들면, 그 문자를 세로, 가로, 경사 방향에서 본 선분의 구성을, 문자의 백색 부분을 「0」, 흑색 부분을 「1」로 하여 파라미터화된 값)으로 변환한다. 그리고, 변환된 파라미터값에 가장 유사한 파라미터값과 대응된 문자를 문자 패턴 데이터표로부터 선출한다. 문자 패턴 데이터표란, 파라미터값과 그 파라미터값에 대응한 알파벳 등의 문자가 기술되어 있는 표로, 미리 기억되어 있는 것이다. 또, 화상 인식부(105)는 OCR 기능을 갖고 있고, OCR 기능을 실현하는 구체적인 구성은, 예를 들면 특허 문헌 1에 기재되어 있다.

기억부(104)에 기억된 사전 데이터(106)에는, 예를 들면 외국어의 단어 등과 같은 식별 정보, 그 식별 정보의 일본어 번역 및 그 식별 정보의 다양한 일본어 번역이나 사용 방법, 용례 등에 대하여 자세히 쓰여진 홈페이지의 URL 등이 포함된다. 또, 번역 언어로서는 일본어 번역에 한정되는 것은 아니고, 영어나 불어 등이어도 된다. 또한, 식별 정보의 설명인 것을 알 수 있으면, 그림이나 소리 등의 데이터라도 된다.

표시부(107)는, 촬상부(103)에 의해 촬상된 화상이나 화상 인식부(105)에 의해 인식된 식별 정보를 표시한다. 그 외에, 표시부(107)에, 예를 들면 전원 상태, 전파 강도, 전지 잔량, 서버 접속 상태, 미판독 메일 등의 동작 상태, 입력된 전화 번호, 메일 수신처, 메일 송신 문서 등이나, 동화상 및 정지 화상, 착신 시의 발호자의 전화 번호, 착신 메일 문서, 접속된 인터넷 화면 등의 수신 데이터의 표시, 또한 휴대 전화의 기능을 이용하기 위해 필요한 화면을 표시한다. 통신부(108)는 휴대 전화(100)가 인터넷이나 다른 정보 처리 장치 등에 액세스하기 위한 통신 처리를 행한다. 검색부(109)는 사전 데이터(106)를 참조하여, 화상 인식부(105)에 의해 얻어진 식별 정보와 일치하는 식별 정보를 검색한다.

또한, CPU(102)는 모드 판정 플래그를 이용하여, 촬상 모드가 통상의 정지 화상 또는 동화상을 촬상하는 통상 촬상 모드인지, 화상 인식부(105)를 이용하여 식별 정보를 인식하는 인식 모드인지를 판정한다. 여기서, 모드 판정 플래그는, 예를 들면 기억부(104)에 기억된 소프트웨어의 프로그램 중에 존재하는 변수로, 인식 모드의 경우와 통상 촬상 모드의 경우에는 다른 값이 되도록 하고, CPU(102)는 이 변수에 기초하여 인식 모드와 통상 촬상 모드와, 예를 들면 입력부(101)에 의한 조작에 의해 전환한다. 이하, 실시예에서는 「인식 모드」와 「통상 촬상 모드」의 2 종류를 갖는 경우를 생각하지만, 이에 한정되는 것은 아니고, 그 이외에 모드가 있어도 상관없다.

도 2는 사전 데이터(106)의 예를 도시한다. 열(201)은 외국어의 단어가 쓰여진 열이고, 열(202)은 참조 부호 201의 단어에 대응하는 번역의 개요가 쓰여진 열이다. 열(203)은 열(201)의 단어에 대응한 관련 정보, 예를 들면 번역의 상세한 내용이 게재되어 있는 홈페이지의 URL이 쓰여진 열이다. 또, 여기서, 열(201)에는 예로서 영어 단어를 기술하였지만, 불어나 독일어 등 어떤 언어라도 되는 것은 물론이다. 또한, 여기서는 열(203)에는 URL 전체를 기술하였지만, URL의 일부만을 기술해도 된다.

도 3은 URL의 일부만이 기술된 경우의 사전 데이터(106)의 예이다. 도 2의 경우에는, "http://www.○○○.com"이 공통이기 때문에, 이 공통 부분은 URL 공통 부분(204)에 기술해두고, "a"나 "abacus" 등과 같은 고유 부분만은 열(206)에 URL 고유 부분으로서 기술해둔다. 또한, URL 작성 방법(205)에는, URL 공통 부분(204)과 URL 고유 부분(206)을 조합하여, 상세 번역이 게재된 홈페이지의 URL을 작성하는 방법을 기술해둔다. 이와 같이, URL의 공통 부분을 사전 데이터(106) 내의 미리 정해진 장소에 대표로 기술하고, 다른 부분만을 각 영어 단어에 대응하여 기술하도록 해둠으로써, 사전 데이터(106)의 데이터 사이즈를 줄일 수 있어, 휴대 전화에서 보유해야할 데이터량을 삭감할 수 있다고 하는 장점이 있다.

또한, 도 3과 같이, 열(206)에 기술되는 정보와 열(201)에 기술된 단어가 동일한 경우에는, URL 고유 부분이 기술된 열(206)을 사전 데이터(106)로부터 생략하도록 해도 상관없다. 이에 의해, 사전 데이터의 데이터 사이즈를 더욱 줄일 수 있다.

다음으로, 도 4의 흐름도를 이용하여, 본 실시예에서의 휴대 전화의 처리 수순을 설명한다. 우선, 「인식 모드」가 입력부(101)를 통하여 사용자에 의해 선택된 후, 입력부(101) 중에서 촬상부(103)에 촬상하도록 지시를 하는 스위치(이하, 이것을 셔터 버튼이라고 함)를 누르면, CPU(102)가 촬상부(103)에 촬상하도록 지시를 내린다(단계 S401). 그리고, 촬상부(103)에 의해 촬상(변환)된 피사체인 대상물의 화상 정보는 CPU(102)를 통하여 기억부(104)에 보존한다(단계 S402).

다음으로, 화상 인식부(105)가 기억부(104)에 보존된 화상 정보를 판독하여, 그 화상 정보에 포함되는 식별 정보, 예를 들면 양서(洋書)의 문장 중에 있는 단어 "recognition"을 판독하여, 인식 결과를 기억부(104)에 보존한다(단계 S403). 그 결과를, 검색부(109)가 판독하여, 기억부(104)에 의해 기억된 사전 데이터(106)의 열(201)에 있는 단어 중에서 일치하는 것을 검색한다(단계 S404).

검색하는 방법으로서는, 우선 식별 정보가 완전히 일치하는 것을 찾아내고, 완전히 일치하는 것이 없는 경우에는 한 문자만 다르고 그 외의 문자는 일치하는 단어를 찾아내는 등의 방법이 바람직하다. 이 방법을 채용함으로써, 화상 인식부(105)가 지면 상의 문자를 잘못 인식한 경우에도, 그 문자열에 가장 가까운 단어를 찾아낼 수 있어, 몇번이나 촬상하여 문자 인식을 다시 하는 수고를 줄일 수 있 어, 사용성이 좋다.

또한, 한 문자만 다른 단어도 없는 경우에는, 두 문자 다른 단어, 세 문자 다른 단어 등과 같은 식으로 다른 문자수를 점점 늘려서 검색해도 되며, 이 경우에는 인식율이 낮아도 해당하는 단어를 찾아낼 수 있다.

단계 S405에서, 해당하는 단어가 발견된 경우에는 단계 S406으로 진행한다. 만일 해당하는 단어가 발견되지 않은 경우에는 단계 S410으로 진행하여, 해당하는 단어가 발견되지 않은 것을 사용자에게 통지하는 화면을 표시부(107)에 표시하고 종료한다.

단계 S406에서는, 단계 S404에서 검색부(109)에 의해 사전 데이터로부터 검색되고, 그 검색된 단어에 대응하는 열(202)(번역의 개요)을 CPU(102)가 판독하여, 표시부(107)에 표시한다(단계 S406).

이 후, CPU(102)는 입력부(101)나 표시부(107)를 통하여, 보다 상세한 번역의 요구가 지시되었는지의 여부를 판단하고(단계 S407), 요구 지시가 된 경우에는 단계 S408로 진행한다.

단계 S408에서는, 단계 S404에서 검색부(109)에 의해 검색된 단어에 대응하는 URL을 CPU(102)가 판독하고, CPU(102)는 통신부(108)에 상기 URL에 접속하도록 지시 신호를 출력한다.

단계 S409에서, CPU(102)가 통신부(108)를 통하여 상기 홈페이지에 기록된 내용을 판독하여, 기억부(104)에 보존한다. 그 후, 그 내용을 CPU(102)가 표시부(107)에 표시한다.

이상과 같이, 간단한 번역뿐만 아니라 상세한 번역을 참조하고자 하는 경우에, 상세한 번역이 기재된 홈페이지 등을 표시시킬 수 있어, 일부러 영일 사전 등을 찾아서 고치지 않아도 그 단어의 상세한 의미를 알 수 있어, 사용성이 좋다.

또한, 휴대 전화 등의 휴대 단말기에는, 대용량의 메모리를 탑재할 수 없기 때문에, 본 실시예와 같이, 단말기 내에서는 필요 최저한의 정보(간단한 번역이나 대표적인 이유 등)를 기억시켜두고, 상세한 정보를 원할 때는 인터넷 등과 같은 다른 정보 처리 장치 상에 보존된 정보를 취득하여 참조할 수 있도록 하는 것은 매우 유효하다.

도 5는 본 실시예의 표시 화면예로서, 지면 등의 위에 쓰여진 문자열이 촬상되어, 그 화상을 문자 인식에 의해 문자 정보로 변환하고, 사전 데이터(106)가 보유하는 개요 번역을 표시부에 표시한 후, 상세 번역의 표시를 요구하는 입력이 있는 경우에는, 사전 데이터(106)가 보유하는 URL에 접속하고, 그 URL에 기록된 내용을 표시부(107)에 표시할 때의 표시 화면의 예를 나타내고 있다. 또, 표시부(107)의 하부에 표시된 「메뉴」 등의 기능에 대응한 버튼은, 입력부(101) 중, 예를 들면 상부에 배치된 버튼 등으로서, 그 버튼 등이 사용자에 의해 눌러지면, 「메뉴」 등의 기능에 대응한 표시 화면이 표시부(107)에 표시된다. 마찬가지로, 표시 화면이 천이될 때마다, 그 버튼 등은 각 표시 화면의 하부에 표시된 기능을 실행하기 위한 버튼으로서 할당된다. 이하, 표시 화면의 하부에 표시된 기능을 실행하기 위한 버튼은, 본 명세서에서 편의상, 그 표시된 기능명과 대응시켜 칭하기로 한다. 예를 들면, 「메뉴」 기능에 대응한 버튼을 「메뉴 버튼」, 혹은 「뒤로」 기능에 대응한 버튼을 「뒤로 버튼」이라고 칭한다. 또, 상술한 실행 버튼은, 우측 아래나 좌측 아래 등의 각 기능이 표시되는 위치에 따라 각 버튼을 할당하도록 해도 상관없고, 하나의 버튼으로 실현해도 상관없다.

화면(501)은 촬상 모드로서 「인식 모드」가 선택되고, 예를 들면 영문 중의 「Recognition」이라는 단어를 특정하여, 인식하는 것을 시도하는 화면예이다. 또, 여기서, 상기 영어 단어 「Recognition」을 특정하는 수단으로서, 예를 들면 표시부(107)의 중심에 표시된 「+」 마크를 식별 정보인 「Recognition」 위로 가지고 가면, 「+」 마크의 위치로부터 근방의 스페이스 정보부터 스페이스 정보까지의 부분을 한 구절의 단어로서 「Recognition」이라는 단어를 자동적으로 특정하도록 해도 되고, 사용자가 입력부(104)를 이용하여, 예를 들면 상기 메일 어드레스 정보 등의 인식 부분을 커서 등으로 지정할 수 있게 해도 상관없다. 인식 대상을 결정하는 방법이 복수개 있는 경우에, 선택할 수 있게 해도 상관없다. 또한, 동화상인 경우에는, 동화상을 정지 화상으로 코마 이송할 수 있게 설정해두고, 그 코마 이송 화면에서 인식 대상부를 선택할 수 있게 해도 상관없다.

또한, 여기서는 인식 대상인 영어 단어 「Recognition」을 점선 등으로 둘러싸서 명확화하였지만, 화상 편집부에서 인식 대상이 되는 「Recognition」을 확대 또는 축소한 화상을 작성하여, 그 화상을 표시해도 된다. 확대하기 위해서는, 예를 들면 1×1 화소로 표시하고 있던 부분을 2×2 화소로 표시한다. 또한, 화상 편집부에서 인식 대상이 되는 문자의 화상 부분을 흑백으로 변환한 것이나 세피아색으로 변환하거나, 또는 흑백 반전한 것을 작성하여 그 화상을 표시해도 되고, 화상 내에서 어느것이 인식 대상인지를 명확하게 알 수 있게 표시하면, 상기 예에 한정되는 것은 아니다.

대기 상태에서 이 화면(501)의 상태로 하기 위해서는, 예를 들면 「인식 모드」 버튼을 누르거나, 또는 대기 상태에서 메뉴 화면으로 진행하여, 그 메뉴 화면을 따라서 버튼 조작을 행함으로써 화면(501)으로 이행해도 된다. 화면(501)에서, 화면 하부의 「인식」 버튼을 누르면 화면(502)으로 천이한다.

화면(502)은, 촬상한 화상 중에서 URL 등의 인식 가능한 부분을 문자 인식부(103)가 검출하고, 인식 처리를 한참 행하는 중인 것을 나타내는 화면이다. 인식 처리가 종료하면, 화면(503)으로 천이한다.

화면(503)은, 화상 인식부(105)가 인식한 결과와, 그 문자열에 대응한 개요 번역(202)을 표시부(107)에 표시한 화면이다. 인식 대상이 되는 문자 이외의 부분의 화상은, 예를 들면 인식 대상이 어떤 것인지를 명확화하기 위해, 흑색으로 칠해져 있거나, 촬상한 화상이나 아이콘 등이 표시되어 있지 않은 부분의 색과 동일한 색으로 칠해져 있다. 사용자가 단어의 의미나 사용 방법을 더 자세히 알고자 하는 경우에는, 화면(503)의 좌측 하부에 표시된 상세 표시에 대응한 버튼을 누르면, 화면(504)으로 천이한다.

화면(504)은, 통신부(108)가 열(203)에 접속하는 처리를 실행하고 있는 것을 나타낸 화면이다. 열(203)에 접속되면, 화면(505)으로 천이한다.

화면(505)은, 열(203)의 홈페이지의 내용을 표시한 화면을 나타낸다.

이상과 같은 표시 화면을 이용함으로써, 사용자는 간단한 번역을 알게 된 후, 간단한 조작으로, 단어의 상세한 의미나 그 사용 방법 및 용례를 알 수 있어, 사용성이 좋다.

또, 상기 실시예에서는, 상세한 단어의 의미나 사용 방법을 참조하기 위해서 한 종류의 홈페이지의 URL을 이용하는 것을 상정하였지만, 특별히 이에 한정하는 것은 아니고, 예를 들면 복수의 URL 정보를 기억부(104)에 기억시켜두고, 상세한 번역 등을 요구할 때에 그 복수의 URL 중에서 원하는 URL을 선택할 수 있게 해도 상관없다. 이에 의해, 사용자는 단어에 관한 상세한 번역 등을 풍부한 정보원으로부터 선택할 수가 있어, 사용성이 좋다. 당연히, 단어에 관하여 상세한 정보를 참조하기 위한 정보로서 URL 정보로 한정할 필요도 없다.

또한, 상기 예에서, 영어 단어의 번역에 관한 상세한 정보로서, 단어의 번역에 관하여 상세히 기재된 홈페이지의 URL을 상정하였지만, 이에 한정하는 것은 아니고, 단어의 번역에 관하여 상세한 정보를 참조할 수 있는 것이면, 어떤 것이든 된다.

또한, 상기 예에서는 상세한 정보를 입수하기 위해 홈페이지를 이용하였지만, 휴대 전화의 기억부(104)에 번역의 상세한 정보를 기억해두도록 하면 된다. 이 경우, 단어가 간단한 번역과 상세한 번역으로 구별하여 기억하도록 하고, 통상의 인식 결과는 간단한 번역으로 표시하고, 또한 사용자에 의해 상세한 정보의 요구 지시가 이루어진 경우에는, 기억부(104)에 기억된 상세한 정보를 표시한다. 이에 의해, 휴대 전화 내에 번역의 상세한 정보가 기억되어 있으므로 홈페이지와 접속하지 않고, 빠르게 상기 상세한 정보를 표시할 수 있기 때문에, 쓸데 없는 시간 을 절약할 수가 있고, 또한 통신권 외에도 상세 정보를 참조할 수 있다.

또한, 상세한 정보가 저장된 PC(Personal Computer) 등의 장치를 이용하여 상세한 정보를 취득할 수 있게 해도 상관없다.

이 경우, 휴대 전화와 사전 데이터(106)의 열(206)에는, PC에 기억된 번역 등의 상세 정보를 판독하기 위해 필요한 정보를 기재해둔다. 여기서, 번역의 상세한 정보를 참조하기 위해서 필요한 정보(이하, 참조 필요 정보)란, 예를 들면 번역의 상세 정보를 보유하는 PC를 특정하기 위한 정보(IP 어드레스 등의 식별자), 번역의 상세가 기재된 파일의 경로명 및 파일명, 혹은 PC의 기억부에서의 상세 번역이 기재된 부분을 나타내는 어드레스 등이다.

그리고, 예를 들면 「abalone」이라는 단어를 인식하는 경우에, 보다 상세한 번역 정보를 원할 때에는, 사용자는 도 5의 (3)과 같은 표시 화면예 등을 이용하여 상세 정보의 요구 지시를 행하고, 요구 지시 신호를 수신한 CPU(102)는, 기억부(104)에 기억된 사전 데이터의 「abalone」에 대응한 참조 필요 정보를 통신부(108)를 통하여 PC로 송신한다. PC가 참조 필요 정보를 수신하면, 참조 필요 정보에 기초하여 외부 정보 처리 장치의 기억부에 저장된 단어의 번역 등의 상세한 정보를 휴대 전화로 송신한다. 단어의 번역 등의 상세한 정보를 수신한 휴대 전화의 CPU(102)는, 그것을 표시부(107)에 표시한다. 또, 휴대 전화와 PC를 접속하는 수단으로서는, 유선이든 무선이든 상관없다.

이에 따르면, 휴대 전화 내에 단어 번역 등의 상세한 정보를 PC의 기억부를 이용하여 참조할 수 있기 때문에, 기억부(104)의 기억 용량을 저감할 수 있다. 또 한, 통신권 외에서도 상세한 정보를 참조할 수 있어, 사용성이 좋다. 또한, 마찬가지로, 상세한 정보가 기억되어 있는 기억 매체를 통하여 참조할 수 있게 해도 상관없다. 이 경우에는, 휴대 전화에 기록 매체의 정보를 판독하기 위한 기록 매체 판독부를 구비하도록 한다. 처리는 상술한 바와 같이 하면 된다.

또한, 영어 단어 등의 상세한 정보 자체를 사용자 스스로 작성이나 편집을 할수 있게 해도 상관없다. 이 경우, 상세한 정보를 사용자가 작성이나 편집(추가나 삭제 등)하기 위한 설정 화면 등을 표시부(107)에 표시시킨다. 그러한 설정 화면을 통하여 입력된 정보는, 사전 데이터의 열(203)에 기억되도록 한다. 그리고, 인식한 단어의 상세한 정보를 참조할 때에는, 상세 정보 요구 지시를 받은 CPU(102)는, 기억부(104)에 기억된 사전 데이터에 기초하여 상세한 정보를 표시부(107)에 표시한다.

이에 의해, 스스로 원본 사전을 작성이나 편집할 수가 있고, 또한 작성된 원본 사전으로 단어의 상세한 정보를 참조하는 것이 가능하기 때문에, 미리 설정된 상세한 정보에는 기재되어 있지 않은 정보를 추가 혹은 삭제 등을 할 수 있어, 사용성이 더욱 향상된다.

또한, 상기에서는, 간이한 정보를 알고자 하는 경우에는 휴대 전화 내에 기억된 정보를 이용하고, 상세한 정보를 알고자 하는 경우에는 PC나 기억 매체를 이용하도록 하였지만, 간이한 정보를 참조할 때에도 PC나 기억 매체에 기억된 정보를 이용하도록 해도 상관없다.

다음으로, 제2 실시예에 대하여 설명한다. 상기 제1 실시예는, 영어 단어를 인식하여 일본어 번역을 표시하는 예이지만, 그렇게 하면, 불어나 독일어 등의 다른 언어는 번역할 수 없다는 문제가 있다. 본 실시예는 이 점에 유의하여 이루어진 실시예이다.

제1 실시예와 다른 점은, 기억부(104)에 기억되는 사전 데이터에, 사전 데이터 a와 사전 데이터 b의 2개로 증가한 점과, 사전 플래그가 포함되는 점이다.

예를 들면, 사전 데이터 a는 영일 사전이고, 사전 데이터 b는 독일 사전이다. 또, 여기서는 사전 데이터로서 2 종류의 언어(영어와 독일어)를 상정하였지만, 3 종류 이상의 언어를 상정하여 각각에 대응한 사전 데이터를 기억하도록 해도 된다.

사전 플래그는, CPU(102)가 어떤 사전 데이터를 사용할지를 선택하기 위해서 사용하는 플래그이다. 사전 플래그는, 예를 들면 기억부(104)에 기억된 소프트웨어의 프로그램 내에 존재하는 변수로, 사전 데이터에 할당된 식별 번호를 대입하도록 하고, CPU(102)는 이 변수에 기초하여 사용할 사전 데이터를 선택한다. 사전 플래그의 값은, 입력부(101)를 통한 사용자의 조작에 의해 변경이 가능해지도록 해둠으로써, 사용자는 다언어의 단어에 대하여 번역을 얻을 수 있어, 사용성이 좋다.

도 6은 사용자가 사용할 사전을 선택할 때의, 휴대 전화(100)의 화면 표시예를 도시하고 있다. 화면(601)은, 휴대 전화가 촬상부(103)에 의한 촬상을 행할 수 있는 상태를 나타낸 화면이다. 대기 상태에서 이 상태로 하기 위해서는, 예를 들면 휴대 전화의 측면에 닿아 있는 스위치를 누르거나, 또는 대기 상태에서 메뉴 화면으로 진행하여 버튼을 몇회 누르는 등의 조작을 행한다. 화면(601)에서, 화면 우측 아래의 「메뉴」에 대응한 버튼을 누르면 화면(602)으로 천이한다.

화면(602)은, 촬상 및 문자 인식에 관한 메뉴를 선택하는 화면이다. 이 상태에서, 「① 사전 선택」이 입력부(101)를 통하여 선택되면 화면(603)으로 천이한다.

화면(603)은, 사용할 사전을 선택하는 화면이다. 이 상태에서, 「③ △△△ 일영」이 입력부(101)를 통하여 선택되면 화면(604)으로 천이한다.

화면(604)은, 사용하는 사전이 △△△ 일영 사전이 된 것을 사용자에게 알리는 화면이다. 여기서 「확인」에 대응한 버튼을 누르면 화면(605)으로 천이하여, 다시 휴대 전화가 촬상부(103)에 의한 촬상을 행할 수 있는 상태가 된다.

이와 같이, 사전 데이터를 복수 가짐으로써, 다언어에 대응한 전자 사전 기능을 갖출 수 있어, 사용성이 좋다.

또한, 사용할 사전 데이터가, 예를 들면 영일 사전으로 설정되어 있는 경우, 독일어의 단어를 인식했을 때는, 해당하는 단어를 찾아낼 수 없다. 이와 같은 경우에, 휴대 전화가 보유하는 사전 데이터 모두를 검색시키도록 구성함으로써, 영일 사전 이외에 독일 사전을 보유하고 있으면 독일어의 단어에 대해서도 번역을 표시하는 것이 가능하게 된다. 모든 사전 데이터를 검색하는 방법으로는, 모든 사전 데이터의 식별 번호를 넣은 배열을 준비하고, CPU(102)가 사전 플래그에 설정된 사전 데이터를 검색한 후, 그 배열의 제1번째의 요소에 저장된 식별 번호에 대응하는 사전 데이터를 검색하고, 그 중에서도 발견되지 않은 경우에는, 제2번째, 제3번째 등과 같이 사전 데이터를 변경하여 검색해간다. 이와 같이 함으로써, 사용자가 일 부러 사전 데이터를 선택하는 수고를 덜어서, 사용성이 좋은 사전 기능을 실현할 수 있다.

또한, 상기 제2 실시예는, 사전 데이터를 복수 보유함으로써 다언어의 번역을 출력할 수 있게 한 예이지만, 이것은 화상 인식부(105)가 인식할 수 있는 언어로 한정되게 된다. 예를 들면, 영어만을 인식할 수 있는 화상 인식부(105)에서는, 태국어나 아라비아어는 인식할 수 없다. 따라서, 태국어나 아라비아어의 사전 데이터를 보유해도, 인식을 할 수 없기 때문에 번역을 출력할 수 없다는 문제가 있다.

이러한 문제를 해결하기 위해서, 통신부(108)를 통하여 인터넷에 접속하여, 다언어의 문자 패턴 데이터를 다운로드하고, 상기 문자 패턴 데이터표에 추가하도록 하면 된다. 이 경우의 처리를 이하에 설명한다.

도 10의 흐름도를 이용하여, 본 실시예에 따른 휴대 전화가 인터넷으로부터 문자 패턴 데이터를 다운로드할 때의 처리 수순을 설명한다.

우선, 문자 패턴 데이터표의 다운로드 지시를 받은 CPU(102)는, 통신부(108)를 통하여 인터넷 상에 존재하는 상기 문자 패턴 데이터가 쓰여진 사이트에 접속한다(단계 S1001). 이 사이트를 표시한 상태에서, 사용자가 문자 패턴의 다운로드를 지시하기 위해서 입력부(101)의 버튼을 누른다(S1002). 이것을 받아 CPU(102)는, 통신부(108)를 통하여, 상기 사이트로부터 문자 패턴 데이터를 다운로드하고, 기억부(104)에 보존한다(단계 S1003).

이 후, CPU(102)는 상기 문자 패턴 데이터를 문자 패턴 데이터표에 추가한 다(단계 S1004).

도 11은, 본 실시 형태의 휴대 전화가 문자 패턴 데이터를 다운로드할 수 있는 사이트에 접속하여, 아라비아어의 문자 패턴 데이터를 다운로드하는 화면의 예를 나타내고 있다.

화면(1101)은, 문자 패턴을 다운로드할 수 있는 인터넷 상의 사이트를 표시한 화면이다. 여기서, 「아라비아어」를 선택하면, 화면(1102)으로 천이한다. 화면(1102)은, 아라비아어의 문자 패턴 데이터를 다운로드할지의 여부를 사용자에게 확인하는 화면이다. 여기서, 「예」를 선택하면, 화면(1103)으로 천이한다. 화면(1103)은, 아라비아어의 문자 패턴을 다운로드하고 있는 것을 나타내는 화면이다. 이 상태에서 잠시 대기하여, 다운로드가 종료하면 화면(1104)으로 천이한다. 화면(1104)은, 아라비아어의 문자 패턴 데이터를 다운로드한 것을 나타내는 화면이다. 마찬가지로, 각 언어의 문자 패턴에 대응한 사전 데이터를 다운로드한다.

이와 같이, 문자 패턴 데이터 및 여러가지 언어의 사전을 다운로드할 수 있도록 구성함으로써, 다언어에 대하여 문자 인식 및 번역 참조를 행할 수 있기 때문에, 사용성이 향상된다.

또, 미리 기억부(104)에 기억되어 있던 문자 패턴 데이터표 이외의 문자를 인식할 때에, 인식 불가능한 것을 사용자에게 통지하고, 그 경우에 문자 패턴 데이터표의 다운로드를 하도록 재촉하는 화면을 표시부(107)에 표시시키도록 해도 된다. 이에 의해, 가령 인식 대상의 문자가 인식 불가능했다고 해도, 빠르게 인식할 수 있게 되어, 사용성이 향상된다.

또한, 예를 들면 사전 데이터로서 영어 단어에 관한 것밖에 없는 경우에 영어 단어 이외의 단어를 인식하려고 했을 때에, 번역 불가능한 것을 사용자에게 통지하고, 그 경우에 사전 데이터를 다운로드하도록 재촉하는 화면을 표시부(107)에 표시시키도록 해도 된다.

제1 실시예와 다른 점은, 기억부(104)에 기억되는 사전 데이터에, 사전 데이터 a와 사전 데이터 b의 2개로 늘어난 점과, 사전 플래그가 포함되는 점이다.

예를 들면, 사전 데이터 a는 영일 사전이고, 사전 데이터 b는 독일 사전이다. 또, 여기서는 사전 데이터로서 2 종류의 언어(영어와 독일어)를 상정하였지만, 3 종류 이상의 언어를 상정하여 각각에 대응한 사전 데이터를 기억하도록 해도 된다.

또한, 인터넷 상에는 영일 사전 등의 홈페이지가 복수개 있어, 누구나 열람 가능한 홈페이지와, 등록된 사용자만이 열람할 수 있는 홈페이지가 있다. 등록된 사용자만이 열람할 수 있는 홈페이지는, 사용자 ID와 패스워드를 사용자가 입력함으로써 열람할 수 있다. 상세한 번역의 요구가 지시된 경우에, 등록된 사용자만이 열람할 수 있는 사이트를 표시해도 된다. 그러나, 이 경우에는 상세한 번역을 표시할 때마다 사용자가 사용자 ID와 패스워드를 입력해야만 하여, 사용하기 불편하다. 그래서, 사용자 ID와 패스워드를 사전 데이터의 미리 정해진 부분에 기재해둔다는 고안을 실시한다. 도 12에, 복수의 사전 데이터를 보유하고, 그 사전 데이터에 포함되는 상세한 번역의 홈페이지가 사용자 인증이 필요한 것인 경우의 구체예를 도시한다. 휴대 단말기는 사전 제공자로부터 사전 데이터를 취득할 수 있다. 그 사전 데이터에는 ID와 패스워드가 부속된다. 그 ID와 패스워드는 사전 데이터에 기재된 상세한 번역이 쓰여진 홈페이지에 액세스할 때, 사용자 인증에 사용한다.

도 13에, 본 실시예의 사전 데이터를 이용하여 상세한 번역이 기재된 홈페이지를 표시할 때의 흐름도를 도시한다.

단계 S1301에서, 휴대 전화가 사전 데이터를 취득한다. 그 방법으로는, 인터넷 상에 존재하는 사전 데이터 파일을, 통신부(108)를 통하여 다운로드해도 되고, 기억 매체에 기억된 사전 데이터를 휴대 전화에 접속시킴으로써 취득해도 된다.

이와 같이 사전 데이터를 보유한 상태에서, 문자 인식을 행하고(단계 S1302), 개요 번역을 표시한다(단계 S1303).

상세 번역을 표시하도록 요구하는 신호를 CPU(102)가 수신하면(단계 S1304), CPU(102)는 사전 데이터로부터 서버에 액세스하기 위해서 필요한 사용자 ID와 패스워드를 취득한다. 취득하는 방법으로는, 사전 데이터 중의 사용자 ID와 패스워드가 기재되어 있는 장소를 미리 정해두고, CPU(102)가 그 장소를 판독한다고 하는 방법이 생각된다. 또한, 사용자 ID와 패스워드가 기재되어 있는 장소를 사전 데이터의 헤더 부분에 기재해두고, CPU(102)가 헤더 부분을 판독하여 사용자 ID와 패스워드가 기재된 장소를 취득하여, 사용자 ID와 패스워드를 판독한다고 하는 방법도 생각된다.

단계 S1306에서는, CPU(102)가 통신부(108)를 통하여 서버로 액세스 신호를 송신한다. 이 때, 사용자 ID와 패스워드도 함께 송신한다. 액세스 신호, 사용자 ID, 패스워드를 수신한 서버에서는, 사용자 인증을 행하여, 인증이 성공하면 상세 번역 데이터를 단말기로 송신한다.

단계 S1307에서는, CPU(102)가 통신부(108)를 통하여 상세 번역 데이터를 취득하여, 기억부에 기억한다. 단계 S1308에서는, CPU(102)가 기억부에 기억된 상세 번역 데이터를 판독하여, 표시부에 표시시킨다.

이와 같이, 사용자 ID와 패스워드가 필요한 홈페이지에 액세스할 때에도, 사용자는 입력 조작을 하지 않고 사용자 인증이 행해져서, 사용성이 좋다.

다음으로, 제3 실시예에 대하여 설명한다. 사람의 기억 용량에는 한계가 있어, 이전에 찾았던 영어 단어라도 시간이 지나면 그 의미 등을 잊어버리는 경우가 많다. 그러한 경우에 재차 인식하는 것은 시간이 걸리고 번거롭다.

본 실시예는, 이러한 문제에 대하여 검토한 것으로, 인식된 단어의 번역 등의 이력 정보를 남기는 점에 특징이 있다. 이하, 이러한 이력 정보를 작성해가는 처리와, 이력 정보를 이용하는 처리로 나누어 설명한다.

우선, 이력 정보를 작성하는 처리에 대하여 설명한다. 도 7은 검색된 결과가 이력 정보로서 기억부(104)에 기억되는 경우의 일례로서, 예를 들면 도 7과 같이, 검색부(109)에 의해 검색된 단어, 검색했을 때의 시각 등의 이력이 기록되어 있다.

열(701)은, 사전 데이터의 열(201) 중 문자 인식된 단어이다. 열(702)은, 각 단어가 인식된 횟수를 나타내고 있다. 열(703)은, 지금까지 인식된 시각 중에 최신의 시각을 나타내고 있다. 열(704)은 이력 정보를 이용하여 영어 단어 등의 의미를 확인한 횟수를 나타내는 것이고, 열(705)은 마지막으로 확인한 시각을 나타내고 있다.

도 8은 본 발명의 제3 실시예에 따른 휴대 전화가, 문자 인식을 한 후, 예를 들면 도 7와 같은 이력표를 작성할 때의 흐름도를 도시하는 도면이다. 단계 S406, 단계 S407은 각각 도 4의 단계 S406, 단계 S407을 나타내고 있고, 그 사이에 단계 S801∼단계 S804의 처리가 이루어지는 흐름이 된다.

단계 S406은, 사전 데이터(106)의 개요 번역, 즉 대표적인 번역이나 간단한 번역을 표시한 상태이다. 여기서, 검색부(109)가 검색한 결과의 단어가 기억부(104)에 기억된 이력 정보에 존재하는지의 여부를 판정하고(단계 S801), 존재한 경우에는 단계 S802로 진행한다. 단계 S802에서는, CPU(102)는 이력 정보의 인식 횟수(702)를 하나 증가시키는 갱신 처리를 행한다. 단계 S803에서는, CPU(102)에 의해 이루어지는 처리가 단계 S803에 도달한 시점의 시각을 시각 취득부(902)가 취득하고, 그 시각을 이력 정보의 최종 인식 시각(703)에 기재한다.

단계 S801에서 단어가 이력 정보에 존재하지 않는 경우에는, 단계 S804로 진행하여, 이력 정보에 단어, 최종 인식 시각을 추가 기재한다. 최종 인식 시각은 단계 S804에 처리가 도달한 시점의 시각을 기억부(104)에 기재한다. 이상의 처리를 거침으로써, 이력표에 새로운 인식 결과의 이력 정보를 갱신해간다. 또, 이 경우, 후술하는 바와 같이, 이력을 이용하여 단어의 의미 등을 재차 확인하도록 하는 것을 생각하면, 기억부(104)에 기억된 이력표 데이터와 사전 데이터를 대응시켜 기 억하는 것이 바람직하다. 대응시켜 기억하는 방법으로는, 예를 들면 사전 데이터 내에 이력 정보를 추가할 수 있는 스페이스를 준비하고, 그 스페이스에 이력 정보를 차례차례 기입하는 방법 등이 생각된다.

다음으로, 작성된 이력 정보를 이용하는 경우의 처리를 설명한다. 우선, 기억부(104)에 의해 기억된 이력 정보의 참조 지시가 사용자의 입력부(101)에 의한 조작을 통하여 이루어지면, 이력 참조 지시 신호가 CPU(102)에 입력된다. 이력 참조 지시 신호가 입력된 CPU(102)는 기억부(104)에 기억된 이력표 데이터나 사전 데이터에 기초하여 영어 단어의 의미를 표시부(107)에 표시하도록 처리한다.

도 9는, 본 실시 형태의 휴대 전화가, 이력 정보를 이용하여 문자 인식을 하지 않고 단어의 번역을 표시하는 화면의 예를 도시하고 있다.

화면(901)에서, 화면 우측 아래의 「메뉴」에 대응한 버튼을 누르면 화면(902)으로 천이한다. 화면(902)은 촬상 및 문자 인식에 관한 메뉴를 선택하는 화면이다. 이 상태에서, 「⑤ 이력표」를 선택하면 화면(903)으로 천이한다. 화면(903)은, 이력 정보 중, 단어, 그 단어에 대한 인식 횟수, 그 단어에 대한 확인 횟수 등을 표시한 화면이다. 이 상태에서, "recognition"을 선택하면 화면(904)으로 천이한다.

화면(904)은 "recognition"의 번역을 표시한 화면이다. 이 상태에서, 「확인」에 대응한 버튼을 누르면 화면(905)으로 천이한다.

화면(905)은, 화면(903)과 동일하게, 이력표(901) 중 단어, 그 단어에 대한 인식 횟수, 그 단어에 대한 확인 횟수 등을 표시한 화면이다. 화면(903)에서는 "recognition"에 대한 확인 횟수가 0인데 대하여, 화면(904)에서 "recognition"의 번역을 확인했기 때문에, 화면(905)에서는 "recognition"에 대한 확인 횟수가 1로 증가하고 있다.

이상에 의해, 사용자는, 한번 인식한 단어의 의미 등을 재차 인식하는 조작을 행하지 않고 언제 어디서나, 또 몇번이라도 확인할 수 있기 때문에 사용성이 향상된다.

또한, 도 9와 같은 표시 화면을 표시함으로써, 인식 횟수, 확인 횟수를 사용자는 용이하게 통지할 수 있다. 또한, 사용자가 몇번이나 조사한 단어가 일목요연해지기 때문에, 이 인식 횟수나 확인 횟수가 많은 순서로 위에서부터 표시하면, 기억되지 않은 많은 단어를 용이하게 이해할 수 있기 때문에, 의식하여 기억할 수 있고, 또한 사용성이 좋다.

또, 제1 실시예와 같이, 또 다른 조작으로 번역이나 용례 등의 상세한 정보(예를 들면, 상세한 정보가 기재된 홈페이지의 어드레스 등)를 참조할 수 있게 구성한 경우에는, 간단한 번역과 상세한 번역을 구별하도록 기억부(104)에 이력 정보로서 기억하고, 사용자가 이력 정보를 이용하여 영어 단어 등의 의미를 확인하는 경우에, 「간단한 번역」과 「상세한 번역」 등 어느 하나를 선택할 수 있도록 하면, 사용성은 더욱 향상된다. 또한, 여기서 이력 정보로서는, 도 7에 열거되는 정보로 한정되는 것은 아니고, 이력에 관한 정보이면 무엇이든 상관없다.

또한, 촬상부(103)에 의해 표시부(107)에 출력된 화상 정보 중 화상 인식부(105)에 의해 식별 정보를 인식할 때에, 이력 정보가 있는지의 여부를 사용자에 게 통지하도록 구성해도 된다. 예를 들면, 인식 대상을 결정하기 위해 일단 대상을 결정하는 가결정과 가결정된 대상이어도 되는 경우에 본 결정을 행하도록 구성한 경우에는, 가결정의 단계에서, 기억부(104)에 기억된 이력 정보의 유무를 표시부(107)에 표시하도록 하면, 일부러 재차 인식하지 않고, 이력 정보를 참조하여 식별 정보의 의미 등을 확인할 수 있기 때문에, 사용성이 좋다. 또한, 커서를 인식 대상 위에 이동시키는 것만으로, 예를 들면 「이력 있음」 등과 같은 간이한 표시로 사용자에게 통지해도 상관없다. 인식 대상의 영어 단어 등의 식별 정보가 지금까지 인식된 정보인 경우에 그 이력의 유무를 통지하는 형태로서는, 문자, 아이콘 혹은 마크 등을 이용한 표시뿐만 아니라, 음성 출력부(도시하지 않음) 등을 통하여 음으로 통지해도 되는 것은 물론이다.

또한, GPS 등의 휴대 전화에 위치 정보 취득부를 구비하여, 그 위치 취득부에 의해 취득된 위치 정보를 이력 정보로서 기억부(104)에 기억하도록 구성해도 된다. 이에 따르면, 어디에서 단어를 인식하는지를 용이하게 확인할 수 있다.

또한, 이력 정보로서 기억된 장소에 재차 방문한 경우에, 그 취지 및 그 때에 인식한 단어나 그 의미를 사용자에게 통지하도록 해도 상관없다.

다음으로, 제4 실시예에 대하여 설명한다. 도 14는, 제4 실시예에 따른 휴대 전화의 외관을 도시하는 도면이다. 본 실시예의 휴대 전화는, 도 14에 도시된 바와 같이, 표시부(107)를 갖는 케이싱(200)과 입력부(101)를 갖는 케이싱(300)이 힌지부(1403)를 통하여 절첩 가능하며, 힌지부에 회전 가능한 촬상부를 구비한 휴대 전화를 고려한다.

본 실시예의 휴대 전화는, 휴대 전화가 도 14의 (1)과 같이 열린 상태인지 도 14의 (2)와 같이 닫힌 상태인지를 검출하는 절첩 검출부를 구비하고 있다. 절첩 검출부는, 예를 들면 케이싱(200)에 자석, 케이싱(300)에 홀 소자를 구비하여, 자석에 의해 자계가 가해진 홀 소자의 전압값의 Hi 레벨 또는 Low 레벨에 기초하여 개폐 형태의 검출을 행한다. 또, 절첩 검출부는, 개폐 상태의 검출을 할 수 있으면, 센서 또는 요철 결합 등을 이용한 것이어도 상관없다. 또, 표시부(107)는 주로 열린 상태에서 이용되는 표시부(메인 표시부)이지만, 본 실시예의 휴대 전화는 메인 표시부 이외에 휴대 전화가 절첩된(닫힌) 상태에서도 시인 가능한 서브 표시부(1407)를 구비한다.

촬상 모드의 선택을 쉽게 하기 위해서, 통상 촬상 버튼(1401)과 인식 촬상 버튼(1402)을, 예를 들면 케이싱의 측면에 구비하고 있다.

통상 촬상 버튼(1401)이 눌러지면, 촬상부(104)에서 촬상 대상물을 촬상하고, 촬상한 화상을 기억부(104)에 보존하여, 필요에 따라 촬상 화상을 표시한다. 인식 촬상 버튼(1402)을 누르면, 촬상부(104)에서 촬상 대상물을 촬상하여, 화상 인식부(105)가 문자 인식을 행한 후, CPU(102)는 인식 결과를 표시부(107) 혹은 서브 표시부(1407)에 표시하는 처리를 행한다.

이상과 같이, 인식 모드와 통상 촬상 모드 각각의 전용 버튼을 준비함으로써, 사용자는 간단히 각 모드를 선택할 수 있어, 사용성이 좋다. 또한, 도 14의 (1)에 도시한 바와 같이, 케이싱(300)의 측면에 배치하면, 휴대 전화가 열린 상태이든 절첩된 상태이든 조작이 마찬가지가 되어, 일부러 개폐 시에 조작을 바꾸지 않기 때문에 사용성이 향상된다. 또한, 도 14과 같이, 케이싱의 측면 등의 휴대 전화가 닫힌 상태에서 시인할 수 있는 위치에 조작 키를 배치하면, 닫힌 상태에서도 인식 모드를 실행할 수 있게 되기 때문에, 일부러 휴대 전화를 열지 않고 문자 인식 등을 행할 수 있어, 사용성은 좋다.

또, 통상 촬상 버튼(1401)과 인식 촬상 버튼(1402)은 다른 버튼인 것이 바람직하지만, 동일한 버튼이어도 된다. 단, 이 경우, 동일한 버튼인 경우에는, 촬상하기 위한 버튼 조작과 인식하기 위한 버튼 조작을 구별할 필요가 있다. 이 경우, 예를 들면 버튼을 누르는 시간에 따라, 혹은 버튼을 누르는 횟수에 따라(더블 클릭 등) 촬상 모드와 인식 모드를 전환하거나 구별하면 된다. 또한, 이와 같이 버튼을 동일하게 함으로써, 공간을 취하지 않고, 휴대 전화를 작게 할 수 있다. 통상 촬상 버튼(1401)과 인식 촬상 버튼(1402)은 휴대 전화(100)에 부속하는 센서 중, 사용자가 취급할 수 있는 것이면 어느 것이든 된다.

또한, 상기에서는, 통상 촬상 버튼(1401)과 인식 촬상 버튼(1402)을 케이싱 측면에 구비하는 경우에 대하여 설명하였지만, 이에 한정하는 것은 아니고, 닫힌 상태에서 조작 가능한 위치에 배치된 버튼이면, 예를 들면 휴대 전화의 배면에 배치되어 있는 구성을 취해도 상관없다. 여기서, 휴대 전화의 배면은, 도 14의 (2)의 참조 부호 1407로 나타낸 바와 같이, 휴대 전화가 절첩된(닫힌) 상태에서 시인 가능한 표시부(107)에 대향하는 면으로, 주로 배터리에 의해 구성되는 면과는 다른 면이다.

다음으로, 제5 실시예에 대하여 설명한다. 본 실시예의 휴대 전화의 외관 은, 제4 실시예와 마찬가지로 도 14와 같이 절첩 가능한 휴대 전화를 고려한다. 이하, 인식 결과에 대한 개요 번역 등을 메인의 표시부(107)에 표시해두고, 휴대 전화가 닫힌 경우에는, 그 인식 결과에 대한 상세 번역 등을 서브 표시부(1407)에 표시하는 예에 대하여 설명한다.

도 15의 흐름도를 이용하여, 본 실시예에서의 휴대 전화의 처리 수순을 설명한다.

우선, 단계 S1501은, 휴대 전화가 입력부(101)로부터의 키 입력을 대기하고 있는 상태이다. 이 상태에서, 휴대 전화의 카메라 기능을 기동시키기 위한 신호를 CPU(102)가 검출하면(단계 S1502), 휴대 전화가 절첩 상태인지의 여부를 절첩 검출부에 의해서 검출한다.

휴대 전화가 절첩 상태인 경우에는, 절첩 검출부에 의해 휴대 전화가 절첩 상태인 것을 전달하는 신호가 CPU(102)에 입력되고(단계 S1503), 이것을 받아 CPU(102)는 정지 화상 모니터 표시를 서브 표시부(1407)에 표시한다(단계 S1504). 다음으로, 사용자 등에 의해 셔터 버튼을 누르면, 촬상을 지시하는 신호가 CPU(102)에 입력되고(단계 S1505), 촬상부(103)에 의해 촬상(변환)된 피사체의 화상 정보가 CPU(102)를 통하여 기억부(104)에 보존된다(단계 S1506).

다음으로, 화상 인식부(105)가 기억부(104)에 보존된 화상 정보를 판독하여, 그 화상 정보에 포함되는 식별 정보, 예를 들면 양서의 문장 중에 있는 단어 "recognition"을 판독하여, 인식 결과를 기억부(104)에 보존한다(단계 S1507). 그 결과를, 검색부(109)가 판독하여, 기억부(104)에 기억된 사전 데이터(106)의 열(201)에 있는 단어 중에서 일치하는 것을 검색한다. 다시, 휴대 전화가 절첩 상태인지의 여부를 절첩 검출부가 검출하고, CPU(102)에 개폐 상태의 정보를 신호로서 입력한다. 상기 개폐 상태 정보를 CPU(102)가 참조하고(단계 S1508), 단계 S1509에서, 휴대 전화가 닫힌 상태라고 판단된 경우에는, 단계 S1510으로 진행한다. 단계 S1510에서는 상기 검색된 단어에 대응하는 열(202)(번역의 개요)을 CPU(102)가 사전 데이터로부터 판독하여, 서브 표시부(1407)에 표시한다.

또한, 단계 S1509에서, 휴대 전화가 열린 상태라고 판단된 경우에는, 상기 검색된 단어에 대응하는 URL을 CPU(102)가 사전 데이터로부터 판독하고(단계 S1511), CPU(102)는 통신부(108)에 상기 URL에 접속하도록 지시 신호를 보낸다. 단계 S1512에서, CPU(102)가 통신부(108)를 통하여 상기 URL의 홈페이지에 기록된 내용을 판독하여, 기억부(104)에 보존한다. 그 후, 그 내용을 CPU(102)가 표시부(107)에 표시한다.

도 16은, 본 실시예의 표시 화면예로서, 사용자에 의해 휴대 전화가 닫힌 상태에서 열린 상태가 된 경우에, 사전 데이터(106)가 보유하는 상세한 번역이 기재된 URL의 홈페이지의 내용(기재 정보)을 표시부(107)에 표시하는 화면의 예를 나타내고 있다. 또, 화면(1601∼1603)에서는, 화면 좌측 아래에 표시된 「메뉴」 등과 같은 표시는 버튼(1408a), 화면 우측 아래에 표시된 「인식」 등과 같은 표시는 버튼(1408b)에 관련되어 있어, 사용자가 휴대 전화에 입력을 할 때에는 각각 관련된 버튼을 누름으로써, 화면이 천이된다. 이들 버튼에 대하여, 예를 들면 화면 좌측 아래에 「메뉴」로 표시되어 있던 경우에는, 버튼(1408a)을 「메뉴」 버튼으로 칭 한다.

화면(1601)은, 휴대 전화가 절첩된 상태에서, 촬상 모드로서 「인식 모드」가 선택되어, 예를 들면 영문 중의 「Recognition」이라는 단어를 특정하여, 인식하는 것을 시도하고 있는 경우에, 서브 표시부(1407)에 표시된 화면예이다. 이 상태에서, 「인식」 버튼을 누르면 화면(1602)으로 천이한다.

화면(1602)은, 인식 대상으로서 「Recognition」이 선택된 것을 나타내고 있다. 이 화면에서는, 화면 중 「Recognition」 이외의 화상 부분이 검게 칠해져서 표시되어 있어, 「Recognition」이 강조된다. 또한, 문자 이외의 부분을 검게 칠함으로써, 도촬(盜撮)도 방지할 수 있다. 이 상태에서 「결정」 버튼을 누르면 화면(1603)으로 천이한다.

화면(1603)은, 인식 대상이 된 「Recognition」의 개요 번역이 서브 표시부(1407)에 표시되어 있는 화면을 나타내고 있다. 이 상태에서 휴대 전화를 열면, 표시부(107)에 화면(1604)이 표시된다.

화면(1604)은, 휴대 전화를 연 상태에서 표시부(107)에 상세한 번역을 표시한 화면예이다.

이와 같이, 휴대 전화를 절첩한 상태에서도 문자 인식을 할 수 있기 때문에, 일일이 휴대 전화를 여는 수고도 생략하여, 손쉽게 문자 인식을 할 수 있다. 또한, 사용자가 상세한 번역을 알고자 하는 경우에는, 개요 번역이 표시되어 있는 상태에서 휴대 전화를 여는 것만으로, 상세한 번역을 표시부(107)에 표시할 수 있기 때문에, 매우 사용성이 좋다.

다음으로, 제6 실시예에 대하여 설명한다. 본 실시예의 휴대 전화는, 촬상부(103)가 촬상한 화상이나, 상기 화상에 포함되는 문자 등의 식별 정보를 화상 인식부(105)가 인식한 결과나, 그 인식 결과에 대한 개요 번역 등을 표시부(107)에 표시한 경우, 인식 결과의 각 문자를 다른 문자로 변환하는 인식 결과 편집 수단을 구비한 것으로 한다.

도 17은, 본 실시예의 휴대 전화가, 예를 들면 지면 상에 쓰여진 "Recognition"라는 문자열을 촬상하여, 화상 인식부(105)가 인식한 결과가 "Reconifiom"인 경우에, 상기 인식 결과를 편집하는 화면예를 도시한 것이다.

화면(1701)은, 촬상부(103)가 피사체인 대상물을 촬상하여 그 화상에 포함되는 문자열 "Recognition"을 화상 인식부(105)가 잘못 인식하여, 예를 들면 "Reconifiom"으로 인식하여, "Reconifiom"에 가장 가까운 단어를 검색부(109)가 사전 데이터(106)로부터 검색하고, 검색한 결과가 "reconfirm"인 경우에, 인식 결과인 "Reconifiom", 검색 결과인 "reconfirm"와, 그 개요 번역 "[동사]재확인하다"를 표시부(107)에 표시한 화면예이다. 여기서, 「메뉴」 버튼을 누르면 화면(1702)으로 천이한다.

화면(1702)은, 촬상 기능이나 인식 기능에 관한 메뉴를 표시한 화면이다. 여기서, 「① 결과 편집」을 선택하여 「결정」 버튼을 누르면, 인식 결과를 편집할 수 있는 화면으로 천이한다.

화면(1703)은, 인식 결과를 편집할 수 있는 화면에서, "Reconifiom"의 "Reco"와 "nifiom"의 사이에 "g"를 추가한 화면을 나타내고 있다. 인식 결과를 편 집할 수 있는 화면에서는, 인식 결과의 문자가 표시되는 영역(1705) 내에, 커서(1706)가 표시된다. 이 커서(1706)를 사용하여 편집하는 위치를 선택하여, 입력부(101) 중 문자의 입력에 관한 버튼을 몇회 누름으로써, 문자를 입력, 삭제할 수 있다. 이와 같이 하여 편집한 인식 결과의 문자는, CPU(102)에 의해 기억부(104)에 기억된다. 이 상태에서, 「검색」 버튼을 누르면, 입력부(101)에 의해 CPU(102)에 검색하도록 지시하는 입력 신호가 입력된다. 이것을 받아 CPU(102)는, 기억부(104)를 참조하여 편집된 인식 결과 문자를 판독하여, 검색부(109)로 건네준다. 검색부(109)는 이것을 받아, 사전 데이터(106) 중에서 일치하는 단어를 검색하여, 검색 결과 표시 영역에 표시한다.

그 화면예가 화면(1704)이다. 화면(1704)은, 인식 결과를 편집할 수 있는 화면에서, 인식 결과의 문자를 "Recognitiom"으로 편집한 후, 「검색」 버튼을 누른 경우에 표시되는 화면예이다. 검색 결과로서 "Recognition"이 표시된다.

이와 같이 하여, 인식 결과가 오인식으로, 사용자가 인식시키고자 하였던 영어 단어와는 다른 문자가 검색 결과로서 표시된 경우, 다시 한번 재촬상하여 인식시킬 필요가 없어, 사용성이 좋다.

또, 상기에서는, 「검색」 버튼이 눌러진 것으로, 인식 결과와 가장 가까운 단어를 사전 데이터(106)로부터 검색부(109)가 검색하도록 하였지만, 인식 결과를 편집할 수 있는 화면에서, 인식 결과의 문자를 편집하면, 인식 결과 편집 수단이 CPU(102)에 검색을 하도록 지시하는 입력 신호를 입력하고, 검색부(109)에 의해서 검색을 하도록 해도 된다. 이 경우, 사용자는 검색 결과를 표시시키고자 할 때에 일일이 「검색」 버튼을 누르지 않아도 되어, 사용성이 좋다.

다음으로, 제7 실시예에 대하여 설명한다. 본 실시예는, 휴대 전화 등에 미리 구비되어 있는 메일 기능 등을 이용하여 화상 인식부(105)에 의해 인식된 결과, 즉 간이 정보 혹은 상세 정보를 송신하는 경우를 상정한다.

이 경우, 예를 들면 입력부(101)에 의해 소정의 조작이 이루어져, 그 입력 신호를 수신한 CPU(102)는 인식 모드로 이행하도록 처리한다. 사용자가 인식 모드에서, 인식 대상인 문자 등을 인식한 후에 메일 기능을 기동하기 위한 조작을 입력부(101)를 통하여 행하면(예를 들면, 메일 기동키를 누르면), 그 입력 신호를 수신한 CPU(102)는 표시부(107)에 기억부(104)에 미리 기억되어 있는 메일 소프트를 기동하여, 메일 송신할 수 있도록 메일 작성 화면을 표시한다. 그 때, CPU(102)는, 인식되어, 예를 들면 「abalone」 등의 영어 단어의 대표적인 번역 「전복」을 표시하는 경우, 「abalone→전복」 등과 같이 메일 작성의 본문란에 자동적으로 삽입하도록 처리한다. 또한, 제1 실시예와 같이, 간이한 정보뿐만 아니라, 상세한 정보, 예를 들면 용례나 유사 후와 같은 상세한 정보가 기재된 URL 정보 등을 취득할 수 있는 경우에는, 그 상세한 정보를 자동적으로 본문란에 삽입하도록 처리한다.

또한, 기억부(104)에 기억된 어드레스 정보(이름, 전화 번호 혹은 메일 어드레스의 정보)로부터 사용자가 선택하여 송신 상대의 수신처란에 삽입할 수 있도록 구성해도 상관없다.

이상에 의해, 화상 인식부(105)에 의한 인식 결과를 간단한 조작으로 송신하고자 하는 상대에게 전달할 수 있어, 사용성이 향상된다. 또한, 건명의 란도 「 OCR 결과」 등의 건명을 자동적으로 삽입 기재하도록 하면, 더욱 입력의 수고가 덜어져서, 사용성이 좋다.

또한, 인식 결과를 이용하여 메일을 작성할 때에, 메일 어드레스를 인식한 경우에는 자동적으로 상기 메일 어드레스를 수신처로서 수신처란에 설정하는 방법도 생각할 수 있다. 그러나, 이 방법으로는, 예를 들면 메일 어드레스를 인식하여 그 메일 어드레스를 메일의 본문란에 기재하고자 하는 경우에도, 메일의 수신처로서 설정되게 되기 때문에, 인식 결과를 이용할 수는 없다.

이와 같은 문제를 해결하기 위해서, 예를 들면 메일 작성인 경우에는, 메일의 수신처, 건명, 본문란 등과 같은 항목 중에서, 어느 항목에 인식 결과를 삽입할지를 선택할 수 있도록 한다. 이 기능을, 도 18을 사용하여 설명한다.

화면 (1)은, 인식 대상인 "yamazaki@ xxx.jp"를 인식했을 때에, 인식 화상과 인식 결과를 표시한 화면이다. 이 상태에서 「메뉴」 버튼을 누르면 화면 (2)로 천이한다. 화면 (2)는, 인식 결과인 "yamazaki@ xxx.jp"를 사용하여 어느 기능에 이용할지를 선택하는 화면이다. 메일을 작성하는 경우에는, 「② 메일 작성」을 선택하면, 화면 (3)으로 천이한다. 화면 (3)은, 인식 결과를 메일 작성의 항목 중 어떤 항목에 삽입할지를 선택하는 화면이다. 이 화면에서, 「③ 본문」을 선택하면, 메일의 본문에 "yamazaki@ xxx.jp"가 대입된 메일의 작성 화면으로 천이한다(화면 (4)).

이와 같이, 인식 결과를 메일의 어떤 항목에 삽입할지를 사용자가 선택할 수 있게 하면, 인식 결과를 표시하고나서 몇회의 입력 조작을 행하는 것만으로, 메일 의 본문 중에 인식 결과를 삽입한 메일의 작성 화면으로 이행할 수 있어, 사용성이 향상된다.

또한, 화면 (2)의 메뉴를 표시할 때에, 인식 결과인 문자열의 종류에 의해 커서의 위치를 결정할 수도 있다. 그 방법은, 예를 들면 인식 결과에 "@"가 포함되어 있으면 메일 어드레스, "http"가 포함되어 있으면 URL이라고 CPU(102)에 의해 판정시키고, 메일 어드레스라고 판정된 경우에는 화면 (2)를 표시할 때에 커서의 위치를 「② 메일 작성」, URL이라고 판정된 경우에는 커서의 위치를 「① 인터넷」 등에 맞추어서 표시부(107)에 표시시키면 된다. 이와 같이 하면, 화면 (2)에서 메뉴를 선택하는 조작을 생략할 수 있기 때문에, 사용성이 더욱 향상된다.

또한, 인식 결과가 메일 어드레스인 경우에, 상기 메일 어드레스를 어드레스북에 등록하고자 할 때에는, 화면 (2)에서 「④ 어드레스북 등록」을 선택하면 된다. 이 경우도 마찬가지로, 인식 결과의 메일 어드레스를 어드레스북의 어느 항목에 삽입할지를 선택할 수 있도록 하면, 상술과 동일한 효과를 얻을 수 있다.

또, 상기에서는, 메일 소프트의 작성 화면의 란으로서, 「수신처」 「건명」 「본문」 란을 고려하였지만, 이에 한정되는 것은 아니다. 그 외에 란을 준비하였다고 해도 자동적으로 관계된 정보를 삽입하도록 하면, 입력 수고가 줄어서, 사용성이 좋다.

또한, 상기에서는, 자동적으로 메일 작성 화면 란에 인식 결과(예: URL 정보)가 삽입되는 구성을 취하였지만, 그뿐만 아니라, 사용자 스스로 입력부(101)를 통하여 코멘트 등을 입력할 수 있게 해도 상관없다. 이에 의해, OCR 기능을 행하 고, 그 결과를 통화 상대편으로 송신할 때에, 사용자가 단순히 결과만을 송신하는 것뿐만 아니라, 그 결과에 대한 코멘트 등을 첨가할 수 있다. 또, 그 때에, 미리 기억부(104)에 기억된 정형문이나 그림 문자 등을 이용하면 사용성은 더욱 좋다.

또, 상기 실시예에서는, 영어 등의 단어에 관하여, 의미나 용례 등을 상세히 알고자 하는 등의 이용 신(scene)을 상정하였지만, 이에 한정되는 것은 아니고, 예를 들면 스포츠, 영화, 역사, 레스토랑, 과학, 공룡, 동식물, 예능인 등과 같은 여러 장르의 단어에 관한 정보를 참조할 수 있게 해도 상관없다. 이에 의해, 참조 가능한 카테고리가 증가하여, 사용자의 사용성은 향상된다. 이와 같이, 참조 가능한 정보가 많으면, 예를 들면 사용자가 잡지나 신문 등의 기사를 보고 있을 때나, 거리를 걷고 있는 경우에, 흥미가 있는 단어가 눈에 띄어, 그 상세한 정보를 참조하고자 하는 상황 등에서도, 빠르게 그 단어의 의미 등을 참조할 수 있기 때문에 매우 사용성이 좋다.

또한, 예를 들면 「가메란」 등과 같은 공룡의 상세 정보를 참조하고자 할 때, 식물의 「가메란」의 상세 정보를 취득하게 되면 사용자의 만족도는 낮아진다. 그래서, 상세 정보의 요구를 행할 때에, 예를 들면 표시부(107)에 「어떤 장르의 상세 정보를 원합니까?」 등의 통지가 되어, 사용자가 표시 화면 등을 통하여 다양한 장르를 선택할 수 있게 하면, 사용성은 더욱 좋다.

다음으로, 제8 실시예에 대하여 설명한다. 본 실시예는 인식한 영어 단어의 적확한 의미를 통지하기 위해, 단어의 공기 관계를 이용하는 것이다. 공기란, 복수의 단어가 동일한 문서에 출현하는 것이다.

단어는, 동일한 단어라도 복수의 다른 의미를 가지고 있는 경우가 많아, 미리 준비된 사전의 일본어 번역을 그대로 표시시키는 경우, 인식시킨 영어 단어가 어떤 의미로 사용되고 있는 것인지를, 사용자가 문맥을 파악하는 등으로 생각해야만 한다. 그 때, 혹시 틀린 의미로 파악하게 되면, 그 영어 단어를 포함한 문장 자체도 틀린 의미로 파악하게 된다는 문제가 있다. 본 실시예는 이 점에 유의하여 이루어진 실시예이다.

도 19는, 본 발명의 제8 실시예에 따른 구성예를 도시하는 도면이다. 본 실시예는 휴대 전화(100), 서버(1900)로 구성된다.

서버(1900)는, SV-CPU(1902), 공기 관계 데이터베이스(1903), SV 기억부(1904), SV 화면 인식부(1905), SV 사전 데이터(1906), SV 통신부(1908), SV 검색부(1909), 사용자 등록 데이터베이스(1910) 등을 포함한 것으로 구성된다.

SV 통신부(1908)는, 서버(1900)가 인터넷이나 다른 정보 처리 장치 등으로 액세스하기 위한 통신 처리를 행한다.

SV-CPU(1902)는, SV 기억부(1904)에 기억된 프로그램에 기초하여 동작하고, 예를 들면 SV 통신부(1908)로부터의 신호에 따라 각 부를 제어하는 것이다.

공기 관계 데이터베이스는, 공기 관계에 관한 데이터로서, 예를 들면 도 20에 도시한 바와 같이, 단어, 그 단어의 번역, 공기하는 단어(이하, 공기 단어라고 함) 및 공기되어 있는 단어에 대응한 번역이 되는 비율 등을 포함한 것으로 구성된다. 또, 도 20은 단어가 「character」이고, 그 「character」의 번역으로서 「문자」, 「등장 인물」을 상정한 예이다.

공기 관계 데이터베이스(1903)는 복수의 단어에 대한 데이터를 보유하고, 각각의 단어에 대하여 그 번역과 그 번역으로서 사용되는 확률값 등을 보유하는 것으로 한다.

인식한 단어와 상기 단어와 공기하는 단어가 있는 경우에, 공기 관계 데이터베이스(1903)를 사용하여, 상기 단어에 대한 값 a, 값 b를 비교함으로써, 인식한 단어에 대한 가장 적절한 번역을 얻을 수 있다. 예를 들면, 「character」의 일본어 번역에는 「문자」나 「등장인물」 등이 있지만, 「recognition」이라는 단어가 공기한 경우, 「character」의 일본어 번역으로서 「문자」가 적절한 비율을 0.95, 또한 「등장인물」이 적절한 비율을 0.05로 한다. 이 경우, 「character」의 일본어 번역으로서는 그 적절한 비율을 나타내는 값이 큰 「문자」를 선택하면 된다.

SV 기억부(1904)는, 통신부로부터 수신하는 데이터 등, 서버(1900)로 취급하는 데이터를 기억해둔다. SV 화상 인식부(1905)는 화상 정보에 포함되는 문자나 기호 등의 식별 정보를 인식한다.

기억부(104)에 기억된 SV 사전 데이터(1906)에는, 예를 들면 외국어의 단어 등과 같은 식별 정보, 그 식별 정보의 일본어 번역 및 상기 식별 정보의 다양한 일본어 번역이나 사용 방법, 용례 등에 대하여 자세히 쓰여진 홈페이지의 URL, 상기 식별 정보에 관한 화상이나 음성 등이 포함된다.

SV 검색부(1909)는 단어 및 상기 단어와 공기하는 단어를 이용하여, 공기 관계 데이터베이스(1903)를 참조하여, 단어(2001)의 적절한 일본어 번역을 선택한다.

사용자 등록 데이터베이스(1910)는 서버(1900)에 접속할 수 있는 사용자인 것을 증명하기 위한 사용자 ID나 패스워드를 기록하고 있는 데이터베이스이다.

다음으로, 도 21의 흐름도를 이용하여, 본 실시예에서의 휴대 전화의 처리 수순을 설명한다.

도 15의 단계 S1501∼단계 S1507과 마찬가지의 처리를 행함으로써, 모니터 표시를 하고 있는 상태(단계 S2101)로부터, 화상을 촬상하여 문자 인식한 결과를 기억부(104)에 보존한 상태가 된다(단계 S1502∼단계 S1504). 단계 S2105에서는, 기억된 인식 결과로부터 인식 위치 데이터 및 인식 단어 데이터를 추출한다. 여기서, 인식 위치 데이터란, 촬상부(103)에 의해 촬상된 화상에 포함되는 인식 대상이 되는 단어의 화상 상의 위치에 관한 데이터이고, 또한 인식 단어 데이터란, 단계 S2105에서 검색부(109)에 의해 검색된 결과로 찾아낸 단어이다.

다음으로, 서버(1900)와 접속하도록 지시를 하는 액세스 신호가 입력부(101) 등을 통하여 CPU(102)에 입력되면, CPU(102)는, 통신부(108)를 통하여 소정의 서버로 액세스 신호를 송신한다(단계 S2107).

다음으로, 액세스 신호를 수신한 서버(1900)로부터 사용자 ID 및 사용자 ID에 대응한 패스워드의 입력 요구 신호가 송신된다. 그 요구 신호를 휴대 전화(100)가 수신하면(단계 S2108), CPU(102)는 표시부(107)에 사용자 ID 및 패스워드의 입력용 화면을 표시한다. 입력 화면 등을 통하여 사용자 ID 및 패스워드가 입력되면, 그것을 서버(1900)로 송신한다(단계 S2109). 여기서, 사용자 ID 및 패스워드를 사용자가 입력하는 인증하는 형태를 생각하였지만, 사용자의 인증을 행할 수 있으면 이에 한정되는 것은 아니다. 예를 들면, 성문(聲紋), 지문, 홍채 등을 이용하여 인증을 행해도 된다.

CPU(102)는 서버로부터 수신한 신호가 인증 성공 데이터인지 인증 실패 데이터인지를 판정하여(단계 S2110), 그 신호가 인증 실패 데이터인 경우에는, 입력용 화면을 재차 표시부(107)에 표시하고, 상기 신호가 인증 성공 데이터인 경우에는, 촬상부(103)에 의해 촬상된 화상, 인식 위치 데이터 및 인식 단어 데이터 등을 서버(1900)로 송신한다(단계 S2111).

그 후, 서버(1900)로부터 인식 단어 데이터에 대한 번역을 나타내는 최적 번역 데이터를 수신하면, CPU(102)(단계 S2112)는 최적 번역 데이터를 표시부(107)에 표시한다(단계 S2113).

다음으로, 도 22의 흐름도를 이용하여, 본 실시예에서의 서버(1900)의 처리 수순을 설명한다.

서버(1900)가 휴대 전화(100) 등의 단말기로부터의 액세스 신호를 수신하면(단계 S2201), 계속해서 휴대 전화(100)에 사용자 ID와 패스워드의 입력을 요구한다(단계 S2201). 휴대 전화(100)로부터 사용자 ID와 패스워드를 수신하면(단계 S2202), SV-CPU(1902)가 사용자 등록 데이터(1910)를 참조한다. 사용자 등록 데이터(1910)에 등록되어 있는 사용자 ID와 패스워드에 일치하는 것이 발견되면, SV-CPU(1902)는 SV 통신부(1908)를 통하여 사용자 인증을 확인하였음을 휴대 전화(100)에 통지하고(단계 S2204), 휴대 전화(100)로부터 화상, 인식 위치 데이터 및 인식 단어 데이터를 수신한다(단계 S2205).

다음으로, SV 화상 인식부(1905)는, 수신한 화상에 포함되는 문자를 인식한 다. 도 23은, 수신한 화상의 예를 도시하고 있다. SV 화상 인식부(1905)는 인식 처리를 행할 때에, 우선 화상에 포함되는 모든 단어를 추출하고, 그 인식 위치 데이터를 구한다. 그 중에서, 추출 영역의 1변이 화상의 끝에 걸린 단어는 인식 대상 외의 단어로서 간주된다.

도 23의 화상예에서는, 단어(2301)와 같이 해칭된 사각으로 둘러싼 단어는 인식 대상 외의 단어로서 간주된다. 그 이외의 단어, 도 23의 화상예에서는, 단어(2303) 「The」와 같이 추출 영역이 화상의 끝에 걸리지 않은 단어를 인식하고, 인식 결과와 일치하거나, 혹은 가장 유사한 단어를 SV 사전 데이터(1906)로부터 SV 검색부(1909)가 검색한다(단계 S2206).

여기에서, 사용자가 인식하고자 하는 단어를 「인식 대상 단어」, 실제로 휴대 전화가 인식한 대상의 단어를 「인식 단어」라고 정의한다. 통상은 인식 대상 단어와 인식 단어는 일치하지만, 인식 정밀도가 낮은 등의 이유로 양자가 다른 경우가 있다. 예를 들면, 「abalone」의 번역을 사용자가 원하는 경우에 「abalone」이 아니라 잘못 인식하게 되어, 인식 대상 단어는 「abalone」, 인식 단어는 「abalome」이 되는 경우가 있다. 그 경우에는, 잘못 인식된 「abalome」이 사전 데이터에 있는지의 여부가 검색되어, 만일 없으면 사전 데이터가 가진 단어 중에서 가장 유사한 단어(예를 들면, abalone)를 인식 단어라고 간주하도록 처리가 행해진다.

다음으로, 휴대 전화로부터 수신한 인식 위치 데이터 및 인식 단어 데이터에 기초하여 확정되는 단어(이후, 번역 대상 단어) 이외의 인식 대상 단어(이후, 공기 단어)의 수 n을 계측한다(단계 S2207). 단계 S2208에서, 공기 단어수 n이 하나 이상인 경우에는, 공기 관계 데이터베이스(1903)에 번역 대상 단어가 있는지의 여부를 판정하고(단계 S2209), 있는 경우에는 공기 관계 데이터베이스(1903)의 예(2004)에 공기 단어와 일치하는 단어가 있는지의 여부를 판정한다(단계 S2210).

공기 단어와 일치한 단어가 공기 관계 데이터베이스에 있는 경우에는, 번역 대상 단어의 번역 중에서 가장 최적의 번역을 결정한다(단계 S2211).

결정 방법으로서는, 공기 관계 데이터베이스(1903)의 공기 단어에 대한 각각의 번역에 기초하여 확률을 계산한다. 예를 들면, 번역 대상 단어가 「character」, 공기 단어가 「string」과 「recognition」인 경우를 생각한다. 공기 단어에 「string」이 존재한 경우의 번역이 「문자」가 되는 비율은 0.90, 또한 공기 단어에 「recognition」이 존재한 경우의 번역이 「문자」가 되는 비율은 0.95, 이들의 값을 더하여 1.85가 된다. 또한, 마찬가지의 계산을 번역 「등장 인물」에 행하면, 합계의 값은 0.08이 된다. 이들 값이 최대가 되는 번역을, 가장 적절한 번역으로서 취급할 수 있다. 또, 상기에서는 비율값을 더하여 최적의 번역을 결정하였지만, 이에 한정하는 것은 아니고, 승산, 나눗셈 또는 제산 등을 조합하거나 결정해도 된다. 마지막으로, 최적 번역 데이터를 단말기로 송신한다(단계 S2212).

또한, 단계 S2208에서 공기 단어수 n이 0인 경우, 단계 S2213으로 진행하여, 대표가 되는 번역을 SV 사전 데이터(1906)로부터 검색한다. 단계 S2214에서, 그 번역을 단말기로 송신한다.

또한, 단계 S2209에서 공기 관계 데이터베이스(1903)에 번역 대상 단어가 없 는 경우와, 단계 S2210에서 공기 관계 데이터베이스(1903)에 공기 단어와 일치하는 단어가 없는 경우에는, 마찬가지로 단계 S2213으로 진행하여, 대표 번역을 단말기로 송신한다.

또, 상기 흐름에서는 단계 S2211에서 최적 번역 데이터를 결정하였지만, 복수의 번역의 후보를 결정해도 된다. 공기 단어에 대응한 비율의 합계값을, 큰 순서로, 예를 들면 6개 구한다. 이 데이터를 번역 표시 순서 데이터라고 칭한다. 도 25의 (1)은 「character」의 번역을 재배열하기 전의 상태이고, (2)는 번역의 의미로서 적절한 순서로 재배열한 후의 상태이다.

이 번역 표시 순서 데이터에 기초하여 번역을 단말기로 송신한다. 번역 표시 순서 데이터를 수신한 휴대 전화의 CPU(102)는 상기 번역 표시 순서 데이터에 기초하여 번역을 재배열하여 표시부(107)에 표시하도록 제어한다.

이에 의해, 사용자는 인식 대상 단어의 의미를 알 수 있는 데다가, 그 인식 대상 단어가 문맥상 어떠한 의미를 가질 가능성이 높은지를 용이하게 알 수 있어, 사용성이 좋다.

또, 서버에 의해 선택된 최적의 번역이 잘못된 경우에도 상정되지만, 그러한 경우에도, 도 25와 같이 최적의 번역뿐만 아니라, 그 외의 번역의 후보를 나열하여 열거함으로써, 사용자 자신이 문맥상 판단할 때 큰 도움이 될 수 있다.

다음으로, 휴대 전화와 서버와의 교환에 따른 처리예를 도 24를 이용하여 설명한다. 여기서는, 휴대 전화인 단어를 문자 인식하여 그 최적의 번역을 서버로부터 수신하는 경우를 상정한다.

우선, 임의의 단어(이하, 인식 대상 단어)를 촬상부(103) 및 화상 인식부(105)에 의해 인식하면(단계 S2401), CPU(102)는 촬상한 화상 데이터, 화상 데이터에 포함되는 인식 대상 단어를 데이터화한 인식 단어 데이터 및 상기 인식 대상 단어의 위치를 나타내는 인식 위치 데이터를 추출한다(단계 S2402). 다음으로, 사용자가 상기 인식 대상 단어의 상세한 번역을 참조하는 지시를 입력부(101) 등을 통하여 행하면, CPU(102)는 서버와 접속하기 위한 액세스 신호를 송신한다(단계 S2403).

액세스 신호를 수신한 서버는 휴대 전화에 사용자 ID와 패스워드를 요구하기 위해서 ID/패스워드 요구 신호를 송신하고(단계 S2404, 단계 S2405), ID/패스워드 요구 신호를 수신한 휴대 전화의 CPU(102)는, 사용자에 의해 ID 및 패스워드가 입력 화면 등을 통하여 입력된 후에 서버에 ID 및 패스워드를 송신한다(단계 S2406).

다음으로, 서버는 수신한 사용자 ID 및 패스워드에 기초하여 정규 등록자인지의 여부의 인증을 행한다. 인증을 행한 결과, 정규 등록자라고 인정된 경우(유효)에는, 서버(1900)는 인증 성공 데이터를 송신하고, 정규 등록자라고 인정되지 않은 경우(무효)에는 인증 실패 데이터를 송신한다(단계 S2407∼단계 S2409). 여기서는, 인증이 유효한 경우를 생각한다.

인증 성공 데이터를 수신한 휴대 전화는, 촬상한 화상 데이터, 화상 데이터에 포함되는 인식 대상 단어를 데이터화한 인식 단어 데이터 및 상기 인식 대상 단어의 위치를 나타내는 인식 위치 데이터를 서버로 송신한다(단계 S2410, 단계 S2411).

화상 데이터, 인식 단어 데이터 및 인식 위치 데이터를 수신한 서버는, 상술한 바와 같이, 인식 단어 데이터로부터 화상 데이터 내에 포함되는 인식 대상 단어를 특정하고(단계 S2413), 화상 데이터 내에 포함되는 인식 단어 데이터 이외의 단어로, 또한 화상 데이터의 상하 좌우의 끝 등에 단어의 도중에 끊겨서 화상 데이터의 프레임으로부터 벗어나온 단어(공기 단어)를 추출하여, 인식 처리를 행한다(단계 S2412∼단계 S2414). 그 후, 서버가 소유하는 공기 관계 데이터베이스를 참조하여, 인식 대상 단어의 최적의 번역을 나타내는 최적 번역 데이터를 휴대 전화로 송신한다(단계 S2415, 단계 S2416).

최적 번역 데이터를 수신한 휴대 전화는, 최적 번역 데이터를 표시부(107)에 표시한다(단계 S2417, 단계 S2418).

이상에 의해, 사용자는, 어떤 단어의 번역을 그 문맥에 따른 최적의 번역을 참조할 수 있어, 사용성이 좋다. 또한, 처리 능력 및 기억 용량이 통상 휴대 전화보다 우수한 서버에 공기 관계 데이터베이스의 축적 및 공기 데이터베이스로부터 최적의 번역을 결정하는 처리 등을 부담시킴으로써, 휴대 전화의 처리 부담 및 기억 용량의 경감에 공헌함과 함께, 처리 능력이나 기억 용량의 면에서 균형있는 시스템을 실현할 수 있다.

또한, 서버의 입장에서 보면, 상술한 바와 같은 정보 처리를 행하는 서버를 이용하여, 「최적 번역 서비스」 등의 서비스를 상정하면, 예를 들면 매 월정액의 수입을 얻을 수 있어 경제적인 면에서도 효과적이다.

또한, 사용자에게는 무료 또는 저액으로 제공하는 대신에 광고 회사와 계약 하여 그 광고 회사로부터 광고값으로서의 수입을 얻도록 해도 상관없다. 이 경우, 서버는, 그 광고에 관한 데이터를 최적 번역 데이터에 부가하여 휴대 전화로 송신하고, 그 광고 데이터 및 최적 번역 데이터를 수신한 휴대 전화는, 최적 번역 데이터와 함께 광고 데이터도 표시하도록 하면 된다. 그 때에, 광고 데이터를 최적 번역 데이터와 중첩되지 않도록 양자를 표시하기 위한 위치 데이터도 서버가 송신하고, 그 위치 데이터를 수신한 휴대 전화가 그 위치 데이터에 기초하여 표시하도록 하면, 사용자는 최적의 번역과 광고를 혼재하지 않고 볼 수 있다.

또, 상술한 여러 기능을 소프트웨어로 실현해도 되고, 사용자는, 예를 들면 기록 매체나 서버로부터 상기 소프트웨어를 수신하여 상기 여러 기능을 실현할 수 있다. 이에 의해, 필요한 기능만을 탑재하거나, 또한 기호에 따라 다양한 기능을 추가 혹은 삭제, 혹은 갱신하는 것이 용이해진다.

또, 휴대 전화 및 서버가 갖는 화상 인식부 및 검색부는 CPU로 구성해도 된다. 또한, 상술한 실시예를 조합하여 구성할 수 있는 것은 물론이다.

또한, 본 발명은 상기에 도시된 실시예에 한정되는 것은 아니고, 여기에 개시된 원리 및 새로운 특성은 광범위한 기술적 범위를 포함하는 것이다.

본 발명에 따르면, 사용성이 향상된 정보 처리 장치, 정보 처리 방법 및 소프트웨어를 제공할 수 있다.

Claims (12)

1. 화상 정보를 출력하는 촬상부와,

   상기 촬상부에 의해 출력된 상기 화상 정보를 인식하는 인식부와,

   식별 정보와 식별 정보에 관련된 관련 정보를 대응시켜 기억하는 기억부와,

   상기 인식부에 의해 인식된 식별 정보를 이력 정보로서 기억하는 이력 기억부와,

   상기 이력 기억부에 의해 기억된 이력 정보의 취득을 지시하는 이력 취득 지시부와,

   상기 이력 취득 지시부에 의해 지시된 이력 정보 중 적어도 하나를 선택하는 이력 선택부와,

   상기 이력 선택부에 의해 상기 이력 정보를 선택하면 상기 이력 정보에 대응된 식별 정보에 관련된 관련 정보를 표시하도록 제어하는 제어부를 구비하는 것을 특징으로 하는 정보 처리 장치.
2. 제1항에 있어서,

   상기 기억부에 의해 기억된 상기 관련 정보는, 상기 식별 정보의 간이한 정보와 상기 식별 정보의 상세한 정보로 구별되어 기억되어 있는 것을 특징으로 하는 정보 처리 장치.
3. 제1항에 있어서,

   상기 이력 선택부에 의해 이력 정보를 선택한 경우에 상기 이력 정보의 간이한 정보 혹은 상기 이력 정보의 상세한 정보 중 어느 하나를 상기 표시부에 표시할지를 선택하는 관련 정보 선택부를 더 구비하는 것을 특징으로 하는 정보 처리 장치.
4. 제1항에 있어서,

   상기 기억부에 의해 기억된 상기 관련 정보는 상기 식별 정보에 관하여 상세히 기재된 홈 페이지의 어드레스 정보를 적어도 포함하는 것을 특징으로 하는 정보 처리 장치.
5. 제1항에 있어서,

   상기 제어부는 상기 인식부에 의해 인식된 상기 식별 정보가 상기 기억부에 의해 기억되어 있는 경우에 그 취지를 통지하도록 제어하는 것을 특징으로 하는 정보 처리 장치.
6. 화상 정보를 출력하는 촬상부와,

   상기 촬상부에 의해 출력된 상기 화상 정보를 표시하는 표시부와,

   상기 표시부에 의해 표시된 화상 정보에 포함되는 단어를 인식하는 인식부와,

   상기 인식부에 의해 인식된 단어를 이력 정보로서 기억하는 이력 기억부와,

   상기 이력 기억부에 의해 기억된 상기 단어의 표시를 지시하는 이력 표시 지시부와,

   상기 이력 표시 지시부에 의해 표시의 지시가 이루어진 경우에, 상기 단어를 선택하기 위한 표시 화면을 상기 표시부에 표시하고, 선택된 상기 단어의 관련 정보를 상기 표시부에 표시하도록 제어하는 제어부를 구비하는 것을 특징으로 하는 정보 처리 장치.
7. 제1항에 있어서,

   상기 이력 기억부는 상기 인식부에 의해 인식된 상기 식별 정보의 인식 횟수를 기억하는 것을 특징으로 하는 정보 처리 장치.
8. 제1 표시부를 갖는 제1 케이싱과 제1 조작부를 갖는 제2 케이싱을 갖고, 힌지부를 통하여 상기 제1 표시부와 상기 제1 조작부가 대향하도록 절첩 가능한 정보 처리 장치에 있어서,

   화상 정보를 출력하는 촬상부와,

   상기 정보 처리 장치가 절첩된 상태에서 참조 가능한 위치로 배치되고, 상기 촬상부에 의해 출력된 화상 정보를 표시하는 제2 표시부와,

   상기 정보 처리 장치가 절첩된 상태에서 누름 가능한 위치에 배치된 제2 조작부와,

   상기 제2 표시부에 표시된 화상 정보에 포함되는 식별 정보를 인식하는 인식 부와,

   상기 제2 조작부를 통하여 상기 제2 표시부에 표시된 상기 식별 정보의 인식을 행하는 지시를 한 경우에, 상기 제2 표시부에 표시된 상기 식별 정보를 상기 인식부에 의해 인식하도록 제어하는 제어부를 구비하는 것을 특징으로 하는 정보 처리 장치.
9. 제8항에 있어서,

   상기 정보 처리 장치가 절첩된 상태인지의 여부를 검출하는 절첩 검출부와,

   상기 식별 정보에 관련되는 관련 정보를 기억하는 기억부를 더 구비하고,

   상기 제어부는 상기 제2 조작부를 통하여 상기 제2 표시부에 표시된 상기 식별 정보를 인식한 후에, 상기 절첩 검출부에 의해 열린 상태라고 검출된 경우에 상기 관련 정보를 상기 제1 표시부에 표시하도록 제어하는 것을 특징으로 하는 정보 처리 장치.
10. 제9항에 있어서,

    다른 장치와 통신하는 통신부를 구비하고,

    상기 관련 정보는 상기 식별 정보의 상세한 정보가 기재된 홈페이지 어드레스를 포함하고,

    상기 제어부는 상기 절첩 검출부에 의해 열린 상태라고 검출된 경우에 상기 통신부를 통하여 상기 홈페이지에 액세스하여 상기 홈페이지의 내용을 상기 제1 표시부에 표시하도록 제어하는 것을 특징으로 하는 정보 처리 장치.
11. 메인 표시부를 갖는 제1 케이싱과 메인 조작부를 갖는 제2 케이싱을 갖고, 힌지부를 통하여 상기 메인 표시부와 상기 메인 조작부가 대향하도록 절첩 가능하며, 화상 정보를 출력하는 촬상부가 상기 힌지부에 포함되는 회전 가능한 정보 처리 장치에 있어서,

    상기 정보 처리 장치가 절첩된 상태에서 참조 가능한 위치에 배치되어, 상기 촬상부에 의해 출력된 화상 정보를 표시하는 서브 표시부와,

    상기 정보 처리 장치가 절첩된 상태에서 누름 가능한 위치에 배치된 서브 조작부와,

    상기 서브 표시부에 표시된 화상 정보에 포함되는 단어를 인식하는 인식부와,

    상기 서브 조작부를 통하여 상기 제2 표시부에 표시된 상기 단어의 인식을 행하는 지시를 한 경우에, 상기 서브 표시부에 표시된 상기 단어를 상기 인식부에 의해 인식하도록 제어하는 제어부를 구비하는 것을 특징으로 하는 정보 처리 장치.
12. 제6항에 있어서,

    상기 이력 기억부는 상기 인식부에 의해 인식된 상기 단어의 인식 횟수를 기억하는 것을 특징으로 하는 정보 처리 장치.

Images