본 발명의 일 관점에 의하면, 화상을 촬영 대상으로 하는 통상 모드와, 문자 또는 바코드를 촬영 대상으로 하는 OCR 기능 모드를 설정할 수 있는 촬영 대상 설정 수단과, 촬상 화상을 표시하는 표시 수단과, 상기 OCR 기능 모드에 있어서 촬상된 문자 또는 바코드의 합초 상태를 판정하는 합초 상태 판정 수단과, 촬상된 상기 문자 또는 바코드의 인식을 행하는 인식 수단을 포함하며, 상기 인식 수단에 의한 인식 결과를 상기 표시 수단에 표시하는 것을 특징으로 하는 휴대 전화기가 제공된다.
상기 합초 상태 판정 수단이 활성화되어, 상기 인식 수단에 의해 촬상된 문자 또는 바코드의 인식을 행하는 것이 바람직하다. 또한, 상기 합초 상태 판정 수단에 의해, 촬상된 문자 또는 바코드의 「인식 가능한」 합초 상태를 판정하고, 상기 인식 수단에 의해 촬상된 문자 또는 바코드의 인식을 행하는 것이 바람직하다. 상기 합초 상태 판정 수단에 의한 합초 상태의 판정 결과를 통지하는 통지 수단을 포함하는 것이 바람직하다. 상기 합초 상태 판정 수단에 의한 합초 상태의 판정 결과를 통지하고, 촬상된 문자 또는 바코드를 인식하는 것이 바람직하다. 상기 인식 수단에 의해, 촬상된 문자 또는 바코드의 인식을 행함으로써 얻을 수 있는 인식 결과에 따라서, 인식 결과에 대응하는 통신 준비 상태로 천이 가능한 것이 바람직하다.
상기 인식 수단에 의해, 촬상된 문자 또는 바코드의 인식을 행함으로써 인식 결과로서 URL을 얻은 경우에, 상기 URL에 인터넷 접속 가능한 상태로 천이 가능한 것이 바람직하다. 상기 인식 수단에 의해, 촬상된 상기 문자 또는 바코드의 인식을 행함으로써 인식 결과로서 메일 어드레스를 얻은 경우에, 상기 메일 어드레스에 대해 메일 작성 가능한 상태로 천이 가능한 것이 바람직하다.
상기 인식 수단에 의해, 촬상된 상기 문자 또는 바코드의 인식을 행함으로써 인식 결과로서 전화 번호를 얻은 경우에, 상기 전화 번호에 대해 전화의 호출을 행할 수 있는 상태로 천이 가능한 것이 바람직하다.
본 발명자는, 합초 상태 표시 장치 내에, 촬상한 화상 신호의 합초 상태를 판정함과 함께, 판정된 합초 상태에 따라서 유저가 알기 쉬운 시각적·청각적 표시를 행하는 합초 상태 표시 수단을 설치하는 것에 상도하였다.
이하, 첨부 도면을 참조하면서, 본 발명의 실시의 형태를 상세히 설명한다.
도 1 내지 도 13은, 본 발명의 합초 상태 표시 장치 및 합초 상태 표시 방법을 실시하는 형태의 일례를 나타내는 것으로, 도면 중, 동일 부호를 붙인 부분은 동일물을 나타내며, 기본적인 구성은 마찬가지인 것으로 한다.
<발명을 실시하기 위한 최량의 형태>
제1 실시 형태
본 발명의 제1 실시 형태는, 합초 상태 표시 장치를 구비한 카메라 내장형 휴대 전화기/PHS(Personal Handy-Phone System)이다(이하, 설명을 간략화하기 위해서, 간단히 「휴대 전화기」라고 약기함). 도 1은, 합초 상태 표시 장치를 구비한 카메라 내장형 휴대 전화기의 외관을 도시한 도면이다. 도 1의 (A)는 본 실시 형태의 휴대 전화기의 배면 사시도이고, 도 1의 (B)는 그 정면 사시도이다. 도 14는, 본 실시의 형태에 의한 휴대 전화기의 개략 구성예를 도시하는 기능 블럭도이다.
도 1에서, 카메라 내장형 휴대 전화기(1O)는, 본체부(10a)와, 무선 통신을 행하기 위한 안테나(111)로 이루어지고, 본체부(10a) 배면에서는, 화상을 촬상하기위한 카메라(112)(촬상 수단), 점멸 또는 점등에 의해 합초 상태를 알리기 위한 LED(발광 다이오드)(113)(발광 수단), 음성 또는 음에 의해 합초 상태를 알리기 위한 스피커(114)(발음 수단), 서브 화면을 표시하기 위한 소형 LCD(액정 디스플레이)표시부(116)(표시 수단)를 구비하고 있다.
또한, 본체부(10a) 정면에서는, 메인 화면을 표시하기 위한 LCD 표시부(115)(표시 수단), 전원의 ON/OFF를 행하기 위한 전원키(117), 착신, 발신, 전화 기능 전환, 동작 결정 등의 조작을 행하기 위한 전화 기능키(118), 각종 기능을 전환하기 위한 모드키(119), 선택 대상을 상하 좌우 방향으로 이동시키기 위한 커서키(120), 카메라(112)로부터 입력되는 화상의 촬상을 결정하기 위한 셔터키(121), 전화 번호의 입력 등 다이얼하기 위한 멤브레인 키(Membrane key)로 이루어지는 다이얼키(122), 수화를 행하기 위한 확성용 스피커(123), 및 음성을 입력하기 위한 마이크(124)를 구비하고 있다.
여기서, 카메라(112)는, 휴대 장치 내장용 소형 경량 카메라로서, 예를 들면, 30만 화소의 CCD(Charge Coupled Device, 에리어형 고체 촬상 소자) 카메라로 할 수 있다.
또한, LCD 표시부(115, 116)는, 도트 매트릭스 구성의 LCD 디스플레이, 백 라이트인 PDP(플라즈마 디스플레이 패널), 유기 EL(Electron Luminescence) 등의 장치와, 이들 장치와 휴대 전화기(10)의 내부 시스템과의 사이의 인터페이스인 각종 드라이버로 구성되어 있다.
휴대 전화기(10)를 조작 시에는, LCD 표시부(115, 116)에는, 각종 조작을 행하기 위한 가이던스나 수신 정보, 화상이나 텍스트 정보, 아이콘 등을 표시한다.
카메라(112)에 의해 촬영을 행할 때에는, LCD 표시부(115, 116)에는, 카메라(112)로부터 입력되는 화상과 함께, 합초 상태를 표시하도록 되어 있다. 유저가 카메라(112)의 위치를 조정하면, 이에 맞추어 변화하는 촬영 대상의 합초 상태를 인식할 수 있게 되어 있고, 핀트가 맞으면, 그것이 LCD 표시부(115, 116)에 표시됨 과 함께, 스피커(114) 또는 확성용 스피커(123)에 의해 소정의 음을 발생하여 유저에게 통지되는 것으로 한다.
또한, 본 실시 형태의 휴대 전화기에 있어서, 상기한 합초 상태의 표시 및 핀트가 맞은 것의 통지는, LCD 표시부(115, 116), LED(113), 스피커(114), 또는 확성용 스피커(123) 중 어느 하나에 의해, 또는 이들의 조합에 의해 행하도록 할 수 있다.
도 14에 나타낸 바와 같이, 본 실시의 형태에 의한 휴대 전화기(10)는, 장치 전체를 제어하는 CPU(제어부)(231)(예를 들면, 촬영 순서 전환 수단, 문자·코드 등 인식 수단(OCR 기능)과, 정보 처리 수단, 프레임 레이트 제어 수단, 타이머 설정 수단 등을 포함함), 제어 프로그램이나 고정 데이터 등을 기억하는 ROM, CPU의 작업용 기억 영역인 RAM 등의 반도체 메모리 및 하드 디스크 등으로 이루어지고 수신 또는 입력된 문자 정보, 화상 정보, 음성 신호를 기억하는 기억 메모리(232)와, 대상으로 되는 화상 정보를 입력하는 카메라(112)(촬상 수단)와, 촬상 시 등에 유저 조작에 의해 발광하는 라이트(234)(조명 수단)와, 문자 정보나 화상 정보를 유저에게 표시하는 LCD 표시부(115)(표시 수단, 출력(통지) 수단의 일부)와, 유저로부터의 키 조작 정보를 입력 생성하는 키 입력부(122)와, 전파를 송수신하기 위한 안테나(111)와, 무선 통신의 송수신을 제어하는 무선부(238)와, 음성 신호를 출력하는 스피커(114)(출력(통지) 수단의 일부)와, 유저로부터 음성 신호를 입력하는 마이크(124)를 구비하고 있다.
제어부(231)는, 휴대 전화기(10) 전체를 제어함과 함께, OCR 기능을 지니고, 키조작에 기초하여, 카메라(112)에 의한 문자 등의 촬영, 화상 정보의 표시, 문자 등의 인식, 인식한 내용에 기초하는 처리를 행한다.
특히, 제어부(231)는, 자연 화상 등을 촬영하는 경우와, 문자 인식(OCR), 취득 등을 목적으로 문자나 바코드 등을 촬영하는 OCR 기능 모드에서의 촬영의 경우 에 적어도 처리의 일부를 전환하는 촬영 순서 전환 수단과, OCR 기능 모드로 전환된 경우, 문자·바코드 등의 인식을 행하는 OCR 기능과, OCR 기능에 의해 인식된 결과 등을 유저에 통지하는 통지 수단과, OCR 기능에 의해 인식된 내용에 기초하여 소정의 처리를 행하는 정보 처리 수단으로서의 기능을 갖는다.
또한, OCR 기능 모드로 전환하였을 때, OCR 기능을 기동할 때까지는 카메라(112)로부터 얻어지는 고속의 프레임 레이트로 표시부(115)에 화상을 표시하고, OCR 기능의 기동 후에는 OCR 기능에 있어서 필요한 프레임 레이트에 의해 화상을 촬상·표시하는 프레임 레이트 제어 수단으로서의 기능을 갖는다.
ROM은, 제어부(231)가 동작할 때에 필요한 프로그램, 통신 제어 데이터 등의 고정 데이터를 기억하는 판독 전용의 반도체 메모리이다. RAM은, 바코드 인식이나 통신에 관한 데이터, 연산에 사용하는 데이터 및 연산 결과 등을 일시적으로 기억하는 소위 워킹 메모리로서 사용된다. 휴대 전화기(10)에서 처리되는 프로그램은, 이 RAM에 전개되어 실행된다.
도 15는, 카메라(112)의 렌즈 초점 심도 전환 기구의 구성예를 모식적으로 도시한 도면으로, 통상 촬영 시와 OCR 기능 모드와의 초점 심도 전환 기구의 예를 도시하는 도면이다. 도 15에 나타낸 바와 같이, 렌즈 초점 심도 전환 기구는, CCD 등의 고체 촬상 소자와 그 신호 출력 회로를 갖는 카메라 모듈(250)과, 내부에 렌즈(251)를 가지고, 카메라 모듈(250) 상에 예를 들면 나사 감합되는 렌즈 유닛(252)과, 렌즈 유닛(252)의 외주부에 부착되고, 이 렌즈 유닛(252)을 회동시키는 카메라 레버(253)를 구비하고 있다. 렌즈 유닛(252)은, 카메라 모듈(250)에 나사 로 감합되어 있고, 카메라 레버(253)의 손잡이(253a)를 A←→B 방향으로 움직이면, 렌즈 유닛(252)은, 카메라 모듈(250)에 대하여 X←→Y 방향으로 이동한다. 이로써, 렌즈 유닛(252)에 장착된 렌즈(251)와 카메라 모듈(250)과의 초점 거리가 전환되어, 통상 촬영과 OCR 기능 동작 시의 초점 심도가 전환된다. 본 실시의 형태에서는, OCR 기능 동작 시에, 제어부(231)(도 14)로부터의 구동 신호를 받은 솔레노이드 등으로 이루어지는 구동부(도시 생략)에 의해 카메라 레버(253)가 슬라이드하여, 자동적으로 초점 심도가 전환된다. 또한, 카메라 본체에 카메라 레버(253)의 손잡이(253a)에 연동하는 슬라이드 손잡이를 설치하고, OCR 기능 동작 시 등의 매크로 촬영 시에 유저가 수동으로 전환하는 구성으로 하여도 된다.
도 2는, 본 실시 형태의 휴대 전화기(10)에 구비되는 합초 상태 표시 장치의 구성을 나타내는 기능 블럭도이다.
도 2에서, 본 실시 형태의 합초 상태 표시 장치는, 촬상 장치(20)(휴대 전화기(10)의 카메라(112)에 상당함), 포커스 영역 추출부(21), 엣지 강조 처리부(22), 히스토그램 처리부(23), 분산값 산출 처리부(24), 시간 적산값 산출 처리부(25), 합초 상태 판정 수단(26), 합초 상태 표시 수단(31) 및 표시 화상 합성부(32)를 구비하고 있다.
촬상 장치(20)로부터 수신한 화상은, 포커스 영역 추출부(21), 엣지 강조 처리부(22), 히스토그램 처리부(23), 분산값 산출 처리부(24), 시간 적산값 산출 처리부(25), 합초 상태 판정 수단(26) 및 합초 상태 표시 수단(31)에서 처리되어, 합초 상태의 표시 화상이 생성된다. 이 합초 상태의 표시 화상과 촬상 장치(20)로부터 취득한 화상이 표시 화상 합성부(32)에서 합성되어 LCD 표시부(115, 116)에 출력되도록 되어 있다.
또한, 본 실시 형태의 합초 상태 표시 장치 및 이를 구비한 카메라 내장형 휴대 전화기에 있어서, 상기에서 설명한 것 이외의 구성 부분에 대해서는, 종래의 것과 마찬가지로 구성되어 있는 것으로 하고, 여기서는 설명을 생략한다.
다음으로, 도 2를 참조하면서, 상기한 본 실시 형태의 휴대 전화기(10) 및 이것에 구비된 합초 상태 표시 장치의 동작에 관해서 설명한다.
본 실시 형태의 휴대 전화기(10)의 카메라(112)에 의해 화상을 촬상하면, 촬상 장치(20)에서 취득된 화상은, 포커스 영역 추출부(21)에 있어서, 즉 포커스 영역이 설정되고, 이 포커스 영역의 범위 내에 포함되는 화상 신호의 휘도 신호가 추출된다.
도 3은, 이 때의 포커스 영역의 설정 및 화상의 추출을 개략적으로 도시한 도면이다. 도 3에서, 촬상 장치(20)에 의해 취득된 화상(41)의 중앙부분에 직사각형의 포커스 영역(42)을 설정하고, 포커스 영역(42)에 포함되는 화상 신호를 추출한다. 또한, 이 포커스 영역의 치수, 형상, 위치 등에 대해서는, 임의로 변경할 수 있어, 유저가 임의로 설정할 수 있도록 하여도 된다.
포커스 영역 추출부(21)에서 추출된 화상의 휘도 신호는, 엣지 강조 처리부(22)에 있어서, 공간 미분 오퍼레이터를 이용한 국소 곱합 연산이 실시되고, 절대값 처리되어, 엣지 강조된 화상 신호 데이터가 생성된다. 도 4에, 엣지 강조 처리부(22)에서 이용하는 공간 미분 오퍼레이터를 예시한다.
그 후, 본 실시 형태의 합초 상태 표시 장치에 있어서, 상기 엣지 강조된 화상 신호 데이터에 기초하여 합초 상태를 판정하기 위해서는, 이하의 2개의 방법이 있다.
제1 방법에서는, 시간 적산값 산출 처리부(25)에서, 엣지 강조가 된 신호를 일정 시간 적산한 시간 적산값을 산출한다. 여기서, 일정 시간이란, 상기 신호의 값의 일시적인 변동에 의한 영향을 억제하여, 화상 신호를 평균화하는 데 필요한 시간으로 설정하는 것으로 한다. 이로써, 합초 상태의 판정을 안정시킬 수 있다. 후속해서, 합초 상태 판정 수단(26)에 있어서, 시간 적산값 산출 처리부(25)에서 산출한 시간 적산값을 소정의 값으로 나누어 오프셋 값을 가산함으로써, 합초 상태의 값을 산출한다. 합초 상태의 값이 크면 합초로 판단하고, 합초 상태의 값이 작으면 합초되지 않은 것으로 판단한다.
제2 방법에서는, 히스토그램 처리부(23)에 있어서, 엣지 강조가 된 신호의 값에 대하여, 엣지 강도와 도수와의 관계에 대해서 도 13에 도시한 바와 같은 히스토그램을 생성한다. 그 후, 분산값 산출 처리부(24)에 있어서, 상기 히스토그램의 임의의 임계값 이상만의 신호를 이용하여 신호의 분산값을 산출한다. 후속해서, 시간 적산값 산출 처리부(25)에 있어서, 상기 산출한 분산값을 일정 시간 적산한 시간 적산값을 산출한다. 여기서, 일정 시간이란, 상기와 마찬가지로 화상 신호의 값의 일시적인 변동에 의한 영향을 억제하여, 화상 신호를 평균화하는 데 필요한 시간이지만, 제1 방법에서의 일정 시간보다 긴 시간을 설정하는 것으로 한다.
후속해서, 합초 상태 판정 수단(26)에 있어서, 시간 적산값 산출 처리부(25)에서 산출한 화상 신호의 시간 적산값을 소정의 값으로 나누어 오프셋 값을 가산함으로써, 합초 상태의 값을 산출한다. 합초 상태의 값이 크면 합초로 판단하고, 합초 상태의 값이 작으면 합초되지 않은 것으로 판단한다.
상기 제2 방법에서, 히스토그램의 임의의 임계값 이상만을 이용하는 것은, 도 3에 도시하는 포커스 영역(42) 내의 고주파 노이즈나 유저의 손 떨림 등에 의해 생긴 엣지를 제거하여 이들의 영향을 억제하기 위함이다.
또한, 히스토그램으로부터 분산값을 산출할 때에, 임의의 임계값 이상, 임의의 임계값 이상만의 값을 이용하여 분산값을 구하는 방법을 채용하여도 된다. 이는, 어두운 곳에서 촬영한 경우에 발생하는 랜덤 잡음에 의해 검출되는 엣지를 제거하는 효과가 있다.
통상, 메뉴얼 카메라로 핀트를 맞추는 경우, 포커스링을 이동시킴으로써 핀트를 맞추지만, 휴대 단말 장치 등의 고정 초점 카메라의 경우, 유저가 휴대 단말을 상하로 움직여서 정해진 초점 거리에 맞출 필요가 있다. 이 때문에, 본 실시 형태의 촬상 장치(20)에서는, 도 3에 도시하는 포커스 영역(42) 내의 화상이 상하방향으로 크게 변화하고, 화상 신호의 시간 적산값이 크게 변동해 버린다.
상기한 바와 같이, 분산값 산출 처리부(24)에서 산출한 분산값을 이용하여 시간 적산값을 산출함으로써, 포커스 영역 내의 화상의 변화에 의한 영향을 억제하여, 안정된 값을 산출할 수 있다.
상기 제1 방법과 제2 방법을 비교하면, 제1 방법은, 제2 방법보다도 산출되는 합초 상태의 값의 정밀도는 낮지만, 처리에 걸리는 시간이 빠르다는 이점이 있다. 반대로, 제2 방법은, 제1 방법보다도 처리에 긴 시간이 걸리지만, 산출되는 합초 상태의 값의 정밀도는 높다는 이점이 있다.
또한, 본 실시 형태에서는, 상기 제1 방법 및 제2 방법의 어느 것을 이용하여도 된다. 또는, 양방의 방법에 의해 시간 적산값을 구해 두고, 정밀도가 좋은 쪽(높은 쪽)의 값을 채용하도록 하여도 된다.
또한, 본 실시 형태에서는, 상기 제1 방법 및 제2 방법에서, 포커스 영역 추출부(21)에 의해 촬상 장치(20)에서 취득한 화상으로부터 포커스 영역의 범위 내에 포함되는 화상 신호의 휘도 신호를 추출함으로써, 후단의 연산 처리에 걸리는 시간의 단축 및 불필요한 화상 부분의 영향에 의한 합초 상태의 판정 정밀도의 저하 방지를 도모하도록 했지만, 이에 한정되는 것이 아니고, 고속 연산 처리가 가능한 CPU를 이용하거나, 불필요한 화상 부분이 존재하지 않는 경우에는, 포커스 영역 추출부(21)에 의한 잘라냄을 행하지 않고, 촬상 장치(20)에서 취득된 모든 화상에 대해서 화상 신호의 휘도 신호를 추출하도록 하여도 된다.
또한, 본 실시 형태에서는, 상기 제1 방법 및 제2 방법에서, 엣지 강조 처리부(22)에 의해 엣지 강조를 행함으로써, 엣지 부분이 불명료한 화상에서의 합초 상태의 판정 정밀도의 향상을 도모하도록 했지만, 이에 한정되는 것이 아니고, 엣지 부분이 불명료한 화상이 존재하지 않는 경우에는, 엣지 강조 처리부(22)에 의한 엣지 강조를 행하지 않고, 포커스 영역 추출부(21)에 의해 추출된 휘도 신호 또는 촬상 장치(20)에서 취득된 모든 화상에 대한 화상 신호의 휘도 신호를 이후의 처리에 이용하도록 하여도 된다.
또한, 본 실시 형태에서는, 상기 제2 방법에서, 분산값 산출 처리부(24)에 의해 산출한 분산값을, 시간 적산값 산출 처리부(25)에 의해 일정 시간 적산하여 시간 적산값을 산출함으로써, 신호의 값의 일시적인 변동에 의한 영향을 억제하여, 합초 상태의 판정 정밀도의 향상을 도모하도록 했지만, 이에 한정되는 것이 아니며, 분산값 산출 처리부(24)에 의해 산출한 분산값을 이후의 처리에 이용하도록 하여도 된다.
상기에 있어서, 합초 상태 판정 수단(26)에서 산출된 합초 상태의 값은, 합초 상태 표시 수단(31)에 입력된다. 합초 상태 표시 수단(31)은, 합초 상태의 값에 기초하여, 유저에게 합초 상태를 표시 및 통지하기 위한 처리를 행한다.
합초 상태 표시 수단(31)은, 합초 상태의 값에 따른 합초 상태 표시 화상을 생성하고, 이것을 표시 화상 합성부(32)에 출력한다. 또한, 합초 상태 표시 수단(31)은, 소정의 경우에는, LED 점멸 점등 장치(113)를 점등 또는 점멸시키는 신호를 출력하고, 또는 스피커(114, 123)를 발음시키는 신호를 출력할 수 있다.
여기서, 상기 소정의 경우란, 예를 들면, 합초 상태의 값이 최고값으로 된 경우로서, 이 때 촬상 장치(20)에 있어서 핀트가 맞은 것으로 된다. 이것을, LED 점멸 점등 장치(113)를 점등 또는 점멸시키고, 또는 스피커(114, 123)에 소정의 음을 발음시킴으로써 유저에게 알릴 수 있다.
이하에, 도 5 내지 도 11을 참조하면서, LCD 표시부(115, 116) 상에서의 합초 상태의 표시예에 대해서 구체적으로 설명한다. 합초 상태 표시 수단(31)은, 미리 이들 표시를 행할 수 있도록 설정되어 있는 것으로 한다.
도 5 내지 도 11은, 상기한 바와 같은 합초 상태 표시 장치를 구비한 본 실시 형태의 휴대 전화기(10)의 LCD 표시부(115, 116) 상에서 합초 상태를 표시하는 형태를 도시한 도면이다. 도 5에 도시하는 표시 형태에서는, 합초 상태를 막대 그래프에 의해 표시하고 있다. 도 5에서, LCD 표시부(115, 116) 상의 표시 화면(53)에는, 합초 상태 표시 그래프(51)가 표시되어 있고, 게이지가 우측으로 올라 갈수록 합초 상태의 값이 높은 것을 나타내고 있다. 또한, 바(52)는, 지금까지의 합초 상태의 최대값을 나타내고 있다.
이러한 합초 상태 표시에 의해, 유저는, 표시 화면(53)을 보면서 본 실시 형태의 휴대 전화기(10)을 상하로 움직여, 합초 상태 표시 그래프(51)의 게이지가 최대로 된 곳이 카메라(112)의 합초 위치라고 판단하여 촬영을 행할 수 있다.
도 6에 도시하는 표시 형태에서는, 합초 상태를 레벨미터에 의해 표시하고 있다. 도 6에서, LCD 표시부(115, 116) 상의 표시 화면(63)에는, 합초 상태 표시 레벨미터(61)가 표시되어 있고, 레벨미터의 표시 레벨이 min로부터 max를 향해 시계 방향으로 올라 갈수록 합초 상태의 값이 높은 것을 나타내고 있다. 또한, 바(62)는, 지금까지의 합초 상태의 최대값을 나타내고 있다.
이러한 합초 상태 표시에 의해, 유저는, 표시 화면(63)을 보면서 본 실시 형태의 휴대 전화기(10)를 상하로 움직여, 합초 상태 표시 레벨미터(61)의 표시 레벨이 최대로 된 곳이 카메라(112)의 합초 위치라고 판단하여 촬영을 행할 수 있다.
도 7에 도시하는 표시 형태에서는, 합초 상태를 수치에 의해 표시하고 있다. 도 7에서, LCD 표시부(115, 116) 상의 표시 화면(73)에는, 표시 윈도우(71)에 있어서 합초 상태에 대응한 수치가 표시되어 있고, 이 수치의 값이 높을수록 합초 상태의 값이 높은 것을 나타내고 있다. 또한, 표시 윈도우(72)에는, 지금까지의 합초 상태의 최대값이 표시되어 있다.
이러한 합초 상태 표시에 의해, 유저는, 표시 화면(73)을 보면서 본 실시 형태의 휴대 전화기(10)를 상하로 움직여, 표시 윈도우(71)에 표시되는 합초 상태에 대응한 수치가 최대로 된 곳이 카메라(112)의 합초 위치라고 판단하여 촬영을 행할 수 있다.
도 8에 도시하는 표시 형태에서는, 합초 상태를 도형의 갯수에 의해 표시하고 있다. 도 8에서, LCD 표시부(115, 116) 상의 표시 화면(83)에는, 합초 상태에 대응한 갯수의 도형(81)이 표시되어 있고, 이 도형(81)의 갯수가 클수록 합초 상태의 값이 높은 것을 나타내고 있다. 이러한 표시를 행하기 위해서는, 예를 들면, 합초 상태의 값을 소정의 값으로 나눈 몫의 갯수만큼, 도형을 표시하도록 하면 된다. 또한, 도형(82)은, 지금까지의 합초 상태의 최대값에 대응하는 도형의 갯수를 표시하고 있다.
또한, 도 8에서는, 예로서 단책 형상의 사각형을 표시하고 있지만, 이 외에도 임의의 형상의 도형을 이용하여 표시할 수 있다.
이러한 합초 상태 표시에 의해, 유저는, 표시 화면(83)을 보면서 본 실시 형태의 휴대 전화기(10)를 상하로 움직여, 표시되는 도형(81)의 갯수가 최대로 된 곳이 카메라(112)의 합초 위치라고 판단하여 촬영을 행할 수 있다.
도 9에 도시하는 표시 형태에서는, 합초 상태를 색의 변화에 의해 표시하고 있다. 도 9에서, LCD 표시부(115, 116) 상의 표시 화면(93)에는, 합초 상태에 대응한 색의 블럭(91)이 표시되어 있고, 이 블럭(91)의 색이 합초 상태의 값과 대응하고 있다.
도 10은, 이 때의 블럭(91)의 색과 합초 상태의 값과의 관계를 기록하는 컬러 테이블의 구성예를 도시하는 도면이다. 통상, 표시 화면(93)에 표시되는 블럭(91)의 색은, RGB의 색 요소에 의해 결정되지만, 이들 색 요소의 값과 합초 상태의 값을 관련지어 컬러 테이블에 기록해 두면 된다.
도 10에 도시하는 예에서는, 블럭(91)의 색이 녹색에 근접할수록 합초 상태의 값이 높고, 적색에 근접할수록 합초 상태의 값이 낮아지도록 구성되어 있다. 물론, 본 실시 형태의 합초 상태 표시 장치에 의한 표시 형태는 이에 한정되는 것은 아니며, 임의의 구성의 컬러 테이블을 이용할 수 있다.
이러한 합초 상태 표시에 의해, 유저는, 표시 화면(93)을 보면서 본 실시 형태의 휴대 전화기(10)를 상하로 움직여, 표시되는 블럭(91)의 색이 가장 녹색에 근접한 곳이 카메라(112)의 합초 위치라고 판단하여 촬영을 행할 수 있다.
도 11에 도시하는 표시 형태에서는, 합초 상태를 표시되는 문자의 농도에 의해 표시하고 있다. 도 11에서, LCD 표시부(115, 116) 상의 표시 화면(103)에는, 「핀트가 맞습니다.」라는 문자(101)가, 합초 상태의 값에 대응한 농도로 표시되어 있다.
여기서, 문자(101)의 농도는, 합초 상태의 값에 따라서 소정의 범위 내에서 변동하도록 구성되어 있고, 예를 들면, 0(흑) 내지 255(백)의 범위에서 표시할 수가 있다. 이러한 합초 상태 표시에 의해, 유저는, 표시 화면(103)을 보면서 본 실시 형태의 휴대 전화기(10)를 상하로 움직여, 표시되는 문자(101)가 가장 짙게 표시되는 곳이 카메라(112)의 합초 위치라고 판단하여 촬영을 행할 수 있다.
제2 실시 형태
본 실시 형태에서, 합초 상태 표시 장치 및 이것을 구비한 휴대 전화기(10)의 구성은, 도 1 및 도 2에 나타내는 제1 실시 형태의 것와 마찬가지이기 때문에, 설명을 생략한다. 제1 실시의 형태에서는, 도 5 내지 도 11에 도시한 바와 같이, LCD 표시부(115, 116)의 표시 화면에 합초 상태를 표시하도록 구성하고 있지만, 본 발명의 제2 실시 형태에서는, LCD 표시부(115, 116) 상에서의 표시 대신에, 또는 이에 덧붙여서, 휴대 전화기(10)에 구비한 LED(113)를 소정의 방법으로 점멸 또는 점등시킴으로써, 합초 상태를 유저에게 통지하는 것을 특징으로 한다.
상기 LED(113)를 소정의 방법으로 점멸시키는 형태로는, 예를 들면, 도 2에서, 합초 상태 표시 수단(31)은, 소정의 값을 합초 상태의 값으로 나눈 값을 수시 산출하고, 이 값을 피치로서 LED(113)를 점멸시키도록 구성할 수 있다. 이로써, 합초 상태의 값이 높아질수록 LED(113)의 점멸의 피치가 빨라지고, 유저는 이것을 바탕으로 카메라(112)의 합초 상태를 판단할 수가 있다.
또한, 상기 LED(113)를 소정의 방법으로 점등시키는 형태에서는, 예를 들면, 도 2에서, 합초 상태 표시 수단(31)은, 합초 상태의 값이 소정의 값보다 큰지의 여부를 판단하여, 소정의 값보다 큰 경우에는, LED(113)를 점등시키도록 구성할 수 있다. 이로써, 합초 상태의 값이 소정의 값을 초과하면 LED(113)가 점등하기 때문에, 유저는 이것을 바탕으로 카메라(112)의 합초 상태를 판단할 수 있다.
제3 실시의 형태
본 실시 형태에 있어서, 합초 상태 표시 장치 및 이것을 갖춘 휴대 전화기(10)의 구성은, 도 1 및 도 2에 나타내는 제1 실시 형태의 것과 마찬가지이기 때문에, 설명을 생략한다. 제1 실시 형태에서는, 도 5 내지 도 11에 도시한 바와 같이, LCD 표시부(115, 116)의 표시 화면에 합초 상태를 표시하도록 구성하고 있지만, 본 발명의 제2 실시 형태에서는, LCD 표시부(115, 116) 상에서의 표시 대신에, 또는 이에 덧붙여서, 휴대 전화기(10)에 구비한 스피커(114, 123)에 소정의 발음을 시킴으로써, 합초 상태를 유저에게 통지하는 것을 특징으로 한다.
상기 스피커(114, 123)에 소정의 발음을 시키는 양태에서는, 예를 들면, 도 2에서, 합초 상태 표시 수단(31)은, 소정의 값을 합초 상태의 값으로 나눈 값을 수시 산출하고, 스피커(114, 123)에서 이 값에 대응하는 주파수의 소리를 발생시키도록 구성할 수 있다. 이로써, 합초 상태의 값이 높아질수록 스피커(114, 123)에 의해 발생하게 되는 소리의 주파수가 높아져, 유저는 이것을 바탕으로 카메라(112)의 합초 상태를 판단할 수 있다.
또한, 스피커(114, 123)에 소정의 발음을 시키는 다른 양태에서는, 예를 들면, 도 2에서, 합초 상태 표시 수단(31)은, 합초 상태의 값이 소정의 값보다 큰 지의 여부를 판단하여, 소정의 값보다 큰 경우에는, 스피커(114, 123)에 소정의 발음을 시키도록 구성할 수 있다. 이로써, 합초 상태의 값이 소정의 값을 초과하면 스피커(114, 123)에서 소정의 발음을 하기 때문에, 유저는 이것을 바탕으로 카메라(112)의 합초 상태를 판단할 수 있다.
제4 실시 형태
본 발명의 제4 실시 형태는, 제1 실시 형태와 마찬가지로, 합초 상태 표시 장치를 구비한 카메라 내장형 휴대 전화기이다. 도 12는, 이 휴대 전화기에 구비되는 합초 상태 표시 장치의 구성을 나타내는 기능 블럭도이다. 도면 중, 도 2와 동일 부호를 붙인 구성 부분은, 동일한 것을 나타내고 있고, 이들에 대해서는 설명을 생략한다.
도 12에서, 본 실시 형태의 합초 상태 표시 장치는, 도 2에 도시하는 표시 화상 합성부(32) 대신에, 화상 데이터 신호의 공간 주파수 성분의 고역 성분을 제거하는 BPF(밴드 패스 필터)(80)(필터 수단)를 구비하고 있다.
BPF(80)는, 촬상 장치(20)로부터 출력된 화상 데이터 신호에 대하여, 8×8, 16×16 등의 화소 블럭마다 FFT(고속 푸리에 변환), DCT(이산 코사인 변환), 아다마르 변환 등의 직교 변환을 적용하여, 각 블럭의 소정 범위의 주파수 성분만을 이용하여 역변환한 후, 이 화상 신호 데이터를 LCD 표시부(115, 116)에 출력할 수 있다.
합초 상태 표시 수단(31)은, 합초 상태 판정 수단(26)으로부터 출력되는 합초 상태의 값이 낮을수록, BPF(80)에서 화상 데이터 신호로부터 제거하는 주파수 성분의 범위(고역 성분)를 넓히도록 BPF(80)를 제어한다. 상기에서, 합초 상태의 값에 따라서 BPF(80)에 의해 화상 데이터 신호로부터 제거하는 주파수 성분의 범위를 변화시키는 양태로는, 예를 들면, 이하와 같이 하면 된다.
합초 상태 표시 수단(31)은, 합초 상태의 값을 소정의 값으로 나눈 값을 산출한다. BPF(80)는 화상 데이터 신호를 화소 블럭마다 직교 변환한 후, 합초 상태 표시 수단(31)이 산출한 상기 값을 취득하고, 화상 데이터 신호에 포함되는 공간 주파수 성분의 전체 주파수 범위 중, 상기 값에 대응하는 비율(퍼센테이지 등)을 주파수가 낮은 쪽으로부터 추출하고, 이를 역변환함과 함께, 그 밖의 주파수 범위의 성분을 0로 하여, LCD 표시부(115, 116)에 출력한다.
이러한 합초 상태 표시에 의해, 유저는, LCD 표시부(115, 116)의 표시 화면을 보면서 본 실시 형태의 휴대 전화기(10)를 상하로 움직여, 표시되는 화상의 흐려짐이 작은 곳이 카메라(112)의 합초 위치라고 직감적으로 판단하여 촬영을 행할 수 있다.
상기 각 실시 형태의 카메라 내장형 휴대 전화기 및 이것에 구비된 합초 상태 표시 장치에 따르면, 카메라(112)로부터 취득한 화상 데이터 신호에 대하여, 포커스 영역 추출부(21), 엣지 강조 처리부(22), 히스토그램 처리부(23), 분산값 산출 처리부(24), 시간 적산값 산출 처리부(25) 등에 있어서 소정의 처리를 행한 후, 그 합초 상태를 합초 상태 판정 수단(26)에 의해 판정하고, 합초 상태 표시 수단(31)에 의해서, LCD 표시부(115, 116), LED(113), 스피커(114, 123)를 통하여, 유저가 알기 쉬운 직감적인 방법으로 합초 상태를 표시 또는 통지할 수 있다.
이로써, 휴대 전화기(10)에 의해 화상을 촬영하고자 하는 유저는, 시각적 또는 청각적으로 표시되는 합초 상태를 참조함으로써, 쉽게 합초의 확인 및 조절을 행할 수 있다.
제5 실시 형태
본 실시의 형태에서, 촬영 대상에 문자가 포함된다. 여기서 말하는 「문자」란, 일반적인 언어, 문자와 함께, 바코드 등의 코드도 포함한다. 요컨대, 그 촬영 대상 자체가 일반적 또는 보편적인 의미를 갖도록 정해져 있는 표시를 의미한다.
최근, 카메라 내장형 휴대 전화기의 기능 향상이 현저한 것이 있고, 예를 들면, 10만 화소 레벨의 화소 수를 갖는 휴대 전화기도 개발이 진행되고 있다. 또한, 화소 수의 향상에 의해 종래에는 어려웠던 다양한 응용이 가능해진다. 그 하나로서 휴대 전화기에 OCR 기능을 탑재하는 것을 생각할 수 있다. 그런데, 종래의 휴대 전화기에서는, 화소 수가 10만 정도이었기 때문에, 예를 들면 명함에 기재되어 있는 사항, 예를 들면, 성명, 회사명, 전화·FAX 번호나 메일 어드레스 등의 문자를 휴대 전화기에 설치된 카메라에 의해 직접 촬영하여 휴대 전화기 내에 취득하는 것은 어려웠다.
본 실시의 형태에 의한 휴대 전화기는, 상기 각 실시의 형태에 의한 합초 상태 표시 장치를 적용한 것이다. 카메라 내장형의 휴대 전화기에 있어서, 디지탈 카메라의 화소 수를 100만 화소 레벨까지 향상시키면, 소형의 디지탈 스틸 카메라와 동등한 화소 수 레벨로 되어, 유저에게 있어서 만족할 수 있는 화질의 촬상이 가능해진다. 발명자는, 이러한 고화소화된 카메라 내장 휴대 전화기에 OCR 기능을 설치함으로써, 종래의 휴대 전화기로는 곤란했던, 예를 들면 명함에 기재되어 있는 사항, 예를 들면, 성명, 회사명, 전화·FAX 번호나 메일 어드레스 등의 문자를 휴대 전화기에 설치된 카메라에 의해 직접 촬영하여 휴대 전화기 내에 취득하여 메모리에 기억시키거나, 취득한 전화 번호나 메일 어드레스에 기초하여, 직접, 전화를 걸거나, 메일을 보낼 수 있다고 생각했다. 그 때, 화소 수가 커지면, 합초 거리를 떨어뜨려 긴 문자열(URL 등)을 촬영하는 것이 가능해진다.
단, 긴 문자열을 일괄적으로 인식하고자 하면, 문자 자체는 작아지기 때문에, 일반 촬영 모드로부터 접사 모드로의 변경을 간단히 할 수 있는 것이 바람직하지만, 종래의 장치에서는 이 점에 관한 기술적 배려가 없었다. 또한, 작은 문자열을 양호한 상태로 촬영하고 이것을 정확하게 인식시키기 위해서는, 촬영 시에서의 촬상 대상인 문자열을 표시 화면상에 있어서 정확하게 위치 정렬하는 것이 바람직하지만, 종래의 장치에서는 이 점에 관한 기술적 배려도 이루어져 있지 않다.
도 32는, 명함 상에 인쇄되어 있는 URL 등을 본 실시의 형태에 의한 카메라 내장형 휴대 전화기를 이용하여 촬영하는 모습을 예시적으로 나타낸 도면이다. 도 32에 도시한 바와 같이, 렌즈 LS의 화각을 40°로 하고, 접사 상태에서의 합초 상태로 되는 거리 H를 10cm로 하면, 촬상 가능한 피사체의 폭 W는 7.28cm이고, 이 폭이면, 명함 NC에 인쇄되어 있는 URL 등을 일괄적으로 촬영 가능하다. 단, 표시 수단(메인 LCD, 서브 LCD의 어느 것이라도)에 표시되는 문자열이 작아지기 때문에, 합초 상태인지의 여부의 확인이 매우 어렵게 된다. 그래서, 상기한 각 실시의 형태에 의한 합초 상태 표시 수단을 유효하게 기능시킬 수 있다.
이하에, 본 발명의 제5 실시의 형태에 의한 합초 상태 표시 장치를 구비한 카메라 내장형 휴대 전화기에 대해서 도면을 참조하면서 설명한다. 도 16에서 도 20까지는, 본 실시의 형태에 의한 합초 상태 표시 장치를 구비한 카메라 내장형 휴대 전화기에서의 처리의 흐름을 OCR 기능에 초점을 맞혀 설명한 흐름도이다. 도 21에서 도 31까지는, 처리의 흐름을 따라 표시 수단에 표시되는 내용을 도시한 도면이다.
대기 화면(301)에서, 카메라 모드로 설정하고 단계 S1에서 카메라 기동 처리를 행하면, 표시 화면(302)에 카메라 기동중의 표시가 행하여진다(단계 S2). 단계 S3에서 카메라 기동이 완료하면, 표시 수단에 쓰루 화상이 표시된다(도 21, 303). 이 화면으로부터, 셔터 누름, 메뉴 표시, 캔슬을 선택할 수 있다. 단계 S4에서 촬영 화상을 제1 메모리에 덮어쓰기 보존한다. 여기서, 제1 메모리란, 소위 버퍼 메모리를 말하는 것으로, 촬상 동작 중에 있어서 촬상 대상의 화상 신호를 항상 덮어쓰기하여 일시 보존하고 있다. 단계 S5에서, 제1 메모리에 보존한 촬영 화상을 표시 수단에 표시시킨다(309). 촬영을 캔슬하는 경우에는, 캔슬을 선택함으로써, 단계 S15의 대기 화면(대기 모드)(310)으로 되돌아간다. 여기서 실제로 통상의 촬영을 행하는 경우에는, 단계 S7을 통과하여(메뉴 버튼 누름으로 "예"), 단계 S8에서 셔터 버튼 누름 동작을 행한다("아니오"). 셔터 버튼 누름을 행할 때까지는, 단계 S4에서 단계 S8까지의 처리를 반복한다.
삭제
단계 S8에서 셔터 버튼을 누르면, 단계 S9에서, 확인 화면이 표시된다(도 21, 304). 여기서, 캔슬을 선택하면(단계 S10), 단계 S4로 되돌아간다. 캔슬을 선택하지 않고서, 단계 S11에서 보존을 선택하면, 보존 중의 표시가 행하여진다(도 21의 306, 도 22의 311 내지 312). 보존 중의 소정 시간 안에 캔슬을 선택하면(단계 S11의 "아니오"), 단계 S9로 되돌아간다. 보존을 선택하여 소정 시간이 경과하면, 실제로 촬영 화상 전체의 화상 데이터를 보존할 수 있다. 즉, 단계 S12에서 제1 메모리에 보존한 촬영 화상을 예를 들면 JPEG 압축하고, 단계 S13에서 압축된 화상 데이터를 제2 메모리(예를 들면 불휘발성 메모리 카드 등)에 보존한다(단계 S13, 도 22의 313 내지 314). 후속해서, 단계 S14로 진행하여 카메라 기능을 정지시키면, 단계 S15에서 대기 모드로 되어 그 취지의 표시가 이루어진다(단계 S15, 도 21의 310, 도 22의 310).
단계 S7에서, 메뉴 버튼 누름을 선택하면("예"), 단계 S16으로 진행하여, 촬영 서브 메뉴 화면이 표시된다(도 21, 305). 서브 메뉴에는, 예를 들면, (1)에서 (9)까지의 촬영에 관한 항목이 표시된다. 단계 S18에서, 표시된 서브 메뉴 중에서 원하는 항목을 선택하고, 단계 S18에서 촬영 모드의 전환을 행하는지의 여부를 결정한다. 촬영 모드의 전환을 행하지 않는 경우에는, 선택된 항목의 설정으로 된다. 촬영 모드의 전환을 행하는 경우("예")에는, 단계 S19로 진행하여, 촬영 모드 메뉴 화면을 표시시킨다(도 21, 307). 촬영 모드 메뉴에는, 예를 들면 ① 내지 ④까지의 항목이 표시되고, 어느 것을 선택하여 결정 처리를 행하는지에 따라서, 단 계 S21에서 단계 S24까지의 어느 하나로 진행할 수 있다(도 16의 A 내지 D). 단계 S21의 정지 화상을 선택하고, 또한 "예"를 선택하면, 단계 S4로 되돌아가서 처리를 행한다.
단계 S22의 동화상이 선택되면, 도 17에 도시한 바와 같이 단계 S25로 진행하여, 촬영 화상을 제1 메모리에 덮어쓰기 보존한다. 다음으로, 단계 S26에서 제1 메모리에 보존한 촬영 화상을 표시시키고, 단계 S27에서 캔슬 버튼을 누르는지의 여부를 판단하여, 캔슬 버튼을 누르면("예") 단계 S15의 대기 모드로 되돌아간다. 캔슬 버튼을 누르지 않는 경우에는(""아니오""), 단계 S28로 진행하여, 메뉴 버튼을 누르는지의 여부를 판단한다. 이후, 단계 S29에서 단계 S38까지는, 도 16의 단계 S11에서 S14까지와 거의 마찬가지의 처리를 동화상 촬영에 관해서 행하는 것으로, 흐름도에 따른 설명은 생략한다.
단계 S24에서 문자 판독을 선택하면("예", 도 23의 315), 도 18의 단계 S39로 진행하여, 문자 판독 메뉴 화면 표시를 행한다(도 23, 316). 문자 판독의 항목으로는, (1)URL, (2)메일 어드레스, (3)전화 번호, (4)영숫자 등을 들 수 있다. 그 밖의 항목이 설정되어도 된다.
단계 S41에서, URL이 문자 판독 대상 항목인지의 여부를 판단하여, "예"이면 단계 S42로 진행하여, 메모리 내의 영역 X에 1을 저장한다. 단계 S41에서 "아니오"이면, 메일 어드레스가 문자 판독 대상 항목인지의 여부를 판단하고, "예" 이면 단계 S43으로 진행하여, 메모리 영역 X에 2를 저장한다. 단계 S43에서 "아니오" 이면 단계 S45로 진행하여, 전화 번호가 문자 판독 대상 항목인지의 여부를 판단하 고, "예" 이면 단계 S46으로 진행하여, 메모리 영역 X에 3을 저장한다. 단계 S45에서 "아니오" 이면 단계 S47로 진행하여, 영숫자가 문자 판독 대상 항목인지의 여부를 판단하고, "예" 이면 단계 S48로 진행하여, 메모리 영역 X에 4를 저장한다. 단계 S47에서 "아니오" 이면 단계 S49로 진행한다.
단계 S49에서 촬영 화상을 제1 메모리에 덮어쓰기 보존하고, 단계 S50에서 제1 메모리에 보존한 촬영 화상을 표시 수단에 표시시킨다. 이 때, 도 23의 표시 화면(317)에 나타낸 바와 같이, 예를 들면, 촬영 대상인 Abcdef의 홈페이지의 URL 인 "abcdef.com"이 쓰루 화상으로서 표시됨과 함께, 합초 바가 표시된다. 예를 들면, 「합초 바의 색이 가장 청색에 가까울 때 촬영해 주십시오.」라는 표시가 이루어지고, 유저는, 이 표시에 따라서 합초 상태를 확인할 수 있다. 즉, 단계 S51 이하에서 합초 판정을 행하고, 단계 S52에서 합초 판정 결과를 표시한다. 합초 판정 및 그 결과 표시는, 상기한 각 실시의 형태에서 설명한 처리를 행하면 된다. 합초가 확인되면, 셔터 버튼을 누르는지의 여부를 판단한다(단계 S53). 단계 S53에서 "아니오"이면, 단계 S54에서 메뉴 버튼 누름을 행하는지의 여부를 판단한다. 메뉴 버튼 누름을 행하는 경우에는("예"), 도 16의 단계 S19로 되돌아가서, 촬영 모드 메뉴 화면 표시를 행한다. 메뉴 버튼 누름을 행하지 않는 경우에는("아니오"), 단계 S55에서, 캔슬 버튼을 누르는지의 여부를 판단한다. 단계 S55에서 "아니오"이면, 단계 S49로 되돌아간다. "예"이면, 단계 S15로 되돌아가서 대기 모드로 된다.
단계 S53에서 "예"이면, 단계 S56으로 진행하고, 도 23의 표시 화면(318)에 나타낸 바와 같이, 직사각형의 에리어(318a) 내에 "abcdef.com"의 그림자 화상이 표시된다.
후속해서, 단계 S57에서 캔슬 버튼을 누르는지의 여부를 판단하여, "예" 이면 단계 S49로 되돌아간다. "아니오"이면, 단계 S58로 진행하여 인식 버튼 누름을 행하는지의 여부를 판단하고, "아니오" 이면 단계 S56으로 되돌아가고, "예" 이면 단계 S59에서 OCR 기능에 의해 문자 인식 처리를 행하고, 단계 S60에서 문자 인식 결과를 표시 수단에 표시시킨다. 후속해서, 단계 S61로 진행하여, 인식 결과에 따라서 재인식이 필요한지의 여부를 판단하여, "예" 이면 단계 S49로, "아니오" 이면 단계 S62로 진행한다. 단계 S62에서 메뉴 버튼을 누르는지의 여부를 판단하여, "예" 이면 도 19의 단계 S71로 진행한다. "아니오"이면, 단계 S63으로 진행하여, 결정 버튼을 누르는지의 여부를 판단하여, "아니오" 이면 단계 S60으로 되돌아가고, "예" 이면 단계 S64로 진행한다. 단계 S64에서, 상기 메모리 영역 X에 "1"이 저장되어 있는지의 여부를 판단한다. "예"이면, 단계 S67의 URL 입력 모드로 진행한다. "아니오"이면, 단계 S65로 진행하여, 상기 메모리 영역 X에 "2"가 저장되어 있는지의 여부를 판단한다. "예"이면, 단계 S68의 메일 작성 모드로 진행한다. "아니오"이면, 단계 S66으로 진행하여 상기 메모리 영역 X에 "3"이 저장되어 있는지의 여부를 판단한다. "예"이면, 단계 S69의 전화 발신 모드로 진행한다. "아니오"이면, 단계 S70의 메모장 등록 모드로 진행한다.
도 19에 도시한 바와 같이, 단계 S71에서, 문자 인식 서브 메뉴 화면 표시를 행한다(도 23, 323). 단계 S72에서, 문자 인식 서브 메뉴 ① 내지 ⑦ 중에서 단계 S73 내지 단계 S78에서 상기 ①에서 ⑥까지의 어느 하나의 항목을 선택한다. 예를 들면, 단계 S73의 후속 인식에서 ①후속 인식을 선택하면, 단계 S49로 진행한다. 선택하지 않는 경우에는 단계 S74의 추가 인식에서 ②추가 인식을 선택하면, 단계 S39로 진행한다. 단계 S75의 전화 번호부 신규 선택에서 ③전화 번호부 신규 등록을 선택하면, 단계 S79의 전화 번호부 등록 모드로 진행한다. 선택하지 않는 경우에는 단계 S76의 전화 번호부 추가 등록 선택에서 ④전화 번호부 추가 등록을 선택하면, 단계 S80의 전화 번호부 편집 모드로 진행한다. 선택하지 않는 경우에는 단계 S77의 Bookmark 등록에서 Bookmark 등록을 선택하면, Bookmark 등록 모드로 진행한다. 선택하지 않는 경우에는 단계 S78의 편집 선택으로 진행하여, 편집을 선택하면, 단계 S82의 입력 편집 모드로 진행하고, 편집 선택을 하지 않는 경우에는, 선택된 항목의 모드로 진행한다. 상기 ①에서 ③까지의 구체적인 처리와 표시에 대하여는 후술한다.
도 20에 도시한 바와 같이, 도 16의 코드 판독 선택 단계부터 단계 S83에서, 코드 판독 메뉴 화면 표시를 행한다(도 27, 352). 항목으로는, 예를 들면, ①1차원 바코드, ②2차원 바코드(QR 코드)의 2개가 예시되어 있다. 단계 S85에서 1차원 바코드 판독을 선택하는지의 여부를 판단한다. 1차원 바코드 판독을 선택하는 경우에는, 메모리 Y에 "1"을 기억시킨다. 그 후, 또는, 1차원 바코드 판독을 선택하지 않는 경우는, 단계 S87로 진행하여, 2차원 바코드 판독을 선택하는지의 여부를 판단한다. 2차원 바코드 판독을 선택하는 경우에는, 단계 S88에서 메모리 Y에 "2"를 기억시키고, 2차원 바코드 판독을 선택하지 않는 경우에는 단계 S88을 거치지 않고서, 모두 단계 S89로 진행한다.
후속해서, 단계 S89에서 촬영 화상을 제1 메모리에 덮어쓰기 보존하고, 단계 S90에서 제1 메모리에 보존한 촬영 화상을 표시 수단에 표시시킨다. 단계 S91에서 합초 판정을 행한다. 단계 S92에서 합초하고 있는지의 여부를 판단하여, 합초하지 않은 경우에는 단계 S89로 되돌아간다. 합초하고 있다고 판단된 경우에는, 단계 S93으로 진행하여, 코드 인식을 행한다. OCR 기능에 의한 코드 인식이 잘 되었는지의 여부를 단계 S94에서 판정하여, 코드 인식이 잘 되어 있으면, 단계 S95에서 코드 인식 결과를 표시하고, 단계 S96으로 진행한다. 이와 같이, 코드 인식이 가능한 합초 상태에서 코드 인식 처리를 실행시킴으로써, 항상 코드 인식 처리를 실행시키는 경우에 비해 CPU의 처리 부담을 경감할 수 있음과 함께, 코드 인식 처리에 수반하는 프레임 레이트의 저하도 최소한으로 억제할 수 있다.
후속해서, 단계 S96에서 재인식 버튼을 누르는지의 여부를 판단한다. 즉, 코드 인식이 잘 되어 있지 않으면, 재인식 버튼을 눌러("예") 단계 S89로 되돌아간다. 표시 수단에 표시된 코드 인식 결과가 잘 되어 있으면("아니오"), 단계 S97로 진행하여, 결정 버튼을 누르는지의 여부를 판단한다. 결정 버튼을 누르지 않는 경우는, 단계 S95로 되돌아간다. 결정 버튼을 누르는 경우는, 단계 S98로 진행하고, 코드 인식 결과에 URL임을 식별하는 정보가 포함되어 있는 경우에는, 단계 S67의 URL 입력 모드로 진행할 수 있다.
예를 들면, 단계 S56에서는, 도 23의 표시 화면(317)에서 [ ] 내에 URL이 대략적인 위치 결정을 행하고, 합초 바에 의해 합초 처리를 행한 후에 셔터를 누르는 처리를 행하면, 표시 화면(318)에 나타낸 바와 같이, 직사각형의 에리어(318a) 내에 "Abcdef.com"의 그림자 화상이 표시된다. 복수 행 존재하는 경우에는, 그 중에서 인식 처리의 대상으로 되는 행을, 키 조작 등에 의해 선택할 수 있다. 인식 처리를 확정하는 처리를 행함으로써, 문자 판독(URL)의 OCR 인식 처리를 행하고(319) 인식이 완료되면, 표시 화면(320)에 나타낸 바와 같이, [URL]의 항목에 상기한 순서에 의해 취득한 URL "http://Abcdef.com"이 표시되어, 결정 버튼을 누름으로써 이 URL에 대한 인터넷 접속 처리를 개시할 수도 있다(322).
메일 어드레스를 작성한 경우에는, 단계 S99로부터 메일 작성 모드(단계 S68)로 진행할 수 있다. 예를 들면, 단계 S68에서는, 도 24의 표시 화면(326)에서[ ] 내에 메일 어드레스의 대략적인 위치 결정을 행하고, 합초 바에 의해 합초 처리를 행하여 셔터를 누르는 처리를 행하면, 표시 화면(327)에 나타낸 바와 같이, 직사각형의 에리어(327a) 내에 "Taro.○○@abc.com"의 그림자 화상이 표시된다. 복수 행 존재하는 경우에는, 그 중에서 인식 처리의 대상으로 되는 행을, 키 조작 등에 의해 선택할 수 있다. 인식 처리를 확정하는 처리를 행함으로써, 문자 판독(메일 어드레스)의 OCR 인식 처리를 행하고(328), 인식이 완료되면, 표시 화면(329)에 나타낸 바와 같이, [메일 어드레스]의 항목에 상기한 순서에 의해 취득한 메일 어드레스가 표시되고, 결정 버튼을 누름으로써 이 메일 어드레스를 갖는 상대에 대한 메일 작성 화면이 표시된다(330). 여기서, 송신을 누르면 메일 어드레스에 대한 인터넷 접속 처리를 개시하여, 전자 메일을 송신할 수도 있다(331).
전화 번호를 표시한 경우에는, 단계 S100로부터 전화 발신 모드 S69로 진행할 수 있다. 또한, 단계 S70의 메모장 등록 모드로 진행할 수도 있다.
예를 들면, 단계 S69에서는, 도 25의 표시 화면(335)에서 [ ] 내에 전화 번호의 대략적인 위치 결정을 행하고, 합초 바에 의해 합초 처리를 행하여, 셔터를 누르는 처리를 행하면, 표시 화면(336)에 나타낸 바와 같이, 직사각형의 에리어(336a) 내에 "0123456789"와 같이 전화 번호의 그림자 화상이 표시된다. 복수 행 존재하는 경우에는, 그 중에서 인식 처리의 대상으로 되는 행을, 키 조작 등에 의해 선택할 수 있다. 인식 처리를 확정하는 처리를 행함으로써, 문자 판독(전화 번호)의 OCR 인식 처리를 행하고(337), 인식이 완료되면, 표시 화면(338)에 나타낸 바와 같이, [전화 번호]의 항목에 상기한 순서에 의해 취득한 전화 번호가 표시되고, 결정 버튼을 누름으로써 이 전화 번호를 갖는 상대에 대한 전화 발신 확인 화면이 표시된다(339). 여기서, 발신을 누르면 전화 발신 처리를 개시한다(340).
도 26에 도시하는 영숫자의 메모장에의 기록 처리도 상기한 처리와 마찬가지의 순서에 의해 행할 수 있다(표시 화면(344 내지 349)). 상세한 설명은 생략한다. 도 27에 도시하는 1차원 바코드에 기초하는 URL 입력(표시 화면(352 내지 357)), 도 28에 도시하는 2차원 바코드에 기초하는 URL 입력(표시 화면(360 내지 366))도 마찬가지다.
다음으로, URL을 입력한 경우(도 23의 321 또는 도 28의 364)에 있어서, 실제로는, URL이 더 긴 문자열로 구성되어 있는 경우에는, 후속되는 문자열을 입력할 필요가 있다. 이러한 경우에는, 단계 S71에서, 문자 인식 서브 메뉴 화면 표시를 표시하고(도 29, 부호367), 여기서 ①후속 인식을 선택하여 결정한다. 표시 화면(368)에 나타낸 바와 같이, 후속되는 문자열 "today/index.html"을 촬상하고, 합초 바에 의해 합초를 확인한 후에 셔터를 누름으로써, 표시 화면(369)에 나타낸 바와 같이 "today/index.html"의 문자열을 OCR 인식할 수 있다(부호370). 인식이 완료되면, 표시 화면(371)에 나타낸 바와 같이, "http://Abcdef.com/today/index.html"과 후속되는 문자열이 이어진 문자열이 표시되고, 여기서 내용을 확인한 후에 결정 버튼을 누르면, 상기 URL을 휴대 전화기 내에 취득, 기억시킬 수 있다(372). 여기서 결정 버튼을 누르면, 상기 URL에 대하여 인터넷 접속을 행할 수 있다(374). 표시 화면(372)에서, 메뉴의 표시를 시키면, 재차 서브 메뉴를 표시시킬 수도 있다.
다음으로, URL을 취득한 후에, 서브 메뉴 표시로부터 ②추가 등록을 선택함으로써, URL의 다음에 ① 내지 ④까지의 어느 하나의 항목을 추가 등록할 수 있다. 예를 들면, 도 30에서의 표시 화면(376)으로부터 메일 어드레스를 등록하는 경우에는, ②메일 어드레스를 선택하여 결정함으로써, 표시 화면(377)에 나타낸 바와 같이, 명함 상의 ○○타로의 메일 어드레스를 촬상한다. 이 경우에도 합초 바에 의해 합초 상태를 확인하고, 표시 화면(378)에 나타낸 바와 같이, "Taro.○○@ abc.com"을 촬영한다. 이 경우도 키 조작에 의해 선택 행을 변경할 수도 있다. OCR 인식을 행하게 하는 선택을 행하면 인식 처리가 행하여져(379), 메일 어드레스로서 "Taro.○○@abc.com"를 취득할 수 있다(380).
표시 화면(380)에서, 결정을 선택하면 신규 메일 작성 화면이 표시되고(381), 표시 화면(382)에 나타낸 바와 같이 메일 어드레스로부터 URL의 행으로 이동시켜, 예를 들면 그 URL에 인터넷 접속할 수도 있다. 또한, 메뉴 표시를 시키면(표시 화면(383)), ① 내지 ③과 ⑥, ⑦의 항목이 선택 가능한 항목으로서, 또한 ④, ⑤의 항목이 선택할 수 없는 항목으로서 표시된다. 또한, ④의 항목이 선택할 수 없는 항목으로서 표시되어 있는 이유는, 추가 인식이 행하여졌기 때문이고, 또한 ⑤의 항목이 선택할 수 없는 항목으로서 표시되어 있는 이유는, 메일 어드레스가 선택된 상태에서 메뉴 표시시켰기 때문이다.
그 후, 도 31의 표시 화면(384)에서 예를 들면 ②추가 인식을 선택하면, 표시 화면(385)에 나타낸 바와 같이 ①에서 ④까지의 문자 판독 중 어느 하나를 선택할 수 있다. 여기서, 예를 들면 ③의 전화 번호를 선택하면, 표시 화면(386)에 나타낸 바와 같이 ○○타로의 전화 번호 "0123456789"가 촬상됨과 함께, 합초 바가 표시된다. 합초 바에 의해 합초 상태를 확인한 후, 셔터를 누름으로써 전화 번호를 촬영할 수 있다(387). 여기서, 복수 행을 상하로 이동시켜 선택 행을 변경하는 것도 가능하다. 후속해서, OCR 인식 처리를 행함으로써(385), 표시 화면(389)에 나타낸 바와 같이 전화 번호의 표시 위치에 취득한 전화 번호를 등록할 수 있다. 여기서, 결정을 선택하면, 표시 화면(390)에 나타낸 바와 같이 전화 발신 확인 화면이 표시되고, 발신을 선택하면, 실제로 전화를 발신하는 처리를 행할 수 있다. 메뉴를 선택하면, 서브 메뉴가 표시되고(391), 전화 번호부 신규 등록을 선택하면, 표시 화면(392)에 나타낸 바와 같이 전화 번호를 등록할 수 있다. 표시 화면(392)에 나타낸 바와 같이, 이름, 읽기, 전화 번호, 메일 어드레스, 퍼스널 URL 등을 일람 표시할 수 있는 어드레스장을 한 장의 명함으로부터 간단히 작성할 수 있다. 또한, ②의 추가 인식 기능을 이용하면, 예를 들면, URL, 메일 어드레스, 전화 번호 등을 차례로 인식시킨 후, 인식한 모든 데이터를 일괄적으로 전화 번호부 등에 등록시킬 수 있다.
이상으로 설명한 바와 같이, 본 실시의 형태에 의한 휴대 전화기에 따르면, 명함 등에 기재되어 있는 문자 데이터를 카메라를 이용하여 촬상할 때에, 합초 수단을 이용함으로써 유저에게 합초 상태를 통지함으로써 합초 상태를 쉽게 알 수 있고, 그 후에 합초 상태에서 문자 데이터 등을 촬상하여, 양호한 상태로 촬상된 문자 데이터를 OCR 기능에 의해 인식시킴으로써, 명함 등에 기재된 비교적 작은 문자열이면서, 또한, 긴 문자열인 URL이나 메일 어드레스 등을, 간단히 휴대 전화기 내에 취득할 수 있다. 이상, 본 발명의 합초 상태 표시 장치 및 합초 상태 표시 방법에 대해서, 카메라 내장형 휴대 전화기에서 이용되는 각 실시 형태를 예시하여 설명했다. 그러나, 본 발명의 합초 상태 표시 장치 및 합초 상태 표시 방법은, 이들 실시 형태의 범위에 한정되는 것이 아니다.
당업자라면, 본 발명의 요지를 일탈하지 않는 범위 내에서, 본 발명의 합초 상태 표시 장치 및 합초 상태 표시 방법에 다양한 변경·개량을 부가하는 것이 가능하다. 예를 들면, 색으로 표시하거나, 색의 농담으로 표시하거나, 그 밖의 그래프 표시 또는 문자·그림 문자 등에 의해 표시하거나, 소리나 진동 등에 의해 통지하는 경우를 포함한다.
또한, 상기한 각 실시 형태에서는, 합초 상태 표시 장치를 휴대 전화기에 적용한 예를 나타내고 있지만, PDA 등의 휴대 정보 단말, 휴대형 퍼스널 컴퓨터 등의 정보 처리 장치 등, 카메라(내장/외장)를 구비한 장치이면 어떠한 장치에도 적용 가능하다. 또한, 촬상 대상으로 되는 화상 데이터는 어떠한 것이어도 된다.
또한, 상기한 각 실시 형태에서는, 합초 상태 표시 장치, 휴대 전화기라는 명칭을 사용하였지만, 이는 설명의 편의상 그런 것이며, 핀트 상태 표시 장치, 통신 단말 장치, 핀트 상태 표시 방법 등의 명칭을 이용하여도 되는 것은 물론이다.
또한, 상기한 각 실시 형태에서, 합초 상태의 표시 또는 통지 수단으로서, LCD 표시부(115, 116)에서의 도형, 기호, 문자 등의 표시, 및 스피커(114, 123)에 의한 발음을 행하는 예에 대해서 설명했지만, 통지 방법에는 이들 이외의 시각적, 청각적 그 밖의 방법을 이용하여도 된다. 상기 휴대 전화기 및 합초 상태 표시 장치를 구성하는 각종 장치 및 각 회로부, 예를 들면 기억부나 표시부의 종류, 수 및 접속 방법 등은 상기한 실시의 형태에 한정되는 것이 아니고, 종래 알려져 있는 어떠한 구성을 취해도 된다.
본 발명의 합초 상태 표시 장치 및 합초 상태 표시 방법, 및 이것을 구비한 휴대 전화기 등의 장치는, 상기한 합초 상태 표시를 위한 기능을 실행시키기 위한 프로그램으로서도 실현된다. 이 프로그램은, 상기 각 장치 내부에 미리 조립되어 있도록 구성하여도 되지만, 상기 각 장치와는 별도로, 컴퓨터로 판독 가능한 기록 매체에 기록해 둘 수도 있다.
본 발명에서는, 이 기록 매체로서, 메인 메모리 그 자체가 프로그램 미디어일 수도 있고, 또한 외부 기억 장치로서 CD-ROM 드라이브 등의 프로그램 판독 장치 가 설치되고, 거기에 기록 매체를 삽입함으로써 판독 가능한 CD-ROM 등의 프로그램 미디어이어도 된다. 어느 경우라도, 저장되어 있는 프로그램은 CPU가 액세스하여 실행시키는 구성이어도 되고, 또는 어느 경우라도, 프로그램을 판독하고, 판독된 프로그램은, 도시되어 있지 않은 프로그램 기억 영역에 다운로드되어, 그 프로그램이 실행되는 방식이어도 된다. 이 다운로드용의 프로그램은 미리 각 장치에 저장되어 있는 것으로 한다.
여기서, 상기 프로그램 미디어는, 휴대 단말 장치 또는 정보 처리 장치와 분리 가능하게 구성되는 기록 매체로서, 자기 테이프나 카세트 테이프 등의 자기 디스크나 CD-ROM, CD-R/RW, MO, MD, DVD-ROM, DVD-RAM, DVD-RW 등의 광 디스크의 디스크계, PC 카드, 컴팩트 플래쉬 카드(등록 상표), 스마트 미디어(등록 상표), IC카드, SD 카드(등록 상표), 메모리 스틱(등록 상표) 등의 카드계, 또는 마스크 ROM, EPROM, EEPROM, 플래시 ROM 등에 의한 반도체 메모리를 포함시킨 고정적으로 프로그램을 담지하는 매체이어도 된다.
또한, 인터넷 접속 프로바이더 또는 서버 단말 등의 외부의 통신 네트워크와의 접속이 가능한 통신 접속 수단을 통해 통신 네트워크로부터 프로그램을 다운로드하도록, 유동적으로 프로그램을 담지하는 매체이어도 된다. 또한, 이와 같이 통신 네트워크로부터 프로그램을 다운로드하는 경우에는, 그 다운로드용 프로그램은 미리 저장하여 두거나, 또는 별도의 기록 매체로부터 인스톨되는 것이어도 된다. 또한, 기록 매체에 저장되어 있는 내용으로는 프로그램에 한정되지 않고, 데이터이어도 된다.
이와 같이, 장치 본체와 분리 가능한 기록 매체에 상기 프로그램을 기록하여 두면, 본 발명의 합초 상태 표시 장치 및 합초 상태 표시 방법을 구비한 각종 장치에 대하여, 프로그램의 버젼업이나 새로운 표시 형태를 추가하는 업데이트 등을 자유롭게 행하는 것이 가능해져, 유저에게 있어서 한층 편리성이 높은 장치를 제공하는 것이 가능해진다.