KR20070044354A - 휴대 단말기 장치, 마우스 애플리케이션 프로그램, 및 휴대단말기 장치를 무선 마우스 장치로서 사용하는 방법 - Google Patents

휴대 단말기 장치, 마우스 애플리케이션 프로그램, 및 휴대단말기 장치를 무선 마우스 장치로서 사용하는 방법 Download PDF

Info

Publication number
KR20070044354A
KR20070044354A KR1020060100810A KR20060100810A KR20070044354A KR 20070044354 A KR20070044354 A KR 20070044354A KR 1020060100810 A KR1020060100810 A KR 1020060100810A KR 20060100810 A KR20060100810 A KR 20060100810A KR 20070044354 A KR20070044354 A KR 20070044354A
Authority
KR
South Korea
Prior art keywords
movement
camera
mouse
wireless communication
short
Prior art date
Application number
KR1020060100810A
Other languages
English (en)
Inventor
다카시 시이나
료 다나카
Original Assignee
소니 에릭슨 모빌 커뮤니케이션즈 재팬, 아이엔씨.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니 에릭슨 모빌 커뮤니케이션즈 재팬, 아이엔씨. filed Critical 소니 에릭슨 모빌 커뮤니케이션즈 재팬, 아이엔씨.
Publication of KR20070044354A publication Critical patent/KR20070044354A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G06F3/0317—Detection arrangements using opto-electronic means in co-operation with a patterned surface, e.g. absolute position or relative movement detection for an optical mouse or pen positioned with respect to a coded surface
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1626—Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1686—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03543—Mice or pucks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/02—Details of telephonic subscriber devices including a Bluetooth interface
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/04—Details of telephonic subscriber devices including near field communication means, e.g. RFID

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Position Input By Displaying (AREA)
  • Telephone Function (AREA)
  • Telephone Set Structure (AREA)
  • Selective Calling Equipment (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Telephonic Communication Services (AREA)

Abstract

카메라부에 의해 촬상되는 화상의 전후의 프레임 사이에서의 변위량에 따라, 휴대 전화기(40)의 하우징의 이동 방향 및 이동 거리에 대응하는 이동 벡터 정보를 산출한다. 그리고, 이 이동 벡터 정보를 근거리 무선 통신 유닛을 통하여, 퍼스널 컴퓨터 장치(41)측의 근거리 무선 통신 유닛(42)에 근거리 무선을 송신한다. 퍼스널 컴퓨터 장치의 제어부는, 이 휴대 전화기로부터 수신된 이동 벡터 정보에 따라, 모니터 장치(44)상에 표시하고 있는 포인터 P를 이동 표시 제어한다. 이로써, 휴대 전화기를 무선 마우스 장치로서 사용하여, 모니터 장치(44)상에 표시되어 있는
포인터 P를 이동 조작할 수 있다.
표시부, 발광부, 카메라부, 근거리 무선 통신 안테나

Description

휴대 단말기 장치, 마우스 애플리케이션 프로그램, 및 휴대 단말기 장치를 무선 마우스 장치로서 사용하는 방법 {MOBILE TERMINAL, MOUSE APPLICATION PROGRAM, AND METHOD FOR UTILIZING MOBILE TERMINAL AS WIRELESS MOUSE DEVICE}
도 1은 본 발명을 적용한 실시예인 휴대 전화기의 블록도이다.
도 2는 실시예의 휴대 전화기의 외관을 나타낸 도면이다.
도 3은 실시예의 휴대 전화기를 무선 마우스 장치로서 조작하고 있는 상태를 나타낸 도면이다.
도 4는 실시예의 휴대 전화기를 무선 마우스 장치로서 사용하는 마우스 모드시의 동작의 흐름을 나타낸 플로차트이다.
도 5는 실시예의 휴대 전화기를 무선 마우스 장치로서 사용하여 퍼스널 컴퓨터 장치의 모니터 장치에 표시된 포인터를 이동 조작하고 있는 모습을 나타낸 도면이다.
도 6은 실시예의 휴대 전화기의 마우스 모드시에서의 이동 벡터 정보의 산출 동작의 흐름을 나타낸 플로차트이다.
도 7은 실시예의 휴대 전화기의 마우스 모드시에서의 이동 벡터 정보의 산출 동작을 설명하기 위한 도면이다.
<도면의 주요 부분에 대한 부호의 설명>
(1) 안테나, (2) 통신 회로, (3) 스피커부, (4) 마이크로폰부, (5) 표시부, (6) 조작부, (7) 발광부(LED), (8) 카메라부, (9) 바이브레이션 유닛, (10) 근거리 무선 통신 안테나, (11) 근거리 무선 통신 유닛, (12) 이동 벡터 산출부, (13) 메모리, (14) 제어부, (20) 상(上) 하우징, (21) 하(下) 하우징, (22) 회전 조작부, (23) 온 훅 키(on-hook key), (24) 오프 훅 키(off-hook key), (25) 제1 소프트 키, (26) 제2 소프트 키, (27) 결정 키, (28) 죠그 다이얼, (29) 회전 조작 키, (30) 조명용의 발광부, (31) 카메라 커버, (33) 마우스 모드 전환 키, (40) 휴대 전화기, (41) 퍼스널 컴퓨터 장치, (42) 퍼스널 컴퓨터 장치 측의 근거리 무선 통신 유닛, (43) 근거리 무선 통신 안테나, (44) 모니터 장치, P포인터
본 발명은, 예를 들면 블루투스(Bluetooth : 등록상표)나 적외선 통신 기능(IrDA: Infrared Data Association) 등의 근거리 무선 통신 기능이나, 비접촉 무선 통신 기능(RFID: Radio Frequency IDentification), 및 카메라 기능을 구비한 휴대 전화기, PHS 전화기(PHS: Personal Handyphone System), PDA 장치(PDA: Personal Digital Assistant) 등의 휴대 기기에 적용하기에 바람직한 휴대 단말기 장치에 관한 것이며, 특히 상기 휴대 기기에 대해서 무선 마우스 기능을 갖게 하는 것을 가능하게 하는 휴대 단말기 장치, 마우스 애플리케이션 프로그램, 및 휴대 단말기 장치를 무선 마우스 장치로서 사용하는 방법에 관한 것이다.
일본국 특개 2004-164559호의 공개 특허 공보(특허 문헌(1))에, 하우징에 설치된 카메라로 촬상된 화상의 변위에 따라, 표시부에 표시한 포인터를 이동 조작 가능하게 하는 휴대 단말기 장치가 개시되어 있다.
이 휴대 단말기 장치의 경우, 포인팅 모드가 지정되면, 카메라에 의해 조작대면을 연속적으로 촬상하고, 연속하는 2장끼리를 비교하여 상기 각 화상 사이의 변위를 검출한다. 그리고, 이 각 화상 사이의 변위에 따라 해당 휴대 단말기 장치의 이동 방향 및 이동량을 검출하고, 이 이동 방향 및 이동량에 대응시켜, 표시부 상의 포인터를 이동 제어한다. 이로써, 해당 휴대 단말기 장치에 설치된 표시부 상의 포인터를 이동 조작할 수 있다.
여기서, 노트형의 퍼스널 컴퓨터 장치를 휴대하는 경우, 전용의 마우스 장치도 함께 휴대하고, 이동처에서 이 마우스 장치를 노트형의 퍼스널 컴퓨터 장치에 장착하여 사용하는 것이 일반적이다.
[참조 특허 문헌(1)] 일본국 특개 2004-164559호 공보(제9 페이지: 도 3)
그러나, 노트형의 퍼스널 컴퓨터 장치를 휴대하는 경우, 마우스 장치도 함께 가지고 다닐 필요가 있으므로, 휴대하는 하물(荷物)이 증가해 대단히 불편한 문제가 있었다.
그리고, 전술한 특허 문헌(1)에 개시되어 있는 휴대 단말기 장치의 경우, 해당 휴대 단말기 장치의 하우징에 대해서 일체적으로 설치된 표시부 상의 포인터를 이동 조작하는 것이다.(즉, 해당 휴대 단말기 장치의 표시부의 포인터를 이동 조작 하는 것이다) 그러므로, 해당 휴대 단말기 장치로부터 떨어져 탑재되어 있는 거치(据置)형의 퍼스널 컴퓨터 장치나 노트형의 퍼스널 컴퓨터 장치의 모니터 장치에 표시된 포인터를 이동 조작하는 것은 곤란해진다.
본 발명은 전술한 문제점을 감안하여 이루어진 것이며, 물리적으로 별체로 된 표시 장치상에 표시된 포인터를 이동 조작 가능하게 하는 것으로, 예를 들면 노트형의 퍼스널 컴퓨터 장치를 휴대하는 경우라도, 전용의 마우스 장치도 함께 휴대하는 것을 불필요한 것으로 할 수 있도록 휴대 단말기 장치, 마우스 애플리케이션 프로그램, 및 휴대 단말기 장치를 무선 마우스 장치로서 사용하는 방법의 제공을 목적으로 한다.
본 발명에 관한 휴대 단말기 장치는, 피사체의 촬상을 행하는 카메라부를 구비한 휴대 단말기 장치로서, 전술한 과제를 해결하기 위한 수단으로서, 마우스 모드시에 상기 카메라부에 의해 차례로 촬상된 각 화상 사이의 변위량에 따라, 해당 휴대 단말기 장치의 하우징의 이동 방향 및 이동 거리를 검출하는 이동 검출 수단과, 근거리 무선 통신 수단과, 상기 이동 검출 수단에 의해 검출된 상기 이동 방향 및 이동 거리를 나타내는 정보를 수신하여, 표시 수단 상에 표시하고 있는 포인터를 이동 표시 제어하는 피 조작 장치에 대해서, 상기 이동 검출 수단에서 검출된 상기 이동 방향 및 이동 거리를 나타내는 정보를 근거리 무선으로 송신하도록 상기 근거리 무선 통신 수단을 제어하는 제어 수단을 가진다.
또, 본 발명에 관한 마우스 애플리케이션 프로그램은, 전술한 과제를 해결하기 위해, 카메라부에 의해 차례로 촬상된 각 화상 사이의 변위량에 따라, 상기 카메라부가 설치된 하우징의 이동 방향 및 이동 거리를 검출하도록 이동 검출 수단을 제어하는 이동 검출 제어 수단으로서 컴퓨터를 기능시키고, 상기 컴퓨터를 상기 이동 검출 제어 수단으로서 기능하게 하는 것으로 검출된 상기 이동 방향 및 이동 거리를 나타내는 정보를, 상기 이동 방향 및 이동 거리를 나타내는 정보를 수신하여, 표시 수단 상에 표시하고 있는 포인터를 이동 표시 제어하는 피 조작 장치에 대해서 근거리 무선으로 송신하도록 근거리 무선 통신 수단을 제어하는 근거리 무선 통신 제어 수단으로서 컴퓨터를 기능하게 한다.
또, 본 발명에 관한 휴대 단말기 장치를 무선 마우스 장치로서 사용하는 방법은, 전술한 과제를 해결하기 위한 수단으로서, 이동 검출 수단이, 휴대 단말기 장치에 설치된 카메라부에 의해 차례로 촬상된 각 화상 사이의 변위량에 따라, 상기 휴대 단말기 장치의 하우징의 이동 방향 및 이동 거리를 검출하는 단계와, 상기 단계에서 상기 이동 검출 수단에 의해 검출된 상기 이동 방향 및 이동 거리를 나타내는 정보를, 근거리 무선 통신 수단이, 상기 이동 방향 및 이동 거리를 나타내는 정보를 수신하여, 표시 수단 상에 표시하고 있는 포인터를 이동 표시 제어하는 피 조작 장치에 대해서 근거리 무선으로 송신하는 단계를 가진다.
이와 같은 본 발명은, 카메라부에서 차례로 촬상되는 화상의 변위량에 따라, 하우징의 이동 방향 및 이동 거리를 검출하고, 상기 검출한 이동 방향 및 이동 거리를 나타내는 정보를, 상기 이동 방향 및 이동 거리를 나타내는 정보를 수신하여 표시 수단 상에 표시하고 있는 포인터를 이동 표시 제어하는 피 조작 장치에 대해서 근거리 무선 송신한다. 이로써, 휴대 단말기 장치를 무선 마우스 장치로서 사용하는 것을 가능하게 할 수 있다.
본 발명은, 휴대 단말기 장치를 무선 마우스 장치로서 사용할 수 있으므로, 예를 들면 노트형의 퍼스널 컴퓨터 장치를 휴대하는 경우라도, 전용의 마우스 장치도 함께 휴대하는 것을 불필요한 것으로 할 수 있다.
실시예
본 발명은, 카메라 기능, 및 무선 통신 거리가 수십 cm의 비접촉 통신 기능(RFID: Radio Frequency IDentification), 또는 예를 들면 블루투스(Bluetooth: 등록상표)나 적외선 통신 기능(IrDA: Infrared Data Association) 등의 무선 통신 거리가 수십 m의 근거리 무선 통신 기능을 구비한 휴대 전화기에 적용할 수 있다.
［휴대 전화기의 구성］
〔전기 구성〕
상기 본 발명의 실시예로 되는 휴대 전화기는, 도 1에 나타낸 바와 같이 기지국 사이에서 무선 통신을 행하는 안테나(1) 및 통신 회로(2)와 착신음이나 수화 음성의 음향 출력을 얻기 위한 스피커부(3)와 송화 음성 등을 집음(集音)하기 위한 마이크로폰부(4)와 화상(동화상, 정지 화상 등)이나 문자 등을 표시하기 위한 표시부(5)와 소정의 입력 조작을 행하기 위한 조작부(6)를 가지고 있다.
또, 상기 휴대 전화기는, 발착신(發着信) 등을 광(光)으로 알리기 위한 발광부(7)(LED: Light Emitting Diode)와, 원하는 피사체의 정지 화상 또는 동화상을 촬상하기 위한 카메라부(8)와, 해당 휴대 전화기의 하우징을 진동시켜 발착신 등을 사용자에게 알리기 위한 바이브레이션 유닛(9)과, 해당 휴대 전화기를 무선 마우스 장치로서 사용하는 마우스 모드 시에, 해당 휴대 전화기의 이동 조작에 따라 이동 벡터 정보를 무선 송신하는, 예를 들면 무선 통신 거리가 수십 m의 근거리 무선 통신 안테나(10) 및 근거리 무선 통신 유닛(11)을 가지고 있다.
또, 상기 휴대 전화기는, 상기 마우스 모드 시에 해당 휴대 전화기의 이동 조작에 따라 이동 벡터를 산출하여 상기 이동 벡터 정보를 형성하는 이동 벡터 산출부(12)와, 통신 처리를 행하기 위한 통신 처리 프로그램(커뮤니케이션 프로그램)이나 각종 애플리케이션 프로그램 외에, 해당 휴대 전화기를 음악 플레이어 장치로서 사용할 때 재생되는 음악 데이터, 스케줄 장(帳), 전화번호부, 발착신 한 전자 메일의 데이터, 전화나 전자 메일의 발착신 이력 등이 기억된 메모리(13)와 해당 휴대 전화기 전체의 동작을 제어하는 제어부(14)를 가지고 있다.
상기 메모리(13)에 기억되어 있는 애플리케이션 프로그램으로서는, 해당 휴대 전화기를 음악 플레이어 장치로서 사용할 때 기동 되는 음악 플레이어 프로그램이나, 카메라부(8)로 원하는 피사체의 촬상을 행할 때 기동 되는 카메라 제어 프로그램 외에, 해당 휴대 전화기를 무선 마우스 장치로서 사용하는 때에 기동 되는 「마우스 애플리케이션 프로그램」이나, 이 마우스 애플리케이션 프로그램을 실행함으로써 상기 이동 벡터 산출부(12)로 형성된 이동 벡터 정보를 근거리 무선 송신하기 위한 근거리 무선 통신 프로그램 등이 기억되어 있다.
〔외관 구성〕
도 2(a)에 해당 실시예의 휴대 전화기의 정면도를, 도 2(b)에 해당 실시예의 휴대 전화기의 배면도를, 도 2(c)에 해당 실시예의 휴대 전화기의 측면도를 각각 나타낸다. 이 도 2(a) 내지 도 2(c)에 나타낸 바와 같이, 해당 휴대 전화기는, 상(上) 하우징(20) 및 하(下) 하우징(21)을 해당 각 하우징(20, 21)의 길이 방향에 따라 서로 슬라이드 조작하는 슬라이드형의 휴대 전화기로 되어 있다.
상 하우징(20)에는, 표시부(5)와 상기 표시부(5)의 하단부에 근접하여 설치된 회전 조작부(22)와 회전 조작부(22)를 사이에 협지하는 모습으로 설치된 온 훅 키(23) 및 오프 훅 키(24)와 온 훅 키(23)의 아래쪽(반 표시부(5)측)에 설치된 제1 소프트 키(25)와 오프 훅 키(24)의 아래쪽(반 표시부(5)측)에 설치된 제2 소프트 키(26) 등이 형성되어 있다. 그리고, 하 하우징(21)측에는 숫자 키 등의 주조작부가 설치되어 있고, 이 주조작부는, 각 하우징(20, 21)을 서로 슬라이드 조작한 때에 노출되도록 되어 있다.
회전 조작부(22)는, 결정 키(27)와 이 결정 키(27)와 동축(同軸)으로 되고, 또한, 결정 키(27)의 주위를 에워싸도록 설치된 죠그 다이얼(28)과, 또한 결정 키(27)와 동축으로 되고, 또한, 이 죠그 다이얼(28)의 주위를 에워싸도록 설치된 회전 조작 키(29)를 가지고 있다.
결정 키(27)는 가압 조작식의 키, 회전 조작 키(29)는 360도의 회전 조작식의 키로 되어 있다. 또, 죠그 다이얼(28)은, 가압 조작식의 키로 되어 있고, 상하 좌우 외, 우측 경사 위, 좌측 경사 아래 등의 경사의 방향의 가압 조작도 가능하게 되어 있다.
하 하우징(21)에는, 도 2(b)에 나타낸 바와 같이 카메라부(8)가 설치되어 있고, 상기 카메라부(8)에 인접하여 조명용의 발광부(30)가 형성되어 있다. 상기 카메라부(8) 및 발광부(30)는, 비 촬상시에는 카메라 커버(31)에 의해 피복되어 있으나, 촬상시에 카메라 커버(31)를 하 하우징(21)의 길이 방향에 따라 슬라이드 이동시키면, 상기 카메라부(8) 및 발광부(30)가 노출되도록 되어 있다.
이와 같은 휴대 전화기를 무선 마우스 장치로서 사용하는 경우에는, 도 3에 점선으로 나타낸 바와 같이 상 하우징(20)의 표시부(5)상에 사용자의 손바닥을 위치시키고, 또한, 중 손가락을 제1 소프트 키(25)상에 실고, 집게 손가락을 제2 소프트 키(26)상에 실은 상태에서, 해당 휴대 전화기를 손으로 파지(把持)한다.
마우스 애플리케이션 프로그램이 기동(起動)되면, 제1 소프트 키(25)는 우측 클릭 키로서 기능하고, 제2 소프트 키(26)은 좌측 클릭 키로서 기능 하도록 된다. 또, 상기 마우스 애플리케이션에는, 카메라부(8)로 촬상된 화상에 따라 하우징의 이동을 검출하여 포인터를 이동 조작하는 「키＋카메라 모드」와, 죠그 다이얼(28)을 방향 지시 키로서 사용하여 포인터를 이동 조작하는 「키 모드」가 형성되어 있다.
「키＋카메라 모드」의 선택시에는, 사용자는, 전술한 바와 같이 해당 휴대 전화기를 파지한 상태에서 하우징을 이동 조작하여 포인터를 이동 조작하고, 중 손가락으로 제1 소프트 키(25)를 조작함으로써 우측 클릭 조작을 행하고, 집게 손가락으로 제2 소프트 키(26)을 조작함으로써 좌측 클릭 조작을 행한다.
또, 「키 모드」의 선택시에는, 사용자는, 전술한 바와 같이 해당 휴대 전화 기를 파지한 상태에서, 집게 손가락 또는 중 손가락 등으로 죠그 다이얼(28)을 가압 조작하여 포인터를 이동 조작하고, 중 손가락으로 제1 소프트 키(25)를 조작함으로써 우측 클릭 조작을 행하고, 집게 손가락으로 제2 소프트 키(26)를 조작함으로써 좌측 클릭 조작을 행한다.
이와 같은 「키＋카메라 모드」 및 「키 모드」는, 도 2(a) 및 도 3에 나타낸 마우스 모드 전환 키(33)를 가압 조작함으로써 전환 가능하게 되어 있고, 제어부(14)는, 디폴트로서 「키＋카메라 모드」를 설정하고, 이후, 마우스 모드 전환 키(33)가 가압 조작될 때마다 「키＋카메라 모드」←→「키 모드」를 전환하여 설정하도록 되어 있다.
여기서, 상기 「키＋카메라 모드」시에는, 후술하는 바와 같이 카메라부(8)로 촬상된 화상에 따라 해당 휴대 전화기의 이동 방향 및 이동량을 검출하도록 되어 있다. 그러므로, 보통 마우스 장치와 같이 평면에 따라 해당 휴대 전화기를 2차원적으로 이동 조작하여 포인터를 이동 조작하는 것도 가능하며, 또, 원하는 공간 내에서 해당 휴대 전화기를 3차원적으로 이동 조작하여 포인터를 이동 조작하는 것도 가능하게 되어 있다.
이 중, 보통 마우스 장치와 같이 평면에 따라 해당 휴대 전화기를 2차원적으로 이동시켜 포인터를 이동 조작하는 경우에는, 도 2(c)에 나타낸 바와 같이 조작면에 대해서 카메라부(8)의 카메라 커버(31)가 맞닿음으로써, 카메라부(8)와 조작면 사이에, 카메라 커버(31)의 두께 분의 적당한 간극이 형성되고, 카메라부(8)에 조작면이 근접한 상태에서도, 상기 조작면의 화상을 양호하게 촬상 가능하게 되 어 있다.
그리고, 이 예에서는, 카메라부(8)를 하 하우징(21)측에 설치하는 것으로 하였으나, 카메라부(8)는, 상 하우징(20)측이나, 어느 하나의 하우징(20, 21)의 측면부 등에 설치하도록 해도 된다.
［무선 마우스 동작］
다음에, 이와 같은 휴대 전화기를 무선 마우스 장치로서 사용하는 경우, 조작부(6)를 통하여 기능 선택 메뉴로부터 마우스 기능을 선택 조작한다. 제어부(14)는, 상기 마우스 기능의 선택 조작을 검출하면, 메모리(13)에 기억되어 있는 「마우스 애플리케이션 프로그램」을 판독하고, 도 4에 나타낸 플로차트를 시작(스타트)시킨다.
이 플로차트를 스타트시키면, 제어부(14)는, 전회(前回)의 마우스 애플리케이션 프로그램의 실행시에 카메라부(8)로 촬상된 화상이나 각종 연산치를 클리어하는 초기화 처리를 행하고, 처리를 단계 S2에 진행한다.
전술한 바와 같이, 이 마우스 애플리케이션 프로그램의 기동시에는, 제어부(14)는, 카메라부(8)로 촬상된 화상에 따라 하우징의 이동을 검출하여 포인터를 이동 조작하는 「키＋카메라 모드」를 디폴트로서 설정하도록 되어 있다. 또, 상기 「키＋카메라 모드」와, 죠그 다이얼(28)을 방향 지시 키로서 사용하여 포인터를 이동 조작하는 「키 모드」와는, 마우스 모드 전환 키(33)를 가압 조작함으로써 전환 가능하게 되어 있다.
그러므로, 제어부(14)는, 처리를 단계 S2에 진행하면, 마우스 모드 전환 키(33)를 가압 조작의 유무를 판별함으로써, 마우스 모드의 전환이 지정되었는지 아닌지를 판별한다. 그리고, 마우스 모드 전환 키(33)의 가압 조작이 검출되지 않는 경우에는, 사용자로부터 마우스 모드의 전환이 지정되어 있지 않은 것을 나타내므로, 상기 디폴트로서 설정한 「키＋카메라 모드」를 실행하기 위해, 처리를 단계 S3에 진행한다.
이에 대하여, 마우스 모드 전환 키(33)의 가압 조작을 검출한 경우에는, 사용자로부터 마우스 모드의 전환이 지정된 것을 나타내므로, 제어부(14)는, 상기 디폴트로서 설정한 「키＋카메라 모드」로부터 「키 모드」에로 마우스 모드를 변경하고, 처리를 단계 S9에 진행한다.
다음에, 「키＋카메라 모드」를 실행하기 위해, 처리를 단계 S3에 진행한 경우, 제어부(14)는, 카메라부(8)를 기동 제어하여, 처리를 단계 S4에 진행한다. 그리고, 카메라부(8)를 기동하면, 발광부(30)의 점등 조작도 가능해져, 사용자는, 주위의 밝기에 따라 이 발광부(30)를 점등 조작하여 카메라부(8)에 의한 촬상을 보조하도록 되어 있다.
단계 S4에서는, 제어부(14)가, 카메라부(8)로 촬상된 화상을 연속하는 프레임 사이에서 비교하고, 전 프레임과 현재 프레임의 각 화상의 변위량을 산출하도록 이동 벡터 산출부(12)를 제어한다. 그리고, 단계 S5에 있어서, 이 각 화상 사이의 변위량의 유무를 판별한다.
전술한 바와 같이, 이 「키＋카메라 모드」시에는, 사용자는, 해당 휴대 전화기의 하우징을 2차원적 또는 3차원적으로 이동 조작한다. 해당 휴대 전화기의 하우징을 2차원적으로 조작한 경우에는, 카메라부(8)에 의해 예를 들면 마우스 패드나 책상의 표면 등의 화상이 촬상되게 된다. 또, 해당 휴대 전화기의 하우징을 3차원적으로 조작한 경우에는, 카메라부(8)에 의해 예를 들면 오피스의 배경 등의 화상이 촬상되게 된다. 제어부(14)는, 이와 같이 카메라부(8)로 촬상되는 화상에 따라, 전 프레임과 현재 프레임의 각 화상의 변위량을 검출하게 된다.
상기 단계 S5에 있어서, 전 프레임과 현재 프레임의 각 화상의 변위량이 검출되지 않는다 라는 것은, 해당 휴대 전화기의 하우징이 이동 조작되지 않는 것을 나타내므로, 제어부(14)는 처리를 단계 S4로 되돌려, 상기 각 프레임 사이의 변위량의 검출을 계속해 실행한다.
이에 대하여, 상기 단계 S5에 있어서, 전 프레임과 현재 프레임의 각 화상의 변위량이 검출되었다 라는 것은, 해당 휴대 전화기의 하우징이 이동 조작된 것을 나타낸다. 그러므로, 제어부(14)는 처리를 단계 S6으로 진행해 이동 벡터 산출부(12)로 산출된 상기 각 화상 사이의 변위량에 대응하는 이동 벡터 정보를 송신하도록 근거리 무선 통신 유닛(11)을 제어한다.
이로써, 예를 들면 도 5에 나타낸 바와 같이 해당 휴대 전화기(40)의 근거리 무선 통신 유닛(11) 및 근거리 무선 통신 안테나(10)를 통하여, 거치형의 퍼스널 컴퓨터 장치(41)에 외부 접속(또는 내장)된 근거리 무선 통신 유닛(42) 및 근거리 무선 통신 안테나(43)에 대해서 상기 이동 벡터 정보가 근거리 무선 송신되는 것으로 된다.
퍼스널 컴퓨터 장치(41)는, 상기 근거리 무선 통신 유닛(42) 및 근거리 무선 통신 안테나(43)로 수신된 상기 이동 벡터 정보로 나타내는 방향 및 이동량으로 되도록, 모니터 장치(44)에 표시하고 있는 포인터 P를 이동 표시 제어한다. 이로써, 해당 휴대 전화기의 2차원적 또는 3차원적인 이동 조작에 대응시켜, 모니터 장치(44)상의 포인터 P를 이동 조작할 수 있다.
이와 같이 이동 벡터 정보를 송신하면, 제어부(14)는, 도 4의 플로차트의 단계 S7로 처리를 진행시켜 마우스 모드 전환 키(33)의 가압 조작의 유무를 판별한다. 마우스 모드 전환 키(33)의 가압 조작을 검출한 경우에는, 해당 「키＋카메라 모드」로부터 「키 모드」로의 변경이 사용자로부터 지정된 것을 나타내므로, 처리를 단계 S9에 진행한다.
이에 대하여, 마우스 모드 전환 키(33)의 가압 조작을 검출하지 않은 경우에는, 처리를 단계 S8에 진행해 해당 마우스 모드의 종료가 지정되었는지 아닌지를 판별한다. 해당 마우스 모드의 종료가 지정된 것으로 판별한 경우, 제어부(14)는, 그대로 이 도 4의 플로차트를 종료하고, 해당 마우스 모드의 종료가 지정되어 있지 않은 것으로 판별한 경우에는, 제어부(14)는, 처리를 단계 S4에 되돌려, 전술한 각 프레임 사이의 화상의 변위량의 검출을 계속해 실행한다. 이로써, 사용자로부터 마우스 모드의 종료가 지정되기까지의 사이(해당 휴대 전화기를 무선 마우스 장치로서 사용하고 있는 동안), 연속하는 각 프레임의 화상이 차례로 비교되어 이 각 화상의 변위량에 따라, 상기 모니터 장치(44)상의 포인터 P가 이동 표시 제어되게 된다.
그리고, 이 도 4의 플로차트에는 도시되어 있지 않지만, 제어부(14)는, 이와 같은 해당 휴대 전화기의 하우징의 이동 조작의 검출과 함께, 도 3에 나타낸 제1 소프트 키(25) 및 제2 소프트 키(26)의 가압 조작의 유무를 감시하고 있다. 그리고, 제1 소프트 키(25)의 가압 조작을 검출한 경우에는, 우측 클릭 조작을 나타낸 조작 커맨드(command)를 상기 퍼스널 컴퓨터 장치(41)측의 근거리 무선 통신 유닛(42)에 근거리 무선 송신하도록 근거리 무선 통신 유닛(11)을 제어하고, 또, 제2 소프트 키(26)의 가압 조작을 검출한 경우에는, 좌측 클릭 조작을 나타낸 조작 커맨드를 상기 퍼스널 컴퓨터 장치(41)측의 근거리 무선 통신 유닛(42)에 근거리 무선 송신하도록 근거리 무선 통신 유닛(11)을 제어한다.
한편, 상기 단계 S2 또는 상기 단계 S7에 있어서, 마우스 모드 전환 키(33)의 가압 조작을 검출함으로써 처리를 단계 S9에 진행하면, 제어부(14)는, 「키＋카메라 모드」로부터 「키 모드」로 마우스 모드를 변경하고, 도 3에 나타낸 죠그 다이얼(28)의 조작의 유무를 판별한다.
즉, 전술한 바와 같이, 이 「키 모드」시에 있어서는, 사용자는, 죠그 다이얼(28)을 방향 지시 키로서 사용하여 상기 포인터 P를 이동 조작하도록 되어 있다. 그러므로, 제어부(14)는, 「키 모드」로 마우스 모드를 변경하면, 해당 단계 S9에 있어서 죠그 다이얼(28)의 조작의 유무를 판별한다.
죠그 다이얼(28)의 조작을 검출하지 않는다고 하는 것은, 사용자로부터 포인터 P의 이동 조작이 지시되어 있지 않은 것을 의미한다. 그러므로, 제어부(14)는, 죠그 다이얼(28)의 조작이 검출되지 않는 동안은, 처리를 단계 S12 및 단계 S13에 진행해, 마우스 모드의 변경 지시의 유무나, 해당 마우스 모드의 종료 지시의 유무 를 판별하게 된다.
이에 대하여, 죠그 다이얼(28)의 조작을 검출한다고 하는 것은, 사용자로부터 포인터 P의 이동 조작이 지시된 것을 의미한다. 또, 죠그 다이얼(28)의 상, 하, 좌, 우, 우측 경사 위, 좌측 경사 아래 등의 조작은, 그대로 포인터 P의 이동 방향을 나타내고, 죠그 다이얼(28)의 연속 조작 시간은, 포인터 P의 이동량을 나타낸다.
그러므로, 제어부(14)는, 단계 S10에 있어서, 죠그 다이얼(28)의 조작으로 지정된, 예를 들면 상하 좌우, 우측 경사 위, 좌측 경사 아래 등의 이동 방향을 검출함과 함께, 상기 죠그 다이얼(28)의 연속 조작 시간으로부터 포인터 P의 이동량을 산출하고, 상기 검출한 이동 방향 및 산출한 이동량에 대응하는 이동 벡터 정보를 형성하도록 이동 벡터 산출부(12)를 제어한다. 그리고, 단계 S11에 있어서, 상기 이동 벡터 산출부(12)로 형성된 이동 벡터 정보를 근거리 무선 송신하도록 근거리 무선 통신 유닛(11)을 제어한다.
이로써, 죠그 다이얼(28)의 조작으로 지정된 이동 방향으로, 상기 죠그 다이얼(28)의 연속 조작 시간에 대응하는 이동량만큼, 상기 모니터 장치(44)상의 포인터 P가 이동 제어되게 된다.
이와 같이 이동 벡터 정보를 송신하면, 제어부(14)는, 단계 S12에 처리를 진행시켜 마우스 모드 전환 키(33)의 가압 조작의 유무를 판별한다. 마우스 모드 전환 키(33)의 가압 조작을 검출한 경우에는, 해당 「키 모드」로부터 「키＋카메라 모드」로의 변경이 사용자로부터 지정된 것을 나타내므로, 처리를 상기 단계 S3에 진행한다.
이에 대하여, 마우스 모드 전환 키(33)의 가압 조작을 검출하지 않는 경우에는, 처리를 단계 S13에 진행해, 해당 마우스 모드의 종료가 지정되었는지 아닌지를 판별한다. 해당 마우스 모드의 종료가 지정된 것으로 판별한 경우, 제어부(14)는, 그대로 이 도 4의 플로차트를 종료하고, 해당 마우스 모드의 종료가 지정되어 있지 않은 것으로 판별한 경우에는, 제어부(14)는, 처리를 단계 S9에 되돌려, 전술한 죠그 다이얼(28)의 조작의 유무의 판별을 계속해 실행한다. 이로써, 사용자로부터 마우스 모드의 종료가 지정되기까지의 사이(해당 휴대 전화기를 무선 마우스 장치로서 사용하고 있는 동안), 죠그 다이얼(28)의 조작에 따라, 상기 모니터 장치(44)상의 포인터 P가 이동 표시 제어되게 된다.
그리고, 이 「키 모드」시에 있어서도, 제어부(14)는, 상기 「키＋카메라 모드」시 와 마찬가지로, 도 3에 나타낸 제1 소프트 키(25) 및 제2 소프트 키(26)의 가압 조작의 유무를 감시하고 있다. 그리고, 제1 소프트 키(25)의 가압 조작을 검출한 경우에는, 우측 클릭 조작을 나타낸 조작 커맨드를 상기 퍼스널 컴퓨터 장치(41)측의 근거리 무선 통신 유닛(42)에 근거리 무선 송신하도록 근거리 무선 통신 유닛(11)을 제어하고, 또, 제2 소프트 키(26)의 가압 조작을 검출한 경우에는, 좌측 클릭 조작을 나타낸 조작 커맨드를 상기 퍼스널 컴퓨터 장치(41)측의 근거리 무선 통신 유닛(42)에 근거리 무선 송신하도록 근거리 무선 통신 유닛(11)을 제어한다.
［변위량의 검출 동작］
다음에, 전술한 도 4의 플로차트의 단계 S4에서의, 프레임 사이의 변위량의 검출 동작을 상세하게 설명한다. 상기 프레임 사이의 변위량의 검출 동작은, 도 6의 플로차트에 나타낸 바와 같이 되어 있다. 이 도 6의 플로차트는, 해당 마우스 애플리케이션 프로그램의 기동시에 디폴트로서 「키＋카메라 모드」가 설정되고, 또는 사용자에 의해 마우스 모드 전환 키(33)가 가압 조작되는 것으로 「키 모드」로부터 「키＋카메라 모드」로 마우스 모드가 변경된 타이밍에서 시작(스타트)으로 된다.
제어부(14)는, 이 「키＋카메라 모드」를 스타트시키면, 먼저, 단계 S21에 있어서, 이동 벡터 산출부(12)의 연산 결과를 클리어 처리하는 등의 초기화 처리를 행하고, 단계 S22에 처리를 진행시킨다.
단계 S22에서는, 제어부(14)가, 카메라부(8)로 촬상된 화상 읽기(image capture)를 개시하고, 전 프레임의 화상의 예를 들면 중앙의 블록을, 현재 프레임의 화상의 소정의 블록과 비교하여, 상기 각 블록의 예를 들면 휘도값 등의 각 화소값의 차분을 검출하도록 이동 벡터 산출부(12)를 제어한다.
일례이지만, 해당 휴대 전화기의 표시부(5)의 유효 화상 영역의 세로×가로의 사이즈는, 도 7(a)에 나타낸 바와 같이 120화소×160화소의, 이른바 QQVGA 사이즈(QQVGA: Quarter Quarter Video Graphics Array)로 되어 있다. 이 도 7(a) 및 도 7(b)는, 각 블록의 세로×가로의 사이즈가 5화소×5화소(합계 25화소)로서 도시하고 있다.
이동 벡터 산출부(12)는, 전 프레임의 화상을 5화소×5화소의 각 블록에 분 할하고, 이 각 블록 중, 해당 전 프레임의 화상의 중앙에 위치하는 블록을 「비교 블록」으로서 설정한다. 이것은, 카메라부(8)로 원하는 피사체를 촬상하는 경우, 상기 피사체가 화상 전체의 중앙에 위치하도록 상기 피사체의 촬상을 행하는 것이 일반적이기 때문에, 이 예에 있어서는, 상기 전 프레임의 화상의 중앙에 위치하는 블록을 상기 「비교 블록」으로서 설정하도록 한 것이다. 제어부(14)는, 이 비교 블록의 각 화소와 현재 프레임의 제1 번째의 블록의 각 화소를 각각 비교함으로써, 상기 각 화소값의 차분을 검출한다.
다음에 단계 S23에서는, 제어부(14)가 이동 벡터 산출부(12)의 연산 상황을 감시함으로써, 상기 전 프레임의 「비교 블록」과, 현재 프레임의 제1 번째의 블록의 각 화소값의 차분의 검출이 종료하였는지 여부를 판별한다. 그리고, 상기 화소값의 차분의 검출 처리가 종료하고 있지 않은 경우는, 처리를 단계 S22에 되돌려, 상기 각 블록 사이의 모든 화소에 대한 화소값의 차분의 검출 처리가 종료할 때까지 상기 검출 처리를 계속하도록 이동 벡터 산출부(12)를 제어한다.
이에 대하여, 상기 각 블록 사이의 모든 화소에 대한 상기 화소값의 차분의 검출 처리가 종료한 것으로 판별한 경우, 제어부(14)는 처리를 단계 S24에 진행해 상기 단계 S22로 검출한 합계 25개의 각 화소값의 차분의 합계값을 산출하도록 이동 벡터 산출부(12)를 제어한다.
다음에, 제어부(14)는, 상기 단계 S24로 새롭게 산출한 상기 차분의 합계값과 전회의 연산시에 산출된 상기 차분의 합계값을 비교하도록 이동 벡터 산출부(12)를 제어한다. 그리고, 단계 S26에 있어서, 새롭게 산출한 상기 차분의 합계 값은, 전회(前回)의 연산시에 산출된 상기 차분의 합계값보다 작은 값인지 여부를 판별한다.
그리고, 상기 비교 블록과 현재 프레임의 화상의 제1 번째의 블록과의 사이의 상기 차분의 합계값이 산출된 직후의 경우, 전회의 연산시에 산출된 상기 차분의 합계값은 존재하지 않는다. 이 경우, 제어부(14)는, 처리를 단계 S22로 되돌려, 상기 비교 블록과 현재 프레임의 화상의 제2 번째의 블록과의 사이의 상기 차분의 합계값을 산출하도록 이동 벡터 산출부(12)를 제어한다.
그리고, 상기 제2 번째의 블록에 대응하는 차분의 합계값이 산출된 때에, 단계 S26에 있어서, 상기 제2 번째의 블록에 대응하는 차분의 합계값과 상기 제1 번째의 블록에 대응하는 차분의 합계값을 비교하게 된다.
제어부(14)는, 상기 단계 S26에 있어서, 상기 현재 프레임의 화상의 제2 번째의 블록에 대응하는 상기 차분의 합계값(즉, 새로운 차분의 합계값)이, 상기 현재 프레임의 화상의 제1 번째의 블록에 대응하는 상기 차분의 합계값(즉, 전회의 차분의 합계값)보다 작은 값인 것으로 판별한 경우, 처리를 단계 S27로 진행하고,상기 새롭게 산출한 상기 차분의 합계값이, 전회의 연산시에 산출된 상기 차분의 합계값보다 큰 값인 것으로 판별한 경우, 처리를 단계 S28로 진행한다.
새롭게 산출한 상기 차분의 합계값이, 전회의 연산시에 산출된 상기 차분의 합계값보다 작은 값인 것으로 판별함으로써 처리를 단계 S27에 진행하면, 제어부(14)는, 이 제1 번째의 블록보다 작은 합계값을 가지는 상기 제2 번째의 블록의 위치 정보를 메모리에 일시적으로 유지하고, 처리를 단계 S28에 진행한다.
단계 S28에서는, 제어부(14)가, 상기 비교 블록과, QQVGA 사이즈에서의 24개× 32개의 전체의 블록과의 사이에서의, 상기 차분의 합계값의 비교 처리가 종료하였는지 여부를 판별한다. 그리고, 상기 전체의 블록에 대한 비교 처리의 종료를 검출할 때까지는, 처리를 단계 S22에 되돌려, 상기 전체의 블록에 대한 비교 처리의 종료를 검출한 타이밍에서 처리를 단계 S29로 진행한다.
간언하면, 제어부(14)는, 전 프레임의 화상의 중앙에 위치하는 블록을 「비교 블록」으로서 설정하고, 상기 「비교 블록」의 각 화소와 현재 프레임의 화상의 제1 번째의 블록의 각 화소, 제2 번째의 블록의 각 화소, 제3 번째의 블록의 각 화소···· 등과 같이, 상기 「비교 블록」과 현재 프레임의 화상의 각 블록을 차례로 비교한다. 그리고, 비교 블록과 현재 프레임의 화상의 모든 블록을 비교한 결과, 상기 비교 블록에 대한 상기 최소의 차분의 합계값을 가지는 블록(최소 차분 블록)을, 상기 비교 블록의 화상과 같은 화상의 블록으로 하여 검출한다.
다음에, 단계 S29로 처리를 진행시키면, 제어부(14)가, 도 7(b)에 나타낸 바와 같이 전 프레임의 화상에서의 「비교 블록」의 위치로부터 현재 프레임의 화상에서의 상기 「최소 차분 블록」의 위치까지의 이동 방향 및 이동 거리를 나타낸 이동 벡터 정보를 산출하도록 이동 벡터 산출부(12)를 제어하여 해당 블록도 6의 플로차트를 종료한다. 이 산출된 이동 벡터 정보는, 도 4의 단계 S6에 있어서 전술한 바와 같이 퍼스널 컴퓨터 장치(41)의 근거리 무선 통신 유닛(42)에 근거리 무선 송신되고, 모니터 장치(44)에 표시된 포인터 P가 이동 표시 제어되게 된다.
［마우스 모드 중에서의 착신시의 동작］
다음에, 해당 실시예의 휴대 전화기는, 이와 같이 무선 마우스 장치로서 사용하고 있는 사이에, 전화 착신 또는 전자 메일의 착신이 있었을 경우, 마우스 모드의 상태에서, 이 착신을 사용자에게 알리기 위한 메시지 등을 모니터 장치(44)에 표시 제어함과 함께, 소정의 조작이 이루어진 때에, 핸즈 프리 통화, 또는 전자 메일의 표시 동작을 수행하도록 되어 있다.
구체적으로, 무선 마우스 장치로서 사용하고 있는 사이에, 전화 착신 또는 전자 메일의 착신이 있었을 경우, 제어부(14)는, 마우스 모드를 유지한 상태에서, 예를 들면 「전화가 착신했습니다」, 「메일이 착신했습니다」 등의 착신을 나타낸 메시지를 근거리 무선 송신하도록 근거리 무선 통신 유닛(11)을 제어한다. 또, 제어부(14)는, 이 메시지와 함께, 전화 착신의 경우는 핸즈 프리 통화를 지정하기 위한 아이콘을, 또, 전자 메일의 착신의 경우는, 착신한 전자 메일의 표시를 지정하기 위한 아이콘을 근거리 무선 송신하도록 근거리 무선 통신 유닛(11)을 제어한다. 이로써, 상기 메시지 및 상기 아이콘이 모니터 장치(44)에 표시되는 것으로 된다.
사용자는, 이 모니터 장치(44)에 표시되는 메시지에 의해, 전화 착신 또는 전자 메일의 착신을 인식할 수 있다. 사용자는, 이 착신한 전화에 응답하는 경우, 전술한 「키＋카메라 모드」 또는 「키 모드」에 있어서 모니터 장치(44)상에 표시되어 있는 포인터 P를, 전화 착신의 경우는 핸즈 프리 통화를 지정하기 위한 아이콘의 표시 위치로 이동 조작하고, 전자 메일의 착신의 경우는, 착신한 전자 메일의 표시를 지정하기 위한 아이콘을 표시 위치로 이동 조작하고, 예를 들면 도 3에 나타낸 제2 소프트 키(26)를 더블 클릭 조작한다.(즉, 좌측 키의 더블 클릭 조작에 상당)
해당 휴대 전화기의 제어부(14)는, 퍼스널 컴퓨터 장치(41)측에 근거리 무선 송신하는 이동 벡터 정보에 따라, 모니터 장치(44)상의 포인터 P의 이동 위치를 감시하는 동시에, 상기 제2 소프트 키(26)의 조작 상태를 감시함으로써, 상기 포인터 P가 아이콘 상으로 이동 조작된 후에, 좌측 키가 더블 클릭 조작되었는지 아닌지를 감시한다.
제어부(14)는, 전화 착신시에 상기 포인터 P의 아이콘 위로의 이동 조작 및 좌측 키의 더블 클릭 조작을 검출하면, 마우스 모드를 실행한 상태인 채, 스피커부(3) 및 마이크로폰부(4)의 각 증폭부의 이득을 핸즈 프리(hands-free) 통화용으로 설정 제어하고, 오프 훅(off-hook) 제어한다. 이로써, 해당 휴대 전화기를 무선 마우스 장치로서 사용한 상태인 채, 핸즈 프리 통화를 가능하게 할 수 있다.
또, 제어부(14)는, 전자 메일의 착신시에 상기 포인터 P의 아이콘 위로의 이동 조작 및 좌측 키의 더블 클릭 조작을 검출하면, 마우스 모드를 실행한 상태인 채, 이 착신한 전자 메일의 문장을 해당 휴대 전화기의 표시부(5)에 표시 제어한다. 이로써, 해당 휴대 전화기를 무선 마우스 장치로서 사용한 상태인 채, 착신한 전자 메일을 읽는 것을 가능하게 할 수 있다.
그리고, 이 예에서는, 착신한 전자 메일을 표시부(5)에 표시하는 것으로 하였으나, 이것은, 제어부(14)가, 착신한 전자 메일의 문장 정보를 근거리 무선 통신에 의해 퍼스널 컴퓨터 장치(41)측에 송신하여 모니터 장치(44)에 표시하도록 해도 된다.
이상의 설명으로부터 명백한 바와 같이, 본 발명의 실시예로 되는 휴대 전화기는, 다음과 같은 효과를 얻을 수 있다.
1. 해당 휴대 전화기로 퍼스널 컴퓨터 장치의 포인터를 이동 조작할 수 있다.
2. 노트형의 퍼스널 컴퓨터 장치를 휴대하는 경우, 전용의 마우스 장치도 함께 휴대할 필요가 있다. 그러나, 해당 휴대 전화기를 마우스 장치로서 사용할 수 있으므로 상기 전용의 마우스 장치를 휴대하는 번거로움을 해소할 수 있다.
3. 휴대 전화기에 대해서, 전화기능, 전자 메일 기능, 음악 플레이어 기능, 방송 수신 기능, 카메라 기능 등과 함께, 마우스 기능을 추가하여 설치할 수 있어 휴대 전화기의 새로운 다기능화를 도모할 수 있다.
4. 카메라부(8)로 촬상된 화상에 따라, 포인터 P를 이동 조작하기 위한 위치 정보를 형성하도록 되어 있으므로, 종래의 마우스 장치와 같이 해당 휴대 전화기를 2차원적으로 이동시켜 상기 포인터 P를 이동 조작할 수 있을 뿐 아니라 해당 휴대 전화기를 3차원적으로 이동시켜 상기 포인터 P를 이동 조작할 수 있다(이른바 에어 마우스 장치와 같은 사용법). 그러므로, 장소를 선택하는 일 없이, 해당 휴대 전화기를 마우스 장치로서 사용할 수 있다.
5. 기존의 카메라 기능을 사용하여 실현할 수 있으므로 특별한 부품 등을 새롭게 하우징에 설치할 필요가 없다. 그러므로, 오늘에서의 휴대 전화기의 적당한 하우징의 크기를 유지하면서 마우스 기능을 설치하는 것이 가능하다. 따라서, 이 적당한 하우징의 크기의 해당 휴대 전화기를 한 손으로 파지(把持)해 이동시키는 것만으로, 해당 휴대 전화기를 마우스 장치로서 사용할 수 있으므로 조작성이 좋게 포인터 P를 조작할 수 있고, 또, 평상시 사용하고 있는 마우스 장치와 같은 감각으로 조작 가능하게 할 수 있다.
6. 발광부(30)에 의한 플래시 기능에 의해, 어두운 곳에서의 화상 읽기(image capture)를 보조하도록 되어 있으므로, 어두운 곳에서도 해당 휴대 전화기를 마우스 장치로서 사용할 수 있다.
7. 해당 휴대 전화기를 마우스 장치로서 사용하고 있을 때에, 전화 착신이나 전자 메일 착신 등의 이벤트가 발생한 경우, 퍼스널 컴퓨터 장치(41)의 모니터 장치(44)에 해당 이벤트 발생을 나타낸 메시지를 표시하는 것이 가능하다. 그러므로, 해당 휴대 전화기를 마우스 장치로서 사용하고 있는 경우라도, 전화 착신이나 전자 메일 착신 등을 사용자에게 대하여 인식시킬 수가 있다.
8. 퍼스널 컴퓨터 장치의 표시 화면에 상기 이벤트 발생을 나타낸 메시지와함께, 해당 이벤트의 처리를 지정하기 위한 아이콘을 표시하도록 되어 있다. 그리고, 이 아이콘에 포인터 P가 이동 조작되고, 예를 들면 더블 클릭 등의 소정의 조작을 검출하면, 전화 착신의 경우는 핸즈 프리 통화 모드로 되고, 전자 메일 착신의 경우는, 착신한 전자 메일을 해당 휴대 전화기의 표시부(5)에 표시하도록 되어 있다. 그러므로, 해당 휴대 전화기를 마우스 장치로서 사용한 상태인 채, 통화를 행하고, 또는 전자 메일을 읽는 것을 가능하게 할 수 있다.
［변형예］
전술한 실시예의 설명에서는, 본 발명을 휴대 전화기에 적용하는 것으로 하였지만, 본 발명은, 이 휴대 전화기 외에, PHS 전화기(PHS: Personal Handyphone System), PDA 장치(PDA: Personal Digital Assistant) 등의 다른 휴대 단말기 장치에 적용해도 된다. 이 경우라도, 전술한 바와 마찬가지의 효과를 얻을 수 있다.
마지막으로, 전술한 실시예는, 어디까지나 본 발명의 일례로서 개시한 것에 지나지 않기 때문에, 본 발명은, 전술한 실시예에 한정되지 않고, 전술한 실시예 이외라도, 본 발명에 관한 기술적 사상을 벗어나지 않는 범위이면, 설계 등에 따라 각종의 변경이 가능한 것은 물론임을 덧붙여 둔다.

Claims (6)

  1. 피사체의 촬상을 행하는 카메라부를 구비한 휴대 단말기 장치로서,
    마우스 모드시에 상기 카메라부에 의해 차례로 촬상된 각 화상 사이의 변위량에 따라, 상기 휴대 단말기 장치의 하우징의 이동 방향 및 이동 거리를 검출하는 이동 검출 수단과,
    근거리 무선 통신 수단과,
    상기 이동 검출 수단에 의해 검출된 상기 이동 방향 및 이동 거리를 나타내는 정보를 수신하여, 표시 수단 상에 표시하고 있는 포인터를 이동 표시 제어하는 피 조작 장치에 대해서, 상기 이동 검출 수단에 의해 검출된 상기 이동 방향 및 이동 거리를 나타내는 정보를 근거리 무선으로 송신하도록 상기 근거리 무선 통신 수단을 제어하는 제어 수단
    을 구비한 것을 특징으로 하는 휴대 단말기 장치.
  2. 제1항에 있어서,
    상기 카메라부는, 상기 카메라부를 사용하지 않을 때는 상기 카메라부를 덮고, 상기 카메라부를 사용할 때에는 상기 카메라부를 노출시키는, 소정 두께의 카메라 커버를 가지고,
    상기 카메라 커버는, 상기 마우스 모드시에 해당 휴대 단말기 장치를 2차원적으로 이동 조작하는 경우에, 상기 카메라부에서 이동 조작면이 양호하게 촬상되 도록, 상기 카메라 커버의 두께에 의해, 상기 카메라부와 상기 이동 조작면 사이에 소정의 간극부를 형성하는 것을 특징으로 하는 휴대 단말기 장치.
  3. 제1항 또는 제2항에 있어서,
    무선 기지국 사이에서 무선 통신을 행하는 무선 통신 수단을 구비하고,
    상기 제어 수단은, 상기 무선 통신 수단에 의해 전화 착신 또는 전자 메일의 착신이 검출된 때에, 상기 전화 착신 또는 상기 전자 메일의 착신을 나타내는 정보를, 상기 피 조작 장치에 대해서 근거리 무선으로 송신하도록 상기 근거리 무선 통신 수단을 제어하는 것을 특징으로 하는 휴대 단말기 장치.
  4. 제3항에 있어서,
    상기 제어 수단은, 전화 착신시에 소정의 조작을 검출한 경우, 상기 마우스 모드를 실행한 상태에서 핸즈 프리 통화 제어를 행하고, 전자 메일의 착신시에 소정의 조작을 검출한 경우, 상기 마우스 모드를 실행한 상태에서 상기 착신한 전자 메일을 해당 휴대 전화기의 표시 수단에 표시 제어하고, 또는 상기 착신한 전자 메일을 상기 피 조작 장치에 대해서 근거리 무선으로 송신하도록 상기 근거리 무선 통신 수단을 제어하는 것을 특징으로 하는 휴대 단말기 장치.
  5. 카메라부에 의해 차례로 촬상된 각 화상 사이의 변위량에 따라, 상기 카메라부가 설치된 하우징의 이동 방향 및 이동 거리를 검출하도록 이동 검출 수단을 제 어하는 이동 검출 제어 수단으로서 컴퓨터를 기능시키고,
    상기 컴퓨터를 상기 이동 검출 제어 수단으로서 기능하게 함으로써 검출된 상기 이동 방향 및 이동 거리를 나타내는 정보를, 상기 이동 방향 및 이동 거리를 나타내는 정보를 수신하여, 표시 수단 상에 표시하고 있는 포인터를 이동 표시 제어하는 피 조작 장치에 대해서 근거리 무선 송신하도록 근거리 무선 통신 수단을 제어하는 근거리 무선 통신 제어 수단으로서 상기 컴퓨터를 기능하게 하는 것을 특징으로 하는 마우스 애플리케이션 프로그램.
  6. 이동 검출 수단이, 휴대 단말기 장치에 설치된 카메라부에 의해 차례로 촬상된 각 화상 사이의 변위량에 따라, 상기 휴대 단말기 장치의 하우징의 이동 방향 및 이동 거리를 검출하는 단계와,
    상기 검출하는 단계에서 상기 이동 검출 수단에 의해 검출된 상기 이동 방향 및 이동 거리를 나타내는 정보를, 근거리 무선 통신 수단이, 이 이동 방향 및 이동 거리를 나타내는 정보를 수신하여, 표시 수단 상에 표시하고 있는 포인터를 이동 표시 제어하는 피 조작 장치에 대해서 근거리 무선으로 송신하는 단계
    를 구비한 것을 특징으로 하는 휴대 단말기 장치를 무선 마우스 장치로서 사용하는 방법.
KR1020060100810A 2005-10-24 2006-10-17 휴대 단말기 장치, 마우스 애플리케이션 프로그램, 및 휴대단말기 장치를 무선 마우스 장치로서 사용하는 방법 KR20070044354A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JPJP-P-2005-00309146 2005-10-24
JP2005309146A JP4262712B2 (ja) 2005-10-24 2005-10-24 携帯端末装置、マウスアプリケーションプログラム、及び携帯端末装置をワイヤレスマウス装置として用いる方法

Publications (1)

Publication Number Publication Date
KR20070044354A true KR20070044354A (ko) 2007-04-27

Family

ID=37728371

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020060100810A KR20070044354A (ko) 2005-10-24 2006-10-17 휴대 단말기 장치, 마우스 애플리케이션 프로그램, 및 휴대단말기 장치를 무선 마우스 장치로서 사용하는 방법

Country Status (5)

Country Link
US (1) US7809401B2 (ko)
EP (1) EP1785819A3 (ko)
JP (1) JP4262712B2 (ko)
KR (1) KR20070044354A (ko)
CN (1) CN100435079C (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100799766B1 (ko) * 2006-10-25 2008-02-01 엠텍비젼 주식회사 포인터 이동 제어 장치
KR100827067B1 (ko) * 2007-01-22 2008-05-02 삼성전자주식회사 카메라를 구비한 휴대용 무선 단말기와 그를 이용한 마우스실행 방법
KR101107352B1 (ko) * 2010-02-01 2012-01-19 주식회사 엘지유플러스 이동 통신 단말기 및 상기 이동 통신 단말기를 제어하는 방법

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8920343B2 (en) 2006-03-23 2014-12-30 Michael Edward Sabatino Apparatus for acquiring and processing of physiological auditory signals
DE102007052734B4 (de) * 2007-06-27 2010-12-30 Universität Tübingen Vorrichtung und Verfahren zur abhör- und manipulationssicheren Verschlüsselung für Online-Accounts
US8144780B2 (en) * 2007-09-24 2012-03-27 Microsoft Corporation Detecting visual gestural patterns
GB2458881A (en) * 2008-03-19 2009-10-07 Robert William Albert Dobson Interface control using motion of a mobile device
US20100066672A1 (en) * 2008-09-15 2010-03-18 Sony Ericsson Mobile Communications Ab Method and apparatus for mobile communication device optical user interface
KR101554958B1 (ko) * 2009-03-06 2015-09-22 삼성전자주식회사 비주얼 코드를 이용한 원격 조작 방법 및 그 방법을 수행하는 장치
US8949860B2 (en) 2010-01-08 2015-02-03 Adobe Systems Incorporated Methods and systems for using a mobile device for application input
JP5682818B2 (ja) * 2011-03-04 2015-03-11 カシオ計算機株式会社 携帯端末装置
JP5629242B2 (ja) 2011-06-10 2014-11-19 京セラ株式会社 通信端末
CN102393794A (zh) * 2011-07-05 2012-03-28 信源通科技（深圳）有限公司 通过手持终端实现鼠标功能的系统以及方法
WO2013103968A2 (en) * 2012-01-06 2013-07-11 Ergowerx International, Llc Touchscreen controller
US20130324035A1 (en) * 2012-06-01 2013-12-05 Nvidia Corporation Methodology for using smartphone in desktop or mobile compute environment
CN102857593A (zh) * 2012-10-30 2013-01-02 巫少芬 一种便携式无线光电鼠标手机
CN103856704B (zh) * 2012-11-29 2018-08-10 联想(北京)有限公司 一种移动终端3d拍摄的方法和装置
CN103049106B (zh) * 2012-12-11 2016-04-13 广东欧珀移动通信有限公司 一种移动终端作为鼠标的实现方法及装置
CN103200327B (zh) * 2013-04-08 2017-10-31 上海斐讯数据通信技术有限公司 一种在手机上实现鼠标功能的方法
US9107513B2 (en) * 2013-07-16 2015-08-18 Amirmasood Asfa Baby walker system with a braking mechanism for movement control
CN103399657B (zh) * 2013-07-31 2016-09-28 小米科技有限责任公司 鼠标指针的控制方法、装置及终端设备
JP2015103109A (ja) * 2013-11-26 2015-06-04 京セラドキュメントソリューションズ株式会社 情報入力システム、携帯端末装置、及びコンピューター
CN103677317B (zh) * 2013-12-11 2018-09-11 Tcl光电科技(惠州)有限公司 实现光标控制的移动终端及其实现光标控制的方法
JP6107840B2 (ja) * 2015-01-15 2017-04-05 カシオ計算機株式会社 端末装置及びプログラム
EP3568975A1 (en) 2017-01-13 2019-11-20 Harman International Industries, Incorporated Integrated audio/video collaboration system for video conference meetings
US10891489B2 (en) * 2019-04-08 2021-01-12 Nedelco, Incorporated Identifying and tracking words in a video recording of captioning session

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004164559A (ja) * 2002-09-27 2004-06-10 Fuji Photo Film Co Ltd 携帯端末装置
KR20040073785A (ko) * 2003-02-14 2004-08-21 엘지전자 주식회사 무선 마우스 기능을 구비한 이동 통신 단말기
US20040189609A1 (en) * 2003-03-25 2004-09-30 Estes Charles D. Optical pointing device and method therefor
KR200366964Y1 (ko) * 2004-07-31 2004-11-09 (주)모비솔 외부기기 제어용 포인팅 장치를 구비하는 이동통신 단말기
JP2004318823A (ja) * 2003-03-28 2004-11-11 Seiko Epson Corp 情報表示システム、情報処理装置、ポインティング装置および情報表示システムにおけるポインタマーク表示方法
KR100466855B1 (ko) * 2004-03-23 2005-01-15 에스케이 텔레콤주식회사 촬영 기능을 가지는 카메라 부착 이동 통신 단말기의 촬상신호를 이용한 사용자 인터페이스 방법 및 시스템
KR20050090619A (ko) * 2004-03-09 2005-09-14 브이케이 주식회사 무선 마우스 기능을 구비한 이동전화기
JP2005258486A (ja) * 2004-03-09 2005-09-22 Mitsubishi Electric Corp 端末装置及び座標位置特定方法及びプログラム

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0879353A (ja) 1994-09-09 1996-03-22 Hitachi Ltd 電話機一体型位置入力装置
JPH11112617A (ja) 1997-09-30 1999-04-23 Casio Comput Co Ltd 通信端末、該通信端末への着信を報知する該通信端末と別体の携帯端末及びこれら通信端末と該通信端末と別体の携帯端末とで構成される携帯端末システム
US6285354B1 (en) * 1998-11-30 2001-09-04 Micron Technology, Inc. Combination mouse and telephone handset
JP2001022515A (ja) 1999-06-25 2001-01-26 Kyu Choi Byun 電話機マウス
JP2002271665A (ja) 2001-03-12 2002-09-20 Sanyo Electric Co Ltd 携帯電話機及び携帯電話機用レンズカバー
JP2003008693A (ja) * 2001-06-21 2003-01-10 Nec Access Technica Ltd 携帯型電話機
DE10229068B3 (de) * 2002-06-28 2004-02-05 Fujitsu Siemens Computers Gmbh PDA (Personal Digital Assistant) mit Touch-Screen Display
DE10334138B4 (de) * 2003-07-23 2006-03-09 Siemens Ag Kommunikationssystem
JP2007096742A (ja) * 2005-09-29 2007-04-12 Sony Corp 入力装置および入力装置の制御方法、ならびに、音声通信装置および音声通信方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004164559A (ja) * 2002-09-27 2004-06-10 Fuji Photo Film Co Ltd 携帯端末装置
KR20040073785A (ko) * 2003-02-14 2004-08-21 엘지전자 주식회사 무선 마우스 기능을 구비한 이동 통신 단말기
US20040189609A1 (en) * 2003-03-25 2004-09-30 Estes Charles D. Optical pointing device and method therefor
JP2004318823A (ja) * 2003-03-28 2004-11-11 Seiko Epson Corp 情報表示システム、情報処理装置、ポインティング装置および情報表示システムにおけるポインタマーク表示方法
KR20050090619A (ko) * 2004-03-09 2005-09-14 브이케이 주식회사 무선 마우스 기능을 구비한 이동전화기
JP2005258486A (ja) * 2004-03-09 2005-09-22 Mitsubishi Electric Corp 端末装置及び座標位置特定方法及びプログラム
KR100466855B1 (ko) * 2004-03-23 2005-01-15 에스케이 텔레콤주식회사 촬영 기능을 가지는 카메라 부착 이동 통신 단말기의 촬상신호를 이용한 사용자 인터페이스 방법 및 시스템
KR200366964Y1 (ko) * 2004-07-31 2004-11-09 (주)모비솔 외부기기 제어용 포인팅 장치를 구비하는 이동통신 단말기

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100799766B1 (ko) * 2006-10-25 2008-02-01 엠텍비젼 주식회사 포인터 이동 제어 장치
KR100827067B1 (ko) * 2007-01-22 2008-05-02 삼성전자주식회사 카메라를 구비한 휴대용 무선 단말기와 그를 이용한 마우스실행 방법
KR101107352B1 (ko) * 2010-02-01 2012-01-19 주식회사 엘지유플러스 이동 통신 단말기 및 상기 이동 통신 단말기를 제어하는 방법

Also Published As

Publication number Publication date
EP1785819A3 (en) 2012-04-25
US20070091167A1 (en) 2007-04-26
JP4262712B2 (ja) 2009-05-13
CN100435079C (zh) 2008-11-19
US7809401B2 (en) 2010-10-05
EP1785819A2 (en) 2007-05-16
JP2007123962A (ja) 2007-05-17
CN1991709A (zh) 2007-07-04

Similar Documents

Publication Publication Date Title
KR20070044354A (ko) 휴대 단말기 장치, 마우스 애플리케이션 프로그램, 및 휴대단말기 장치를 무선 마우스 장치로서 사용하는 방법
JP4897596B2 (ja) 入力装置、記憶媒体、情報入力方法及び電子機器
KR101678861B1 (ko) 이동단말기 및 그 제어방법
JP4118231B2 (ja) 携帯通信端末
CN100349103C (zh) 具有屏幕上光导航的移动设备
US20170228091A1 (en) Information processing device
JP5315891B2 (ja) 距離測定装置、距離測定方法及び距離測定プログラム
KR102072542B1 (ko) 이미지 처리 방법 및 그 전자 장치
JP2023518895A (ja) 画像撮影方法と電子機器
KR20160019145A (ko) 이동 단말기 및 그 제어 방법
JP4371798B2 (ja) 携帯端末装置
US7696985B2 (en) Producing display control signals for handheld device display and remote display
JP4685708B2 (ja) 携帯端末装置
KR20030047095A (ko) 휴대용 단말기의 키입력장치 및 방법
KR101751348B1 (ko) 이동단말기 및 그 제어방법
JP5221404B2 (ja) 携帯電子機器及び音声調整方法
JP2007324893A (ja) 画像表示装置及び画像表示方法
KR20180014616A (ko) 이동 단말기 및 그 제어방법
KR20170058173A (ko) 이동단말기 및 그 제어방법
KR100600358B1 (ko) 카메라를 이용한 메뉴선택 인터페이스를 갖는이동통신단말기 및 그 제어방법
KR101809133B1 (ko) 이동 단말기
KR100626217B1 (ko) 이동통신단말기에서 광마우스 기능을 구현하기 위한 장치및 방법
KR20170029330A (ko) 이동단말기 및 그 제어방법
KR20060062842A (ko) 카메라 내장형 이동 통신 단말기를 이용한 무선 마우스기능의 구현 방법 및 그 이동 통신 단말기
CN116880946A (zh) 基于移动终端的远程控制方法、装置、设备和介质

Legal Events

Date Code Title Description
N231 Notification of change of applicant
A201 Request for examination
E601 Decision to refuse application