KR20090087841A - 3차원 터치 감지 디스플레이 장치 - Google Patents

3차원 터치 감지 디스플레이 장치 Download PDF

Info

Publication number
KR20090087841A
KR20090087841A KR1020090012000A KR20090012000A KR20090087841A KR 20090087841 A KR20090087841 A KR 20090087841A KR 1020090012000 A KR1020090012000 A KR 1020090012000A KR 20090012000 A KR20090012000 A KR 20090012000A KR 20090087841 A KR20090087841 A KR 20090087841A
Authority
KR
South Korea
Prior art keywords
data input
display
area
screen
data
Prior art date
Application number
KR1020090012000A
Other languages
English (en)
Other versions
KR101114642B1 (ko
Inventor
제이슨 그리핀
스티븐 파이크
Original Assignee
리서치 인 모션 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 리서치 인 모션 리미티드 filed Critical 리서치 인 모션 리미티드
Publication of KR20090087841A publication Critical patent/KR20090087841A/ko
Application granted granted Critical
Publication of KR101114642B1 publication Critical patent/KR101114642B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412Digitisers structurally integrated in a display
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/26Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
    • G02B30/30Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving parallax barriers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1643Details related to the display arrangement, including those related to the mounting of the display in the housing the display being associated to a digitizer, e.g. laptops that can be used as penpads
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03547Touch pads, in which fingers can move on a surface
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • GPHYSICS
    • G02OPTICS
    • G02FOPTICAL DEVICES OR ARRANGEMENTS FOR THE CONTROL OF LIGHT BY MODIFICATION OF THE OPTICAL PROPERTIES OF THE MEDIA OF THE ELEMENTS INVOLVED THEREIN; NON-LINEAR OPTICS; FREQUENCY-CHANGING OF LIGHT; OPTICAL LOGIC ELEMENTS; OPTICAL ANALOGUE/DIGITAL CONVERTERS
    • G02F1/00Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics
    • G02F1/01Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour 
    • G02F1/13Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour  based on liquid crystals, e.g. single liquid crystal display cells
    • G02F1/133Constructional arrangements; Operation of liquid crystal cells; Circuit arrangements
    • G02F1/1333Constructional arrangements; Manufacturing methods
    • G02F1/13338Input devices, e.g. touch panels
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04809Textured surface identifying touch areas, e.g. overlay structure for a virtual keyboard

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Optics & Photonics (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)
  • Input From Keyboards Or The Like (AREA)

Abstract

휴대형 전자 장치는 데이터 프로세서와 디스플레이를 포함한다. 디스플레이는 디스플레이 장치와, 디스플레이 장치 위에 배치된 삼차원 터치 감지 투명 스크린을 포함한다. 삼차원 터치 감지 투명 스크린은 돌출된 영역과 이 돌출된 영역을 에워싸는 함몰된 영역을 포함한다. 데이터 프로세서는 복수의 데이터 입력 영역들을 포함하는 데이터 입력/출력 스크린을 디스플레이 장치상에 렌더링하고(여기서, 상기 돌출된 영역은 상기 데이터 입력 영역들과 오버레이됨), 데이터 입력 영역들 중 하나로부터의 입력으로서, 하나의 데이터 입력 영역과 일치하는 돌출된 영역의 일부분에서의 터치 조작을 검출한다.
휴대형, 전자, 장치, 데이터, 디스플레이, 터치, 감지, 스크린.

Description

3차원 터치 감지 디스플레이 장치{THREE-DIMENSIONAL TOUCH-SENSITIVE DISPLAY DEVICE}
본 발명의 개시 내용은 터치 감지 디스플레이 장치에 관한 것이다. 특히, 본 발명의 개시 내용은 휴대형 전자 장치를 위한 3 차원 터치 감지 디스플레이 장치에 관한 것이다.
무선 전화기, PDA(Personal Data Assistant), 무선 페이저와 같은 수 많은 휴대형 통신 장치는 휴대형 통신 장치의 조작자에게 정보를 디스플레이하는 LCD 패널과, 명령 및/또는 데이터를 휴대형 통신 장치에 입력하기 위한 물리적 키보드를 구비하고 있다. 일부 휴대형 통신 장치는 별도의 LCD 패널과 키보드 대신에 터치 감지 스크린을 갖고 있다. 데이터/명령의 입력을 용이하게 하기 위해, 휴대형 통신 장치는 복수 개의 가상 터치 감지 키들을 포함하는 가상 키보드를 터치 감지 스크린 상에서 묘사할 수 있다. 그러나 물리적 키보드와는 달리, 가상 키보드는 사용자에게 어느 촉감적인 피드백을 제공하지 않는다. 그 결과 휴대형 통신 장치는 종종 극히 밝거나 어둑한 주변 광에서 제어가 어렵다.
세리그(Selig)의 미국 특허 제6,492,978호는 LCD 또는 CRT 디스플레이 상에 배치될 수 있는 키 스크린을 기술하고 있다. 키 스크린은 평판형 터치 스크린과, 터치 스크린 위에 배치되는 물리적 키패드를 포함하고 있다. 컴퓨터 소프트웨어는 터치 스크린 및 모니터와 함께 디스플레이의 일부분 위에서 가상 키패드를 정의한다. 물리적 키패드는 터치 스크린에 고정되며, 가상 키패드의 개개의 부분을 결합하고 촉감적 피드백을 사용자에게 제공하는 복수 개의 관절형 또는 가요성의 불투명 또는 투명 키를 포함하고 있다.
크렌달(Crandall)의 미국 특허 공보 제2004/090428호는 터치 감지 스크린의 오버레이를 기술하고 있다. 일 실시예에서 오버레이는 터치 감지 스크린의 터치 감지 영역과 대응하도록 정렬되는 돌출 부분의 그리드를 포함하고 있다. 또 다른 실시예에서 오버레이는 터치 감지 스크린의 터치 감지 영역에 대응하도록 정렬되는 다이 컷 홀의 그리드를 포함한다.
모(Maw)의 미국 특허 공보 제2006/033723호는 주변 영역과 중앙 영역을 가진 터치패드를 포함하는 전화기 키패드를 기술하고 있다. 중앙 영역은 3×3 매트릭스의 가상 키를 포함하며, 주변 영역은 3×3 키 매트릭스 둘레에 배치된 가상 키들의 링을 포함한다. 일 실시예에 있어서, 키패드는 터치 스크린으로 구성되어 터치 스크린상에서 키패드의 상태를 디스플레이한다. 또 다른 실시예에서 3×3 매트릭스의 각각의 가상 키는 적절한 키와 접촉하기 위해 여분의 보장을 제공하도록 돔 형태로 되어 있다.
개괄적으로 제1 실시양태에 있어서 본 발명의 개시 내용은 3 차원 터치 감지 디스플레이 장치에 관한 것이다. 이후 보다 상세히 설명하는 바와 같이 터치 감지 디스플레이는 디스플레이 장치와, 디스플레이 장치 위에 배치되는 투명한 3 차원 터치 감지 스크린을 포함한다. 터치 감지 스크린은 복수 개의 돌출 영역과 함몰 영역을 포함하고 있다. 함몰 영역은 인쇄 마스크를 포함하며 돌출 영역을 에워싸고 있다.
일 실시예에 있어서, 터치 감지 스크린은 평탄형의 투명한 터치 감지 패널과, 터치 감지 패널에 고정되는 3 차원 투명 렌즈를 포함하고 있다. 터치 감지 패널은 용량성 터치 감지 패널을 포함할 수 있으며, 용량성 터치 감지 패널은 투명 렌즈와 디스플레이 장치 사이에 배치된다. 이와는 달리 터치 감지 패널은 저항성 터치 감지 패널을 포함할 수 있으며, 투명 렌즈는 저항성 터치 감지 패널과 디스플레이 장치 사이에 배치된다. 인쇄 마스크는 인 몰드 데코레이션(IMD) 제조 공정 또는 다른 적절한 제조 공정을 이용하여 투명 렌즈 상에 결합될 수 있다.
제2 실시양태에 있어서, 본 발명의 개시 내용은 데이터 프로세서와 디스플레이를 포함하는 휴대형 전자 장치에 관한 것이다. 디스플레이는 데이터 프로세서에 결합되며 디스플레이 장치와, 디스플레이 장치 위에 배치되는 투명한 3 차원 터치 감지 스크린을 포함하고 있다. 터치 감지 스크린은 돌출 영역과 돌출 영역을 에워싸는 함몰 영역을 포함하고 있다.
설명되는 바와 같이 휴대형 전자 장치의 데이터 프로세서는,
ⅰ) 복수 개의 데이터 입력 영역을 포함하는 데이터 입출력 스크린을 디스플레이 장치 상에 렌더링하고, 돌출 영역은 데이터 입력 영역과 오버레이되며,
ⅱ) 하나의 데이터 입력 영역과 일치하는 돌출 영역의 일부분에서 터치 조작을 데이터 입력 영역들 중 하나로부터의 입력으로서 검출하도록 구성된다.
휴대형 전자 장치는 핸드핼드 통신 장치로서 구현될 수가 있다. 일 구현예에 있어서, 데이터 프로세서는 데이터 입력 영역들 중 적어도 하나의 데이터 입력 영역의 외곽선과 정렬되는 가상 딜리미터(delimiter)를 디스플레이 장치 상에서 랜더링하도록 구성된다. 가상 딜리미터는 데이터 입력 영역을 분할한다. 이 구현예에서 함몰 영역은 터치 감지 스크린 상에 제공되는 마스크를 포함한다. 마스크는 데이터 입력 영역 둘레에 배치되는 가상 딜리미터를 포함한다. 터치 감지 스크린은 평판형 투명 터치 감지 패널과, 터치 감지 패널에 고정된 3 차원 투명 렌즈를 포함한다.
다른 구현예에 있어서, 데이터 프로세서는 복수 개의 데이터 입출력 스크린을 디스플레이 장치 상에서 묘사하도록 구성되며, 이 복수 개의 데이터 입출력 스크린은 각각 복수 개의 데이터 입력 영역을 포함하고 있다. 각각의 데이터 입출력 스크린 상의 데이터 입력 영역들 중 적어도 하나는 모든 데이터 입출력 스크린 사이에서 공통된다. 가상 딜리미터는 공통 데이터 입력 영역을 분할한다. 이 구현예에 있어서, 데이터 입출력 스크린들 중 하나의 공통 데이터 입력 영역은 복수 개의 데이터 입력 영역을 포함하며, 가상 딜리미터는 공통 데이터 입력 영역의 데이터 입력 영역을 분할한다. 터치 감지 스크린은 평판형 투명 터치 감지 패널과 터치 감 지 패널에 고정된 3 차원 투명 렌즈를 포함한다.
제3 실시양태에 있어서, 본 발명의 개시 내용은 터치 감지 디스플레이로부터의 입력을 검출하기 위한 방법에 관한 것이다. 그 방법은 컴퓨터 판독 가능한 매체 상에 저장된 일련의 컴퓨터 처리 명령어들로서 구현 가능하다. 터치 감지 디스플레이는 디스플레이 장치와, 디스플레이 장치 위에 배치되는 투명한 3 차원 터치 감지 스크린를 포함할 수 있다. 터치 감지 스크린은 돌출 영역과 함몰 영역을 포함한다. 함몰 영역은 돌출 영역을 에워싸는 인쇄 마스크를 포함한다.
이후 보다 상세히 설명되는 바와 같이, 상기 방법은 복수 개의 데이터 입력 영역을 포함하는 데이터 입출력 스크린을 디스플레이 장치 상에서 렌더링하는 단계로서, 상기 돌출 영역은 데이터 입력 영역과 오버레이되는 것인 상기 렌더링 단계와, 데이터 입력 영역을 분할하는 가상 딜리미터를 데이터 입출력 스크린 상에서 렌더링 단계를 포함한다. 상기 방법은 또한 데이터 입력 영역들 중 하나로부터의 입력으로서, 하나의 데이터 입력 영역과 일치하는 돌출 영역의 일부분에서 터치 조작을 검출하는 것을 포함한다.
일 구현예에 있어서, 렌더링 단계는 복수 개의 데이터 입력 영역을 각각 포함하는 복수 개의 데이터 입출력 스크린을 디스플레이 장치 상에서 검출하는 단계를 포함한다. 각각의 데이터 입출력 스크린상의 데이터 입력 영역들 중 적어도 하나는 모든 데이터 입출력 스크린들 사이에서 공통된다. 함몰 영역은 공통 데이터 입력 영역을 분할하는 가상 딜리미터를 포함한다. 데이터 입출력 스크린들 중 하나의 입출력 스크린의 공통 데이터 입력 영역은 복수 개의 데이터 입력 영역을 포함 할 수 있고, 가상 딜리미터는 공통 데이터 입력 영역의 데이터 입력 영역을 분할한다.
데이터 프로세서와, 디스플레이 장치 및 상기 디스플레이 장치 위에 배치되고 돌출된 영역과 이 돌출된 영역을 에워싸는 함몰된 영역을 포함하는 삼차원 터치 감지 투명 스크린을 포함하는 휴대형 전자 장치가 제공된다.
통신 장치(200)
지금부터 도 1 및 도 2를 참조하면, 동 도면들에는 핸드핼드 통신 장치(200)의 샘플이 도시되고 있다. 바람직하게, 핸드핼드 통신 장치(200)는 적어도 음성 및 데이터 통신 성능을 가진 양방향 무선 통신 장치이며, 무선 네트워크 내에서 조작하도록 구성되어 있다. 제공되는 정확한 기능에 따라서, 무선 핸드핼드 통신 장치(200)는 예컨대 데이터 메시징 장치, 양방향 페이저, 무선 이메일 장치, 데이터 메시징 성능을 가진 셀룰러 전화기, 무선 인터넷 기기, 또는 데이터 통신 장치로서 언급될 수 있다.
핸드핼드 통신 장치(200)는 공통 하우징(201) 내에 모두 배치되는 데이터 처리 시스템(도시 안됨), 통신 서브시스템(211), 디스플레이(300), 각종 기타 장치의 서브시스템, 및 전자 회로들을 포함한다. 데이터 처리 시스템과 디스플레이(300)에 대해서는 이후 보다 상세히 설명하기로 한다. 그러나 현 시점에서는, 데이터 처리 시스템은 디스플레이(300)를 포함하는 각종 장치의 서브시스템과 통신하며, 통신 장치(200)의 전반적인 조작을 제어하는 것을 지적하는 것으로 충분하다.
통신 서브시스템(211)
도 2는 핸드헬드 통신 장치(200)의 기능적 상세사항을 도시한다. 핸드헬드 통신 장치(200)는 통신 서브시스템(211) 및 데이터 처리 시스템과 같은 다양한 장치 서브시스템을 포함하는 마더보드를 포함한다. 통신 서브시스템(211)은 데이터 및 음성 통신과 같은 통신 기능을 수행하고, 일차 송신기/수신기(212), 이차 송신기/수신기(214), 일차 송신기/수신기(212)용 일차 내부 안테나(216), 이차 송신기/수신기(214)용 이차 내부 안테나(218), 하나 이상의 국부 발진기(LO)(213) 및 송신기/수신기(212, 214)에 연결된 하나 이상의 디지털 신호 프로세서(DSP)(220)를 포함한다.
통상적으로, 통신 서브시스템(211)은 일차 송신기/수신기(212) 및 일차 내부 안테나(216)를 경유하여 무선 셀룰러 네트워크(219)를 통해 무선 통신 신호를 송신 및 수신한다. 또한, 통상적으로 통신 서브시스템(211)은 이차 송신기/수신기(214) 및 이차 내부 안테나(218)를 경유하여 무선 로컬 영역 네트워크(221)를 통해 무선 통신 신호를 송신 및 수신한다.
일차 내부 안테나(216)는 GSM(Global System for Mobile Communications) 셀룰러 네트워크 또는 CDMA(Code Division Multiple Access) 셀룰러 네트워크 내에서 사용하도록 구성될 수 있다. 또한, 이차 내부 안테나(218)는 WLAN WiFi(IEEE 802.11x) 또는 Bluetooth 네트워크 내에서 사용하도록 구성될 수 있다. 도 2에서는 핸드헬드 통신 장치(200)가 2개의 안테나를 갖는 것으로 도시되어 있지만, 핸드헬 드 통신 장치(200)는 이 대신에 일차 송신기/수신기(212) 및 이차 송신기/수신기(214) 둘 다에 접속되어 있는 듀얼밴드 안테나를 갖는 단일 안테나만을 포함할 수도 있음을 이해하여야 한다.
무선 셀룰러 네트워크(219)로부터 일차 내부 안테나(216)에 의해 수신된 신호는 일차 송신기/수신기(212)의 수신기 구역에 입력되고, 일차 송신기/수신기(212)는 DSP(220)에 의해 수행되는 보다 복잡한 통신 기능에 대한 준비로서 주파수 하향 변환 및 아날로그 대 디지털(A/D) 변환과 같은 일반적인 수신기 기능을 수행한다. 무선 셀룰러 네트워크(219)를 통해 전송될 신호는 DSP(220)에 의해 처리되고, 디지털 대 아날로그 변환, 주파수 상향 변환, 및 일차 내부 안테나(216)를 경유하여 무선 셀룰러 네트워크를 통한 전송을 위해 일차 송신기/수신기(212)의 송신기 구역에 입력된다.
마찬가지로, 무선 로컬 영역 네트워크(221)로부터 이차 내부 안테나(218)에 의해 수신된 신호는 이차 송신기/수신기(214)의 수신기 구역에 입력되고, 이차 송신기/수신기(214)는 DSP(220)에 의해 수행되는 보다 복잡한 통신 기능에 대한 준비로서 주파수 하향 변환 및 아날로그 대 디지털(A/D) 변환과 같은 일반적인 수신기 기능을 수행한다. 무선 로컬 영역 네트워크(221)를 통해 전송될 신호는 DSP(220)에 의해 처리되고, 디지털 대 아날로그 변환, 주파수 상향 변환, 및 이차 내부 안테나(218)를 경유하여 무선 로컬 영역 네트워크를 통한 전송을 위해 이차 송신기/수신기(214)의 송신기 구역에 입력된다.
통신 장치(200)는 또한 핸드헬드 통신 장치(200)가 GSM 네트워크 내에서 사 용하기 위한 것으로 구성되는 경우 SIM 인터페이스(244)를 포함하고, 그리고/또는 핸드헬드 통신 장치(200)가 CDMA 네트워크 내에서 사용하기 위한 것으로 구성되는 경우 RUIM 인터페이스(244)를 포함한다. SIM/RUIM 인터페이스(244)는 SIM/RUIM 카드가 삽입 및 배출될 수 있는 카드슬롯과 유사하다. SIM/RUIM 카드는 많은 키 구성(251)과, 핸드헬드 통신 장치(200)와 연관된 IMSI(International Mobile Subscriber Identity) 및 기타 가입자 관련 정보와 같은 가입자 식별 정보를 포함한 기타 정보(253)를 보유한다.
데이터 통신 모드에서, 수신된 텍스트 메시지 또는 웹 페이지 다운로드는 통신 서브시스템(211)에 의해 처리될 것이고, 디스플레이(300) 또는 대안으로서 보조 입력/출력(I/O) 서브시스템(228)에 출력될 것이다. 핸드헬드 통신 장치(200)의 사용자는 예를 들어 디스플레이(300)를 사용하여 이메일 메시지와 같은 데이터 항목을 구성할 수 있다. 이러한 구성된 항목은 그 다음에 통신 서브시스템(211)을 통하여 무선 셀룰러 네트워크(219) 또는 로컬 영역 무선 네트워크(221)를 통해 전송될 수 있다.
음성 통신의 경우, 수신된 신호가 바람직하게 스피커(234)에 출력되고 송신용 신호가 마이크로폰(236)에 의해 생성되는 점을 제외하고는, 핸드헬드 통신 장치(200)의 전반적인 조작은 유사하다. 또한, 디스플레이(300)는 예를 들어 발신자의 신원, 음성 통화의 지속시간, 또는 기타 음성 통화 관련 정보의 표시를 제공할 수 있다.
디스플레이(300)
디스플레이(300)는 마더보드에 물리적으로 장착되고 전기적으로 접속되는 자체저장되는 3차원 터치 감지 디스플레이로서 제공된다. 도 3 및 도 7에 도시된 바와 같이, 디스플레이(300)는 디스플레이 장치(302), 및 디스플레이 장치(302) 상에 배치되는 투명한 3차원 터치 감지 스크린(304)을 포함한다. 디스플레이 장치(302) 및 터치 감지 스크린(304)은 데이터 처리 시스템에 연결된다. 데이터 처리 시스템은 디스플레이 장치(302)를 통하여 사용자에게 정보를 디스플레이하고, 터치 감지 스크린(304)을 통하여 사용자로부터 데이터/명령 입력을 수신한다.
바람직하게, 디스플레이 장치(302)는 평면형 유리 액정 디스플레이(LCD) 패널, 및 디스플레이 패널을 위한 디스플레이 전자회로부품들을 지니고 있는 인쇄 회로 기판(도시되지 않음)을 포함한다. 인쇄 회로 기판은 데이터 처리 시스템에 연결되고, 데이터 처리 시스템에 의해 제어된다. 인쇄 회로 기판에 더하여, 디스플레이 장치(302)는 백라이트(도시되지 않음), 및 백라이트와 LCD 패널 사이에 배치되는 도광판(도시되지 않음)을 포함할 수 있다. 그러나, 반사형 및 투과-반사형 액정 디스플레이, 플라스틱 액정 디스플레이(백라이트를 구비하거나 구비하지 않음), 음극선관(CRT) 디스플레이 및 플라즈마 멤브레인 디스플레이를 포함한 다른 디스플레이 장치가 디스플레이 장치(302)에 포함된다.
터치 감지 스크린(304)은 디스플레이 장치(302)의 전체 표면 상에 또는 그의 일부분 상에만 배치될 수 있고, 장착 프레임(도시되지 않음)을 통하여 디스플레이 장치(302)에 고정되며, 장착 프레임은 조립된 디스플레이(300)를 또한 마더보드에 고정시킨다. 터치 감지 스크린(304)은 평면형 투명 터치 감지 패널(306), 및 3차원 투명 렌즈(308)를 포함한다. 바람직하게, 터치 감지 패널(306)은 용량성 터치 감지 패널을 포함하고, 투명 렌즈(308)와 디스플레이 장치(302) 사이에 배치된다. 대안으로서, 터치 감지 패널은 저항성 터치 감지 패널을 포함하며, 투명 렌즈(308)가 저항성 터치 감지 패널과 디스플레이 장치(302) 사이에 배치될 수 있다.
도 3 및 도 7에 도시된 바와 같이, 투명 렌즈(308)는 복수의 돌출 영역(310) 및 함몰 영역(312)을 포함한다. 함몰 영역(312)은 돌출 영역(310)이 구분되는 투명 키로서 보이도록 투명 렌즈(308)의 돌출 영역(310)을 둘러싼다.
바람직하게, 3차원 투명 렌즈(308)는 탄성 중합체 재료로 제조되며, 장착 프레임 및/또는 접착제를 통하여 터치 감지 패널(306)에 고정된다. 대안으로서, 3차원 투명 렌즈(308)는 터치 감지 패널(306)과 일체적으로 성형될 수 있다. 투명 렌즈(308)는 아래에 보다 상세하게 설명될 것이다.
데이터 처리 시스템
데이터 처리 시스템은 통신 서브시스템(211), 보조 입력/출력(I/O) 서브시스템(228), 데이터 포트(230), 스피커(234), 마이크로폰(236), 단거리 통신 서브시스템(240), 장치 서브시스템(242), 및 디스플레이(300)와 같은 장치 서브시스템과 상호작용한다. 데이터 포트(230)는 RS-232 포트, USB(Universal Serial Bus) 포트 또는 기타 유선 데이터 통신 포트를 포함할 수 있다.
데이터 처리 시스템은 마이크로프로세서(238), 플래시 메모리(224), 및 휘발성 메모리(RAM)(226)를 포함한다. 플래시 메모리(224)는 컴퓨터 프로그램 저장장치(258) 및 프로그램 데이터 저장장치(250, 252, 254 및 256)를 포함한다. 컴퓨터 처리 명령은 또한 바람직하게 플래시 메모리(224) 또는 기타 유사한 비휘발성 저장장치에 저장된다. 컴퓨터 처리 명령은 플래시 메모리(224)로부터 마이크로프로세서(238)에 의해 실행될 때 컴퓨터 프로그램(258), 운영 시스템 및 운영 시스템 특정 애플리케이션을 구현한다. 대안으로서, 컴퓨터 처리 명령은 시스템 재설정 또는 전원 시동시 플래시 메모리(224)로부터 RAM(226)으로 복사되고, RAM(226)으로부터 나와서 마이크로프로세서(238)에 의해 실행될 수 있다. 컴퓨터 처리 명령은 제조시 핸드헬드 통신 장치(200) 상에 설치될 수 있거나, 또는 무선 네트워크(219, 221), 보조 I/O 서브시스템(228), 데이터 포트(230), 단거리 통신 서브시스템(240), 또는 장치 서브시스템(242)을 통하여 로딩될 수 있다.
전형적으로, 컴퓨터 프로그램(258)은 핸드헬드 통신 장치(200)가 하나 이상의 통신 서비스를 수신할 수 있도록 해주는 통신 소프트웨어를 포함한다. 예를 들어, 바람직하게는, 이 통신 소프소프트웨어는, 핸드헬드 통신 장치(200)가 각각 인터넷을 통해 다양한 컴퓨터 서버들과 통신하고, 메시지/e-메일들을 송수신하며, 전화 통화를 개시하고 수신하며, 전자 맵을 볼 수 있도록 해주는, 인터넷 브라우저 소프트웨어, SMS 메시지 및 e-메일 소프트웨어, 전화 소프트웨어, 및 맵 소프트웨어를 포함한다. 컴퓨터 프로그램(258)은 또한, 기일 및/또는 사용자에게 중요한 약속들을 기록해주는(diarize) 캘린더 소프트웨어, 사용자가 메모를 생성하고 편집할 수 있도록 해주는 메모 소프트웨어, 및/또는 사용자에게 중요한 업무의 상황을 추적해주는 업무 관리 소프트웨어와 같은, 응용 소프트웨어를 포함할 수 있다.
운영 시스템은, 핸드헬드 통신 장치(200)가 무선 셀룰러 네트워크(219) 및 로컬 영역 무선 네트워크(221)를 통해 통신 신호를 송수신하도록 허용하는 OSI(Open Systems Interconnection) 통신 프로토콜 스택을 포함한다. 운영 시스템은 또한, 핸드헬드 통신 장치(200)가 보조 입력/출력(I/O) 서브시스템(228), 데이터 포트(230), 스피커(234), 마이크로폰(236), 단거리 통신 서브시스템(240), 장치 서브시스템(242), 및 디스플레이(300)를 조작시키도록 허용한다.
운영 시스템은 또한, 디스플레이(300)와의 데이터 입력/출력을 시행하도록 데이터 프로세서를 구성하는 디스플레이 관리 소프트웨어를 포함한다. 디스플레이 관리 소프트웨어는 복수의 데이터 입력/출력 스크린들로 구성되며, 각각의 데이터 입력/출력 스크린은 컴퓨터 프로그램들(258) 중 하나와 연관된다. 각각의 데이터 입력/출력 스크린은 터치 감지 스크린(304)으로부터 연관된 컴퓨터 프로그램(258)으로의 데이터 입력을 용이하게 해주고, 연관된 컴퓨터 프로그램(258)으로부터 디스플레이 장치(302)로의 데이터 출력을 용이하게 해주도록 설계된다. 디스플레이 관리 소프트웨어는 또한, 데이터 프로세서로 하여금, 현재 활성인 컴퓨터 프로그램(258)에 관한 데이터 입력/출력 스크린을 디스플레이 장치(302) 상에 렌더링하도록(즉, 터치 감지 스크린(304)으로부터 입력을 수신하도록) 한다.
각각의 데이터 입력/출력 스크린은 복수의 구분된 데이터 입력/출력 영역을 포함한다. 디스플레이 관리 소프트웨어는, 터치 입력으로서 터치 감지 스크린(304)에서의 터치 조작을 검출하고, 터치 입력의 위치와 연관된 활성 데이터 입력/출력 스크린의 데이터 입력/출력 영역을 판정하도록 구성된다. 터치 조작의 가능한 형태로는, 터치 감지 스크린(304) 상에서의 손가락이나 스타일러스의 압착(이 경우, 스 크린(304)은 저항성 터치 감지 패널을 포함함)과, 터치 감지 스크린(304)에 근접한 손가락 또는 스타일러스의 존재(이 경우, 스크린(304)은 용량성 터치 감지 패널을 포함함)가 포함된다.
샘플 데이터 입력/출력 스크린이 도 4 및 5에 도시되어 있다. 도 4는 캘린더 소프트웨어로 날짜를 선택하기 위한 데이터 입력/출력 스크린(1000)을 도시하고 있다. 도시된 바와 같이, 날짜 선택 스크린(1000)은 복수의 연속된 데이터 입력/출력 영역(1002)을 포함하며, 그 각각은 고유한 날짜 번호와 연관되어 있다. 비록 날짜 선택 스크린(1000)은 7개의 데이터 입력 영역(1002)들의 5개의 행들(1006, 1008, 1010, 1012, 1014)을 포함하고 있지만, 명료성을 위해, 도 4는 7개의 데이터 입력 영역(1002)들(1002a, 1002b, 1002c, 1002d, 1002e, 1002f, 1002g)만을 명시적으로 식별하고 있다. 캘린더 소프트웨어는, 날짜 선택으로서, 디스플레이 관리 소프트웨어로부터 수신된, 데이터 입력/출력 영역 정보를 해석하고, 선택된 날짜에 대응하는 각각의 날짜와 연관된 약속 정보를 디스플레이 장치(302) 상에 디스플레이한다.
도 5는 e-메일 또는 메모 소프트웨어를 이용한 텍스트 입력을 위한 샘플 데이터 입력/출력 스크린(1100)을 도시하고 있다. 도시된 바와 같이, 텍스트 입력 스크린(1100)은 복수의 연속된 데이터 입력/출력 영역(1102)을 포함하며, 그 각각은 하나 이상의 문자(숫자, 글자, 또는 명령어) 또는 단어와 연관되어 있다. 비록 텍스트 입력 스크린(1100)이 제1 행(1106)에 4개의 데이터 입력 영역(1102)과, 3개 행(1108, 1110, 1112)에 7개의 데이터 입력 영역(1102)과, 제5 행(1114)에 5개의 데이터 입력 영역(1102)을 포함하고 있지만, 명료성을 위해, 도 5는 단지 5개의 데 이터 입력/출력 영역들(1102; 1102a, 1102b, 1102c, 1102d, 1102e)만을 명시적으로 식별하고 있다. e-메일/메모 소프트웨어는, 문자 선택으로서, 디스플레이 관리 소프트웨어로부터 수신된 데이터 입력/출력 영역 정보를 해석하고, 선택된 문자와 연관된 문자를 디스플레이 장치(302) 상에 디스플레이한다.
양호하게는, 각각의 데이터 입력/출력 영역(1002)은 격자선(1004)에 둘러싸여 통신 장치(200)의 조작자가 각각의 데이터 입력/출력 영역(1002)의 외곽선을 시각적으로 더 용이하게 식별할 수 있도록 해준다. 마찬가지로, 양호하게는 각각의 데이터 입력/출력 영역(1102)은 격자선(1104)에 의해 둘러싸여 통신 장치(200)의 조작자가 각각의 데이터 입력/출력 영역(1102)의 외곽선을 시각적으로 더 용이하게 식별할 수 있도록 해준다. 설명되는 바와 같이, 격자선(1004, 1104)은 데이터 처리 시스템에 의해 디스플레이 장치(302) 상에 렌더링되거나 및/또는 디스플레이 장치(302) 내에 영구적으로 구성될 수 있다.
데이터 입력/출력 스크린들은 하나 이상의 데이터 입력/출력 영역들을 공유할 수 있다("공통 I/O 영역"). 예를 들어, 통신 장치(200)의 조작자는, 터치 감지 스크린(304)을 통해 캘린더 소프트웨어에 대한 날짜를 선택하고, 또한 터치 감지 스크린(304)을 통해 e-메일/메모 소프트웨어 내에 문자들을 입력한다. 도시된 바와 같이, 날짜 선택 스크린(1000)의 제2, 제3, 제4 행(1008, 1010, 1012) 내의 각각의 데이터 입력/출력 영역(1002)은 최대 2-자릿수 숫자를 기술한다. 유사하게, 텍스트 입력 스크린(1100)의 제2, 제3, 제4 행(1108, 1110, 1112) 내의 각각의 데이터 입력/출력 영역(1102)은 최대 2개 문자를 기술한다. 데이터 입력/출력 스크린들의 이러한 구성으로, 날짜 선택 스크린(1000)의 제2, 제3, 및 제4 행(1008, 1010, 1012) 내의 데이터 입력 영역들(1002)의 각각은, 동일한 크기이며, 텍스트 입력 스크린(1100)의 제2, 제3, 및 제4 행(1108, 1110, 1112) 내의 대응하는 데이터 입력/출력 영역(1102)과 동일한 위치를 차지한다. 따라서, 날짜 선택 스크린(1000)의 제2, 제3, 및 제4 행(1008, 1010, 1012) 내의 데이터 입력/출력 영역(1002)와 텍스트 입력 스크린(1100)의 제2, 제3, 및 제4 행(1108, 1110, 1112) 내의 대응하는 데이터 입력/출력 영역(1102) 각각은 공통의 I/O 영역을 포함한다.
유사하게, 텍스트 입력 스크린(1100)의 제5 행(1114)의 처음 2개의 데이터 입력/출력 영역(1102a, 1102b)과, 마지막 2개의 데이터 입력/출력 영역(1102d, 1102e)는 각각 날짜 선택 스크린(1000)의 제5 행(1014)의 처음 2개의 데이터 입력/출력 영역(1002a, 1002b)과 마지막 2개의 데이터 입력/출력 영역(1002f, 1002g)과 동일한 위치를 차지한다. 그 결과, 처음 2개 및 마지막 2개의 데이터 입력/출력 영역(1002a, 1002b, 1002f, 1002g)과 그 대응하는 데이터 입력/출력 영역(1102a, 1102b, 1102d, 1102e) 각각은 공통의 I/O 영역을 포함한다.
텍스트 입력을 용이하게 하기 위해, e-메일/메모 소프트웨어는, 상용 단어들의 사전/히스토리를 보존하고, 이 사전/히스토리로부터 입력된 문자 시퀀스에 대응할 수 있는 단어들을 선택하며, 선택된 단어들을 디스플레이 관리 소프트웨어가 텍스트 입력 스크린(1100)의 제1 행(1106) 상에 디스플레이하도록 한다. 따라서, 텍스트 입력 스크린(1100)의 제1 행(1106)의 데이터 입력/출력 영역(1102)의 폭과 갯수는 디스플레이를 위해 선택된 단어들의 길이와 갯수에 따라 변동할 것이다. 그 러나, 날짜 선택 스크린(1000)의 제1 행(1006)의 7개의 데이터 입력/출력 영역(1102)은 텍스트 입력 스크린(1100)의 제1 행(1106)의 데이터 입력/출력 영역(1102)과 동일한 위치를 차지한다. 그 결과, 날짜 선택 스크린(1000)의 제1 행(1006)과 텍스트 입력 스크린(1100)의 제1 행(1106)은 하나의 공통 I/O 영역을 포함한다.
유사하게, 스페이스 문자는 영문에서 가장 흔하게 사용되는 문자들 중 하나이기 때문에, 텍스트 입력을 용이하게 하기 위해, 키보드와 같은 영문 입력 장치상의 스페이스 문자는 대개 다른 키들보다 크다. 따라서, 스페이스 문자에 대응하는 텍스트 입력 스크린(1100)의 제5 행(1114)의 데이터 입력/출력 영역(1102c)은 날짜 선택 스크린(1000)의 제5 행(1014)의 중간 3개 데이터 입력/출력 영역(1002c, 1002d, 1002e)과 동일한 위치를 차지한다. 그 결과, 3개의 데이터 입력/출력 영역(1002c, 1002d, 1002e)과 하나의 데이터 입력/출력 영역(1102c)는 하나의 공통 I/O 영역을 역시 포함한다.
디스플레이 관리 소프트웨어는 개개의 공통 I/O 영역의 크기보다 더 큰 정확도로 하나 이상의 공통 I/O 영역들에서의 터치 조작을 검출하도록 구성될 수 있다. 그 결과, 하나 이상의 공통 I/O 영역들은 그 크기 및/또는 위치가 연관된 컴퓨터 프로그램(258)에 대해 고유한 복수의 데이터 입력/출력 영역들(가변 I/O 영역들)을 포함할 수 있다. 예를 들어, 설명된 바와 같이, 날짜 선택 스크린(1000)의 제1 행(1006)에서의 공통 I/O 영역은 7개의 고정폭 데이터 입력/출력 영역들(1002)을 포함할 수 있는 반면, 텍스트 입력 스크린(1100)의 제1 행(1106)에서의 공통 I/O 영역의 데이터 입력/출력 영역들(1102)의 폭과 개수는 제1 행(1106)에서 디스플레이되는 단어의 길이 및 개수에 따라 변할 것이다. 따라서, 날짜 선택 스크린(1000)의 제1 행(1006)에서의 데이터 입력/출력 영역(1002)과, 텍스트 입력 스크린(1100)의 제1 행(1106)에서의 데이터 입력/출력 영역(1102)은 각각 가변 I/O 영역들을 포함한다. 디스플레이 관리 소프트웨어는, 각각의 이들 가변 I/O 영역들이 공통 I/O 영역보다 더 작은 경우에도, 제1 행(1006, 1106)에서의 각각의 가변 I/O 영역들에서의 터치 조작을 검출하고 이 터치 조작들 간을 구별할 수 있다.
이와 유사하게, 스페이스 문자에 대응하는 텍스트 입력 스크린(1100)의 제5 행(1114)에서의 데이터 입력/출력 영역(1102c)은 동일한 폭을 갖고, 날짜 선택 스크린(1000)의 제5 행(1014)에서의 중간의 3개 데이터 입력/출력 영역들(1002c, 1002d, 1002e)과 동일한 위치를 차지한다. 따라서, 중간의 3개 데이터 입력/출력 영역들(1002c, 1002d, 1002e) 각각은 가변 I/O 영역들을 포함한다. 디스플레이 관리 소프트웨어는, 각각의 이들 가변 I/O 영역들이 공통 I/O 영역(1102c)보다 더 작은 경우에도, 제5 행(1114)에서의 각각의 가변 I/O 영역들에서의 터치 조작을 검출하고 터치 조작들 간을 구별할 수 있다.
통신 장치(200)의 조작자가 각각의 공통 I/O 영역의 외곽선을 쉽게 식별할 수 있도록, 각각의 데이터 입력/출력 영역은 (디스플레이(300)의) 투명 렌즈(308)의 투명 키들 중 하나에 의해 오버레이된다. 바람직하게는, 각각의 공통 I/O 영역은 (디스플레이(300)의) 투명 렌즈(308)의 투명 키들 중 많아야 하나의 투명 키에 의해 오버레이된다. 또한, 바람직하게는, 각각의 상기 투명 키의 크기 및 형상은 각각의 대응하는 공통 I/O 영역의 크기 및 형상과 일치한다. 그 결과, 함몰된 영역(312)은 각각의 공통 I/O 영역의 외곽선과 정렬될 수 있다.
또한, 통신 장치(200)의 조작자가 각각의 데이터 입력/출력 영역의 외곽선을 여전히 쉽게 식별할 수 있으면서 다양한 데이터 입력/출력 스크린들 중에서 가변 I/O 영역들의 크기/위치에서의 차이를 수용하기 위해, 바람직하게는, 모든 데이터 입력/출력 스크린들 중에서 각 행에서와 각 열에서 최대크기의 가변 I/O 영역이 투명 키들 중 많아야 하나의 투명 키에 의해 오버레이된다. 또한, 바람직하게는, 각각의 상기 투명 키의 크기 및 위치는 각각의 대응하는 최대크기의 가변 I/O 영역의 크기 및 위치와 일치한다. 그 결과, 함몰된 영역(312)은 각각의 가변 I/O 영역의 외곽선과 정렬될 수 있다.
데이터 프로세서가 디스플레이 장치(302) 상에 모든 데이터 입력/출력 스크린들의 어둡게 채색된 모든 그리드 라인들을 렌더링했을 경우, 각각의 새로운 컴퓨터 프로그램(258)이 활성화되었을 때 그리드 라인들을 렌더링하는 것은 데이터 프로세서의 컴퓨팅 전력을 낭비시킨다. 각각의 데이터 입력/출력 영역의 외곽선과 각각의 투명 키를 불명확하게 하는 것이 없이 이들 그리드 라인 모두를 렌더링해야하는 것을 피하기 위하여, 투명 렌즈들(308)은 도 3, 도 6 및 도 7에 도시된 바와 같이 함몰된 영역(312) 내에 포함되는 채색된 마스크(314)를 포함할 수 있다. 바람직하게는, 투명 렌즈들(308)은 인몰드(in-mould) 데코레이션(IMD) 제조 공정을 이용하여 사출 성형되고, 마스크(314)는 IMD 제조 동안에 투명 렌즈들(308) 상에 인쇄된다. 마스크(314)가 디스플레이 장치(302) 위에 배치되거나 디스플레이 장치(302) 로부터 분리되어 있기 때문에, 마스크(314)는 투명 렌즈들(308)이 서로 다른 각도에서 조망된 경우에 함몰된 영역들(312)의 위치에서 시차차(parallax difference) 또는 겉보기각 천이를 생성한다. 그 결과, 이 구성은 데이터 프로세서가 디스플레이 장치(302) 상에서 모든 그리드 라인들을 렌더링한 경우와 비교하여 다양한 데이터 I/O 영역들 간의 구별을 보다 시각적으로 분명해지도록 만든다.
도 6은 투명 렌즈들(308)의 평면도이며, 샘플 데이터 입력/출력 스크린(1000, 1100)과 연관된 샘플 마스크(314)의 구성을 나타낸다. 도 7은 투명 렌즈(308)를 포함한 디스플레이 장치(302)의 횡단면도이다. 도시된 바와 같이, 마스크(314)는 6개의 어둡게 채색된 수평 그리드 라인들(316a, 316b, 316c, 316d, 316e, 316f)과 8개의 어둡게 채색된 수직 그리드 라인들(316g, 316h, 316i, 316j, 316k, 316l, 316m, 316n)을 포함한다.
수평 그리드 라인들(316a, 316b)은 날짜 선택 스크린(1000)의 제1 행(1006)과 텍스트 입력 스크린(1100)의 제1 행(1106)의 공통 I/O 영역들의 상한선 및 하한선과 각각 정렬된다. 수평 그리드 라인들(316b, 316c)은 날짜 선택 스크린(1000)의 제2 행(1008)와 텍스트 입력 스크린(1100)의 제2 행(1108)의 공통 I/O 영역들의 상한선 및 하한선과 각각 정렬된다. 수평 그리드 라인들(316c, 316d)은 날짜 선택 스크린(1000)의 제3 행(1010)와 텍스트 입력 스크린(1100)의 제3 행(1110)의 공통 I/O 영역들의 상한선 및 하한선과 각각 정렬된다. 수평 그리드 라인들(316d, 316e)은 날짜 선택 스크린(1000)의 제4 행(1012)과 텍스트 입력 스크린(1100)의 제4 행(1112)의 공통 I/O 영역들의 상한선 및 하한선과 각각 정렬된다. 수평 그리드 라 인들(316e, 316f)은 날짜 선택 스크린(1000)의 제5 행(1014)과 텍스트 입력 스크린(1100)의 제5 행(1114)의 공통 I/O 영역들의 상한선 및 하한선과 각각 정렬된다.
수직 그리드 라인들(316g, 316h)은 날짜 선택 스크린(1000)의 제1 열과 텍스트 입력 스크린(1100)의 제1 열의 데이터 입력/출력 영역들의 좌측 한계선 및 우측 한계선과 각각 정렬된다. 수직 그리드 라인들(316h, 316i)은 날짜 선택 스크린(1000)의 제2 열과 텍스트 입력 스크린(1100)의 제2 열의 데이터 입력/출력 영역들의 좌측 한계선 및 우측 한계선과 각각 정렬된다. 수직 그리드 라인들(316i, 316j)은 날짜 선택 스크린(1000)의 제3 열과 텍스트 입력 스크린(1100)의 제3 열의 데이터 입력/출력 영역들의 좌측 한계선 및 우측 한계선과 각각 정렬된다. 수직 그리드 라인들(316j, 316k)은 날짜 선택 스크린(1000)의 제4 열과 텍스트 입력 스크린(1100)의 제4 열의 데이터 입력/출력 영역들의 좌측 한계선 및 우측 한계선과 각각 정렬된다. 수직 그리드 라인들(316k, 316l)은 날짜 선택 스크린(1000)의 제5 열과 텍스트 입력 스크린(1100)의 제5 열의 데이터 입력/출력 영역들의 좌측 한계선 및 우측 한계선과 각각 정렬된다. 수직 그리드 라인들(316l, 316m)은 날짜 선택 스크린(1000)의 제6 열과 텍스트 입력 스크린(1100)의 제6 열의 데이터 입력/출력 영역들의 좌측 한계선 및 우측 한계선과 각각 정렬된다. 수직 그리드 라인들(316m, 316n)은 날짜 선택 스크린(1000)의 제7 열과 텍스트 입력 스크린(1100)의 제7 열의 데이터 입력/출력 영역들의 좌측 한계선 및 우측 한계선과 각각 정렬된다.
그 결과, 그리드 라인들(316)은 각각의 공통 I/O 영역에 대응하는 투명 키의 외곽선과 정렬될 수 있다. 그러나, 그리드 라인들(316)의 어느 것도 날짜 선택 스 크린(1000)의 제1 행(1006)에서의 가변 I/O 영역(1002)의 외곽선 또는 날짜 선택 스크린(1000)의 제5 행(1014)에서의 가변 I/O 영역(1002c, 1002d, 1002e)의 외곽선에 대응하지 않는 것이 바람직하다. 따라서, 디스플레이 관리 소프트웨어는, 캘린더 프로그램이 활성 컴퓨터 프로그램(258)인 경우 데이터 프로세서가 제1 행(1006)에서의 각각의 7개 가변 I/O 영역들 간의 가상 그리드 라인들과, 각각의 가변 I/O 영역들(1002c, 1002d, 1002e) 간의 가상 그리드 라인들을 디스플레이 장치(302) 상에 렌더링하도록 구성될 수 있다. 이 상황에서, 데이터 프로세서는 또한 데이터 입력/출력 영역들(1002)에서, 통신 장치(200)의 조작자에 의해 선택된 달에 관한 날짜 숫자(date number)를 렌더링할 수 있다. 그 결과, 터치 감지 스크린(304) 아래에서 디스플레이(302) 상에서 렌더링된 이미지는 도 4에 도시된 데이터 입력/출력 스크린(1000)과 일치될 수 있다.
유사하게, 그리드 라인(316)들 중 어느 것도 텍스트 입력 스크린(1100)의 제1 행(1106)의 가변 I/O 영역(1102)의 외곽선에 대응하지 않는 것이 바람직하다. 따라서, 이메일 소프트웨어 또는 메모 소프트웨어가 활성 컴퓨터 프로그램(258)인 경우, 데이터 프로세서가 텍스트 입력 스크린(1100)의 제1 행(1106)의 각각의 가변 I/O 영역(1102) 사이의 가상 그리드 라인들을 디스플레이 장치(302) 상에 렌더링하도록 디스플레이 관리 소프트웨어는 구성될 수 있다. 이러한 상황에서, 데이터 프로세서는 또한, 공통 I/O 및/또는 가변 I/O 영역(1102)들에 표준 QWERTY 키보드의 문자를 렌더링할 수 있다. 이메일/메모 소프트웨어는 또한, 디스플레이 관리 소프트웨어를 통해 터치 감지 스크린(304)으로부터 텍스트 입력을 수신하고, 데이터 프 로세서로 하여금 입력된 문자 시퀀스와 연관된 단어들을 가변 I/O 영역(1102)들에서 렌더링하게 할 수 있다. 결과적으로, 터치 감지 스크린(304) 아래의 디스플레이 장치(302) 상에서 렌더링되는 이미지는 도 5에 도시된 데이터 입력/출력 스크린(1100)과 일치될 수 있다.
도 8은 통신 장치(200)의 조작자가 활성 컴퓨터 프로그램으로서 컴퓨터 프로그램들(258) 중 하나를 선택하는 경우, 디스플레이(300) 및 데이터 처리 시스템의 동작 방법을 도시한 순서도이다.
단계(S100)에서, 디스플레이 관리 소프트웨어는 활성 컴퓨터 프로그램과 연관되는 데이터 입력/출력 스크린을 디스플레이 장치(302) 상에 렌더링한다. 데이터 입력/출력 스크린은 복수의 데이터 입력 영역들을 포함한다. 각각의 데이터 입력 영역은 투명 키들 중 하나에 의해 오버레이된다. 상기 논의한 바와 같이, 하나 이상의 데이터 입력 영역들은 컴퓨터 프로그램들(258) 모두에 공통인 공통 I/O 영역들을 포함할 수 있다.
각각의 공통 I/O 영역이 개개의 투명 키와 정렬되도록 디스플레이 관리 소프트웨어가 구성된다. 바람직하게, 각각의 공통 I/O 영역의 외곽선은 각각 연관된 투명 키 주변의 함몰된 영역에 3차원 터치 감지 스크린(304)에서 형성되는 영구적인 그리드 라인에 의해 식별된다. 결과적으로, 그리드 라인들은 공통 I/O 영역들을 서로 시각적으로 구분시킨다.
데이터 입력 영역들 중 하나 이상은 활성 컴퓨터 프로그램에 대해 고유한 크기 및/또는 위치를 갖는 가변 I/O 영역들을 포함할 수 있다. 공통 I/O 영역이 복수 의 가변 I/O 영역들을 포함하는 경우, 디스플레이 관리 소프트웨어는 이러한 가변 I/O 영역들을 시각적으로 구분시키는 하나 이상의 가상 그리드 라인들을 디스플레이 장치(302) 상에 렌더링한다.
결과적으로, 활성 데이터 입력/출력 스크린 내의 각각의 공통 I/O 영역은 투명 키에 의해 오버레이되고, 3차원 터치 감지 스크린(304)에서 형성되는 그리드 라인들에 의해 선택적으로 둘러싸인다. 또한, 활성 데이터 입력/출력 스크린 내의 각각의 가변 I/O 영역은 디스플레이(302) 상에 렌더링되는 가상 그리드 라인들에 의해 둘러싸인다. 따라서, 조작자는 각각의 데이터 입력/출력 영역의 외곽선을 용이하게 확정할 수 있다.
단계(S100)에서, 활성 컴퓨터 프로그램은 또한, 활성 컴퓨터 프로그램에 적합한 문자들을 디스플레이 장치(302) 상에 렌더링한다. 결과적으로, 데이터 입력/출력 스크린은 문자/명령어를 지정된 데이터 입력/출력 영역들과 시각적으로 연관시킨다. 예를 들어, 캘린더 소프트웨어가 활성 컴퓨터 프로그램인 경우, 컴퓨터 프로그램은 적합한 데이터 입력/출력 영역에 통신 장치(200)의 조작자에 의해 선택된 달의 데이터 숫자들을 숫자 순서대로 렌더링한다. 이메일/메모 소프트웨어가 활성 컴퓨터 프로그램인 경우, 컴퓨터 프로그램은 적합한 데이터 입력/출력 영역내에, 표준 QWERTY 키보드의 문자들을 렌더링한다.
이후부터, 단계(S102)에서, 사용자는 원하는 문자/명령어와 연관된 데이터 입력/출력 영역과 오버레이되는 투명 키의 일부분을 누르거나 또는 터치함으로써 활성 컴퓨터 프로그램내로 문자/명령어를 입력한다. 디스플레이 관리 소프트웨어는 터치 입력으로서 투명 터치 감지 패널에서의 터치 조작(압력 또는 전기용량의 변화)을 검출하고, 단계(S104)에서, 터치 입력의 위치와 연관되는 특정한 데이터 입력/출력 영역을 식별한다. 그 다음, 디스플레이 관리 소프트웨어는 선택된 데이터 입력/출력 영역의 아이덴티티를 활성 컴퓨터 프로그램에 전달하고, 이어서, 활성 컴퓨터 프로그램은 단계(S106)에서, 터치 입력을 선택된 데이터 입력/출력 영역과 시각적으로 연관되는 문자/명령으로 변환시킨다.
통신 장치(200)가 전력 구동되는 한 이러한 프로세스는 반복된다. 따라서, 통신 장치(200)의 조작자가 후속하여 활성 컴퓨터 프로그램으로서 컴퓨터 프로그램들(258) 중 다른 하나를 선택한다면, 디스플레이 관리 소프트웨어는 새로운 활성 컴퓨터 프로그램과 연관되는 데이터 입력/출력 스크린을 디스플레이 장치(302) 상에 렌더링한다. 다시, 각각의 공통 I/O 영역은 개개의 투명 키와 정렬되고, 각각의 공통 I/O 영역의 외곽선은 각각의 연관된 투명 키 주변에 형성되는 그리드 라인에 의해 식별된다. 디스플레이 관리 소프트웨어는 또한, 활성 데이터 입력/출력 영역의 임의의 가변 I/O 영역을 시각적으로 구분시키는 하나 이상의 가상 딜리미터를 디스플레이 장치(302) 상에 렌더링할 수 있다. 그 다음, 새로운 활성 컴퓨터 프로그램은 활성 컴퓨터 프로그램에 적합한 문자들을 디스플레이 장치(302) 상에 렌더링한다. 그러나, 공통 I/O 영역들의 외곽선이 각각의 연관된 투명 키 주변에 영구적으로 형성되는 그리드 라인들에 의해 식별되기 때문에, 디스플레이 관리 소프트웨어는 각각의 데이터 입력/출력 영역 주변에 그리드 라인들을 렌더링할 필요가 없다. 대신에, 디스플레이 관리 소프트웨어는 각각의 가변 I/O 영역 주변에 그리드 라인들을 렌더링할 필요가 없다. 결과적으로, 상이한 데이터 입력/출력 스크린들을 렌더링하는데 요구되는 렌더링 전력은 종래의 터치 스크린 장치들과 대비되어 감소될 수 있다.
도 1은 휴대형 전자 장치의 전면도.
도 2는 디스플레이 및 데이터 처리 시스템을 포함하는 휴대형 전자 장치의 어떠한 기능적 상세사항을 도시하는 개략도.
도 3은 도 6의 선 3-3에서 본 디스플레이의 횡단면도.
도 4는 디스플레이 상에서 렌더링될 때의 일자 선택 스크린을 도시하는 도면.
도 5는 디스플레이 상에 렌더링될 때의 텍스트 입력 스크린을 도시하는 도면.
도 6은 일자 선택 및 텍스트 입력 스크린을 갖도록 사용하기 위한 샘플 마스크를 도시하는 디스플레이 장치의 평면도.
도 7은 도 6의 선 7-7에서 본 디스플레이의 횡단면도.
도 8은 디스플레이와 데이터 처리 시스템의 조작 방법을 보여주는 플행챠트.

Claims (15)

  1. 휴대형 전자 장치에 있어서,
    데이터 프로세서; 및
    상기 데이터 프로세서와 결합된 디스플레이
    를 포함하며,
    상기 디스플레이는,
    디스플레이 장치; 및
    상기 디스플레이 장치의 일부분 위에 배치되고, 돌출된 영역과 이 돌출된 영역을 에워싸는 함몰된 영역을 포함하는 삼차원 터치 감지 투명 스크린,
    을 포함하며,
    상기 데이터 프로세서는,
    (ⅰ) 복수의 데이터 입력 영역들을 포함하는 데이터 입력/출력 스크린을 상기 디스플레이 장치상에 렌더링하고(상기 돌출된 영역은 상기 데이터 입력 영역들과 오버레이됨);
    (ⅱ) 상기 데이터 입력 영역들 중 하나의 데이터 입력 영역으로부터의 입력으로서, 상기 하나의 데이터 입력 영역과 일치하는 상기 돌출된 영역의 일부분에서의 터치 조작을 검출하도록 구성되는 것인, 휴대형 전자 장치.
  2. 제 1 항에 있어서, 상기 데이터 프로세서는 상기 데이터 입력 영역들 중 적 어도 하나의 데이터 입력 영역의 외곽선과 정렬되는 가상 딜리미터(delimiter)를 상기 디스플레이 장치상에 렌더링하도록 구성되고, 상기 가상 딜리미터는 상기 데이터 입력 영역들을 구분시키는 것인, 휴대형 전자 장치.
  3. 제 1 항 또는 제 2 항에 있어서, 상기 함몰된 영역은 상기 터치 감지 스크린상에 제공된 마스크를 포함하며, 상기 마스크는 상기 데이터 입력 영역들 주변에 배치된 가상 딜리미터를 포함하는 것인, 휴대형 전자 장치.
  4. 제 3 항에 있어서, 상기 데이터 프로세서는 복수의 상기 데이터 입력/출력 스크린들을 상기 디스플레이 장치 상에 묘사하도록 구성되며, 상기 각각의 데이터 입력/출력 스크린들은 상기 복수의 데이터 입력 영역들을 포함하며, 상기 각각의 데이터 입력/출력 스크린들 상의 상기 데이터 입력 영역들 중 적어도 하나의 데이터 입력 영역은 상기 모든 데이터 입력/출력 스크린들 사이에서 공통되며, 상기 가상 딜리미터는 상기 공통 데이터 입력 영역들을 구분시키는 것인, 휴대형 전자 장치.
  5. 제 4 항에 있어서, 상기 데이터 입력/출력 스크린들 중 하나의 데이터 입력/출력 스크린의 상기 공통 데이터 입력 영역은 상기 복수의 데이터 입력 영역들을 포함하며, 상기 가상 딜리미터는 상기 공통 데이터 입력 영역의 상기 데이터 입력 영역들을 구분시키는 것인, 휴대형 전자 장치.
  6. 제 1 항 내지 제 5 항 중 임의의 한 항에 있어서, 상기 터치 감지 스크린은 평면형 투명 터치 감지 패널과, 상기 평면형 투명 터치 감지 패널에 고정된 삼차원 투명 렌즈를 포함하는 것인, 휴대형 전자 장치.
  7. 디스플레이 장치와, 상기 디스플레이 장치 위에 배치되고 돌출된 영역과 이 돌출된 영역을 에워싸는 함몰된 영역을 포함하는 삼차원 터치 감지 투명 스크린을 포함하는 터치 감지 디스플레이로부터 입력을 검출하는 방법에 있어서,
    복수의 데이터 입력 영역들을 포함하는 데이터 입력/출력 스크린을 상기 디스플레이 장치상에 렌더링하고(상기 돌출된 영역은 상기 데이터 입력 영역들과 오버레이됨), 상기 데이터 입력 영역들을 구분시키는 가상 딜리미터를 상기 데이터 입력/출력 스크린 상에 렌더링하는 단계; 및
    상기 데이터 입력 영역들 중 하나의 데이터 입력 영역으로부터의 입력으로서, 상기 하나의 데이터 입력 영역과 일치하는 상기 돌출된 영역의 일부분에서의 터치 조작을 검출하는 단계
    를 포함하는 터치 감지 디스플레이로부터 입력을 검출하는 방법.
  8. 제 7 항에 있어서, 상기 렌더링하는 단계는 상기 복수의 데이터 입력 영역들을 각각 포함하는 복수의 상기 데이터 입력/출력 스크린들을 상기 디스플레이 장치상에 묘사하는 단계를 포함하며, 상기 각각의 데이터 입력/출력 스크린들 상의 상 기 데이터 입력 영역들 중 적어도 하나의 데이터 입력 영역은 상기 모든 데이터 입력/출력 스크린들 사이에서 공통되며, 상기 함몰된 영역은 상기 공통 데이터 입력 영역들을 구분시키는 가상 딜리미터를 포함하는 것인, 터치 감지 디스플레이로부터 입력을 검출하는 방법.
  9. 제 8 항에 있어서, 상기 데이터 입력/출력 스크린들 중 하나의 데이터 입력/출력 스크린의 상기 공통 데이터 입력 영역은 상기 복수의 데이터 입력 영역들을 포함하며, 상기 가상 딜리미터는 상기 공통 데이터 입력 영역의 상기 데이터 입력 영역들을 구분시키는 것인, 터치 감지 디스플레이로부터 입력을 검출하는 방법.
  10. 전자 장치를 위한 처리 명령어를 내장하는 컴퓨터 판독가능 매체로서, 상기 처리 명령어는, 상기 전자 장치의 프로세서에 의해 수행될 때에, 상기 전자 장치로 하여금 청구항 제 7 항 내지 제 9 항 중 임의의 한 항의 방법의 단계들을 수행하게 하는 것인, 컴퓨터 판독가능 매체.
  11. 삼차원 터치 감지 디스플레이에 있어서,
    디스플레이 장치; 및
    상기 디스플레이 장치 위에 배치되고, 복수의 돌출된 영역들과 이 돌출된 영역들을 에워싸는 함몰된 영역을 포함하는 삼차원 터치 감지 투명 스크린
    을 포함하며,
    상기 함몰된 영역은 인쇄된 마스크를 포함하는 것인, 삼차원 터치 감지 디스플레이.
  12. 제 11 항에 있어서, 상기 삼차원 터치 감지 투명 스크린은 평면형 투명 터치 감지 패널과, 상기 평면형 투명 터치 감지 패널에 고정된 삼차원 투명 렌즈를 포함하는 것인, 삼차원 터치 감지 디스플레이.
  13. 제 12 항에 있어서, 상기 평면형 투명 터치 감지 패널은 용량성 터치 감지 패널을 포함하며, 상기 용량성 터치 감지 패널은 상기 투명 렌즈와 상기 디스플레이 장치 사이에 배치되는 것인, 삼차원 터치 감지 디스플레이.
  14. 제 12 항에 있어서, 상기 평면형 투명 터치 감지 패널은 저항성 터치 감지 패널을 포함하며, 상기 투명 렌즈는 상기 저항성 터치 감지 패널과 상기 디스플레이 장치 사이에 배치되는 것인, 삼차원 터치 감지 디스플레이.
  15. 제 12 항 내지 제 14 항 중 임의의 한 항에 있어서, 상기 인쇄된 마스크는 인-몰드(in-mould) 데코레이션(IMD) 제조 공정을 이용하여 상기 투명 렌즈상에 통합되는 것인, 삼차원 터치 감지 디스플레이.
KR1020090012000A 2008-02-13 2009-02-13 3차원 터치 감지 디스플레이 장치 KR101114642B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP08151395A EP2090971B1 (en) 2008-02-13 2008-02-13 Three-dimensional touch-sensitive display device
EP08151395.4 2008-02-13

Publications (2)

Publication Number Publication Date
KR20090087841A true KR20090087841A (ko) 2009-08-18
KR101114642B1 KR101114642B1 (ko) 2012-03-05

Family

ID=39488293

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090012000A KR101114642B1 (ko) 2008-02-13 2009-02-13 3차원 터치 감지 디스플레이 장치

Country Status (3)

Country Link
EP (1) EP2090971B1 (ko)
KR (1) KR101114642B1 (ko)
CA (1) CA2653858A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160128926A (ko) * 2015-04-28 2016-11-08 삼성디스플레이 주식회사 터치 경로에 대응하는 디스플레이 패널에 대한 마스크 오버레이를 생성하기 위한 방법 및 시스템

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9041661B2 (en) * 2010-08-13 2015-05-26 Nokia Corporation Cover for an electronic device
US8531404B2 (en) * 2010-10-04 2013-09-10 Dresser, Inc. Display assembly and a fuel dispensing unit
EP2772835A1 (en) * 2013-02-27 2014-09-03 Wintek (China) Technology Ltd. Touch-sensitive panel

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU3181800A (en) * 1999-03-23 2000-10-09 British Telecommunications Public Limited Company Computer input device
US6259044B1 (en) 2000-03-03 2001-07-10 Intermec Ip Corporation Electronic device with tactile keypad-overlay
US20030081016A1 (en) * 2001-10-31 2003-05-01 Genovation Inc. Personal digital assistant mouse
US6776546B2 (en) 2002-06-21 2004-08-17 Microsoft Corporation Method and system for using a keyboard overlay with a touch-sensitive display screen
US7042711B2 (en) 2003-11-18 2006-05-09 Kabushiki Kaisha Toshiba Multi-functional electronic device with a continuously accessible pointing device
WO2005076117A1 (ja) 2004-02-10 2005-08-18 Takuya Ogihara タッチスクリーン式入力装置
US7886233B2 (en) * 2005-05-23 2011-02-08 Nokia Corporation Electronic text input involving word completion functionality for predicting word candidates for partial word inputs
US7830368B2 (en) * 2006-06-06 2010-11-09 3M Innovative Properties Company Keypad with virtual image

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160128926A (ko) * 2015-04-28 2016-11-08 삼성디스플레이 주식회사 터치 경로에 대응하는 디스플레이 패널에 대한 마스크 오버레이를 생성하기 위한 방법 및 시스템

Also Published As

Publication number Publication date
KR101114642B1 (ko) 2012-03-05
EP2090971A1 (en) 2009-08-19
CA2653858A1 (en) 2009-08-13
EP2090971B1 (en) 2012-06-27

Similar Documents

Publication Publication Date Title
US9692881B2 (en) Electronic device, information processing method and information display method
US8289286B2 (en) Zooming keyboard/keypad
EP2000885B1 (en) Haptic display for a handheld electronic device
US7552142B2 (en) On-screen diagonal cursor navigation on a handheld communication device having a reduced alphabetic keyboard
EP1903422B1 (en) Lightguide subassembly for receiving a trackball navigational tool mountable within a handheld mobile device
US20080303795A1 (en) Haptic display for a handheld electronic device
US20080303796A1 (en) Shape-changing display for a handheld electronic device
JP5371712B2 (ja) キー入力装置および携帯端末
CN101982812A (zh) 键盘布置
CA2634778A1 (en) Shape-changing display for a handheld electronic device
CN102177482A (zh) 具有与显示器相背对的用户输入界面的电子装置
KR101114642B1 (ko) 3차원 터치 감지 디스플레이 장치
RU2421773C2 (ru) Клавиатура электронного оборудования и способ для управления клавиатурой электронного оборудования
US20110205154A1 (en) Illuminated optical navigation module
CA2732946C (en) An illuminated optical navigation module
US20090201258A1 (en) Three-dimensional touch-sensitive display device
CN111989906A (zh) 电子设备
EP3115864B1 (en) Portable electronic device including keyboard and method of controlling same
GB2428503A (en) Configurable touch screen keypad
US20080163111A1 (en) Streamlined entry of appointment record
KR101578726B1 (ko) 이동 단말기
US20080158159A1 (en) On-screen cursor navigation on a handheld communication device displaying a modifed webpage
CN101388921B (zh) 手持电子设备
CA2572659C (en) On-screen cursor navigation on a handheld communication device displaying a modified webpage
CA2572606C (en) Selective viewing of information

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20150126

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20160122

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20170125

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20180125

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20190123

Year of fee payment: 8