KR102645610B1 - 터치 감응식 제어 장치를 갖는 핸드헬드 컨트롤러 - Google Patents

터치 감응식 제어 장치를 갖는 핸드헬드 컨트롤러 Download PDF

Info

Publication number
KR102645610B1
KR102645610B1 KR1020207029481A KR20207029481A KR102645610B1 KR 102645610 B1 KR102645610 B1 KR 102645610B1 KR 1020207029481 A KR1020207029481 A KR 1020207029481A KR 20207029481 A KR20207029481 A KR 20207029481A KR 102645610 B1 KR102645610 B1 KR 102645610B1
Authority
KR
South Korea
Prior art keywords
finger
touch
control device
touch sensor
handheld controller
Prior art date
Application number
KR1020207029481A
Other languages
English (en)
Other versions
KR20200133248A (ko
Inventor
이안 캠벨
제프리 피터 벨링하우센
브라이언 데이비드 헨슬리
스콧 달튼
마이클 제이콥 고어즈
쳉 태드 유
Original Assignee
밸브 코포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 밸브 코포레이션 filed Critical 밸브 코포레이션
Publication of KR20200133248A publication Critical patent/KR20200133248A/ko
Application granted granted Critical
Publication of KR102645610B1 publication Critical patent/KR102645610B1/ko

Links

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/218—Input arrangements for video game devices characterised by their sensors, purposes or types using pressure sensors, e.g. generating a signal proportional to the pressure applied by the player
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/214—Input arrangements for video game devices characterised by their sensors, purposes or types for locating contacts on a surface, e.g. floor mats or touch pads
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/24—Constructional details thereof, e.g. game controllers with detachable joystick handles
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/24—Constructional details thereof, e.g. game controllers with detachable joystick handles
    • A63F13/245—Constructional details thereof, e.g. game controllers with detachable joystick handles specially adapted to a particular type of game, e.g. steering wheels
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25—Output arrangements for video game devices
    • A63F13/28—Output arrangements for video game devices responding to control signals received from the game device for affecting ambient conditions, e.g. for vibrating players' seats, activating scent dispensers or affecting temperature or light
    • A63F13/285—Generating tactile feedback signals via the game input device, e.g. force feedback
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0338—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of limited linear or angular displacement of an operating part of the device from a neutral position, e.g. isotonic or isometric joysticks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03547—Touch pads, in which fingers can move on a surface

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

본원에서는 특히 터치 감응식 제어 장치를 갖는 핸드헬드 컨트롤러뿐만 아니라, 터치 감응식 제어 장치를 사용하기 위한 방법 및 핸드헬드 컨트롤러를 조립하기 위한 방법을 설명한다. 예시적인 핸드헬드 컨트롤러는 상면 제어 장치 상에서 손가락의 존재, 위치, 및/또는 제스처를 검출하기 위한 스위치, 압력 센서, 및 터치 센서를 포함하는 상면 제어 장치(예를 들어, "트리거 버튼")를 포함할 수 있다.

Description

터치 감응식 제어 장치를 갖는 핸드헬드 컨트롤러
관련 출원의 교차 참조
본 출원은 2018년 3월 23일에 출원된 "터치 감응식 제어 장치를 갖는 핸드헬드 컨트롤러(Handheld Controllers with Touch-Sensitive Controls)"라는 명칭의 미국 특허 출원 제15/934,725호에 대한 우선권을 주장하며, 그 전체는 본원에 참조로서 원용된다.
핸드헬드 컨트롤러는 예를 들어 원격 컴퓨팅 장치에 입력을 제공하기 위해 아키텍처의 어레이에서 사용된다. 예를 들어, 핸드헬드 컨트롤러는 플레이어가 게임 애플리케이션, 게임 콘솔, 게임 서버 등을 실행하는 개인용 컴퓨팅 장치와 상호 작용할 수 있도록 게임 산업에서 이용된다. 현재의 핸드헬드 컨트롤러는 다양한 기능성을 제공하지만, 추가적인 기술적 개선은 이러한 컨트롤러가 제공하는 사용자 경험을 향상시킬 수 있다.
상세한 설명은 첨부된 도면을 참조하여 기술한다. 도면에서, 참조 번호의 제일 왼쪽 숫자(들)는 참조 번호가 처음에 보이는 도면을 식별한다. 서로 다른 도면에서 동일한 참조 번호의 사용은 유사하거나 동일한 구성요소 또는 특징을 나타낸다.
도 1은 핸드헬드 컨트롤러를 조작하는 사용자의 손가락의 존재, 위치, 및/또는 제스처를 검출하기 위한 터치 센서를 갖는 상면 제어 장치를 부분적으로 포함하는 예시적인 핸드헬드 컨트롤러의 정면도이다.
도 2는 도 1의 예시적인 핸드헬드 컨트롤러의 평면도이다.
도 3은 도 1의 예시적인 핸드헬드 컨트롤러의 측면도이다.
도 4는 도 1의 핸드헬드 컨트롤러의 일부를 나타낸 분해도이다. 이러한 예에서, 핸드헬드 컨트롤러의 상면 제어 장치는 제어 장치의 상부 커버 아래의 터치 센서뿐만 아니라, 제어 장치의 누름을 검출하기 위한 스위치 및 누름과 연관된 힘의 양을 결정하기 위한 압력 센서를 포함한다.
도 5는 핸드헬드 컨트롤러의 상면 제어 장치 상에서 사용자의 손가락의 존재, 위치, 및/또는 제스처를 검출하기 위한 예시적인 프로세스의 흐름도이다.
도 6은 터치 감응식 상면 제어 장치를 포함하는 핸드헬드 컨트롤러의 적어도 일부를 조립하기 위한 예시적인 프로세스의 흐름도이다.
도 7은 도 1의 컨트롤러와 같은 핸드헬드 컨트롤러의 예시적인 구성요소를 도시하고 있다.
본원에서는 특히 터치 감응식 제어 장치를 갖는 핸드헬드 컨트롤러뿐만 아니라, 터치 감응식 제어 장치를 사용하기 위한 방법 및 핸드헬드 컨트롤러를 조립하기 위한 방법을 설명한다. 일부 경우에, 본원에서 기술된 바와 같은 핸드헬드 컨트롤러는 원격 장치(예를 들어, 텔레비전, 오디오 시스템, 개인용 컴퓨팅 장치, 게임 콘솔 등)를 제어하여 비디오 게임 플레이 및/또는 기타 등등에 참여하는 데 사용될 수 있다. 핸드헬드 컨트롤러는, 핸드헬드 컨트롤러 하우징의 전면 상의 하나 이상의 전면 제어 장치를 비롯하여, 하나 이상의 제어 장치를 포함할 수 있다. 이러한 전면 제어 장치는 하나 이상의 조이스틱, 트랙패드, 트랙볼, 버튼, 또는 핸드헬드 컨트롤러의 사용자의 엄지로 제어할 수 있는 다른 제어 장치를 포함할 수 있다. 추가적으로 또는 대안적으로, 핸드헬드 컨트롤러는 핸드헬드 컨트롤러의 하우징의 상면에 상주하는 하나 이상의 상면 제어 장치를 포함할 수 있다. 예를 들어, 이러한 상면 제어 장치는 "트리거", "범퍼" 등으로 지칭될 수 있으며 중지, 검지 등과 같은 사용자의 하나 이상의 손가락으로 제어될 수 있다. 일부 경우에, 핸드헬드 컨트롤러는 사용자의 왼손의 하나 이상의 손가락으로 조작할 수 있는 하나 이상의 좌측 상면 제어 장치 및 사용자의 오른손의 하나 이상의 손가락으로 조작할 수 있는 하나 이상의 우측 상면 제어 장치를 포함한다.
상세히 후술될 바와 같이, 이러한 상면 제어 장치(들)는 각각의 제어 장치 상에서 사용자의 손가락의 존재, 위치, 및/또는 제스처를 검출하도록 구성된 터치 센서를 포함할 수 있다. 예를 들어, 핸드헬드 컨트롤러의 상면 제어 장치는 사용자의 손가락으로 선택할 수 있는 스위치뿐만 아니라, 제어 장치 상에서 손가락을 검출하기 위한 터치 센서를 포함할 수 있다. 터치 센서는 용량식 터치 센서, 저항식 터치 센서, 적외선 터치 센서, 물체의 존재 또는 위치를 검출하기 위해 음향 음파를 이용하는 터치 센서, 또는 임의의 다른 유형의 터치 센서를 포함할 수 있다. 일부 경우에, 터치 센서는 대응하는 상면 제어 장치의 표면적의 일부 또는 실질적으로 전부를 커버하는 용량식 패드의 어레이를 포함한다.
일부 경우에, 터치 센서는 핸드헬드 컨트롤러의 하나 이상의 프로세서에 결합되어 터치 입력을 나타내는 터치 데이터를 전송한다. 터치 데이터는 잠재적으로 시간이 지나면서 변화되는 동안 터치 입력의 위치를 나타낼 수 있다. 핸드헬드 컨트롤러는 터치 데이터를 수신하고 사용자의 손가락의 존재 및/또는 손가락의 위치(또는 "자세")를 결정하도록 구성된 로직(예를 들어, 소프트웨어, 하드웨어, 펌웨어 등)을 포함할 수 있다. 예를 들어, 터치 센서는 서로 다른 영역과 연관될 수 있어, 로직은 터치 입력에 부분적으로 기초하여 손가락이 어느 영역에 위치되는지를 결정하도록 구성된다. 이러한 정보는 상면 제어 장치 상에서 손가락의 위치에 대응하는 하나 이상의 동작을 수행하기 위해 게임 또는 다른 애플리케이션에 제공될 수 있다. 예를 들어, 터치 센서는 둘 이상의 영역과 연관될 수 있으며, 그 영역의 선택은 서로 다른 각각의 동작과 연관된다. 로직은 제어 장치 상에서 손가락의 제스처, 예를 들어 사용자가 특정 방향, 특정 속도, 및/또는 기타 등등으로 손가락을 움직이는 것을 식별하기 위해 터치 데이터를 더 분석할 수 있다. 다시, 로직은 제스처와 연관된 기정 동작을 수행하도록 구성된 애플리케이션에 이러한 제스처의 표시를 제공할 수 있다. 게임 환경의 예에서, 게임 애플리케이션은 사용자의 무기를 전환하거나, 아바타가 기정 방향에 맹폭격 또는 이와 달리 기정 방향을 이동시키게 하거나, 또는 임의의 다른 기정 동작을 수행할 수 있다.
터치 센서 이외에, 상면 제어 장치는 스위치 상단의 버튼을 눌러 선택할 수 있는 스위치뿐만 아니라, 선택과 연관된 힘의 양을 검출 또는 측정하도록 구성된 압력 센서를 포함할 수 있다. 일부 경우에, 상면 제어 장치는 터치 센서에 인접하며 스위치 및 압력 센서를 적어도 부분적으로 커버하는 상부 커버를 포함한다. 그러므로, 사용자의 손가락이 상부 커버를 누르면, 상부 커버는 스위치 및 압력 센서를 아래로 누른다. 스위치 및 압력 센서는 각각 핸드헬드 컨트롤러의 하나 이상의 프로세서에 연결될 수 있어, 상부 커버의 선택은 스위치로부터 프로세서로 제공되는, 제어 장치의 선택을 나타내는, 선택 데이터를 발생시킬 수 있다. 또한, 압력 센서는 선택의 힘의 양을 나타내는 힘 데이터를 프로세서에 제공할 수 있다. 터치 데이터와 함께, 선택 데이터 및/또는 힘 데이터는 데이터를 하나 이상의 명령으로서 해석하기 위해 게임 또는 다른 애플리케이션에 제공될 수 있다. 일부 경우에, 터치 데이터, 선택 데이터, 및/또는 힘 데이터는 함께 해석되고 기정 명령과 연관될 수 있다. 핸드헬드 컨트롤러의 압력 센서는 힘 감지 저항기(FSR) 센서, 압전 센서, 로드 셀, 스트레인 게이지, 용량성 힘 크기를 측정하는 용량식 압력 센서, 또는 임의의 다른 유형의 압력 센서를 포함할 수 있다.
기존의 핸드헬드 컨트롤러는 선택 가능한 제어 장치를 포함하지만, 터치 감지 기능을 사용하여 제어 장치의 선택을 식별하기 위해 스위치를 갖는 제어 장치를 결합하면 핸드헬드 컨트롤러에서 해석될 수 있는 제스처의 양 및 풍부함을 증가시킬 수 있다. 또한, 이러한 제스처는 핸드헬드 컨트롤러에 의해 제어되는 게임 또는 다른 애플리케이션의 작동을 강화할 수 있다.
도 1은 하나 이상의 터치 감응식 상면 제어 장치를 포함할 수 있는 예시적인 핸드헬드 컨트롤러(100)의 정면도이다. 이러한 터치 감응식 제어 장치에 의해 생성된 터치 데이터는 핸드헬드 컨트롤러를 조작하는 사용자의 손가락의 존재, 위치, 및/또는 제스처를 검출하는 데 사용될 수 있다.
도시된 바와 같이, 핸드헬드 컨트롤러(100)는 전면(104(1)) 및 상면(104(2)), 잠재적으로 전면(104(1))과 대향하는 후면 및 상면(104(2))과 대향하는 하면을 갖는 하우징(102)을 포함한다. 전면(104(1))은 일부 경우에 핸드헬드 컨트롤러(100)를 조작하는 사용자의 하나 이상의 엄지로 제어할 수 있는 하나 이상의 전면 제어 장치를 포함할 수 있다. 이러한 전면 제어 장치는 하나 이상의 트랙패드, 트랙볼, 조이스틱, 버튼 등을 포함할 수 있다. 이러한 예에서, 전면(104(1))은 사용자의 왼손 엄지로 제어할 수 있는 좌측 트랙패드(106(1)) 및 사용자의 오른손 엄지로 제어할 수 있는 우측 트랙패드(106(2))를 포함한다. 또한, 예시적인 컨트롤러(100)는 조이스틱(108)(예를 들어, 사용자의 왼손 엄지로 제어 가능) 및 누름식 버튼(110)(예를 들어, 사용자의 오른손 엄지로 제어 가능)을 포함한다. 이러한 예에서, 핸드헬드 컨트롤러(100)는 또한 사용자가 각각 사용자의 오른손 및 왼손을 통해 컨트롤러(100)를 유지할 수 있는 좌측 그립(112(1)) 및 우측 그립(112(2))을 포함한다.
한편, 상면(104(2))은 하나 이상의 상면 제어 장치를 포함할 수 있다. 도시된 예에서, 컨트롤러(100)는 좌측 상면 제어 장치(114(1)) 및 우측 상면 제어 장치(114(2))를 포함한다. 좌측 상면 제어 장치(114(1))는 사용자의 왼손 손가락(예를 들어, 중지 또는 검지)으로 조작될 수 있는 반면, 우측 상면 제어 장치는 오른손 손가락(예를 들어, 중지 또는 검지)으로 조작될 수 있다. 상면 제어 장치(114(1) 및 114(2))는 일부 경우에 "트리거" 또는 "범퍼"로 지칭될 수 있다. 또한, 하나 이상의 상면 제어 장치(114(1) 및 114(2))는 각각의 상면 제어 장치 상에서 사용자의 하나 이상의 손가락의 존재, 위치, 및/또는 제스처를 검출하기 위한 하나 이상의 터치 센서를 포함할 수 있다.
도 2는 예시적인 핸드헬드 컨트롤러(100)의 평면도이다. 도시된 바와 같이, 상면(104(2))은 사용자의 왼손 손가락으로 조작 가능한 추가적인 좌측 상면 제어 장치(202(1)) 및 사용자의 오른손 손가락으로 조작 가능한 추가적인 우측 상면 제어 장치(202(2))를 포함할 수 있다. 일부 경우에, 추가적인 좌측 상면 제어 장치(202(1)) 및 추가적인 우측 상면 제어 장치(202(2)) 양자는, 상면 제어 장치(114(1) 및/또는 114(2))에 상주하는 터치 센서 이외에 또는 그 대신에, 제어 장치 상에서 손가락의 존재, 위치, 및/또는 제스처를 검출하기 위한 터치 센서를 포함할 수 있다.
도 3은 예시적인 핸드헬드 컨트롤러(100)의 측면도이다. 도시된 바와 같이, 측면도는 우측 그립(112(2)) 및 우측 상면 제어 장치(114(2) 및 202(2))를 도시한다. 제어 장치(114(2) 및 202(2)) 중 하나 이상은 제어 장치(들) 상에서 하나 이상의 손가락의 존재, 위치, 및/또는 제스처를 식별하기 위해 터치 감응식일 수 있다.
도 4는 핸드헬드 컨트롤러(100)의 일부를 나타낸 분해도이다. 이러한 예에서, 좌측 상면 제어 장치(114(1))는 상부 커버(402), 상부 커버(402) 아래의 터치 센서(404), 상부 커버를 통해 제어 장치(114(1))의 누름을 검출하기 위한 스위치(406), 및 누름과 연관된 힘의 양을 결정하기 위한 압력 센서(408)를 포함한다. 상부 커버(402)는 사용자의 손가락으로부터 스위치(406)로 힘을 전달하기에 충분한 강성이며 사용자의 손가락과 터치 센서(404) 사이의 용량성 결합이 가능할 만큼 충분히 얇은 단일 조각의 사출 성형 플라스틱 또는 기타 재료를 포함할 수 있다. 도시되지 않았지만, 상부 커버(102)는 손가락으로 상부 커버(402)를 선택한 것에 따라 스위치(406) 및/또는 압력 센서를 누르도록 하향 돌출하는 하면 상의 버튼 푸셔 구성요소를 포함할 수 있다.
이러한 예에서, 터치 센서(404)는 상부 커버(402)의 후면에 고착되거나 또는 이와 달리 부착되는 용량식 어레이를 포함한다. 도시된 바와 같이, 터치 센서(404)는 하나 이상의 프로세서를 포함하는 핸드헬드 컨트롤러(100)의 인쇄 회로 기판(PCB)(412)에 연결하기 위한 커넥터(410)를 포함할 수 있다. 다른 경우에, 터치 센서는 상부 커버의 상면에 부착될 수 있거나 또는 적외선 또는 음향 터치 센서와 같은 상이한 유형의 터치 센서를 포함할 수 있다.
터치 센서(404)가 용량식 어레이를 포함하는 경우, 터치 센서(404)는 사용자의 손가락의 존재, 위치, 및/또는 제스처를 검출하는 데 사용하기 위해 터치 데이터를 생성할 수 있다. 이러한 경우에, 전압이 전도 층에 인가되어 실질적으로 균일한 정전기장을 발생시킨다. 사용자의 손가락과 같은 전도체가 터치 센서(404)에 접촉하거나 또는 근접하면, 정전용량의 변화가 일어난다. 정전용량 값은 손가락과 같은 전도체의 위치를 결정하기 위해 용량식 어레이에 걸쳐 측정된다. 일부 경우에, 이러한 용량성 값은 스와이프 등과 같은 사용자의 손가락의 제스처를 식별하는 데 사용하기 위해 시간의 경과에 따라 측정될 수 있다. 추가적으로 또는 대안적으로, 터치 센서는 터치의 위치가 터치 센서(404)의 하나 이상의 특정 영역에 있는 것으로 결정될 수 있도록 다수의 영역을 포함할 수 있다. 물론, 위에서는 예시적인 용량식 터치 센서를 설명하지만, 기술은 임의의 유형의 대체 터치 센서를 구현할 수 있다는 점을 이해해야 한다.
스위치(406)는 FSR 압력 센서와 같은 압력 센서(408)에 장착된 디지털 스위치를 포함할 수 있다. 이러한 조합은 또한 프레임(414)을 통해 PCB(412)에 부착되어 스위치(406) 및/또는 압력 센서(408)는 상면 제어 장치(114(1))의 선택을 나타내는 선택 데이터 및/또는 선택과 연관된 힘을 나타내는 힘 데이터를 제공할 수 있다. 일부 경우에, 사용자가 임계 값보다 큰 힘으로 상부 커버(402)를 통해 스위치를 아래로 누르는 경우에 선택이 검출된다는 점에서 스위치는 아날로그 입력으로 작용할 수 있다. 그렇지 않으면, 선택이 검출되지 않는다. 다른 경우에, 제어 장치(114(1))의 누름과 연관된 힘에 기초하여 다른 유형의 선택이 결정될 수 있다는 점에서 핸드헬드 컨트롤러(100)는 다층 디지털 트리거를 생성하도록 서로 다른 힘 임계 값과 연관될 수 있다. 예를 들어, 손가락이 제1 힘 임계 값보다 큰 제1 힘의 양으로 제어 장치(114(1))를 아래로 누르면, 제1 유형의 선택이 검출될 수 있다. 제1 유형의 선택은, 예를 들어 핸드헬드 컨트롤러(100)가 상호 작용하는 게임 또는 다른 애플리케이션에 의해, 결정된 제1 기정 동작과 연관될 수 있다. 그러나, 손가락이 제1 힘 임계 값 및 제2의 더 큰 힘 임계 값 양자보다 큰 제2 힘의 양으로 아래로 누르는 경우, 제2 유형의 선택이 검출될 수 있고, 기타 등등이 이루어질 수 있다. 제2 유형의 선택 및 후속 유형의 선택은 제2 기정 동작 등과 연관될 수 있다. 또한, 이러한 기정 동작은 조이스틱, 트리거 등과 같은 컨트롤러로부터의 아날로그 입력과 연관될 수 있다.
일부 경우에, 스위치(406)에 의해 생성된 선택 데이터 및/또는 압력 센서(408)에 의해 생성된 힘 데이터 이외에, 터치 센서(404)에 의해 생성된 터치 데이터는 특정 제스처를 검출하는 데 사용될 수도 있다. 각 경우에, 하나 이상의 제스처는 핸드헬드 컨트롤러(100)의 하나 이상의 프로세서에 의해 검출될 수 있는 반면, 다른 제스처(들)는 핸드헬드 컨트롤러(100)가 상호 작용하는 원격 시스템(예를 들어, 호스트 컴퓨팅 장치, 게임 콘솔 등)의 하나 이상의 프로세서에 의해 검출될 수 있다.
도 5는 제어 장치(114(1), 114(2), 202(1), 및/또는 202(2)) 중 하나 이상과 같은, 핸드헬드 컨트롤러의 상면 제어 장치 상에서 사용자의 손가락의 존재, 위치, 및/또는 제스처를 검출하기 위한 예시적인 프로세스(500)의 흐름도이다. 프로세스(500)는 하드웨어, 소프트웨어, 또는 이들의 조합으로 구현될 수 있는 일련의 작업을 나타내는 논리 흐름 그래프에서 블록 모음으로 설명된다. 소프트웨어와 관련하여, 블록은 하나 이상의 프로세서에 의해 실행될 때 언급된 작업을 수행하는 컴퓨터 실행 가능 지령을 나타낸다. 일반적으로, 컴퓨터 실행 가능 지령은 특정 기능을 수행하거나 또는 특정 추상 데이터 유형을 구현하는 루틴, 프로그램, 객체, 구성요소, 데이터 구조 등을 포함한다. 작업이 설명되는 순서는 제한적으로 해석되지 않으며, 설명된 블록의 임의의 수는 임의의 순서로 및/또는 병렬로 결합되어 프로세스를 구현할 수 있다.
작업(502)에서, 핸드헬드 컨트롤러의 터치 센서로부터의 터치 데이터가 수신되고, 터치 센서는 핸드헬드 컨트롤러의 상면 제어 장치에 인접하게 상주하며, 상면 제어 장치는 핸드헬드 컨트롤러의 사용자의 적어도 하나의 손가락으로 조작될 수 있다. 예를 들어, 핸드헬드 컨트롤러의 하나 이상의 프로세서는 이러한 터치를 수신할 수 있는 반면, 다른 경우에 원격 시스템(예를 들어, 호스트 컴퓨팅 장치, 게임 콘솔 등)의 하나 이상의 프로세서는 이러한 터치 데이터를 수신할 수 있다. 작업(504)에서, 선택 데이터는, 스위치가 터치 센서에 인접하게 상주한 상태에서, 적어도 하나의 손가락으로 상면 제어 장치를 누르는 것에 적어도 부분적으로 기초하여 핸드헬드 컨트롤러의 스위치로부터 수신될 수 있다. 다시, 핸드헬드 컨트롤러의 프로세서(들) 및/또는 원격 시스템의 프로세서(들)는 이러한 선택 데이터를 수신할 수 있다. 작업(506)에서, 힘 데이터는, 압력 센서가 터치 센서에 인접하게 상주한 상태에서, 적어도 하나의 손가락으로 상면 제어 장치를 누르는 것에 적어도 부분적으로 기초하여 핸드헬드 컨트롤러의 압력 센서로부터 수신될 수 있다. 핸드헬드 컨트롤러의 프로세서(들) 및/또는 원격 시스템의 프로세서(들)는 이러한 힘 데이터를 수신할 수 있다.
작업(508)에서, 핸드헬드 컨트롤러의 프로세서(들) 및/또는 원격 시스템의 프로세서(들)는 상면 제어 장치가 선택 데이터, 힘 데이터, 및/또는 터치 데이터 중 하나 이상에 적어도 부분적으로 기초하여 선택되었음을 결정할 수 있다. 예를 들어, 선택 데이터는 스위치가 눌렸음을 나타낼 수 있고, 힘 데이터는 압력 센서가 힘 임계 값보다 큰 힘 또는 기타 등등을 검출했음을 나타낼 수 있다. 작업(510)에서, 핸드헬드 컨트롤러의 프로세서(들) 및/또는 원격 시스템의 프로세서(들)는 터치 데이터, 선택 데이터, 및/또는 힘 데이터에 적어도 부분적으로 기초하여 상면 제어 장치 상에서 손가락의 존재, 위치, 또는 제스처 중 적어도 하나를 결정할 수 있다.
도 6은 터치 감응식 상면 제어 장치를 포함하는 핸드헬드 컨트롤러의 적어도 일부를 조립하기 위한 예시적인 프로세스(600)의 흐름도이다. 작업(602)은 압력 센서를 핸드헬드 컨트롤러의 스위치에, 그리고 때때로 이전 또는 이후에, 하나 이상의 프로세서에 결합하는 것을 나타낸다. 스위치는 스위치의 누름에 따라 적어도 부분적으로 선택 입력을 생성하도록 구성될 수 있는 반면, 압력 센서는 스위치의 누름 힘을 나타내는 힘 데이터를 생성하도록 구성될 수 있다. 한편, 작업(604)은 스위치를 핸드헬드 컨트롤러의 하우징의 상면에 결합하는 것을 나타낸다. 작업(606)은 터치 센서를 핸드헬드 컨트롤러의 상부 커버에, 그리고 때때로 이전 또는 이후에, 하나 이상의 프로세서에 결합하는 것을 나타낸다. 전술한 바와 같이, 터치 센서는 용량식 터치 센서 또는 터치 데이터를 생성하고 터치 데이터를 하나 이상의 프로세서에 제공하도록 구성된 임의의 유형의 터치 센서를 포함할 수 있다.
작업(608)은 스위치를 적어도 부분적으로 커버하도록 상부 커버를 하우징의 상면에 결합하는 것을 나타내어 핸드헬드 컨트롤러의 사용자의 손가락으로 상부 커버를 선택함으로써 스위치를 누르게 된다. 마지막으로, 작업(610)은 하우징의 전면에 전면 제어 장치를 결합하는 것을 나타내며, 전면 제어 장치는 사용자의 엄지로 조작될 수 있다. 예를 들어, 이러한 작업은 트랙패드, 조이스틱, 트랙볼, 또는 다른 유형의 제어 장치를 하우징의 전면에 부착하는 것을 포함할 수 있다.
프로세스(600)가 예시적인 작업을 설명하지만, 다른 구현이 추가 및/또는 대안적인 작업을 포함할 수 있음을 이해해야 한다. 또한, 이러한 작업이 설명되는 순서는 제한되지 않으며 구성요소는 임의의 다른 유사하거나 또는 다른 방식으로 배열 및/또는 조립될 수 있다. 또한, 프로세스(600)가 핸드헬드 컨트롤러의 적어도 일부를 형성하도록 조립될 수 있는 여러 구성요소를 설명하지만, 핸드헬드 컨트롤러가 추가 및/또는 대체 구성요소를 포함할 수 있음을 이해해야 한다.
도 7은 컨트롤러(100)와 같은 핸드헬드 컨트롤러의 예시적인 구성요소를 도시하고 있다. 도시된 바와 같이, 핸드헬드 컨트롤러는 전술한 제어 장치(예를 들어, 조이스틱, 트랙패드, 트리거 등)와 같은 하나 이상의 입력/출력(I/O) 장치(702), 잠재적으로 임의의 다른 유형의 입력 또는 출력 장치를 포함한다. 예를 들어, I/O 장치(702)는 사용자 음성 입력과 같은 오디오 입력을 수신하기 위한 하나 이상의 마이크로폰을 포함할 수 있다. 일부 구현에서, 하나 이상의 카메라 또는 다른 유형의 센서(예를 들어, 관성 측정 유닛(IMU))는 핸드헬드 컨트롤러(100)의 움직임과 같은 제스처 입력을 수신하기 위한 입력 장치로서 기능할 수 있다. 일부 실시예에서, 추가 입력 장치는 키보드, 키패드, 마우스, 터치 스크린, 조이스틱, 제어 버튼 등의 형태로 제공될 수 있다. 입력 장치(들)는 볼륨을 증가/감소시키기 위한 기본 볼륨 제어 버튼(들)뿐만 아니라 전원 및 리셋 버튼과 같은 제어 메커니즘을 더 포함할 수 있다.
한편, 출력 장치는 디스플레이, 조명 요소(예를 들어, LED), 촉각 느낌을 생성하기 위한 진동기, 스피커(들)(예를 들어, 헤드폰), 및/또는 기타 등등을 포함할 수 있다. 예를 들어 전원이 켜져 있을 때와 같은 상태를 나타내기 위한 간단한 조명 요소(예를 들어, LED)가 있을 수도 있다. 몇 가지 예가 제공되었지만, 핸드헬드 컨트롤러는 추가적으로 또는 대안적으로 임의의 다른 유형의 출력 장치를 포함할 수 있다.
일부 경우에, 하나 이상의 출력 장치에 의한 출력은 입력 장치 중 하나 이상에 의해 수신된 입력에 기초할 수 있다. 예를 들어, 상면 제어 장치의 선택은 상면 제어 장치에 인접하게(예를 들어, 아래에) 또는 임의의 다른 위치에 위치된 진동기에 의한 촉각 응답의 출력을 발생시킬 수 있다. 일부 경우에, 출력은 상면 제어 장치와 연관된 터치 센서와 같은 터치 센서 상의 터치 입력의 특성에 적어도 부분적으로 기초하여 달라질 수 있다. 예를 들어, 터치 센서 상의 제1 위치에서의 터치 입력은 제1 촉각 출력을 발생시킬 수 있는 반면, 터치 센서 상의 제2 위치에서의 터치 입력은 제2 촉각 출력을 발생시킬 수 있다. 더 나아가, 터치 센서 상의 특정 제스처는 특정 촉각 출력(또는 다른 유형의 출력)을 발생시킬 수 있다. 예를 들어, 상면 제어 장치 상의 스와이프 제스처는 제1 유형의 촉각 출력을 발생시킬 수 있는 반면, (터치 센서에 의해 감지된) 상면 제어 장치 상의 탭은 제2 유형의 촉각 출력을 발생시킬 수 있는 반면, 상면 제어 장치의 강한 누름은 제3 유형의 촉각 출력을 발생시킬 수 있다.
또한, 핸드헬드 컨트롤러(100)는 네트워크에 및/또는 하나 이상의 원격 시스템(예를 들어, 애플리케이션을 실행하는 호스트 컴퓨팅 장치, 게임 콘솔 등)에 용이하게 무선 연결하기 위한 하나 이상의 통신 인터페이스(704)를 포함할 수 있다. 통신 인터페이스(704)는 Wi-Fi, 블루투스, 무선 주파수(RF) 등과 같은 다양한 무선 기술 중 하나 이상을 구현할 수 있다. 핸드헬드 컨트롤러(100)는 네트워크, 연결된 주변 장치, 또는 다른 무선 네트워크와 통신하는 플러그인 네트워크 장치에 용이하게 유선 연결하기 위한 물리적 포트를 더 포함할 수 있음을 이해해야 한다.
예시된 구현에서, 핸드헬드 컨트롤러는 하나 이상의 프로세서(706) 및 컴퓨터 판독 가능 매체(708)를 더 포함한다. 일부 구현에서, 프로세서(들)(706)는 중앙 처리 장치(CPU), 그래픽 처리 장치(GPU), CPU 및 GPU 모두, 마이크로프로세서, 디지털 신호 프로세서, 또는 당업계에 알려진 다른 처리 장치 또는 구성요소를 포함할 수 있다. 대안적으로 또는 추가적으로, 본원에 기술된 기능은 적어도 부분적으로 하나 이상의 하드웨어 로직 구성요소에 의해 수행될 수 있다. 예를 들어, 비제한적으로, 사용될 수 있는 하드웨어 로직 구성요소의 예시적 유형으로는 필드 프로그래머블 게이트 어레이(FPGA), 주문형 집적 회로(ASIC), 주문형 표준 제품(ASSP), 시스템 온 칩 시스템(SOC), 복잡한 프로그래머블 로직 장치(CPLD) 등을 포함한다. 추가적으로, 프로세서(들)(706) 각각은 프로그램 모듈, 프로그램 데이터, 및/또는 하나 이상의 운영 체제를 저장할 수도 있는 자체 로컬 메모리를 가질 수 있다.
컴퓨터 판독 가능 매체(708)는 휘발성 및 비휘발성 메모리, 임의의 방식으로 구현된 이동식 및 비이동식 매체, 또는 컴퓨터 판독 가능 지령, 데이터 구조, 프로그램 모듈, 또는 다른 데이터와 같은 정보의 저장을 위한 기술을 포함할 수 있다. 이러한 메모리는 RAM, ROM, EEPROM, 플래시 메모리 또는 다른 메모리 기술, CD-ROM, 디지털 다기능 디스크(DVD) 또는 다른 광학 저장 장치, 자기 카세트, 자기 테이프, 자기 디스크 저장 장치 또는 다른 자기 저장 장치, RAID 저장 시스템, 또는 원하는 정보를 저장하는 데 사용될 수 있으며 컴퓨팅 장치에 의해 액세스될 수 있는 기타 매체를 포함하지만, 이에 제한되지는 않는다. 컴퓨터 판독 가능 매체(708)는 컴퓨터 판독 가능 저장 매체("CRSM")로서 구현될 수 있으며, 이는 컴퓨터 판독 가능 매체(708)에 저장된 지령을 실행하기 위해 프로세서(들)(706)에 의해 액세스 가능한 임의의 이용 가능한 물리적 매체일 수 있다. 하나의 기본 구현에서, CRSM은 랜덤 액세스 메모리("RAM") 및 플래시 메모리를 포함할 수 있다. 다른 구현에서, CRSM은 읽기 전용 메모리("ROM"), 전기적 소거 가능 프로그래머블 읽기 전용 메모리("EEPROM"), 또는 원하는 정보를 저장하는 데 사용될 수 있으며 프로세서(들)(706)에 의해 액세스될 수 있는 기타 유형의 매체를 포함할 수 있지만, 이에 제한되지는 않는다.
지령, 데이터저장소 등과 같은 여러 모듈은 컴퓨터 판독 가능 매체(708) 내에 저장되고 프로세서(들)(706)에서 실행되도록 구성될 수 있다. 동일한 기능이 하드웨어, 펌웨어, 또는 시스템 온 칩(SOC)에서 대안적으로 구현될 수 있지만, 몇 가지 예시적인 기능 모듈이 컴퓨터 판독 가능 매체(708)에 저장되고 프로세서(들)(706)에서 실행되는 것으로 도시되어 있다.
운영 체제 모듈(710)은 다른 모듈의 이익을 위해 핸드헬드 컨트롤러(100) 내에 그리고 이에 결합되는 하드웨어를 관리하도록 구성될 수 있다. 또한, 컴퓨터 판독 가능 매체(708)는 핸드헬드 컨트롤러(100)를 애플리케이션(예를 들어, 게임 애플리케이션)을 실행하는 개인용 컴퓨팅 장치, 게임 콘솔, 원격 서버 등과 같은 하나 이상의 다른 장치와 통신 인터페이스(704)를 통해 통신시킬 수 있는 네트워크 통신 모듈(712)을 저장할 수 있다. 컴퓨터 판독 가능 매체(708)는 핸드헬드 컨트롤러에서 또는 핸드헬드 컨트롤러(100)가 결합하는 컴퓨팅 장치에서 실행되는 게임(또는 다른 애플리케이션)과 연관된 데이터를 저장하기 위한 게임 세션 데이터베이스(714)를 더 포함할 수 있다. 컴퓨터 판독 가능 매체(708)는 개인용 컴퓨팅 장치, 게임 콘솔, 원격 서버 등과 같은 핸드헬드 컨트롤러(100)가 결합하는 장치와 연관된 데이터를 저장하는 장치 기록 데이터베이스(716)를 포함할 수 있다. 컴퓨터 판독 가능 매체(708)는 핸드헬드 컨트롤러(100)가 게임 컨트롤러로서 기능하도록 구성하는 게임 제어 지령(718), 및 핸드헬드 컨트롤러(100)가 다른 비게임 장치의 컨트롤러로서 기능하도록 구성하는 범용 제어 지령(720)을 더 저장할 수 있다.
기술 요지는 구조적 특징에 특정적인 언어로 설명되었지만, 첨부된 청구 범위에 정의된 기술 요지가 반드시 기술된 특정 특징에 제한되지는 않는다는 것을 이해해야 한다. 오히려, 특정 특징은 청구 범위를 구현하는 예시적인 형태로 개시된다.

Claims (28)

  1. 시스템으로서,
    하나 이상의 프로세서; 및
    핸드헬드 컨트롤러를 포함하고, 상기 핸드헬드 컨트롤러는,
    전면 및 상면을 갖는 하우징;
    상기 하우징의 전면에 상주하고 상기 핸드헬드 컨트롤러의 사용자의 엄지로 제어 가능한 전면 제어 장치; 및
    상기 하우징의 상면에 상주하고 상기 사용자의 중지 또는 검지 중 적어도 하나로 제어 가능한 상면 제어 장치를 포함하되, 상기 상면 제어 장치는,
    상부 커버;
    상기 상부 커버에 인접하고, 상기 중지 또는 상기 검지 중 적어도 하나와 상기 상부 커버 사이의 접촉에 적어도 부분적으로 기초하여 터치 입력을 나타내는 터치 데이터를 상기 하나 이상의 프로세서에 제공하도록 구성된 터치 센서;
    상기 상부 커버 아래에 적어도 부분적으로 상주하고, 압력 센서에 장착되고, 상기 중지 또는 상기 검지 중 적어도 하나로 상기 상부 커버를 누르는 것에 적어도 기초하여 상기 상면 제어 장치의 선택을 나타내는 선택 데이터를 상기 하나 이상의 프로세서에 제공하도록 구성된 디지털 스위치; 및
    상기 디지털 스위치에 결합되고, 상기 중지 또는 상기 검지 중 적어도 하나로 상기 상부 커버를 누르는 힘의 양을 나타내는 힘 데이터를 상기 하나 이상의 프로세서에 제공하도록 구성된 상기 압력 센서를 포함하는, 시스템.
  2. 제1항에 있어서, 상기 터치 센서에 의해 제공된 상기 터치 데이터에 적어도 부분적으로 기초하여 상기 중지 또는 상기 검지 중 적어도 하나의 존재를 검출하도록 구성된 로직을 더 포함하는, 시스템.
  3. 제1항에 있어서, 상기 터치 데이터는 상기 상부 커버 상에서 상기 중지 또는 상기 검지 중 적어도 하나의 위치가 시간이 지나면서 변화하는 동안 상기 위치를 나타내고, 상기 시스템은 상기 터치 센서에 의해 제공된 상기 터치 데이터에 적어도 부분적으로 기초하여 상기 중지 또는 상기 검지 중 적어도 하나의 제스처를 검출하도록 구성된 로직을 더 포함하는, 시스템.
  4. 제1항에 있어서, 상기 터치 센서는 제1 영역 및 제2 영역을 포함하고, 상기 시스템은 상기 중지 또는 상기 검지 중 적어도 하나의 존재를 검출하고 상기 중지 또는 상기 검지 중 적어도 하나가 상기 터치 센서에 의해 제공된 상기 터치 데이터에 적어도 부분적으로 기초하여 상기 터치 센서의 제1 영역에 위치되는지를 결정하도록 구성된 로직을 더 포함하는, 시스템.
  5. 제1항에 있어서, 상기 상면 제어 장치는 상기 사용자의 제1 중지 또는 제1 검지 중 적어도 하나로 제어 가능한 제1 상면 제어 장치를 포함하고, 상기 상부 커버는 제1 상부 커버를 포함하고, 상기 터치 센서는 제1 터치 입력을 나타내는 제1 터치 데이터를 제공하도록 구성된 제1 터치 센서를 포함하고, 상기 디지털 스위치는 제1 선택 데이터를 제공하도록 구성된 제1 스위치를 포함하고, 상기 압력 센서는 제1 힘 데이터를 제공하도록 구성된 제1 압력 센서를 포함하고, 상기 핸드헬드 컨트롤러는,
    상기 하우징의 상면에 상주하고 상기 사용자의 제2 중지 또는 제2 검지 중 적어도 하나로 제어 가능한 제2 상면 제어 장치를 더 포함하되, 상기 제2 상면 제어 장치는,
    제2 상부 커버;
    상기 제2 상부 커버에 인접하고, 상기 제2 중지 또는 상기 제2 검지 중 적어도 하나와 상기 제2 상부 커버 사이의 접촉에 적어도 부분적으로 기초하여 제2 터치 입력을 나타내는 제2 터치 데이터를 상기 하나 이상의 프로세서에 제공하도록 구성된 제2 터치 센서;
    상기 제2 상부 커버 아래에 적어도 부분적으로 상주하고, 상기 제2 중지 또는 상기 제2 검지 중 적어도 하나로 상기 제2 상부 커버를 누르는 것에 적어도 기초하여 상기 제2 상면 제어 장치의 선택을 나타내는 제2 선택 데이터를 상기 하나 이상의 프로세서에 제공하도록 구성된 제2 스위치; 및
    상기 제2 스위치에 결합되고, 상기 제2 중지 또는 상기 제2 검지 중 적어도 하나로 상기 제2 상부 커버를 누르는 힘의 양을 나타내는 제2 힘 데이터를 상기 하나 이상의 프로세서에 제공하도록 구성된 제2 압력 센서를 포함하는, 시스템.
  6. 시스템으로서,
    하나 이상의 프로세서;
    핸드헬드 컨트롤러 - 상기 핸드헬드 컨트롤러는,
    상면을 갖는 하우징; 및
    상기 하우징의 상면에 상주하고 상기 핸드헬드 컨트롤러를 조작하는 사용자의 적어도 하나의 손가락으로 제어 가능한 상면 제어 장치를 포함하되, 상기 상면 제어 장치는,
    상부 커버;
    상기 상부 커버에 인접하고, 상기 적어도 하나의 손가락과 상기 상부 커버 사이의 접촉에 적어도 부분적으로 기초하여 터치 입력을 나타내는 터치 데이터를 상기 하나 이상의 프로세서에 제공하도록 구성된 터치 센서; 및
    상기 상부 커버 아래에 적어도 부분적으로 상주하고, 상기 상면 제어 장치의 압력 센서에 장착되고, 상기 적어도 하나의 손가락으로 상기 상부 커버를 누르는 것에 적어도 기초하여 상기 상면 제어 장치의 선택을 나타내는 선택 데이터를 상기 하나 이상의 프로세서에 제공하도록 구성된 디지털 스위치를 포함함 -; 및
    상기 터치 센서에 의해 제공된 상기 터치 데이터 및 상기 디지털 스위치에 의해 제공된 상기 선택 데이터에 적어도 부분적으로 기초하여 상기 적어도 하나의 손가락의 제스처를 검출하도록 구성된 로직을 포함하는, 시스템.
  7. 제6항에 있어서, 상기 터치 센서는 용량식 터치 센서, 저항식 터치 센서, 또는 적외선 터치 센서를 포함하는, 시스템.
  8. 제6항에 있어서, 상기 로직은 상기 터치 센서에 의해 제공된 상기 터치 데이터에 적어도 부분적으로 기초하여 상기 적어도 하나의 손가락의 존재를 검출하도록 더 구성되는, 시스템.
  9. 제6항에 있어서, 상기 터치 데이터는 상기 상부 커버 상에서 상기 적어도 하나의 손가락의 위치가 시간이 지나면서 변화하는 동안 상기 위치를 나타내는, 시스템.
  10. 제6항에 있어서, 상기 터치 센서는 제1 영역 및 제2 영역을 포함하고, 상기 로직은 상기 적어도 하나의 손가락의 존재를 검출하고 상기 적어도 하나의 손가락이 상기 터치 센서에 의해 제공된 상기 터치 데이터에 적어도 부분적으로 기초하여 상기 터치 센서의 제1 영역에 위치되는지를 결정하도록 더 구성되는, 시스템.
  11. 제6항에 있어서, 상기 압력 센서는 상기 적어도 하나의 손가락으로 상기 상부 커버를 누르는 힘의 양을 나타내는 힘 데이터를 상기 하나 이상의 프로세서에 제공하도록 구성되는, 시스템.
  12. 제6항에 있어서, 상기 하우징은 전면을 더 포함하고, 상기 핸드헬드 컨트롤러는 상기 하우징의 전면에 상주하고 상기 사용자의 엄지로 제어 가능한 전면 제어 장치를 더 포함하는, 시스템.
  13. 제6항에 있어서, 상기 상면 제어 장치는 상기 사용자의 왼손의 적어도 하나의 손가락으로 제어 가능한 좌측 상면 제어 장치를 포함하고, 상기 상부 커버는 좌측 상부 커버를 포함하고, 상기 터치 센서는 제1 터치 입력을 나타내는 제1 터치 데이터를 제공하도록 구성된 좌측 터치 센서를 포함하고, 상기 디지털 스위치는 제1 선택 데이터를 제공하도록 구성된 좌측 스위치를 포함하고, 상기 핸드헬드 컨트롤러는,
    상기 하우징의 상면에 상주하고 상기 사용자의 오른손의 적어도 하나의 손가락으로 제어 가능한 우측 상면 제어 장치를 포함하되, 상기 우측 상면 제어 장치는,
    우측 상부 커버;
    상기 우측 상부 커버에 인접하고, 상기 오른손의 적어도 하나의 손가락과 상기 우측 상부 커버 사이의 접촉에 적어도 부분적으로 기초하여 제2 터치 입력을 나타내는 제2 터치 데이터를 상기 하나 이상의 프로세서에 제공하도록 구성된 우측 터치 센서; 및
    상기 우측 상부 커버 아래에 적어도 부분적으로 상주하고, 상기 오른손의 적어도 하나의 손가락으로 상기 우측 상부 커버를 누르는 것에 적어도 기초하여 상기 우측 상면 제어 장치의 선택을 나타내는 제2 선택 데이터를 상기 하나 이상의 프로세서에 제공하도록 구성된 우측 스위치를 포함하는, 시스템.
  14. 컴퓨터 실행 가능 명령어들을 저장하는 하나 이상의 비일시적 컴퓨터 판독 가능 매체로서, 상기 컴퓨터 실행 가능 명령어들은 하나 이상의 프로세서에서 실행될 때, 상기 하나 이상의 프로세서로 하여금,
    핸드헬드 컨트롤러의 터치 센서로부터 터치 데이터를 수신하는 동작 - 상기 터치 센서는 상기 핸드헬드 컨트롤러의 상면 제어 장치에 인접하게 상주하고, 상기 상면 제어 장치는 상기 핸드헬드 컨트롤러의 사용자의 적어도 하나의 손가락으로 조작 가능함 -;
    상기 적어도 하나의 손가락으로 상기 상면 제어 장치를 누르는 것에 적어도 부분적으로 기초하여 상기 핸드헬드 컨트롤러의 디지털 스위치로부터 선택 데이터를 수신하는 동작 - 상기 디지털 스위치는 상기 터치 센서에 인접하여 상주하고 상기 핸드헬드 컨트롤러의 압력 센서에 장착됨 -; 및
    상기 터치 센서로부터 수신된 상기 터치 데이터 및 상기 디지털 스위치로부터 수신된 상기 선택 데이터에 적어도 부분적으로 기초하여 상기 적어도 하나의 손가락의 제스처를 검출하는 동작을 포함하는 동작을 수행하게 하는, 하나 이상의 비일시적 컴퓨터 판독 가능 매체.
  15. 제14항에 있어서, 상기 동작은
    상기 상면 제어 장치가 상기 선택 데이터에 적어도 부분적으로 기초하여 선택되었음을 결정하는 동작을 더 포함하는, 하나 이상의 비일시적 컴퓨터 판독 가능 매체.
  16. 제14항에 있어서, 상기 동작은 상기 적어도 하나의 손가락으로 상기 상면 제어 장치를 누르는 것에 적어도 부분적으로 기초하여 상기 핸드헬드 컨트롤러의 상기 압력 센서로부터 힘 데이터를 수신하는 동작을 더 포함하고, 상기 압력 센서는 상기 터치 센서에 인접하게 상주하는, 하나 이상의 비일시적 컴퓨터 판독 가능 매체.
  17. 핸드헬드 컨트롤러의 적어도 일부를 조립하기 위한 방법으로서,
    상기 핸드헬드 컨트롤러의 하우징의 상면에 디지털 스위치를 결합하는 단계 - 상기 디지털 스위치는 상기 디지털 스위치의 누름에 따라 적어도 부분적으로 선택 입력을 생성하도록 구성됨 -;
    터치 센서를 상기 핸드헬드 컨트롤러의 상부 커버 및 하나 이상의 프로세서에 결합하는 단계 - 상기 터치 센서는 터치 데이터를 생성하고 상기 터치 데이터를 상기 하나 이상의 프로세서에 제공하도록 구성됨 -;
    압력 센서를 상기 디지털 스위치에 장착하고, 상기 압력 센서를 상기 하나 이상의 프로세서에 결합하는 단계 - 상기 압력 센서는 상기 디지털 스위치의 상기 누름의 힘을 나타내는 힘 데이터를 생성하도록 구성됨 -; 및
    상기 디지털 스위치를 적어도 부분적으로 커버하도록 상기 상부 커버를 상기 하우징의 상면에 결합하여 상기 핸드헬드 컨트롤러의 사용자의 손가락에 의한 상기 상부 커버의 선택에 의해 상기 디지털 스위치가 눌러지는 단계를 포함하는, 핸드헬드 컨트롤러의 적어도 일부를 조립하기 위한 방법.
  18. 제17항에 있어서, 상기 하우징의 전면에 전면 제어 장치를 결합하는 단계를 더 포함하고, 상기 전면 제어 장치는 상기 사용자의 엄지로 조작 가능한, 방법.
  19. 시스템으로서,
    하나 이상의 프로세서; 및
    핸드헬드 컨트롤러를 포함하고, 상기 핸드헬드 컨트롤러는,
    상면을 갖는 하우징; 및
    상기 하우징의 상면에 상주하고 상기 핸드헬드 컨트롤러를 조작하는 사용자의 적어도 하나의 손가락으로 제어 가능한 상면 제어 장치를 포함하되, 상기 상면 제어 장치는,
    상부 커버;
    상기 상부 커버에 인접하고, 상기 적어도 하나의 손가락과 상기 상부 커버 사이의 접촉에 적어도 부분적으로 기초하여 터치 입력을 나타내는 터치 데이터를 상기 하나 이상의 프로세서에 제공하도록 구성된 터치 센서;
    상기 적어도 하나의 손가락으로 상기 상부 커버를 누르는 힘의 양을 나타내는 힘 데이터를 상기 하나 이상의 프로세서에 제공하도록 구성된 압력 센서; 및
    상기 압력 센서에 장착되고, 상기 적어도 하나의 손가락으로 상기 상부 커버를 누르는 것에 적어도 기초하여 상기 상면 제어 장치의 선택을 나타내는 선택 데이터를 상기 하나 이상의 프로세서에 제공하도록 구성된 디지털 스위치를 포함하는, 시스템.
  20. 제19항에 있어서, 상기 디지털 스위치는 상기 상부 커버 아래에 적어도 부분적으로 상주하는, 시스템.
  21. 제19항에 있어서, 상기 터치 센서는 용량식 터치 센서, 저항식 터치 센서, 또는 적외선 터치 센서를 포함하는, 시스템.
  22. 제19항에 있어서, 상기 터치 센서에 의해 제공된 상기 터치 데이터에 적어도 부분적으로 기초하여 상기 적어도 하나의 손가락의 존재를 검출하도록 구성된 로직을 더 포함하는, 시스템.
  23. 제19항에 있어서, 상기 터치 데이터는 상기 상부 커버 상에서 상기 적어도 하나의 손가락의 위치가 시간이 지나면서 변화하는 동안 상기 위치를 나타내고, 상기 시스템은 상기 터치 센서에 의해 제공된 상기 터치 데이터에 적어도 부분적으로 기초하여 상기 적어도 하나의 손가락의 제스처를 검출하도록 구성된 로직을 더 포함하는, 시스템.
  24. 제19항에 있어서, 상기 터치 센서는 제1 영역 및 제2 영역을 포함하고, 상기 시스템은 상기 적어도 하나의 손가락의 존재를 검출하고 상기 적어도 하나의 손가락이 상기 터치 센서에 의해 제공된 상기 터치 데이터에 적어도 부분적으로 기초하여 상기 터치 센서의 제1 영역에 위치되는지를 결정하도록 구성된 로직을 더 포함하는, 시스템.
  25. 제19항에 있어서, 상기 하우징은 전면을 더 포함하고, 상기 핸드헬드 컨트롤러는 상기 하우징의 전면에 상주하고 상기 사용자의 엄지로 제어 가능한 전면 제어 장치를 더 포함하는, 시스템.
  26. 제19항에 있어서, 상기 상면 제어 장치는 상기 사용자의 왼손의 적어도 하나의 손가락으로 제어 가능한 좌측 상면 제어 장치를 포함하고, 상기 상부 커버는 좌측 상부 커버를 포함하고, 상기 터치 센서는 제1 터치 입력을 나타내는 제1 터치 데이터를 제공하도록 구성된 좌측 터치 센서를 포함하고, 상기 압력 센서는 제1 힘 데이터를 제공하도록 구성된 좌측 압력 센서를 포함하고, 상기 핸드헬드 컨트롤러는,
    상기 하우징의 상면에 상주하고 상기 사용자의 오른손의 적어도 하나의 손가락으로 제어 가능한 우측 상면 제어 장치를 포함하되, 상기 우측 상면 제어 장치는,
    우측 상부 커버;
    상기 우측 상부 커버에 인접하고, 상기 오른손의 적어도 하나의 손가락과 상기 우측 상부 커버 사이의 접촉에 적어도 부분적으로 기초하여 제2 터치 입력을 나타내는 제2 터치 데이터를 상기 하나 이상의 프로세서에 제공하도록 구성된 우측 터치 센서; 및
    상기 오른손의 적어도 하나의 손가락으로 상기 우측 상부 커버를 누르는 힘의 양을 나타내는 제2 힘 데이터를 상기 하나 이상의 프로세서에 제공하도록 구성된 우측 압력 센서를 포함하는, 시스템.
  27. 삭제
  28. 삭제
KR1020207029481A 2018-03-23 2019-03-12 터치 감응식 제어 장치를 갖는 핸드헬드 컨트롤러 KR102645610B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US15/934,725 US10639543B2 (en) 2018-03-23 2018-03-23 Handheld controllers with touch-sensitive controls
US15/934,725 2018-03-23
PCT/US2019/021895 WO2019182814A1 (en) 2018-03-23 2019-03-12 Handheld controllers with touch-sensitive controls

Publications (2)

Publication Number Publication Date
KR20200133248A KR20200133248A (ko) 2020-11-26
KR102645610B1 true KR102645610B1 (ko) 2024-03-08

Family

ID=67984053

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020207029481A KR102645610B1 (ko) 2018-03-23 2019-03-12 터치 감응식 제어 장치를 갖는 핸드헬드 컨트롤러

Country Status (6)

Country Link
US (1) US10639543B2 (ko)
EP (1) EP3765166A4 (ko)
JP (1) JP7391864B2 (ko)
KR (1) KR102645610B1 (ko)
CN (1) CN111886056B (ko)
WO (1) WO2019182814A1 (ko)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109395373B (zh) * 2018-09-14 2021-12-07 深圳市腾讯信息技术有限公司 对象控制方法和装置、存储介质及电子装置
JP2020119099A (ja) * 2019-01-21 2020-08-06 レノボ・シンガポール・プライベート・リミテッド タッチパッド及び電子機器
US10523233B1 (en) 2019-04-26 2019-12-31 Cattron Holdings, Inc. Membrane digital analog switches
US11607605B1 (en) * 2019-11-13 2023-03-21 David Garrett Touch screen game controller assembly
CN110947174B (zh) * 2019-11-27 2021-06-08 腾讯科技（深圳）有限公司 控制虚拟场景显示的方法、装置、存储介质和计算机设备
US11511186B2 (en) * 2020-02-14 2022-11-29 Valve Corporation Controller with sensor-rich controls
WO2021186200A1 (en) * 2020-03-20 2021-09-23 Genima Innovations Marketing Gmbh Electronic controller, comprising touchpad
GB2615093A (en) * 2022-01-27 2023-08-02 Sony Interactive Entertainment Inc Control device, system and method

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150105152A1 (en) 2013-10-11 2015-04-16 Valve Corporation Game controller systems and methods
US20170123516A1 (en) 2014-09-01 2017-05-04 Yinbo Li Multi-surface controller
US20170192506A1 (en) 2015-12-30 2017-07-06 Oculus Vr, Llc Handheld controller with trigger button and sensor retainer assembly

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000218041A (ja) 1999-01-29 2000-08-08 Alps Electric Co Ltd ゲーム機器用のコントローラ
JP4717482B2 (ja) 2005-03-29 2011-07-06 株式会社コナミデジタルエンタテインメント ゲーム装置、ゲーム装置の制御方法及びプログラム
US20100245239A1 (en) * 2009-03-25 2010-09-30 Ippasa, Llc Pressure sensing controller
US8368662B2 (en) * 2010-03-18 2013-02-05 Chris Argiro Actionable-object controller and data-entry attachment for touchscreen-based electronics
US8641525B2 (en) * 2011-06-17 2014-02-04 Ironburg Inventions Ltd. Controller for video game console
JP5834735B2 (ja) 2011-10-03 2015-12-24 ミツミ電機株式会社 入力装置及びゲーム装置
BR112015002839B1 (pt) 2012-10-15 2021-11-30 Sony Computer Entertainment Inc Dispositivo operacional
EP3409336B1 (en) * 2013-05-22 2023-03-15 Ironburg Inventions Limited Controller for a games console
JP2017511240A (ja) * 2014-04-14 2017-04-20 アイアンバーグ・インヴェンションズ・リミテッド ゲームコントローラ
US10444849B2 (en) * 2014-09-01 2019-10-15 Yinbo Li Multi-surface controller
US10286308B2 (en) * 2014-11-10 2019-05-14 Valve Corporation Controller visualization in virtual and augmented reality environments
US10065111B1 (en) * 2014-12-16 2018-09-04 Oculus Vr, Llc Mapping user interactions with a controller to a hand position
US9862099B1 (en) * 2015-06-22 2018-01-09 X Development Llc Haptic controller with touch-sensitive control knob
US9804693B2 (en) * 2015-12-18 2017-10-31 Oculus Vr, Llc Handheld controller with activation sensors
US10509469B2 (en) 2016-04-21 2019-12-17 Finch Technologies Ltd. Devices for controlling computers based on motions and positions of hands
US10722786B2 (en) * 2016-08-11 2020-07-28 Valve Corporation Video game controller with unitary back shell for button control and battery access
CN109803733A (zh) * 2016-08-11 2019-05-24 铁堡发明有限公司 用于计算机的输入装置
US10406431B2 (en) * 2016-08-11 2019-09-10 Valve Corporation Hand-held controller with a back shell and underlying force sensitive resistors
US10307669B2 (en) * 2016-10-11 2019-06-04 Valve Corporation Electronic controller with finger sensing and an adjustable hand retainer
US10549183B2 (en) * 2016-10-11 2020-02-04 Valve Corporation Electronic controller with a hand retainer, outer shell, and finger sensing
US10391400B1 (en) * 2016-10-11 2019-08-27 Valve Corporation Electronic controller with hand retainer and finger motion sensing
US10987573B2 (en) * 2016-10-11 2021-04-27 Valve Corporation Virtual reality hand gesture generation
US10888773B2 (en) * 2016-10-11 2021-01-12 Valve Corporation Force sensing resistor (FSR) with polyimide substrate, systems, and methods thereof
US10691233B2 (en) * 2016-10-11 2020-06-23 Valve Corporation Sensor fusion algorithms for a handheld controller that includes a force sensing resistor (FSR)
WO2018232375A1 (en) * 2017-06-16 2018-12-20 Valve Corporation Electronic controller with finger motion sensing

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150105152A1 (en) 2013-10-11 2015-04-16 Valve Corporation Game controller systems and methods
US20170123516A1 (en) 2014-09-01 2017-05-04 Yinbo Li Multi-surface controller
US20170192506A1 (en) 2015-12-30 2017-07-06 Oculus Vr, Llc Handheld controller with trigger button and sensor retainer assembly

Also Published As

Publication number Publication date
US10639543B2 (en) 2020-05-05
WO2019182814A1 (en) 2019-09-26
JP7391864B2 (ja) 2023-12-05
US20190291000A1 (en) 2019-09-26
KR20200133248A (ko) 2020-11-26
EP3765166A4 (en) 2021-12-15
EP3765166A1 (en) 2021-01-20
JP2021518612A (ja) 2021-08-02
CN111886056B (zh) 2024-06-25
CN111886056A (zh) 2020-11-03

Similar Documents

Publication Publication Date Title
KR102645610B1 (ko) 터치 감응식 제어 장치를 갖는 핸드헬드 컨트롤러
US11511186B2 (en) Controller with sensor-rich controls
JP7543310B2 (ja) 指の存在を使用したハンドヘルドコントローラのモーション制御機能のアクティブ化
CN107690609B (zh) 力输入和光标控制
CN113195067B (zh) 具有可断开覆盖物的手持式控制器
EP3304268A1 (en) Force sensing and inadvertent input control
EP3295278A1 (en) Force curves and inadvertent input control
JP7459108B2 (ja) 動的センサ割当
US10067604B2 (en) Detecting trigger movement without mechanical switches
US8847905B2 (en) Multi-texture for five button click pad top surface
CN112237736A (zh) 使用触摸感应以使轨迹球表现得像操纵杆

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant