KR20160078352A - 지연 측정 및 시험 시스템 및 방법 - Google Patents

지연 측정 및 시험 시스템 및 방법 Download PDF

Info

Publication number
KR20160078352A
KR20160078352A KR1020167010525A KR20167010525A KR20160078352A KR 20160078352 A KR20160078352 A KR 20160078352A KR 1020167010525 A KR1020167010525 A KR 1020167010525A KR 20167010525 A KR20167010525 A KR 20167010525A KR 20160078352 A KR20160078352 A KR 20160078352A
Authority
KR
South Korea
Prior art keywords
sensor
delay
time
output
touch
Prior art date
Application number
KR1020167010525A
Other languages
English (en)
Inventor
다렌 레이
크리프톤 포라인
스티븐 레오나드 샌더스
다니엘 위그도
리카도 호르헤 호타 코스타
Original Assignee
텍추얼 랩스 컴퍼니
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 텍추얼 랩스 컴퍼니 filed Critical 텍추얼 랩스 컴퍼니
Publication of KR20160078352A publication Critical patent/KR20160078352A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/0418—Control or interface arrangements specially adapted for digitisers for error correction or compensation, e.g. based on parallax, calibration or alignment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04103—Manufacturing, i.e. details related to manufacturing processes specially suited for touch sensitive devices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04106—Multi-sensing digitiser, i.e. digitiser using at least two different sensing technologies simultaneously or alternatively, e.g. for detecting pen and finger, for saving power or for improving position detection

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Measurement Of Unknown Time Intervals (AREA)
  • Electronic Switches (AREA)
  • Testing Or Calibration Of Command Recording Devices (AREA)

Abstract

시스템 및 방법은 사용자 입력을 수신하고 반응하여 출력을 제공하는 사용자 인터페이스를 포함하는 장치의 지연을 측정하기 위해 개시된다. 실시형태에서, 테스트 하의 장치와 분리된 몸체가 제공된다. 몸체에 작동 가능하게 부착된 제 1 센서는 제 1 시간에 장치로의 터치 이벤트 입력을 감지하고 제 2 센서는 제 2 시간에 장치로부터의 반응 출력을 감지한다. 계산 엔진은 제 1 시간과 제 2 시간 사이의 시간차를 계산하고 출력은 장치의 지연 측정의 표시를 출력하며 측정은 제 1 시간과 제 2 시간 사이의 시간차를 반영한다. 실시형태에서, 장치 홀더는 테스트 하의 장치를 수신하도록 구성된다. 기계식 모터는 테스트 하의 장치에 대해 프록시 장치를 이동시키도록 구성된다. 테스트 하의 장치에 대해 입력 프록시 장치 이동을 기록하고 테스트 하의 장치에서 실행되는 테스트 어플리케이션에 의해 발생된 이동의 표시를 기록하도록 구성된 지상 실측 측정 장치.

Description

지연 측정 및 시험 시스템 및 방법{LATENCY MEASURING AND TESTING SYSTEM AND METHOD}
본 출원은 2013년 10월 7일자 미국 특허출원 번호 제61/887,615호의 정식출원이다. 본 출원은 2014년 6월 26일자 미국 특허출원 번호 제14/316,177호의 계속 출원이다. 상기 인용 출원의 전체가 본원에서 참조로서 포함된다.
본 출원은 저작권 보호를 받는 자료를 포함한다. 저작권 소유자는 특허청 파일 또는 기록상 나타나는 바와 같이 어느 누구의 본 특허 개시의 팩시밀리 재생산에 관하여 반대하지 않으며 그렇지 않은 모든 저작권을 소유한다.
개시된 시스템 및 방법은 일반적으로 사용자 인터페이스, 특히 사용자 입력 시험 시스템에 관한 것이다.
본 개시의 이전 및 다른 대상, 특징 및 이점은 첨부 도면에 도시된 바와 같이 실시형태의 다음의 더 구체적인 기재로부터 명백해질 것이며, 다양한 도면을 통하여 참조 특징은 동일한 부분을 지칭한다. 도면은 축적일 필요가 없으며, 대신 개시된 실시형태의 원리를 도시하는 데 중점을 둔다.
도 1은 실시형태에 따라 개시된 지연 측정 및 시험 시스템의 기능 블록을 도시하는 개략적인 블록 다이어그램이다.
도 2a 및 도 2b는 대안의 실시형태에 따른 개시된 지연 측정 및 시험 시스템의 기능 블록을 도시하는 개략적인 블록 다이어그램이다.
도 3은 특정 물리적 접촉 이벤트 때 시간에 걸친 전기 시그널의 변화를 도시하는 선 그래프이다.
도 4는 터치 센시티브 장치의 특정 그래픽 변화에 따른 시간에 걸친 시그널의 측정된 변화를 도시하는 선 그래프이다.
도 5는 접촉 센서 및 그래픽 변화 센서 각각으로부터의 시그널의 특정 측정된 변화의 중첩된 그래프이다.
도 6은 그래픽을 디스플레이하기 위한 프로젝터를 사용하는 터치스크린과 함께 작동하도록 구성된 실시형태에 따른 개시된 지연 측정 및 시험 시스템의 기능 블록을 도시하는 개략적인 블록 다이어그램이다.
도 7은 개시된 시스템의 사용자가 장치의 지연을 측정하기 위해 시스템을 구비한 터치 센시티브 장치를 수동으로 스트라이크할 필요가 없는 실시형태의 개략적인 측면도이다.
도 8은 테스트 장치의 터치 민감 영역(104)에 탭이 되거나 그 영역에 걸쳐서 슬라이드될 수 있는 개시된 시스템의 실시형태를 도시하는 사시도이다.
도 9는 터치 입력에 대한 테스트 장치의 청각 반응의 타이밍을 감지하기 위해 계산 엔진(201)에 연결된 하나 이상의 청각 센서(901)를 갖는 개시된 시스템의 실시형태를 도시하는 개략도이다.
도 10은 지역 측정 장치의 실시형태를 도시하는 측면도이다.
도 11은 실시형태에 따라 지연을 생성하기 위한 단계를 도시하는 플로우 다이어그램이다.
본 출원은 2013년 3월 15일자로 출원된 미극 특허 출원 번호 제13/841,436호인 "지지연 터치 센시티브 장치", 2014년 1월 16일자로 출원된 미국 특허 출원 번호 제61/928,069호인 "빠른 멀티 터치 업데이트 레이트 병목", 2013년 10월 4일자로 출원된 미국 특허 출원 번호 제14/046,819호인 "저지연 사용자 입력 처리 및 피드백을 위한 하이브리드 시스템 및 방법", 2013년 3월 15일자로 출원된 미국 특허 출원 번호 제61/798,948호인 "빠른 멀티 터치 스타일러스", 2013년 3월 15일자로 출원된 미국 특허 출원 번호 61/799,035호인 "사용자 식별 기술을 갖는 빠른 멀티 터치 센서", 2013년 3월 15일자로 출원된 미국 특허 출원 번호 제61/798,828호인 "빠른 멀티 터치 소음 감소", 2013년 3월 15일자로 출원된 미국 특허 출원 번호 제61/798,708호인 "활성 시각 스타일러스", 2012년 10월 5일자로 출원된 미국 특허 출원 번호 제61/710,256호인 "저지연 사용자 입력 처리 및 피드백을 위한 하이브리드 시스템 및 방법", 2013년 7월 12일자로 출원된 미국 특허 출원 번호 제61/845,892호인 "빠른 멀티 터치 포스트 처리", 2013년 7월 12일자로 출원된 미국 특허 출원 번호 제61/845,879호인 "규정된 교차 제어 행동으로 제어 반응 감소", 2013년 9월 18일자로 출원된 미국 특허 출원 번호 제61/879,245호인 "상태 변화에 관한 정보를 사용하고 미래 사용자 입력을 예측하여 사용자 입력에 대한 반응을 제공하기 위한 시스템 및 방법", 2013년 9월 21일자로 출원된 미국 특허 출원 번호 제61/880,887호인 "상태 변화에 관한 정보를 사용하고 미래 사용자 입력을 예측하여 사용자 입력에 대한 반응을 제공하기 위한 시스템 및 방법", 2013년 10월 4일자로 출원된 미국 특허 출원 번호 제14/046,823호인 "저지연 사용자 입력 처리 및 피드백을 위한 하이브리드 시스템 및 방법", 2013년 11월 1일자로 출원된 미국 특허 출원 번호 제14/069,609호인 "빠른 멀티 터치 포스트 처리", 2013년 10월 7일자로 출원된 미국 특허 출원 번호 제61/887,615호인 "터치 및 스타일러스 지연 시험 장치", 2014년 1월 22일자로 출원된 미국 특허 출원 번호 제61/930,159호인 "터치 센서에서 가능한 채널의 다이나믹 할당" 및 2014년 1월 27일자로 출원된 미국 특허 출원 번호 제61/932,047호인 "입력 이벤트 처리를 위한 제거 전략"에서 개시된 유형의 빠른 멀티 터치 센서에 제한되지 않지만 이를 포함하는 사용자 인터페이스에서 지연을 측정 또는 시험하는 것에 관한 것이다.
다양한 실시형태에서, 본 개시는 터치스크린과 같은 터치 센시티브 장치 및 스타일러스 센시티브 장치에서 직접 조작 사용자 인터페이스의 입력 지연을 측정하는 시스템 및 방법에 관한 것이다. 익숙하며 실제의 상호 작동을 혼용하도록 설계된 디지털 물체/제어의 직접 물리적 조작은 마우스, 트랙패드, 펜 테블릿 등을 포함하는 간접 입력 장치뿐만 아니라 직접 터치 이벤트, 스타일러스 입력, 공기 중 동작 입력의 많은 유형에서 사용되는 공통의 사용자 인터페이스 메타포이다.
본 개시의 목적을 위해, 사용자 인터페이스의 터치 입력 지연은 물리적 터치 또는 스타일러스 입력 작동에 반응하여 그래픽, 청각 및/또는 진동 촉각 반응이 사용자에게 나타나는데 걸리는 시간을 지칭한다. 테스트는 사용자들이 저 지연 입력 지연을 선호하고 5-10 ms 만큼 짧은 엔드 투 엔드, 그래픽 입력 대 반응 지연을 신뢰도 있게 감지할 수 있다는 것을 보여준다.
다양한 실시형태에서, 단일 터치, 멀티 터치 및/또는 스타일러스 사용자 입력 장치 및 이러한 입력을 처리하는 시스템에서 터치 입력 지연은 많은 소스를 가질 수 있다. 그러한 소스는 예를 들면, (1) 터치 이벤트를 캡쳐하는 물리적 센서, (2) 터치 이벤트를 처리하고 사용자로 전송을 위한 출력을 생성하는 소프트웨어, (3) 출력(예를 들면, 디스플레이) 자체, (4) 버스를 포함하는 부품 간 데이터 전송, (5) 메모리 스토어 또는 숏 버퍼의 데이터 내부 저장, (6) 시스템 리소스를 위한 방해 및 경쟁, (7) 회로의 다른 소스는 지연을 소개할 수 있다, (8) 광속도와 회로 구조에서 그 반향과 같은 물리적 제한 및 (9) 저항 터치 센서가 그 '중립' 상태로 구부려 되돌아가는 데 필요한 시간과 같은 기계적 제한을 포함한다.
터치 입력 지연을 감소시키는 것은 스마트폰, 테블릿, PC, 게임, 가상 현실, 증강 현실 및 주변 장치 생산자들에 제한되지 않지만 이를 포함하는 많은 스마트 장치 생산자들에게 점점 중요한 목표가 되고 있지만, 생산 도중 및 이후에 스마트 장치의 터치 입력 지연을 측정하고 비교하는 표준화되고, 값이 저렴하며, 신뢰도 있고 반복적인 시스템 및/방법은 현재 존재하지 않는다.
실시형태에서, 현재 개시된 시스템은 표준화되고, 값이 저렴하며, 신뢰도 있고 반복적인 지연 시험 장치 및 방법을 통하여 스마트 폰, 테블릿 또는 컴퓨터와 같은 스마트 장치에서 직접 조정 사용자 인터페이스의 엔드 투 엔드 지연을 포함하여(이에 제한되지 않음) 감지/처리/디스플레이 체인의 다양한 포인트에서 시스템의 터치 입력 지연을 측정하는 수단을 제공함으로써 그러한 충족되지 않은 산업계 필요성을 충족시킨다.
실시형태에서, 여기서 개시된 시스템은 터치스크린 장치의 입력 지연을 측정한다. "입력 지연"이라는 용어는 여기서 계산 시스템의 터치스크린 상 터치 이벤트와 그 터치 이벤트에 반응하는 터치 스크린의 결과적인 그래픽, 청각 또는 진동 촉각 반응 사이의 시간차이다. 여기서 사용된 바와 같이, "터치 이벤트"라는 용어와 "터치"라는 단어는 명사로 사용될 때 근접한 터치와 근접한 터치 이벤트 또는 센서를 사용하여 식별될 수 있는 임의의 다른 동작을 포함한다. 예를 들면, 디지털 버튼 사용자 인터페이스 제어를 포함하는 일반적인 터치스크린 어플리케이션에서, 사용자는 손가락으로 디지털 버튼을 누를 것이며 디스플레이는 그러한 디지털 버튼 사용자 인터페이스 제어의 색 또는 외관을 바꿈으로서 디지털 버튼이 눌러졌다는 것을 표시하도록 변할 것이다. 이러한 디지털 버튼의 사용자의 터칭과 결과적인 그래픽 변화 사이의 시간이 계산 시스템의 입력 지연이며, 본 여기서 개시된 시스템은 그러한 터치 입력 지연을 측정할 수 있다.
도 1은 실시형태에서 여기서 개시된 시스템의 사용을 도시한다. 사용자는 여기서 지연 측정 시스템(102)이라 참조되는 시스템을 그 또는 그녀의 손에 잡고 그 엔드 투 엔드 지연이 측정되는 테스트 장치(103)의 부분인 터치스크린(104)의 표면을 부드럽게 탭한다. 실시형태에서, 이러한 테스트 장치(103)는 이에 제한되지 않지만 스마트폰, 테블릿 또는 터치 PC일 수 있다.
실시형태에서, 지연 측정 시스템(102)은 그 엔드 투 엔드 지연이 측정되는 테스트 장치(103)의 터치스크린(104) 위로 사용자에 의해 의도적으로 드롭되도록 구성된다.
다양한 실시형태에서, 지연 측정 시스템(102)은 지연 측정 시스템(102)이 터치스크린(104)을 물리적으로 접촉하는 시간과 해머(102)의 가상 터치 이벤트에 반응하여 터치스크린 디스플레이에서 결과적인 그래픽 변화가 발생하는 시간을 측정하기 위해 두 개의 센서를 사용한다. 제 1 센서(204)는 지연 측정 시스템(102)과 터치스크린(104) 사이의 물리적 접촉 또는 근접한 물리적 접촉을 측정하는 접촉 센서일 수 있다. 제 2 센서(205)는 지연 측정 시스템의 가상 터치 이벤트에 반응하여 터치스크린(104)에 디스플레이된 그래픽 상 변화를 측정하는 그래픽 변화 센서일 수 있다.
실시형태에서, 이러한 양 센서의 지연의 합은 측정되는 테스트 장치(103)의 터치 입력 지연보다 작다.
다른 실시형태에서, 해머(102)의 내부 부품(센서, 회로 등)의 지연 때문에 측정된 전반적인 시간/지연의 구성요소는 고정되고 그러한 테스트 장치의 터치 입력 지연을 보고할 때 테스트 장치(103)의 측정된 엔드 투 엔드 지연으로부터 차감된다.
다른 실시형태에서, 해머 기반 지연은 변화 가능하지만 감지 가능하고 감지되어 그러한 지연 또는 지연의 예상이 보고된 지연 측정을 생성시킬 때 테스트 장치(103)의 보고된 엔드 투 엔드 터치 입력 지연으로부터 차감될 수 있다.
실시형태에서, 제 1 센서(204)(예를 들면, 접촉 센서)는 기계 충격을 전기 충격으로 변환하는 변환기일 수 있다.
실시형태에서, 이러한 변환기는 압전 변환기이다.
다른 실시형태에서, 이러한 변환기는 강유전성 변환기이다. 다른 실시형태에서, 이러한 변환기는 가속도계이다.
제 1 센서(204)(예를 들면, 접촉 센서)는 지연 측정 시스템(102)이 터치스크린(104)을 접촉할 때 발생하는 기계 충격을 전기 신호로 변환하도록 위치된다. 제 1 센서(204)는 전기 신호의 변화를 측정할 수 있는 계산 엔진(201)으로 연결된다(208). 실시형태에서, 계산 엔진은 제 1 센서가 유발될 때 제 1 시간을 제 2 센서가 유발될 때 제 2 시간을 만들며 지연을 계산하는 것과 관련된 시간의 차이를 계산한다. 실시형태에서, 계산 엔진은 제 1 센서로부터의 시그널로 유발되고 제 2 센서로부터의 시그널로 정지되며 그럼으로써 측정된 지연을 반영하는 데이터를 제공하는 자유 러닝 시계를 포함한다.
실시형태에서, 제 1 센서(204)로부터 방출된 시그널의 변화는 계산 엔진(201)에 의해 측정되기 전에 아날로그 시그널로부터 디지털 시그널로 변환된다.
지연 측정 시스템의 계산 엔진(201)은
시스템 온 칩(Soc), 중앙 처리 유닛(CPU), 마이크로 제어기 유닛(MCU), 필드 프로그램 가능 게이트 어레이(FPGA), NAND 메모리, 수직 NAND (vNAND) 메모리, 랜덤 액세스 메모리(RAM), 저항 랜덤 처리 장치(ReRAM) 및 자기저항 랜덤 액세스 메모리(MRAM)을 포함하지만 이에 제한되지 않는 상호 연결된 프로세서 및 메모리 컴퓨터 시스템 구성요소를 포함할 수 있다.
실시형태에서, 제 2 센서(205)(예를 들면, 그래픽 변화 센서)는 라이트를 전기 시그널로 변환하는 광검출기이다. 실시형태에서, 광검출기는 포토다이오드로 작동하는 역 편향 LED이다. 다양한 실시형태에서, 이러한 포토다이오드는 활성 픽셀 센서(APS), 전하 결합 소자(CCD), 포토레지스터, 광전지, 포토다이오드, 광전자 배증관, 광전관 또는 양자점 광전도체일 수 있다.
반영하는 디스플레이 기술을 위해 유용할 수 있는 실시형태에서, 제 2 센서(205)는 감지되는 디스플레이 영역을 비추는 광원과 짝을 이룬다. 광원은 환경광이거나 지연 측정 장치의 부분인 광원일 수 있다.
제 2 센서(205)(예를 들면, 그래픽 변화 센서)는 디스플레이 변화가 전기 신호에 변화를 낳도록 위치된다. 제 2 센서(205)는 전기 신호의 변화를 측정할 수 있는 계산 엔진(201)에 작동 가능하게 연결된다.
실시형태에서, 제 2 센서(205)로부터 방출된 시그널의 변화는 계산 엔진(201)에 의해 측정되기 전에 아날로그 시그널로부터 디지털 시그널로 변환된다.
실시형태에서, 제 1 센서(204)(예를 들면, 접촉 센서)와 제 2 센서(205)(예를 들면, 그래픽 변화 센서)는 근접하여 제 1 센서(204)의 지연 측정 시스템(102)과 터치스크린(104) 사이의 접촉이 제 2 센서(205)에 의해 감지된 터치스크린(104)의 디스플레이된 그래픽의 변화를 발생시킨다.
실시형태에서, 제 1 센서(204)와 제 2 센서(205)는 모두 커먼 하우징(206)에 있다. 이러한 커먼 하우징(206)은 계산 엔진(201)을 고정하는 제 2 하우징(203)에 연결된다. 제 2 하우징(203)은 핸들로 작동 가능하도록 형상을 가질 수 있고 시스템(102)은 사용자가 제 2 하우징을 고정하고 제 1 하우징이 테스트하의 장치(103)의 영역에 탭할 수 있는 구조이다.
다른 실시형태에서, 지연 측정 시스템의 계산 엔진(201)과 센서(204, 205)는 커먼 하우징에 위치된다.
실시형태에서, 지연 측정 시스템(102)은 계산 엔진(201)에 연결된 출력(202)을 포함한다. 출력(2020)은 예를 들면, 판독 디스플레이(예를 들면, LCD, LED, OLED 또는 전기영동 디스플레이), 스피커, 라이트, 라이트 반사 지시기 또는 촉각 출력의 소스를 포함할 수 있다. 테스트 장치(103)의 지연을 측정한 후에, 계산 엔진(201)은 측정 결과를 지연 시스템의 출력(202)으로 송신하면 사용자에게 측정 또는 측정을 반영하는 정보를 디스플레이하거나 그렇지 않으면 식별(예를 들면, 청각)한다. 출력(202)은 질적 또는 양적인 지연의 측정 결과의 표시를 제공할 수 있다. 출력(202)은 유선 또는 무선 인터페이스에 의해 계산 엔진(201)에 연결될 수 있다.
실시형태에서, 출력(202)은 지연 측정 장치의 샤시 내에 내재되거나 샤시 상에 실장된다.
실시형태에서, 출력(202)은 지연 측정 시스템(102)과 별개/미부착이다.
실시형태에서, 출력(202)은 검사 하의 테스트 장치(103)에 제한되지 않지만 이를 포함하는 별개 스마트폰, 테블릿 또는 PC의 디스플레이이다.
도 2a를 참조하면, 다른 실시형태에서 지연 측정 시스템(102)은 측정된 지연을 반영하는 데이터를 스마트폰, 테블릿 또는 PC와 같은 다른 장치 또는 테스트 장치(103)에 커뮤니케이션하기 위한 커뮤니케이션 인터페이스(210)를 포함한다. 실시형태에서 커뮤니케이션 인터페이스(210)는 블루투쓰, 블루투쓰 저에너지(BLE), 와이파이 또는 WAN 인터페이스와 같은 무선 네트워크 인터페이스를 포함할 수 있다. 커뮤니케이션 인터페이스(210)는 USB 인터페이스와 같은 유선 인터페이스일 수 있다. 커뮤니케이션 인터페이스(210)는 유선 또는 무선 인터페이스에 의해 계산 엔진(201)에 연결될 수 있다. 실시형태에서, 계산 엔진은 장치(103) 또는 다른 장치에서 프로세서이다.
도 2b를 참조하면, 실시형태에서 계산 엔진(201)은 다른 실시형태에서 컴퓨터 엔진(201)은 테스트 하의 장치(103)의 부분일 수 있고 제 1 센서와 제 2 센서에 작동 가능하게 연결된 회로(210)는 지연이 계산될 수 있는 데이터 또는 측정된 지연과 같은 지연의 측정을 반영하는 시간 데이터를 출력하도록 구성된다. 이러한 출력은 지연 측정 시스템(102)의 커뮤니케이션 인터페이스(210)를 통해 테스트 하의 장치(103)로 커뮤니케이션된다. 대안으로, 계산 엔진(201)은 스마트폰, 테블릿 또는 PC와 같은 제 3 장치의 부분일 수 있고 회로(210)는 지연 측정 시스템(102)의 커뮤니케이션 인터페이스(210)를 통해 제 3 장치로 그러한 시간 데이터를 출력하도록 구성될 수 있다. 이러한 점에서, 본 발명은 장치의 복수의 포인트에서 지연을 측정하기 위한 방법을 제공할 수 있다. 본 방법은 터치 이벤트가 생성되는 제 1 시간과 장치가 터치 이벤트에 반응을 출력하는 제 2 시간을 나타내는 제 1 데이터를 생성하는 외부 시간 데이터 생성기(예를 들면, 시스템(102))로부터의 시간 데이터를 장치의 커뮤니케이션 인터페이스를 통해 수신함으로써 실시될 수 있고, 시간 데이터는 제 1 시간과 제 2 시간 사이의 지연의 측정을 반영한다. 시간 데이터는 그 뒤에 장치와 연관된 지연을 결정하는데 사용되며 지연은 디스플레이 또는 장치의 다른 출력에 의해 디스플레이되거나 전송된다. 실시형태에서, 지연 측정 시스템(102)은 장치의 제어기가 물리적 터치 이벤트로 해석하여 가상 물리적 터치 이벤트가 장치에서 유발되는 시그널을 제 1 시간에 방출하는 시그널 방출기를 포함한다.
도 1을 계속 참조하면, 실시형태에서 지연 측정 시스템의 계산 엔진(201), 출력(202) 및 센서(204, 205) 사이의 하나 이상의 연결(208)은 물리적 유선이다. 다른 실시형태에서, 하나 이상의 연결(208)은 무선 연결이다. 그러한 무선 연결은 예를 들면 블루투쓰, 블루투쓰 저에너지(BLE), 와이파이 또는 WAN 인터페이스와 같은 무선 네트워크 인터페이스에 의해 제공될 수 있다. 이것은 지연 측정 시스템(102)이 별개의 스마트폰, 테블릿 또는 PC에 제한되지 않지만 이를 포함하는 존재하는 계산 장치의 계산 엔진(201)을 사용하여 엔드 투 엔드 지연을 측정하기 위해 필요한 계산을 실행하도록 한다.
실시형태에서, 지연 측정 시스템의 센서의 판독으로부터 지연 측정의 결과를실행하고 디스플레이하도록 사용된 별개의 스마트폰, 테블릿 또는 PC는 측정을 경험하는 테스트 장치(103)이다.
일부 실시형태에서, 지연 측정 시스템(102)과 터치스크린(104) 사이의 단순한 접촉은 사용자로부터 단일, 물리적 터치다운 이벤트를 가상 실행한다.
실시형태에서, 지연 측정 시스템(102)은 센서(204, 205)와 터치스크린(104) 사이에 위치하는 접촉 영역(207)을 포함한다. 이러한 접촉 영역(207)은 접촉 영역(207)과 터치스크린(104) 사이의 물리적 접촉이 터치 입력을 생산할 수 있는 성질을 갖는 물질로 구성된다. 그러한 물질은 예를 들면, 스타일러스가 터치스크린에 터치 입력을 생산하도록 하는 스타일러스의 팁 안으로 결합되도록 알려진 임의의 물질을 포함할 수 있다.
다른 실시형태에서, 지연 측정 시스템(102)의 접촉 영역(207)은 설계되고, 테스트 장치(103)는 시그널이 그것으로 전송될 때까지 지연 측정 시스템의 접촉 영역(207)의 물리적 터치다운 이벤트가 테스트 장치(103)의 터치스크린(104)에 의해 감지되지 않도록 구성된다. 이것은 사용자가 지연 시험 절차 도중에 디스플레이 상에 지연 측정 시스템(102)을 위치하도록 한다.
실시형태에서, 계산 엔진(201) 또는 다른 메커니즘은 지연 측정 시스템(102)의 접촉 영역(207)이 터치스크린(104)과 정적 물리적 접촉에 올 때라도 연속적인 가상 단일 및/또는 멀티 터치 이벤트(랜덤, 기결정 또는 출력에 반응)를 발생시킬 수 있다.
실시형태에서, 이러한 단일 및/또는 멀티 터치 이벤트는 테스트 장치(103)의 터치 스크린(104) 제어기가 일반적으로 물리적 터치 이벤트로 해석하는 시그널을 모방한 시그널을 접촉 영역(207)으로부터 터치스크린(104)으로 투입함으로써 가상 실행된다.
실시형태에서, 이러한 시그널은 전기적이며 용량성 터치스크린(104)의 열/컬럼 피치보다 폭이 더 넓게 이격된 하나 이상의 전기 시그널 생성기(209)에 의해 지연 측정 시스템의 접촉 영역(207)으로부터 방출된다. 실시형태에서, 이러한 전기 시그널 생성기(209)는 얇은 비전도성 접촉 영역(207) 아래에 위치한다. 실시형태에서, 이러한 전기 시그널 생성기(209)는 접촉 영역(207)을 통해 돌출되어 터치스크린(104)과 직접 접촉한다. 실시형태에서, 이러한 전기 시그널 생성기(209)는 그리드로 배치된다. 실시형태에서, 이러한 전기 시그널 생성기는 랜덤 패턴으로 배치된다.
시스템의 다른 실시형태는 지연 측정 시스템(102)으로부터 정적 터치 이벤트 시뮬레이션을 가능하게 한다. 그러한 실시형태에서, 접촉 영역(207)의 부분은 유전체 특징이 계산 엔진(201)에 의해 제어된 전기 시그널링을 통해 변경될 수 있는 유전체 물질로 형성될 수 있다. 이러한 물질은 스트론튬 티탄산염과 바륨 스트론튬 티탄산염에 제한되지 않지만 이를 포함할 수 있다. 터치 이벤트는 물질의 유전체를 증가시킴으로써 모방되어 터치 센서에 손가락, 스타일러스 또는 다른 유전체 물체가 터치 센서와 접촉하게 되는 것으로 보인다.
지연 측정 시스템(102)의 정적 터치 이벤트 시뮬레이션을 가능하게 하는 다른 실시형태에서, 지연 측정 시스템(102)의 접촉 영역(207)은 하나 이상의 선형 액츄에이터를 사용하여 터치스크린(104)과 물리적 접촉을 하게 되는 유전체 또는 전도성 물질의 하나 이상의 별개의 피스를 포함한다. 선형 액츄에이터와 유전체 또는 전도성 물질의 피스는 계산 엔진(201)으로부터 시그널함으로써 제어된다. 이러한 물질은 다음에 제한되지 않지만 플라스틱, 고무, 수분 주입 컨테이너, 금속, 금속 부하 플라스틱 등일 수 있다. 이러한 액츄에이터는 이에 제한되지 않지만 기계식 액츄에이터, 수압 액츄에이터, 기압 액츄에이터, 유체 시스템, 압전 액츄에이터, 전자 기계식 액츄에이터, 선형 모터 또는 로터리 주행 캠일 수 있다. 이러한 계산식 제어 시그널은 이에 제한되지 않지만 전기, 시각, 기계식 기압, 수압 및 청각 시그널일 수 있다.
실시형태에서, 지연 측정 시스템(102)이 아닌 터치스크린(104)은 그것을 이동시켜 지연 측정 시스템의 접촉 영역(207)과 물리적 접촉하게 하여 인간 사용자 개입 없이 가상 터치탭 및 터치드래그 이벤트를 생성하는 하나 이상의 선형 액츄에이터에 연결된다.
실시형태에서, 접촉 영역(207)은 변형 가능하며 손가락이 터치스크린(104)과 물리적 접촉하게 될 때 사람 손가락의 변형을 모방한다. 실시형태에서, 변형도는 측정되고 기록된다. 다른 실시형태에서, 주어진 시간의 변형도는 여기서 기재된 터치 지연 측정 계산을 실행하는데 사용된다. 특히, 변형도는 지연 측정 시스템(102)의 접촉 영역(207)과 테스트 장치(103)의 터치스크린(104) 사이의 물리적 접촉의 모멘트를 표시하기 위해 제 1 센서(204)(예를 들면, 접촉 센서)에 또는 제 1 센서(204)를 따라서 사용될 수 있다.
실시형태에서, 접촉 영역(207)은 라이트에 반투명하여 제 2 센서(205)는 접촉 영역(207)을 통하여 그래픽 변화를 감지할 수 있다.
다른 실시형태에서, 접촉 영역(207)은 물리적 개구 또는 홀을 포함하여 제 2 센서(205)는 하나 이상의 개구 또는 홀을 통하여 터치 입력에 반응하여 테스트 장치(103)에 의해 방출된 그래픽 변화를 감지할 수 있다. 접촉 영역(207)의 개구 또는 홀은 라이트에 반투명한 기판에 의해 덮히거나 완전히 안 덮힐 수 있다.
실시형태에서, 접촉 영역(207)은 제 1 센서(204)가 터치스크린(104)과 접촉 영역(207) 사이의 전이된 충격을 감지할 수 있는 물질로 구성된다.
실시형태에서, 테스트 장치(103)는 그래픽 변화가 제 2 센서(205)에 의해 쉽게 측정되고 기록될 수 있는 방식으로 터치스크린(104)이 지연 측정 시스템(102)으로부터의 가상 터치 입력에 그래픽하게 반응하도록 하는 소프트웨어를 실행하도록 구성된다. 예를 들면, 실시형태에서 소프트웨어 프로그램은 테스트 장치(103)에 미리 설치될 수 있어 물리적 터치 입력 이벤트가 수신되지 않을 때 터치스크린(104)은 완전히 검정으로 남아있고 단일 터치 입력 이벤트가 수신될 때 완전히 하양으로 변한다.
다른 실시형태에서, 물리적 터치 입력 이벤트가 수신될 때 테스트 장치(103) 상에 미리 설치된 소프트웨어 프로그램은 터치스크린(104)을 완전히 검정으로 남아있도록 하고 지연 측정 시스템(102)으로부터 수신된 각각의 가상 터치 이벤트에 반응하여 각각의 흰색 칸 그래픽 반응이 제 2 센서(205)(예를 들면, 그래픽 변화 센서)에 의한 쉬운 감지를 확실케 하도록 적절히 크기 설정된 곳에 흰색 칸을 제공한다.
다른 실시형태에서, 테스트 장치(103) 상에 미리 설치된 소프트웨어 프로그램은 사용자에게 시각 온 스크린 가이드 및 다양한 지연 테스트 및/또는 다양한 테스트 장치(103)에 걸쳐 측정법의 측정의 단일성을 확실히 하기 위해 지연 측정 시스템(102)을 주어진 테스트 장치(103)의 터치스크린(104)과 물리적 접촉을 어디서, 언제 그리고 어떻게 하는지에 대한 지시사항을 제공할 수 있다. 예를 들면, 실시형태에서 테스트 장치(103) 상에 미리 설치된 소프트웨어 프로그램은 터치스크린(104)의 표면상 어떤 포인트에서 사용자가 지연 측정 시스템(102)과 터치스크린(104)이 물리적 접촉을 하게 해야 하는지를 표시하는 온 스크린 원문 단서를 따라서 터치스크린(104) 상에 빈 흰색 박스를 그릴 수 있다. 다른 실시형태에서, 테스트 장치(104) 상의 미리 설치된 소프트웨어 프로그램은 화살표로 선형 경로를 그릴 수 있고 터치스크린(104)을 따라서 지연 측정 시스템의 접촉 영역(207)을 사용자가 드래그해야만 하는 위치 및 속도를 표시하는 원문 주석을 그릴 수 있다. 다른 실시형태에서, 테스트 장치(104) 상에 미리 설치된 소프트웨어 프로그램은 테스트 장치(104)의 터치스크린(104)을 들어올리기 전에 지연 측정 시스템의 접촉 영역(207)이 얼마나 터치스크린(104)에 위치되어야만 하는지를 그 또는 그녀에게 정확하게 알려주기 위해 초 단위로 수치상 카운트다운을 보여줄 수 있다.
도 3은 지연 측정 시스템(102)과 테스트 장치(103)의 터치스크린(104) 사이의 특정한 물리적 접촉에 대하여 시간에 걸친 전기 시그널의 변화를 보여주는 선 그래프(301)이다.
실시형태에서, 계산 엔진(201)은 선 그래프(301)에 의해 나타난 시그널의 주요 특징을 측정하고 식별하도록 구성되며 다음 중 하나 이상의 모양을 포함할 수 있다: 시그널(302)의 빠른 상승(또는 하락), 시그널(303)의 정점, 시그널(304)의 바닥 또는 시그널 임계점의 교차. 이러한 측정된 특징이 발생하는 시간은 계산 엔진(201)에 의해 기록된다.
상기 나타난 바와 같이, 제 2 센서(205)는 라이트를 전기 시그널로 변환시키는 광검출기일 수 있고 제 2 센서(205)는 시간에 걸친 이러한 시그널의 변화를 감지할 수 있는 계산 엔진(201)에 연결된다(208).
도 4는 점선으로 터치스크린(104)의 특정 그래픽 변화의 시간에 걸친 시그널의 측정된 변화를 묘사하는 선 그래프(401)이다.
실시형태에서, 계산 엔진(201)은 이러한 선 그래프(401)의 주요 특징을 식별하도록 구성되며 다음 중 하나 이상의 모양을 포함할 수 있다: 시그널(402)의 빠른 상승(또는 하락), 시그널(403)의 정점, 시그널(404)의 바닥 또는 시그널 임계점의 교차. 이러한 특징이 발생하는 시간은 계산 엔진(201)에 의해 기록된다.
도 5는 제 1 센서(502)(접촉 센서일 수 있음)와 제 2 센서(501)(그래픽 변화 센서일 수 있음) 각각의 시그널의 특정 측정 변화의 중첩된 그래프를 보여준다. 계산 엔진(201)이 지연 측정 시스템의 두 센서에 의해 발생한 두 개의 선 그래프로부터 두 개의 식별된 특징(503)(이 경우 시그널(303, 403)의 제 1 정점)의 시간을 기록한 후에, 그것은 이러한 두 개의 식별된 특징(503) 사이의 시간차를 계산한다. 식별된 특징(503)의 타이밍의 이러한 측정된 차이는 터치스크린(104) 상의 지연 측정 시스템의 가상 터치 이벤트와 지연 측정 시스템의 가상 터치 이벤트에 반응하여 터치스크린(104)의 그래픽 상 결과적인 변화 사이의 시간 또는 엔드 투 엔드 장치(103) 지연을 나타낸다.
도 6은 그래픽을 디스플레이하기 위한 오버헤드 프로젝터를 사용하는 터치스크린(104)과 함께 작동하도록 구성되는 시스템의 실시형태를 보여준다. 이러한 실시형태에서, 제 2 센서(205)(예를 들면, 그래픽 변화 센서)는 커먼 하우징(206)의 상부에 위치하여 지연 측정 시스템(102)과 터치스크린(104) 사이의 물리적 접촉이 커먼 하우징(206)의 하부에 위치하는 제 1 센서(204)에 의해 감지될 때 사용자 입력에 반응하여 위로부터 아래로 프로젝트된 그래픽은 제 2 센서(205)에 의해 감지된다. 실시형태에서, 접촉 영역(207)은 제 2 센서(205)의 정확한 작동을 방해하지 않도록 임의의 시각적 특징을 가질 수 있다.
도 7은 지연 측정 시스템(102)의 사용자가 테스트 장치(103) 상의 엔드 투 엔드 터치 입력 지연을 측정하기 위해 지연 측정 시스템(102)으로 터치스크린(104)을 수동으로 스크라이크 할 필요없는 시스템의 변형을 도시한다. 이러한 실시형태에서, 커먼 하우징(206)은 터치스크린(104)의 상부에 직접적으로 위치하는 스테이블 하우징(701)의 내부의 터치스크린(104) 위에 위치된다. 스테이블 하우징(701)은 터치스크린(104)에 의해 감지되지 않는 물질로 구성된다. 커먼 하우징(206)은 이동할 수 있는 스탠드오프(702)에 의해 스테이블 하우징(701)에 연결된다. 이러한 실시형태에서, 지연 측정 시스템(102)은 터치스크린(104)의 상부에 위치되고 그 뒤에 사용자가 테스트 장치(103)의 지연을 측정하는 명령을 내린다. 이러한 명령을 받으면, 지연 측정 시스템(102)은 커먼 하우징(206)을 이동시켜 그것이 신뢰 가능하고 반복되는 방식으로 터치스크린(104)와 접촉하게 하는 스탠드오프(702)를 작동시킨다.
실시형태에서, 스탠드오프(702)는 선형 액츄에이터이다. 이러한 실시형태의 변형에서, 스탠드오프(702)는 기계식 액츄에이터, 수압 액츄에이터, 기압 액츄에이터, 유체 시스템, 압전 액츄에이터, 전자 기계식 액츄에이터, 선형 모터 또는 로터리 주행 캠에 제한되지 않지만 이를 포함할 수 있다.
도 8은 지연 측정 시스템(102)의 실시형태를 탭, 드래그 또는 잉킹 작동 도중에 테스트 장치의 터치 또는 스타일러스 입력 지연을 측정하기 위해 테스트 장치(103)의 터치스크린(104) 상에서 탭이 되거나 터치스크린(104)을 걸쳐서 미끄러워질 수 있는 형태가 있는 물체로 도시한다.
실시형태에서, 지연 측정 시스템(102)의 하부는 하나 이상의 제 2 센서(205)(예를 들면, 그래픽 변화 센서), 테스트 장치(103)의 터치스크린(104)과 물리적 접촉을 할 때 물리적 터치 입력 이벤트를 모방하는 물질로 구성된 터치 시뮬레이션 부분(801) 및 지연 측정 시스템(102)이 테스트 장치의 터치스크린(104)과 물리적 접촉을 하게 되는 때를 감지하는 제 1 센서(204)(예를 들면, 접촉 센서)를 포함하는 접촉 영역(207)이다.
실시형태에서, 지연 측정 시스템(102)의 터치 시뮬레이션 부분(801)은 접촉 영역(207)과 터치스크린(104) 사이의 물리적 접촉이 터치 입력을 만들어낼 수 있는 성질을 갖는 물질로 구성된다.
다른 실시형태에서, 지연 측정 시스템(102)의 터치 시뮬레이션 부분(801)은 설계되고 테스트 장치(103)는 구성되어 시그널이 송신될 때까지 터치스크린(104) 상의 터치 시뮬레이션 부분(801)의 물리적 터치다운 이벤트는 테스트 장치(103)의 터치스크린(104)에 의해 감지되지 않을 것이다. 이것은 사용자가 지연 시험 절차 도중에 디스플레이 상에 지연 측정 시스템(102)을 놓을 수 있도록 한다.
실시형태에서, 터치 시뮬레이션 부분(801)은 유전체 또는 전도성 물질로 구성된다.
실시형태에서, 터치 시뮬레이션 부분(801)은 지연 측정 시스템(102)이 정적이거나 이동할 때 하나 또는 여러 손가락 또는 자극에 의해 만들어지는 바와 같이 터치스크린(104) 상에 물리적 터치다운 이벤트를 가상 실행시키는 시그널을 생성하는 위해 계산 엔진(201)에 연결될 수 있다.
이전의 실시형태에서 개시된 바와 같이, 지연 측정 시스템(102)이 정적일 때, 인간 사용자가 지연 측정 시스템(102)을 조작할 필요없이 이것은 터치 시뮬레이션 부분(801)이 테스트 장치(103)의 터치스크린(104) 상에 다양하고, 동시 다발적이며 쉽게 반복 가능한 물리적 탭 이벤트를 가상 실행할 수 있게 한다.
대조적으로, 지연 측정 시스템(102)이 사용자에 의해 물리적으로 드래그되는 동안 터치 시뮬레이션 부분(801)에 다양한 물리적 터치 이벤트를 가상 실행하는 실시형태는 시스템(102)이 진단 절차 도중에 터치스크린(104) 상에 다양한 손가락/자극 동작 및 잉크 이벤트를 가상 실행하게 한다.
이전의 실시형태를 참조하여 이전에 언급된 바와 같이, 그러한 계산식 제어 터치 시뮬레이션 부분(801)은 용량성 터치스크린(104)의 열/컬럼 피치보다 폭이 더 넓게 이격된 계산 엔진(201)에 의해 제어되는 전기 시그널 생성기(209), 유전체 특징이 계산 엔진(201)에 의해 제어되는 전기 시그널링을 통해 변경될 수 있는 유전체 물질, 또는 하나 이상의 선형 액츄에이터를 갖는 유전체 또는 전도성 물질의 하나 이상의 개별 피스의 조합으로 구성될 수 있다.
실시형태에서, 제 2 센서(205), 터치 시뮬레이션 부분(801), 제 1 센서(204) 및 출력(202)은 계산 엔진(201)에 연결된다.
다른 실시형태에서, 제 2 센서(205), 제 1 센서(204) 및 출력(202) 만 계산 엔진(201)에 연결된다.
다른 실시형태에서, 제 2 센서(205)와 제 1 센서(204) 만 계산 엔진(201)에 연결된다.
실시형태에서, 제 2 센서(205)는 라이트를 전기 시그널로 변환시키는 광검출기이다.
실시형태에서, 광검출기는 포토다이오드로 작동하는 역편향 LED이다. 다양한 실시형태에서, 이러한 광검출기는 APS, CCD, 포토레지스터, 광전지, 포토다이오드, 광전자 배증관, 광전관 또는 양자점 광전도체일 수 있다.
실시형태에서, 제 2 센서(205)는 제 2 센서(205)에 의해 감지되는 터치스크린(104)을 비추는 하나 이상의 광원과 짝을 이룬다. 유리, 광택 또는 반사 표면을 포함하는 다양한 표면에 걸쳐서 제 2 센서(205) 측정의 정확도를 향상시키는 이러한 광원은 하나 이상의 발광 다이오드(LEDs) 또는 적외선 레이저 다이오드에 제한되지 않지만 이를 포함할 수 있다.
그래픽 변화 센서일 수 있는 제 2 센서는 테스트 장치의 디스플레이의 변화가 전기 신호의 변화를 낳고 테스트 장치의 터치스크린(104)의 커버 기판 상의 인지 가능한 특징 및 패턴을 감지할 수 있도록 위치된다. 제 2 센서(205)는 전기 시그널의 변화를 측정할 수 있는 계산 엔진(201)에 연결될 수 있다.
실시형태에서, 제 2 센서(205)로부터 방출된 시그널의 이러한 변화는 계산 엔진(201)에 의해 측정되기 전에 아날로그 시그널로부터 디지털 시그널로 변환된다.
실시형태에서, 제 1 센서(204)와 제 2 센서(205)는 근접하여 제 1 센서(204)의 위치에서 지연 측정 시스템(102)과 터치스크린(104) 사이의 접촉은 제 2 센서(205)에 의해 감지된 터치스크린(104)의 디스플레이된 그래픽의 변화를 발생시킨다.
실시형태에서, 지역 측정 시스템(102)은 엔드 투 엔드 드래그 지연이 측정되는 테스트 장치(103)의 터치스크린(104) 주위에 드래그되며, 터치스크린(104)의 디스플레이는 테스트 장치(103)가 지연 측정 시스템(102)에 의해 모방된 물리적 터치 이벤트가 있어야 한다고 믿는 그래픽 마커(802)를 보여준다.
실시형태에서, 테스트 장치의 터치스크린(104)의 디스플레이는 그래픽 마커(802)가 임의의 시간에 임의의 색, 패턴 및/또는 형상이 되고 그러한 그래픽 마커(802)를 시간 상 주어진 포인트에서 그래픽 마커(802)의 위치와 지연 측정 시스템(102)의 위치 및 속도의 제 2 센서(205) 측정의 정확도를 향상시키는 임의의 시간의 컬러 및/또는 패턴된 배경에 대비하여 디스플레이할 수 있도록 프로그램화 될 수 있다.
실시형태에서, 터치 스크린(104)을 걸쳐서 드래그될 때 지연 측정 시스템(102)의 위치와 속도는 광학, 레이저, 글레이져 또는 다크 필드 마우스의 그것과 유사한 광학 기술을 사용하여 측정된다.
실시형태에서, 터치스크린(104)을 걸쳐서 드래그될 때 지연 측정 시스템(102)의 위치와 속도는 회로와 트랙볼 마우스의 그것과 유사한 전자 기계식 측정 기술을 사용하여 측정된다.
터치스크린(104)에 걸친 지연 측정 시스템(102)의 속도 및 그래픽 마커(802)의 중앙과 시스템의 물리적 터치 시뮬레이션 부분(801)의 중앙 사이의 물리적 거리를 측정함으로써, 지연 측정 시스템(102)은 테스트 장치(103)의 엔드 투 엔드 터치 드래그 지연을 측정할 수 있다. 지연 측정 시스템(102)의 속도가 일정하면, 측정된 드래그 지연은 그래픽 마커(802)의 중앙과 시스템의 터치 시뮬레이션 부분(801)의 중앙 사이의 물리적 거리를 지연 측정 시스템(102)이 이동하는 속도로 나눈 것과 동일하다. 지연 측정 시스템(102)의 속도가 일정하지 않으면, 지연 측정 시스템(102) 및 터치 시뮬레이션 부분(801)과 그래픽 마커(802) 사이의 상대적 위치 사이의 관계는 더 복잡한 수학 함수일 것이다.
실시형태에서, 지연 측정 시스템(102)의 위치와 속도는 이러한 목적을 위해 제 2 센서(205)와 테스트 장치의 터치스크린(104)의 디스플레이 상에 도입된 그래픽 변화 및/또는 마커를 사용하여 측정된다.
실시형태에서, 지연 측정 시스템(102)은 실시형태에 제 1 센서(204)(예를 들면, 접촉 센서)에 추가를 하여 탭 및 드래그 지연 측정의 기능을 결합하여 그것은 터치 및/또는 스타일러스 상호작동 중의 하나 또는 모두에서 테스트 장치의 터치스크린(104)의 입력 지연을 측정할 수 있다. 이러한 실시형태에, 이전에 설명된 바와 같이 터치스크린(104) 상의 지연 측정 시스템의 제 1 물리적 "탭" 접촉 시뮬레이션의 시간과 그러한 가상 물리적 접촉에 대한 이미 프로그램화된 그래픽 반응의 시스템의 제 2 센서(205)에 의한 감지 사이의 차이는 탭 이벤트를 위해 테스트 장치(103)의 라운드 트립, 터치 또는 스타일러스 입력 지연을 계산하는데 사용될 수 있다.
실시형태에서, 시스템(102)은 멀티 지연 측정 시스템이 동시에 사용될 수 있도록 설계된다. 특정한 실시형태에서, 시스템은 테스트 장치(103)의 터치스크린(104)에 위치되어 다양한 손에 의해 실행된다. 지연 측정 시스템(102)의 위치와 작동은 위치, 속도, 탭핑 등을 결정하기 위해 사용하는 센서에 의해 명확해져야 한다.
이전에 언급된 바와 같이, 실시형태에서 계산 엔진(201)과 지연 시스템의 제 1 센서(204), 제 2 센서(205) 및 터치 시뮬레이션 부분(801) 사이의 연결은 블루투쓰, 블루투쓰 저에너지(BLE), 와이파이 또는 WAN에 제한되지 않지만 이를 포함하는 물리적 유선 또는 무선일 수 있다.
계산 엔진(201)에 연결된 지연 측정 시스템(102)의 새 센서 구성요소의 추가 뿐만 아니라 기존의 센서 구성요소의 사용은 지연 측정 시스템(102)이 청각 및 진동 촉각 반응을 포함하여 그래픽 반응 외의 터치 입력에 대한 테스트 장치의 반응의 다른 형태의 터치 입력 지연을 테스트할 수 있게 한다.
실시형태에서, 지연 측정 시스템(102)은 지연 측정 시스템(102)과 테스트 장치의 터치 스크린(104) 사이의 제 1 물리적 접촉뿐만 아니라 테스트 장치의 진동 촉각 반응을 감지하는 계산 엔진(201)에 연결된 하나 이상의 제 1 센서(204)를 포함할 수 있다. 시스템의 제 1 가상 물리적 터치 입력 이벤트와 테스트 장치의 제 1 감지 진동 촉각 반응 사이의 지연 측정 시스템의 측정된 타이밍 차이는 탭 동작에 대한 테스트 장치의 진동 촉각 반응의 터치 입력 지연이다. 유사하게, 지연 측정 시스템의 제 1 센서(204)에 의해 기록된 멀티 터치 동작, 잉킹 또는 드래그 명령에 대한 테스트 장치의 진동 촉각 반응의 빈도 또는 강도의 변화의 측정된 타이밍은 그러한 손가락/자극 동작이 테스트 장치의 진동 촉각 반응의 터치 입력 지연을 결정하기 위해 지연 측정 시스템(102)에 의해 가상 실행되었을 때의 측정된 타이밍과 비교될 수 있다. 그래픽 반응의 터치 입력 지연을 계산하는 것과 같이, 테스트 장치의 반응을 감지하기 위해 사용된 시스템의 내부 센서 및/또는 회로의 임의의 고정된 또는 변화 가능한 지연은 테스트 장치의 진동 촉각 터치 입력 지연의 시스템의 기록된 측정으로부터 예상되고 차감되어야 한다. 지연 측정 시스템의 제 1 센서(204)가 긴 물리적 유선 또는 무선에 의해 시스템의 계산 엔진(201)에 연결될 수 있는 바와 같이, 또한 그들은 테스트 장치의 진동 촉각 반응 지연의 보다 더 정확한 판독을 확실히 하기 위해 테스트 장치의 진동 촉각 피드백 구성요소에 근접하여 쉽게 위치될 수 있다.
도 9에 나타난 바와 같이, 실시형태에서 지연 측정 시스템(102)은 터치 입력에 대한 테스트 장치의 청각 반응의 타이밍을 감지하기 위한 계산 엔진(201)에 연결된 하나 이상의 청각 센서(901)를 포함할 수 있다. 실시형태에서, 청각 센서(901)는 하나 이상의 컴팩트 마이크로폰 어레이일 수 있다. 지연 측정 시스템의 제 1 가상 물리적 터치 입력 이벤트와 그러한 터치 이벤트에 대한 테스트 장치의 제 1 청각 반응 사이의 측정된 타이밍 차이는 탭 동작에 대한 테스트 장치의 청각 반응의 터치 입력 지연이다. 유사하게,
지연 측정 시스템의 청각 센서(901)에 의해 기록된 보다 복잡한 멀티 터치 동작, 잉킹 또는 드래그 명령에 대한 테스트 장치의 청각 반응의 빈도 또는 강도의 변화와 그러한 물리적 손가락/자극 동작이 지연 측정 시스템(102)에 의해 가상 실행되었을 때의 측정된 타이밍 사이의 시간의 차이는 테스트 장치의 청각 반응의 터치 입력 지연이다. 실시형태에서, 그러한 손가락/자극 동작의 타이밍은 지연 측정 시스템의 제 1 센서(204)로부터 획득한 측정에 의해 결정된다. 실시형태에서, 그러한 가상 물리적 손가락/자극 동작의 정확한 타이밍은 시스템의 계산 엔진(201)이 시그널을 테스트 장치의 터치스크린(104)의 표면 위로 주입함으로써 발생하면서 알려진다. 그래픽 반응의 터치 입력 지연을 계산하는 것과 같이, 시스템의 내부 센서 및/또는 회로의 고정되거나 변화 가능한 지연은 테스트 장치의 터치 입력 지연의 시스템의 기록된 측정으로부터 예상되고 차감되어야만 한다. 지연 측정 시스템의 청각 센서(901)가 긴 물리적 유선 또는 무선으로 시스템의 계산 엔진(201)에 연결될 수 있는 바와 같이, 또한 시스템의 청각 센서(901)는 테스트 장치의 청각 반응의 가장 정확한 팍독을 확실히 하기 위해 테스트 장치의 청각 피드백 구성요소에 근접하여 쉽게 위치될 수 있다. 테스트 장치(103) 상의 그러한 청각 피드백 구성요소는 스테레오 스피커에 제한되지 않지만 이를 포함할 수 있다.
다양한 실시형태에서, 지연을 측정하는데 사용되는 장치는 지연이 측정되는 동일한 장치일 수 있다. 그러한 일부 실시형태에서, "터치"는 사용자에 의해 개시되고 터치 센서 및 가속도계, 자기계, 마이크로폰, 근접 센서 또는 당업자에게 알려진 임의의 센서(또는 비동기로 기록되고 보상됨)와 같은 장치의 다른 센서에 의해 효과적으로 동시에 감지될 수 있다. 시간이 이후에 측정되는 반응은 시각적일 수 있고 그 경우 카메라 또는 다른 라이트 센서가 사용될 수 있으며, 반응이 청각적이면 마이크로폰 또는 다른 청각 센서가 사용될 수 있다. 다른 실시형태에서, 내부 시스템 또는 어플리케이션 프로세스의 반응은 출력 장치로 실제로 출력이 없이 대신 기록될 수 있다. 일부 실시형태에서, 거울 또는 다른 반사 표면은 디스플레이가 카메라에 보일 수 있도록 하는데 필요할 수 있다. 다른 실시형태에서, 센서는 출력(또는 스피커로부터의 음향을 반사하는 표면)의 직접 관찰을 가능하게 하도록 위치설정 될 수 있다. 일부 실시형태에서, 초기 '터치'는 하나 이상의 거짓 '터치'의 발생을 통하여 가상 실행될 수 있다. 이것은 소프트웨어에서 주입될 수 있다. 또한, 그것은 터치 센서 자체의 전기 또는 다른 유발을 통해 발생 될 수 있다. 일부 실시형태에서, 입력과 반응 사이의 시간의 일부는 예상될 수 있다(예를 들면: 특정 핸드셋, 장치의 클래스, 센서 유형, 센서 모델 등을 위해 일부 고정되었다고 가정). 다른 실시형태에서, 하나 이상의 센서의 출력은 평균 반응 시간을 제공하도록 합쳐질 수 있다(또는 합산의 다른 통계적 수단).
지연 시험 장치
현재 시험 방법
터치 대 디스플레이 지연을 측정하기 위해 단순한 기술이 사용되어 왔다. 장치는 그래픽이 터치 포인트(예를 들면, 잉킹, 아이콘 이동)를 따르도록 의도된 모드에 위치된다. 자는 장치의 상부에 위치된다. 그 뒤에 손가락은 최대한 일정한 레이트로 자의 엣지를 따라서 스크린에 걸쳐 드래그된다. 알려진 프레임 레이트의 고속도 카메라는 결과적인 그래픽 반응뿐만 아니라 손가락 모션을 캡쳐한다. 비디오의 개별적인 프레임을 검사함으로써, 손가락의 속도(연속적인 프레임 x 프레임 레이트 사이에 이동된 거리)는 계산될 수 있다. 손가락과 다음의 그래픽 사이의 분리량은 직접적으로 관찰될 수 있다. 지연은 분리 거리/손가락 속도로 계산될 수 있다. 두 개의 측정 즉, 최악의 경우 지연과 최고의 경우의 지연이 일반적으로 구해진다.
새로운 지연 장치 및 방법
본 개시를 통하여, "입력 이벤트"라는 용어는 입력 장치에 명령을 내리는 것을 기재하는데 일반적으로 사용된다. 이벤트 주행 소프트웨어 구조를 사용하는 사용자 인터페이스에 구체적으로 제한되도록 의도되지 않는다.
도 10은 지연 측정 장치의 실시형태를 도시하는 측면도이다. 실시형태에서, 크기 조정 가능 클램프(1003, 1005)를 갖는 장치 홀더(1001)가 제공되어 시험 순서 도중에 테스트 하의 장치(103)를 고정한다. "X" 클램프(1003)와 "Y" 클램프(1005)가 제공되어 장치를 2 차원에서 안정적으로 고정한다. 실시형태에서, 복수의 클램프, 마찰 장치, 흡입 컵, 무게, 벨크로 또는 다른 기계식 수단은 진단 도중에 이동하지 않는 테스트 하의 장치를 고정한다. 테스트 하의 장치를 이동하지 못하도록 하기 위한 클램프(1003, 1005) 및 다른 수단은 테스트 하의 장치의 작동을 방해하지 않는 물질로 구성될 수 있다.
실시형태에서, 테스트 하의 장치(103)는 이동하지 못하도록 고정되지 않지만 입력 수단(손가락/스타일러스 프록시 장치와 같은)에 대한 그 위치와 방향은 측정되거나 잘 알려져있다.
입력 프록시 장치(1007)가 제공되고 손가락/자극 프록시 장치를 제공하는 복수의 인공 터치 또는 스타일러스 사용자 입력 장치를 포함할 수 있다. 실시형태에서, 입력 프록시 장치(1007)와 테스트 하의 장치(103) 사이의 용량성 커플링은 전기식, 기계식 또는 화학적 또는 다른 수단에 의해 변경될 수 있다. 그러한 손가락/스타일러스 프록시 장치는 테스트 하의 장치의 스크린에 대하여 정전용량, 접촉 영역 및 마찰의 차이를 가상 실행하기 위해 복수의 물질로 만들어질 수 있다.
적어도 하나의 기계식 모터가 테스트 장치(103)에 대해 입력 프록시 장치(1007)를 이동시키거나 프록시 장치에 대해 테스트 장치를 이동시키기 위해 제공된다. 실시형태에서, 적어도 두 개의 기계식 모터가 입력 프록시 장치(1007)의 x,y,z 이동뿐만 아니라 테스트 하의 장치에 대한 다양한 각도의 모션 및 방향을 가능하게 할 뿐만 아니라 이러한 축과 자유도를 따라서 속도 및 압력/힘을 변경하기 위해 X-Y 테이블(1009)에 제공된다. 실시형태에서, 입력 프록시 장치는 정적으로 고정되고 장치 홀더(1001)는 장치 홀더(1001)의 X-Y 모션을 제공하기 위한 모터를 갖는 X-Y 테이블 상에 실장된다.
테스트 하의 장치(103) 위로 로드된 테스트 어플리케이션은 입력 프록시 장치(1007)의 이동을 기록하고 이러한 이동의 표현을 디스플레이하기 위해 제공된다. 실시형태에서, 테스트 어플리케이션은 아무것도 나타나지 않고 하얀 스크린을 디스플레이하고 표현은 단일 검정 잉크 스트로크를 포함한다. 실시형태에서, 테스트 어플리케이션은 CPU와 GPU 상의 스트레스가 터치/스타일러스 성능에 영향을 끼치는 방법을 평가하는 제로(0)와 고 "SoC 로드" 가상 상태를 가진다. 고 "SoC 로드" 경우는 일반적인 스마트 장치 사용자가 하루에 사용하면서 멀티태스크를 할 수 있는 공동으로 사용 가능하며/중고이고, 개방되고 백그라운드화된 제 3 자 어플리케이션의 세트로 규정될 수 있다. 실시형태에서, 테스트 어플리케이션은 테스트 하의 장치에 의해 규정된 바와 같이 제로 로드로부터 최대 CPU 로드까지의 다른 CPU 로드에 상응하는 복수의 "SoC 로드" 상태를 사용한다. 이러한 면에서, 본 발명의 다른 요소와 조합된 테스트 어플리케이션은 테스트 하의 장치가 추가적인 로드를 얼마나 잘 조절하는 지를 측정할 수 있다. 예를 들면, 본 발명의 다른 요소와 조합된 테스트 어플리케이션은 지연이 추가적인 로드로 상대적으로 천천히 또는 상대적으로 갑자기 길어지는지를 측정 즉, 지연이 추가적인 로드로 인해 길어지는 레이트를 측정할 수 있다. 이러한 면에서, 두 개 이상의 로드 상태는 시스템에 의해 사용될 수 있다. 또한, 본 발명의 다른 요소와 조합된 테스트 어플리케이션은 단기 또는 장기 메모리 접근과 같이 다른 영역의 병목으로부터 CPU 상의 로드를 분리할 수 있다. 테스트 어플리케이션은 손가락/스타일러스 프록시 장치 행동에 반응하여 GPU 가속(DirectX 또는 OpenGL에 의해 가속된 실시형태에서)과 CPU 만의 검정 잉크 스트로크 사이에서 토글하도록 구성될 수 있다. 이러한 유형의 모드는 하드웨어의 렌더링 및 소프트웨어의 렌더링으로 각각 일반적으로 참조된다.
테스트 어플리케이션과 시스템의 다른 면은 테스트되는 모든 테스트 하의 장치에 걸쳐서 표준화된 제 3 자 어플리케이션을 사용할 수 있다. 이러한 면에서, 제 3 자 어플리케이션의 다른 버전을 갖는 테스트 하의 다른 장치의 다른 플랫폼 또는 심지어 다르케 코드화된 다른 플랫폼 상의 "동일한" 어플르케이션을 설명하도록 구성될 수 있다. 로드 레벨은 "표준 어플리케이션 로드" 측정을 대신하지 않고 그보다는 그것을 보완하기 위해 초당 계산 또는 순수한 수학적 측정에 기반을 둘 수 있다.
실시형태에서, 적어도 하나의 지상 실측 측정 장치(1011)는 지상 실측을 제공하는 테스트 어플리케이션에 의해 발생된 검정 잉크 스트로크 뿐만 아니라 테스트 하의 장치(103)에 대한 손가락/스타일러스 프록시 장치 이동을 기록하기 위해 사용된다. 실시형태에서, 지상 실측 측정 장치(1011)는 고속도 카메라를 포함한다. 다른 실시형태에서, 지상 실측 측정 장치(1011)는 손가락/스타일러스 프록시 장치에 부착된 한개, 두개 또는 세개의 축의 가속도계를 포함한다. 이러한 가속도계는 시간에 걸쳐 손가락/스타일러스 프록시 장치의 가속도를 감지하며 이러한 데이터는 시험 어플리케이션에 의해 기록될 수 있다.
관련된 실시형태에서, 추가적인 어플리케이션에 의해 처리되는 VGA, HDMI, DP, DVI, LVDS와 같은 비디오 시그널 또는 다른 비디오 시그널을 출력한다. 비디오 시그널의 판독을 통하여, 추가적인 어플리케이션은 비디오 시그널의 타이밍 및/또는 패킷 정보를 관찰함으로서 검정 잉크 스트로크의 형상과 위치를 결정할 수 있다. 관련된 실시형태에서, 테스트 하의 장치는 비디오 시그널을 다른 장치 또는 디스플레이로 출력하고 지상 실측 측정 장치는 그것의 의도된 작동을 방해하지 않으면서 그것으로 전달된 데이터를 판독하기 위해 이러한 연결을 "탭" 한다.
실시형태에서, 시스템은 계산 장치와 랜덤이지만 사용자가 수정 가능한 입력 프록시 장치 이동 순서를 발생시키고, 모터를 제어함으로서 손가락/스타일러스 프록시 장치의 이동 순서를 제어하며 테스트 어플리케이션의 검정 잉크 스트로크와 손가락/스타일러스 프록시 장치의 실제의 이미 규정된 이동 순서 사이의 공간과 시간 상 임의의 발산을 측정하는 관리 어플리케이션을 더 포함한다.
시험 절차와 장치의 많은 변형이 가능하다. 실시형태에서, 테스터의 손가락이 직접 사용된다. 실시형태에서, 사용자는 터치 또는 다른 입력 이벤트가 발생했을 때 감지할 수 있는(무시할 만한 또는 적어도 잘 교정된 지연) 터칭 멤버 상에 글러브 또는 다른 커버링을 착용한다. 실시형태에서, 테스터는 손가락 연장 또는 손가락 팬텀을 착용한다. 실시형태에서, 손가락 팬텀은 기계식 수단에 의해 이동된다. 실시형태에서, 시그널(전기식 또는 다른 적절한 유형)은 체인의 하나 이상의 포인트에서 실제 입력 이벤트의 효과를 가상 실행하기 위해 감지, 처리 및 디스플레이 체인의 하나 이상의 포인트에서 유도된다. 실시형태에서, 터칭 장치(손가락, 팬텀 등)는 정적이며 입력 장치는 이동한다. 실시형태에서, 시스템은 터칭 장치 및 입력 장치가 이미 규정되거나 적어도 잘 측정된 방식으로 이동되도록 구성된다.
장치 어셈블리
실시형태에서, 장치는 수평으로 위치된 테스트 하의 장치와 함께 설계된다. 손가락/스타일러스 프록시 장치는 테스트 하의 장치 위에 실장된 기계식 "암"에 부착된다. 복수의 기계식 모터는 모든 원하는 치수의 손가락/스타일러스 프록시 장치의 위치, 각도, 압력 및 속도의 동시의 제어를 가능하도록 위치된다.
실시형태에서, 지상 실측 측정 장치 센서(테스트 하의 장치의 디스플레이의 상태를 결정하기 위한 시각 감지 수단일 수 있음)는 전체 장치 위의 고정 포인트에 실장되어 손가락/스타일러스 프록시 장치와 검정 잉크 스트로크 사이의 지연도와 상관없이 장치 트레이, 손가락/스타일러스 프록시 장치 및 테스트 어플리케이션의 검정 잉크 스트로크에 위치하는 전체 테스트 하의 장치의 뷰를 항시 가능하게 한다.
실시형태에서, GTM2 센서는 손가락/스타일러스 프록시 장치에 직접적으로 평행하여 실장되어 손가락/스타일러스 프록시 장치의 이동과 테스트 어플리케이션의 검정 잉크 스트로크 사이의 임의적인 발산의 폐쇄되고 막힘이 없는(occlusion-free) 뷰를 가능하게 한다.
실시형태에서, 두 개의 GTM2 센서는 사용된다: 하나의 센서는 전체 장치 위에 고정된 포인트에 실장되고 다른 하나는 손가락/스타일러스 프록시 장치에 직접적으로 평행하여 실장된다.
실시형태에서, 하나의 가속도계 기반 GTM2 센서는 손가락/스타일러스 프록시 장치에 직접적으로 부착되어 그 가속도를 기록한다. 실시형태에서, 제 2 가속도계 기반 GTM2 센서는 테스트 하의 장치에 부착되어 테스트 하의 장치와 손가락/스타일러스 프록시 사이의 상대적인 가속도를 측정한다.
실시형태에서, 테스트 하의 장치는 그 비디오 출력 포트(VGA, DVI, DP, HDMI 등)를 통해 GTM2 센서에 연결된다.
시험 절차
실시형태에서, 소프트웨어는 테스트 되는 장치 위로 로드된다. 이러한 소프트웨어는 다양한 입력 이벤트 유형에 대한 기결정된 시각 반응을 포함한다. 일부 실시형태에서, 이러한 소프트웨어는 테스트되는 장치에 존재하는 사용자 인터페이스 툴킷에 의해 구성된 사용자 인터페이스 구성요소를 포함할 수 있다. 다른 실시형태에서, 이러한 소프트웨어는 '스크래치로부터'라는 입력에 대한 모든 반응을 발생시킬 수 있다. 다른 실시형태에서, 반응의 양 유형은 포함될 수 있다.
실시형태에서, 소프트웨어는 다양한 버전, 모델 및 제품을 비교하기 위해 설계된 표준화된 테스트 패키지이다.
실시형태에서, 소프트웨어는 존재하는 소프트웨어 패키지이고 그것의 지연과 에러 성능는 우리가 특징지으려 하는 것이다.
실시형태에서, 소프트웨어가 테스트되는 장치 위로 로드되면, 실행된다. 그 뒤 시험 장치는 장치에 다양한 입력을 만들기 위해 사용된다. 그러한 입력은 '지상 실측'이라 기록된다(일부 실시형태에서, 장치의 위치를 추적하기 위해 컴퓨터 비전과 같은 기술을 사용; 다른 실시형태에서, 스타일러스/손가락의 위치는 기계식으로 추적된다. 다른 실시형태에서, 가속도계는 손가락/스타일러스 프록시의 위치보다 그 가속도를 추적한다. 이러한 실시형태에서, 장치에 설치된 소프트웨어에 따라 장치는 입력 작동에 대한 반응을 발생시킨다. 그러한 반응은 그 뒤 시험 장치에 의해 감시되고 지연을 결정하기 위해 입력 작동의 '지상 실측'과 비교된다.
실시형태에서, 손가락/스타일러스 프록시 장치는 그 위치를 추적하는데 도움을 주는 능동 또는 수동 마커를 포함한다.
실시형태에서, 장치의 출력은 시각적이며 시각 감지 기술을 사용하여 감지된다. 실시형태에서, 출력은 청각적이며 마이크로폰 또는 다른 사운드 입력 장치를 사용하여 감지된다. 실시형태에서, 출력은 물리적이며 진동 센서 또는 다른 위치 감지 장치를 사용하여 감지된다. 실시형태에서, 출력은 미각적이거나 냄새이며 화학식 센서 또는 다른 미각/냄새 감지 방법을 통하여 측정된다.
실시형태에서, 지연은 입력 작동과 반응이 발생되는 시간 사이의 간격의 기간으로 측정된다. 일부 실시형태에서, 반응 사이의 간격은 측정된다(이것은 종종 출력 장치의 '프레임 레이트'이지만 항상 그렇지 않다). 일부 실시형태에서, 예상된 것으로부터의 출력의 성질의 편차가 측정된다. 이것은 지상 실측으로부터의 출력 경로의 편차 또는 지상 실측 상에서 예측된 것으로부터의 출력 강도의 차이에 제한되지 않지만 이를 포함한다.
실시형태에서, 손가락/스타일러스 프록시의 지상 실측 가속도(GTM2에 의해 측정)는 시험 소프트웨어에 의해 기록되는 입력 경로와 비교된다. 이러한 실시형태에서, 지연은 손가락/스타일러스 프록시의 기록된 가속도 변화와 시험 소프트웨어에 의해 기록된 입력 경로의 연관된 변화 사이의 시간차로 측정된다. 이러한 실시형태의 변형에서, GTM2에 의해 제공된 가속도 데이터의 시간 구성요소는 쉬프트되어 가속도계 자체의 임의의 알려지고 일정한 지연을 설명한다.
실시형태에서, 손가락/스타일러스 프록시의 지상 실측 위치는 상기 수단 중의 하나를 통해 측정되고 시험 어플리케이션의 검정 잉크 스트로크의 형상과 위치는 디스플레이 케이블을 통해 장치에 부착된 제 2 GTM2 센서를 통해 측정된다. 지연은 두 개의 GTM2 장치에 의해 측정되는 스트로크의 포인트 사이의 시간차로 측정된다. 관련된 실시형태에서, 디스플레이 케이블을 통해 테스트 하의 장치에 부착된 GTM2 센서는 교정되어 케이블로 디스플레이 정보의 패키징 및 전송에 의해 소개된 임의의 지연을 설명한다.
실시형태에서, 장치의 다양한 측정이 기록되고 데이터 파일로 사용 가능하게 된다. 실시형태에서, 보고서는 자동으로 발생된다. 실시형태에서, 보고서는 자동 발생하게 되고 이후의 회수를 위해 데이터스토어에 위치된다. 실시형태에서, 결과는 웹 인터페이스를 통해 사용 가능하게 된다.
다양한 입력 이벤트의 시험
입력 이벤트 유형의 다양한 유형이 테스트된다. 일반적으로, 장치는 확장되어 테스트되는 장치에 의해 지지되는 이벤트 유형을 포함한다. 이벤트의 이러한 세트는 일반적으로 장치의 소프트웨어에서 구체적으로 불러질 수 있는 입력 기초요소를 포함한다(예를 들면: '탭', '드래그', '회전', 등). 또한 이것은 장치 소프트웨어에 의해 구체적으로 감지되지 않지만 장치에서 실행되는 어플리케이션 소프트웨어에 의한 입력의 해석인 이벤트를 포함한다(예를 들면: 사용자가 장치에 걸쳐서 그들의 손가락을 드래그하면, 시스템 소프트웨어는 연속의 '드래그' 이벤트를 단순히 발생시킬 수 있지만 이러한 이벤트를 감시하는 소프트웨어는 스크린 상에 캐릭터를 그리는 것과 같이 특정 드래그 패턴에 특정 방식으로 반응한다). 임의의 이벤트에서, 이들 유형 또는 임의의 다른 유형은 시험에서 포함될 수 있다.
탭핑
물리적 접촉이 만들어질 때로부터 S/P/D(감지-처리-디스플레이) 체인의 다양한 포인트까지의 시간
슬라이딩, 드래깅
S/P/D 체인의 다양한 포인트의 시간 및 공간 값과 터칭 장치(손가락, 스타일러스 등)의 참값의 차이
회전
지상 실측의 예측된 위치로부터 S/P/D 체인의 다양한 포인트의 시간 및 공간 값의 차이
호버
입력 이벤트의 참 위치가 터치 없는 센서에 의해 모인 정보로부터 얼마나 잘 예측되거나 나아지는 것
장치 회전
S/P/D 체인의 다양한 포인트의 장치 그 자체의 시간 및 회전 값의 차이
장치 위치
S/P/D 체인의 다양한 포인트의 장치 그 자체의 시간 및 공간 값 및 터칭 장치(손가락, 스타일러스 등)의 참값의 차이
카메라 지연
S/P/D 체인의 다양한 포인트의 지상 실측에서 예측된 콘텐트로부터 스크린에 나타난 이미지의 변화
근접 센서 위치
S/P/D 체인의 다양한 포인트의 장치 프록시의 시간 및 공간 값과 터칭 장치(손가락, 스타일러스 등)의 참값의 차이
측정된 지연의 평가
측정된 지연은 그 값(시간차)으로 보고될 수 있거나 상응하는 공간 에러와 함께 시간차로 보고되거나 시간차 및 공간 에러의 통계적 함수로써 보고될 수 있다.
측정된 지연은 복수의 입력 장치(동일한 모델, 다른 모델 등의 다른 예시 또는 버전)에서 취해진 그러한 측정과 비교되고 장치 간의 질적 또는 양적 비교로서 보고될 수 있다.
측정된 지연은 균등한 "사용자 경험"의 계량인 보고서와 함께 사용자 주관의 방식으로 비교될 수 있다.
본 시스템 및 방법은 지연을 측정하거나 테스트하기 위한 방법 및 장치의 블록 다이어그램 및 작동 도시를 참조하여 상기 기재되었다. 블록 다이어그램의 각각의 블록 또는 작동 도시 및 블록 다이어그램의 블록 또는 작동 도시의 조합은 아날로그 또는 디지털 하드웨어 및 컴퓨터 프로그램 지시사항에 의해 실시될 수 있다. 이러한 컴퓨터 프로그램 지시사항은 일반 목적의 컴퓨터, 특별한 목적의 컴퓨터, ASIC 또는 다른 프로그램 가능한 데이터 처리 장치의 프로세서에 제공될 수 있어서 컴퓨터 또는 다른 프로그램 가능한 데이터 처리 장치를 통해 실행하는 지시사항 블록 다이어그램 또는 작동 블록 또는 블록에 구체화된 기능/작동을 실시한다. 일부 대안의 실시형태에서, 블록에서 주목된 기능/작동은 작동 도시에서 주목된 순서와 다르게 발생할 수 있다. 예를 들면, 연관된 기능성/작동에 따라서 연속으로 나타난 두 개의 블록은 실제로 실질적으로 동시에 실행되거나 때로는 역순서로 실행될 수 있다.
본 발명이 바람직한 실시형태를 참조하여 특별히 나타나고 기재되지만, 형태와 자세한 사항의 다양한 변경이 본 발명의 정신과 범위를 벗어나지 않으면서 여기서 만들어질 수 있다는 것은 당업자에 의해 이해될 것이다.

Claims (84)

  1. 사용자 입력을 수신하고 그에 반응하여 그래픽 출력을 제공하는 터치 표면을 포함하는 장치 상의 복수의 포인트 중 임의의 포인트에서 지연을 측정하기 위한 시스템으로서,
    상기 장치로부터 분리된 몸체로서, 근위 단부와 원위 단부를 갖는 몸체,
    제 1 시간에 상기 장치로의 터치 이벤트 입력을 감지하기 위해 상기 몸체의 상기 원위 단부에 작동 가능하게 부착된 적어도 하나의 접촉 센서,
    제 2 시간에 상기 장치로부터 그래픽 반응 출력을 감지하기 위한 적어도 하나의 그래픽 변화 센서로서, 상기 반응은 상기 터치 이벤트에 반응하는 그래픽 변화 센서,
    상기 적어도 하나의 접촉 센서와 상기 적어도 하나의 그래픽 변화 센서에 작동 가능하게 연결된 계산 엔진으로서, 상기 제 1 시간과 상기 제 2 시간 사이의 시간차를 계산하기 위한 계산 엔진, 및
    상기 장치에서 상기 터치 이벤트와 그래픽 반응 사이의 지연 측정을 식별하도록 구성된 출력으로서, 상기 측정은 상기 제 1 시간과 상기 제 2 시간 사이의 시간차를 반영한 출력을 포함하는 지연을 측정하기 위한 시스템.
  2. 사용자 입력을 수신하고 그에 반응하여 출력을 제공하는 사용자 인터페이스를 포함하는 장치에서 지연을 측정하기 위한 시스템으로서,
    상기 장치와 분리된 몸체로서, 근위 단부와 원위 단부를 갖는 몸체,
    제 1 시간에 상기 장치로의 터치 이벤트 입력을 감지하기 위해 상기 몸체의 상기 원위 단부에 작동 가능하게 부착된 제 1 센서,
    제 2 시간에 상기 장치로부터의 반응 출력을 감지하기 위한 제 2 센서로서, 상기 반응은 상기 터치 이벤트에 반응하는 제 2 센서,
    상기 제 1 센서에 의한 터치 이벤트를 감지하고 상기 제 2 센서에 의한 반응을 감지하는 사이의 지연의 측정을 반영한 시간 데이터를 출력하도록 구성된 상기 제 1 센서와 상기 제 2 센서에 작동 가능하게 연결된 회로, 및
    상기 시간 데이터를 처리하고 지연을 디스플레이하기 위해 상기 장치로 상기 시간 데이터를 전송하도록 구성된 커뮤니케이션 인터페이스를 포함하는 지연을 측정하기 위한 시스템.
  3. 장치 상의 복수의 포인트에서 지연을 측정하기 위한 방법으로서,
    상기 장치는 사용자 입력을 수신하고 그에 반응하는 출력을 제공하는 사용자 인터페이스를 갖고,
    터치 이벤트가 생성되는 제 1 시간과 상기 장치가 상기 터치 이벤트에 대한 반응을 출력하는 제 2 시간을 나타내는 제 1 데이터를 생성하는 외부 시간 데이터 생성기로부터의 시간 데이터를 상기 장치 상의 커뮤니케이션 인터페이스를 통해 수신하는 단계로서, 상기 시간 데이터는 상기 제 1 시간과 상기 제 2 시간 사이의 지연의 측정을 반영하는 단계,
    상기 커뮤니케이션 인터페이스를 통해 수신된 상기 시간 데이터를 사용하여 상기 장치와 연관된 지연을 결정하는 단계, 및
    상기 장치의 디스플레이 상에 상기 지연을 디스플레이하는 단계를 포함하는 지연을 측정하기 위한 방법.
  4. 터치 입력을 수신하고 그에 반응하여 출력을 제공하는 사용자 인터페이스를 포함하는 장치상에 지연을 측정하기 위한 시스템으로서,
    상기 장치와 분리된 몸체,
    제 1 시간에 상기 장치로의 터치 이벤트 입력을 감지하기 위해 상기 몸체에 작동 가능하게 부착된 제 1 센서,
    제 2 시간에 상기 장치로부터의 반응 출력을 감지하기 위한 제 2 센서로서, 상기 반응은 상기 터치 이벤트에 반응하는 제 2 센서,
    상기 제 1 시간과 상기 제 2 시간 사이의 시간차를 계산하기 위한 계산 엔진, 및
    상기 장치에서 지연의 측정의 표시를 출력하도록 구성된 출력 장치로서, 상기 측정은 상기 제 1 시간과 상기 제 2 시간 사이의 시간차를 반영하는 출력 장치를 포함하는 지연을 측정하기 위한 시스템.
  5. 제 4 항에 있어서,
    상기 몸체는 근위 단부와 윈위 단부를 포함하며, 상기 몸체의 상기 근위 단부는 핸들로서 작동하기 위한 형상을 가지며 상기 몸체의 상기 원위 단부는 제 1 센서가 부착되어 있고, 상기 몸체는 사용자가 상기 근위 단부를 고정하고 원위 단부가 상기 장치에 탭하도록 구성되는 지연을 측정하기 위한 시스템.
  6. 제 4 항에 있어서,
    상기 제 2 센서는 상기 제 1 센서에 매우 근접하여 상기 몸체에 작동 가능하게 부착되어 있는 지연을 측정하기 위한 시스템.
  7. 제 4 항에 있어서,
    상기 반응은 그래픽 반응을 포함하고 상기 제 2 센서는 그래픽 변화 센서를 포함하는 지연을 측정하기 위한 시스템.
  8. 제 4 항에 있어서,
    상기 반응은 청각 반응을 포함하고 상기 제 2 센서는 청각 센서를 포함하는 지연을 측정하기 위한 시스템.
  9. 제 4 항에 있어서,
    상기 반응은 진동 촉각 반응이고 상기 제 2 센서는 진동 센서를 포함하는 지연을 측정하기 위한 시스템.
  10. 제 4 항에 있어서,
    상기 지연은 엔드 투 엔드 지연을 포함하는 지연을 측정하기 위한 시스템.
  11. 제 4 항에 있어서,
    상기 사용자 인터페이스가 직접 조작 사용자 인터페이스인 지연을 측정하기 위한 시스템.
  12. 제 4 항에 있어서,
    상기 제 1 센서가 접촉 센서를 포함하는 지연을 측정하기 위한 시스템.
  13. 제 12 항에 있어서,
    상기 접촉 센서가 기계 충격을 전기 시그널로 변환시키는 변환기를 포함하는 지연을 측정하기 위한 시스템.
  14. 제 13 항에 있어서,
    상기 변환기가 강유전성 변환기를 포함하는 지연을 측정하기 위한 시스템.
  15. 제 13 항에 있어서,
    상기 변환기가 가속도계를 포함하는 지연을 측정하기 위한 시스템.
  16. 제 4 항에 있어서,
    상기 제 2 센서가 그래픽 변화 센서를 포함하는 지연을 측정하기 위한 시스템.
  17. 제 16 항에 있어서,
    상기 그래픽 변화 센서가 라이트를 전기 시그널로 변환시키는 광검출기를 포함하는 지연을 측정하기 위한 시스템.
  18. 제 17 항에 있어서,
    상기 광검출기가 포토다이오드로서 작동하는 역 편향 LED를 포함하는 지연을 측정하기 위한 시스템.
  19. 제 17 항에 있어서,
    상기 광검출기가 활성 픽셀 센서, 전하 결합 소자, 포토레지스터, 광전지, 포토다이오드, 광전자 배증관, 광전관 또는 양자점 광전도체로 이루어지는 군에서 선택된 적어도 하나를 포함하는 지연을 측정하기 위한 시스템.
  20. 제 4 항에 있어서,
    상기 장치가 스마트폰, 테블릿 또는 컴퓨터인 지연을 측정하기 위한 시스템.
  21. 제 4 항에 있어서,
    상기 시스템이 감지/처리/디스플레이에서의 지연을 디스플레이하도록 구성되는 지연을 측정하기 위한 시스템.
  22. 제 4 항에 있어서,
    상기 장치가 터치 센시티브 장치인 지연을 측정하기 위한 시스템.
  23. 제 4 항에 있어서,
    상기 장치가 멀티 터치 센시티브 장치인 지연을 측정하기 위한 시스템.
  24. 제 4 항에 있어서,
    상기 장치가 스타일러스 센시티브 장치인 지연을 측정하기 위한 시스템.
  25. 제 22 항에 있어서,
    상기 장치가 스타일러스 센시티브 장치인 지연을 측정하기 위한 시스템.
  26. 제 23 항에 있어서,
    상기 장치가 스타일러스 센시티브 장치인 지연을 측정하기 위한 시스템.
  27. 제 4 항에 있어서,
    상기 제 1 센서와 연관된 지연과 상기 제 2 센서와 연관된 지연의 합이 상기 장치의 지연보다 작도록 상기 제 1 센서와 상기 제 2 센서가 선택되거나 구성되는 지연을 측정하기 위한 시스템.
  28. 제 4 항에 있어서,
    상기 지연의 측정이 상기 시간차로부터 상기 시스템의 내부 구성요소로 인한 시간 지연을 차감함으로써 적어도 부분적으로 생성되는 지연을 측정하기 위한 시스템.
  29. 제 25 항에 있어서,
    상기 시스템의 내부 구성요소로 인한 상기 시간 지연이 고정되는 지연을 측정하기 위한 시스템.
  30. 제 25 항에 있어서,
    상기 시스템의 내부 구성요소로 인한 상기 시간 지연이 감지되는 지연을 측정하기 위한 시스템.
  31. 제 25 항에 있어서,
    상기 시스템의 내부 구성요소로 인한 상기 시간 지연이 예상되는 지연을 측정하기 위한 시스템.
  32. 제 4 항에 있어서,
    상기 계산 엔진이 시스템 온 칩, 중앙 처리 유닛, 마이크로 제어기 유닛, 필드 프로그램 가능한 게이트 어레이, NAND 메모리, 수직 NAND 메모리, 랜덤 액세스 메모리, 저항 랜덤 액세스 메모리 또는 자기 저항 랜덤 액세스 메모리로 이루어지는 군에서 선택되는 적어도 하나를 포함하는 지연을 측정하기 위한 시스템.
  33. 제 13 항에 있어서,
    상기 장치의 디스플레이 영역을 조영하도록 구성된 광원을 더 포함하는 지연을 측정하기 위한 시스템.
  34. 제 4 항에 있어서,
    상기 출력이 판독 디스플레이를 포함하는 지연을 측정하기 위한 시스템.
  35. 제 31 항에 있어서,
    상기 판독 디스플레이가 상기 장치의 디스플레이를 포함하고 상기 시스템이 상기 장치와의 커뮤니케이션하기 위한 커뮤니케이션 인터페이스를 포함하는 지연을 측정하기 위한 시스템.
  36. 제 32 항에 있어서,
    상기 커뮤니케이션 인터페이스가 무선 네트워크를 포함하는 지연을 측정하기 위한 시스템.
  37. 제 4 항에 있어서,
    상기 계산 엔진이 상기 장치의 프로세서를 포함하는 지연을 측정하기 위한 시스템.
  38. 제 4 항에 있어서,
    상기 계산 엔진이 외부 장치에 프로세서를 포함하고, 상기 외부 장치는 상기 제 1 센서와 상기 제 2 센서, 및 상기 출력 장치에 작동 가능하게 연결된 지연을 측정하기 위한 시스템.
  39. 제 38 항에 있어서,
    상기 계산 엔진이 무선 커뮤니케이션 인터페이스를 통해 상기 제 1 센서에 작동 가능하게 연결되는 지연을 측정하기 위한 시스템.
  40. 제 38 항에 있어서,
    상기 계산 엔진이 유선 커뮤니케이션 인터페이스를 통해 상기 제 1 센서에 작동 가능하게 연결되는 지연을 측정하기 위한 시스템.
  41. 제 38 항에 있어서,
    상기 계산 엔진이 무선 커뮤니케이션 인터페이스를 통해 상기 제 2 센서에 작동 가능하게 연결되는 지연을 측정하기 위한 시스템.
  42. 제 38 항에 있어서,
    상기 계산 엔진이 유선 커뮤니케이션 인터페이스를 통해 상기 제 2 센서에 작동 가능하게 연결되는 지연을 측정하기 위한 시스템.
  43. 제 38 항에 있어서,
    상기 계산 엔진이 무선 커뮤니케이션 인터페이스를 통해 상기 출력 장치에 작동 가능하게 연결되는 지연을 측정하기 위한 시스템.
  44. 제 38 항에 있어서,
    상기 계산 엔진이 유선 커뮤니케이션 인터페이스를 통해 상기 출력 장치에 작동 가능하게 연결되는 지연을 측정하기 위한 시스템.
  45. 제 38 항에 있어서,
    상기 계산 엔진이 유선 커뮤니케이션 인터페이스를 통해 상기 제 1 센서에, 무선 커뮤니케이션 인터페이스를 통해 상기 제 2 센서에 작동 가능하게 연결되는 지연을 측정하기 위한 시스템.
  46. 제 38 항에 있어서,
    상기 계산 엔진이 유선 커뮤니케이션 인터페이스를 통해 상기 제 2 센서에 무선 커뮤니케이션 인터페이스를 통해 상기 제 1 센서에 작동 가능하게 연결되는 지연을 측정하기 위한 시스템.
  47. 제 4 항에 있어서,
    상기 몸체가 접촉 영역을 갖는 원위 단부를 포함하고, 상기 접촉 영역과 상기 장치의 터치스크린 사이의 물리적 접촉이 상기 장치로의 터치 입력을 생성할 수 있는 물성을 갖는 물질을 상기 접촉 영역이 포함하는 지연을 측정하기 위한 시스템.
  48. 제 4 항에 있어서,
    상기 제 2 센서는 청각 센서를 포함하는 지연을 측정하기 위한 시스템.
  49. 제 4 항에 있어서,
    접촉 영역을 더 포함하고, 상기 접촉 영역의 적어도 일부가 하나 이상의 선형 액츄에이터에 의해 상기 사용자 인터페이스와 물리적 접촉을 하게 되는 유전체 또는 전도성 물질의 개별 피스로 형성되며, 상기 선형 액츄에이터와 유전체 또는 전도성 물질의 피스가 상기 계산 엔진으로부터의 시그널에 의해 제어되는 지연을 측정하기 위한 시스템.
  50. 제 4 항에 있어서,
    상기 시스템이 상기 사용자 인터페이스를 걸쳐 이동할 때 상기 시스템의 위치와 속도를 측정하기 위한 회로를 더 포함하는 지연을 측정하기 위한 시스템.
  51. 제 38 항에 있어서,
    상기 시스템이 상기 장치의 엔드 투 엔드 터치 드래그 지연을 결정하기 위해 상기 측정된 위치와 속도를 나타내는 데이터를 사용하도록 구성되는 지연을 측정하기 위한 시스템.
  52. 제 4 항에 있어서,
    상기 몸체는 커먼 하우징과 스테이블 하우징을 포함하고, 상기 스테이블 하우징은 상기 장치의 상기 사용자 인터페이스에 의해 감지되지 않는 물질을 포함하고, 반복 가능한 방식으로 상기 커먼 하우징은 이동하여 상기 사용자 인터페이스와 접촉할 수 있도록 상기 커먼 하우징은 상기 장치의 상기 사용자 인터페이스 상에 위치할 때 상기 스테이블 하우징에 대해 이동 가능한 지연을 측정하기 위한 시스템.
  53. 제 40 항에 있어서,
    상기 사용자 인터페이스와 접촉하도록 상기 커먼 하우징을 이동시키기 위한 액츄에이터를 더 포함하는 지연을 측정하기 위한 시스템.
  54. 제 4 항에 있어서,
    상기 측정의 표시가 질적 표시인 지연을 측정하기 위한 시스템.
  55. 제 4 항에 있어서,
    상기 측정의 표시가 양적 표시인 지연을 측정하기 위한 시스템.
  56. 제 4 항에 있어서,
    상기 출력 장치가 그래픽 디스플레이, 스피커, 라이트, 라이트 반사 지시기 및 촉각 출력의 세트로부터 선택된 적어도 하나인 지연을 측정하기 위한 시스템.
  57. 사용자 입력을 수신하고 그에 반응하여 출력을 제공하는 사용자 인터페이스를 포함하는 장치에서 지연을 측정하기 위한 시스템으로서,
    상기 장치와 분리된 몸체,
    상기 장치의 제어기가 물리적 터치 이벤트로서 해석함으로써 상기 장치에서 가상 물리적 터치 이벤트가 개시되는 제 1 시간에 시그널을 방출하는 시그널 방출기,
    제 2 시간에 상기 장치로부터 반응 출력을 감지하기 위한 센서로서, 상기 반응은 상기 터치 이벤트에 반응하는 센서,
    상기 제 1 시간과 상기 제 2 시간 사이의 시간차를 계산하기 위한 계산 엔진, 및
    상기 장치에서 지연의 측정을 출력하도록 구성된 출력으로서, 상기 측정은 상기 제 1 시간과 상기 제 2 시간 사이의 상기 시간차를 반영하는 출력을 포함하는 지연을 측정하기 위한 시스템.
  58. 제 57 항에 있어서,
    상기 장치가 상기 물리적 터치 이벤트를 발생하도록 결정하는 디스플레이 상의 위치에 그래픽 마커를 디스플레이하도록 구성되는 지연을 측정하기 위한 시스템.
  59. 제 57 항에 있어서,
    상기 장치가 상기 시그널 방출기에 의해 방출된 상기 시그널의 위치설정에 도움을 주기 위해 출력을 발생시키도록 구성되는 지연을 측정하기 위한 시스템.
  60. 제 57 항에 있어서,
    상기 장치가 상기 가상 물리적 터치 이벤트의 위치설정에 도움을 주기 위해 출력을 발생시키도록 구성되는 지연을 측정하기 위한 시스템.
  61. 제 57 항에 있어서,
    상기 위치 설정에 도움을 주는 출력이 그래픽 마커인 지연을 측정하기 위한 시스템.
  62. 제 57 항에 있어서,
    접촉 영역을 더 포함하며, 상기 접촉 영역의 적어도 일부가 유전체 물질로 형성되고 그 유전체 특징은 상기 계산 엔진에 의해 제어된 시그널에 의해 변경됨으로써 상기 장치에서 가상 터치 이벤트가 개시되는 지연을 측정하기 위한 시스템.
  63. 터치 입력을 수신하고 그에 반응하여 출력을 제공하는 사용자 인터페이스를 포함하는 장치에 대한 지연 데이터를 발생시키기 위한 방법으로서,
    i) 상기 장치에 터치 이벤트를 개시하는 단계,
    ii) 제 1 센서로부터 제 1 시그널을 수신하는 단계로서, 상기 제 1 시그널은 상기 장치에서 상기 터치 이벤트의 상기 시간에 상응하는 단계,
    iii) 제 2 센서로부터 제 2 시그널을 수신하는 단계로서, 상기 제 2 시그널은 상기 장치가 상기 터치 이벤트에 반응하여 출력을 제공하는 상기 시간에 상응하는 단계, 및
    iv) 시간 데이터를 포함하는 출력 시그널을 제공하는 단계로서, 상기 시간 데이터는 상기 터치 이벤트의 상기 시간과 상기 장치가 상기 터치 이벤트에 반응하여 출력을 제공하는 상기 시간 사이의 지연의 측정을 반영하는 단계를 포함하는 지연 데이터를 발생시키기 위한 방법.
  64. 터치 입력을 수신하고 그에 반응하여 출력을 제공하는 사용자 인터페이스를 포함하는 장치에 대한 지연 데이터를 발생시키기 위한 방법으로서,
    i) 상기 장치에 터치 이벤트를 개시하는 단계,
    ii) 제 1 센서로부터 제 1 시그널을 수신하는 단계로서, 상기 제 1 시그널은 상기 장치에서 상기 터치 이벤트의 상기 시간에 상응하는 단계,
    iii) 제 2 센서로부터 제 2 시그널을 수신하는 단계로서, 상기 제 2 시그널은 상기 장치에서 상기 터치 이벤트의 상기 시간에 상응하는 단계, 및
    iv) 상기 제 1 시그널과 상기 제 2 시그널을 사용하여 시간 데이터를 포함하는 출력 시그널을 제공하는 단계로서, 상기 시간 데이터는 상기 제 1 센서에 의해 감지된 상기 터치 이벤트의 상기 시간과 상기 제 2 센서에 의해 감지된 상기 터치 이벤트의 상기 시간 사이의 지연의 측정을 반영하는 단계를 포함하는 지연 데이터를 발생시키기 위한 방법.
  65. 제 64 항에 있어서,
    상기 제 1 센서는 터치 센서이고 상기 제 2 센서는 가속도계, 자기계, 마이크로폰 또는 근접 센서로 이루어지는 군에서 선택되는 센서인 지연 데이터를 발생시키기 위한 방법.
  66. 테스트 하의 장치에서 지연을 측정하기 위한 시스템으로서,
    상기 테스트 하의 장치는 터치 이벤트를 수신하고 그에 반응하는 출력을 제공하는 사용자 인터페이스를 포함하며,
    상기 테스트 하의 장치를 수신하도록 구성된 장치 고정기,
    입력 프록시 장치,
    상기 테스트 하의 장치에 대하여 상기 프록시 장치를 이동시키도록 구성된 적어도 하나의 기계식 모터, 및
    상기 테스트 하의 장치에 대하여 입력 프록시 장치 이동을 기록하고 상기 테스트 하의 장치에서 작동하는 테스트 어플리케이션에 의해 발생한 이동의 표현을 기록함으로써 지상 실측이 제공되도록 구성된 지상 실측 측정 장치를 포함하는 장치에서 지연을 측정하기 위한 시스템.
  67. 제 66 항에 있어서,
    상기 이동의 표현은 상기 테스트 하의 장치에 디스플레이된 잉크 스트로크를 포함하는 장치에서 지연을 측정하기 위한 시스템.
  68. 제 66 항에 있어서,
    상기 적어도 하나의 기계식 모터는 상기 입력 프록시 장치가 상기 테스트 하의 장치에 대하여 이동되도록 상기 테스트 하의 장치를 이동시키도록 구성된 모터를 포함하는 장치에서 지연을 측정하기 위한 시스템.
  69. 제 66 항에 있어서,
    상기 적어도 하나의 기계식 모터는 상기 입력 프록시 장치가 상기 테스트 하의 장치에 대하여 이동되도록 상기 입력 프록시 장치를 이동시키도록 구성된 모터를 포함하는 장치에서 지연을 측정하기 위한 시스템.
  70. 제 66 항에 있어서,
    상기 입력 프록시 장치는 핑거 프록시 장치를 포함하는 장치에서 지연을 측정하기 위한 시스템.
  71. 제 66 항에 있어서,
    상기 입력 프록시 장치는 스타일러스 프록시 장치를 포함하는 장치에서 지연을 측정하기 위한 시스템.
  72. 제 66 항에 있어서,
    상기 적어도 하나의 기계식 모터는 상기 테스트 하의 장치에 대하여 상기 입력 프록시 장치의 X-Y 모션을 제공하기 위한 복수의 기계식 모터를 포함하는 장치에서 지연을 측정하기 위한 시스템.
  73. 제 72 항에 있어서,
    상기 복수의 모터는 상기 테스트 하의 장치에 대해 다양한 각도로 상기 입력 프록시 장치의 방향을 제공하는 장치에서 지연을 측정하기 위한 시스템.
  74. 제 66 항에 있어서,
    상기 지상 실측 측정 장치는 고속 카메라를 포함하는 장치에서 지연을 측정하기 위한 시스템.
  75. 제 66 항에 있어서,
    상기 지상 실측 측정 장치는 가속도계를 포함하는 장치에서 지연을 측정하기 위한 시스템.
  76. 제 75 항에 있어서,
    상기 가속도계는 이축 가속도계를 포함하는 장치에서 지연을 측정하기 위한 시스템.
  77. 제 75 항에 있어서,
    상기 가속도계는 삼축 가속도계를 포함하는 장치에서 지연을 측정하기 위한 시스템.
  78. 제 66 항에 있어서,
    상기 적어도 하나의 기계식 모터는 랜덤 입력 프록시 장치 이동 순서에 따라서 제어되는 장치에서 지연을 측정하기 위한 시스템.
  79. 테스트 하의 장치에 대한 지연 데이터를 발생시키기 위한 방법으로서,
    상기 테스트 하의 장치는 터치 입력을 수신하고 그에 반응하여 출력을 제공하는 사용자 인터페이스를 포함하며,
    프록시 장치가 상기 테스트 하의 장치에 대하여 이동하도록 하는 단계,
    상기 테스트 하의 장치에 대한 입력 프록시 장치 이동을 기록하는 단계,
    상기 상기 테스트 하의 장치에서 작동하는 테스트 어플리케이션에 의해 발생한 이동의 표현을 기록하는 단계, 및
    상기 테스트 하의 장치에 대한 지연 데이터를 발생시키기 위해 상기 입력 프록시 장치 이동의 기록으로부터의 데이터와 상기 이동의 표현의 기록으로부터의 데이터를 사용하는 단계를 포함하는 지연 데이터를 발생시키기 위한 방법.
  80. 제 79 항에 있어서,
    입력 프록시 장치 이동을 기록하고 상기 테스트 어플리케이션에 의해 발생한 이동의 표현을 기록하는 단계는 지상 실측 측정 장치에 의해 실행되는 지연 데이터를 발생시키기 위한 방법.
  81. 제 79 항에 있어서,
    상기 테스트 어플리케이션이 복수의 로드 가상 상태에서 작동하도록 구성되는 지연 데이터를 발생시키기 위한 방법.
  82. 제 81 항에 있어서,
    상기 테스트 어플리케이션이 상기 장치의 CPU 또는 GPU 상의 스트레스가 터치 성능에 영향을 끼치는 정도를 평가하도록 구성되는 지연 데이터를 발생시키기 위한 방법.
  83. 제 81 항에 있어서,
    상기 테스트 어플리케이션이 추가적인 로드에 의해 지연이 더 길어지는 레이트를 평가하도록 구성되는 지연 데이터를 발생시키기 위한 방법.
  84. 제 79 항에 있어서,
    상기 테스트 어플리케이션이 GPU 가속 모드와 CPU 단독 모드 사이에서 스위칭되도록 구성되는 지연 데이터를 발생시키기 위한 방법.
KR1020167010525A 2013-10-07 2014-10-07 지연 측정 및 시험 시스템 및 방법 KR20160078352A (ko)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201361887615P 2013-10-07 2013-10-07
US61/887,615 2013-10-07
US14/316,177 2014-06-26
US14/316,177 US9841839B2 (en) 2013-10-07 2014-06-26 System for measuring latency on a touch device
PCT/US2014/059553 WO2015054301A1 (en) 2013-10-07 2014-10-07 Latency measuring and testing system and method

Publications (1)

Publication Number Publication Date
KR20160078352A true KR20160078352A (ko) 2016-07-04

Family

ID=52776559

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020167010525A KR20160078352A (ko) 2013-10-07 2014-10-07 지연 측정 및 시험 시스템 및 방법

Country Status (11)

Country Link
US (1) US9841839B2 (ko)
EP (1) EP3039517A4 (ko)
JP (1) JP2017502535A (ko)
KR (1) KR20160078352A (ko)
CN (1) CN105683882B (ko)
AU (1) AU2014332023A1 (ko)
CA (1) CA2924576A1 (ko)
IL (1) IL244593A0 (ko)
MX (1) MX2016004317A (ko)
SG (1) SG11201602426YA (ko)
WO (1) WO2015054301A1 (ko)

Families Citing this family (47)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11106314B2 (en) 2015-04-21 2021-08-31 Dell Products L.P. Continuous calibration of an information handling system projected user interface
US10139854B2 (en) 2015-04-21 2018-11-27 Dell Products L.P. Dynamic display resolution management for an immersed information handling system environment
US9753591B2 (en) 2015-04-21 2017-09-05 Dell Products L.P. Capacitive mat information handling system display and totem interactions
US9791979B2 (en) 2015-04-21 2017-10-17 Dell Products L.P. Managing inputs at an information handling system by adaptive infrared illumination and detection
US9720550B2 (en) 2015-04-21 2017-08-01 Dell Products L.P. Adaptable input active zones at an information handling system projected user interface
US9921644B2 (en) 2015-04-21 2018-03-20 Dell Products L.P. Information handling system non-linear user interface
US9690400B2 (en) 2015-04-21 2017-06-27 Dell Products L.P. Information handling system interactive totems
US9983717B2 (en) * 2015-04-21 2018-05-29 Dell Products L.P. Disambiguation of false touch inputs at an information handling system projected user interface
US9720446B2 (en) 2015-04-21 2017-08-01 Dell Products L.P. Information handling system projected work space calibration
US9804718B2 (en) 2015-04-21 2017-10-31 Dell Products L.P. Context based peripheral management for interacting with an information handling system
US9804733B2 (en) 2015-04-21 2017-10-31 Dell Products L.P. Dynamic cursor focus in a multi-display information handling system environment
US11243640B2 (en) 2015-04-21 2022-02-08 Dell Products L.P. Information handling system modular capacitive mat with extension coupling devices
EP3159776B1 (en) * 2015-10-19 2019-11-20 Ecole Nationale de l'Aviation Civile Arrangement to measure and use latency between an input interface and an output interface of a processing device
US9697800B2 (en) * 2015-12-07 2017-07-04 Basemark Oy Application latency determination method and system for wearable display devices
US10019092B2 (en) 2015-12-10 2018-07-10 Future Dial, Inc. System and method for simulating human manual input for devices using capacitive touchscreens
KR101731584B1 (ko) * 2015-12-15 2017-05-02 주식회사 아하정보통신 전자칠판 테스트 장치 및 그를 이용한 테스트 방법
CN105807602A (zh) * 2016-03-10 2016-07-27 北京小鸟看看科技有限公司 一种测试虚拟现实设备延时的方法和系统
CN105807601A (zh) * 2016-03-10 2016-07-27 北京小鸟看看科技有限公司 一种测试虚拟现实设备延时的方法和系统
US10139973B2 (en) 2016-11-09 2018-11-27 Dell Products L.P. Information handling system totem tracking management
US10139951B2 (en) 2016-11-09 2018-11-27 Dell Products L.P. Information handling system variable capacitance totem input management
US10496216B2 (en) 2016-11-09 2019-12-03 Dell Products L.P. Information handling system capacitive touch totem with optical communication support
US10146366B2 (en) 2016-11-09 2018-12-04 Dell Products L.P. Information handling system capacitive touch totem with optical communication support
US10139930B2 (en) 2016-11-09 2018-11-27 Dell Products L.P. Information handling system capacitive touch totem management
FR3062488B1 (fr) 2017-02-01 2020-12-25 Peugeot Citroen Automobiles Sa Dispositif d'analyse pour la determination d'un temps de latence d'un systeme immersif de realite virtuelle
CN108415822B (zh) * 2017-02-10 2022-09-20 阿里巴巴集团控股有限公司 一种随机测试方法和装置
CN107094249A (zh) * 2017-03-31 2017-08-25 腾讯科技（上海）有限公司 一种测试摄像头延时的方法及装置
EP3454339A1 (en) * 2017-09-07 2019-03-13 Koninklijke Philips N.V. Method and apparatus for improving the measurement of the timing of touches of a touch screen
CN107656638B (zh) * 2017-09-13 2020-10-30 苏州国科视清医疗科技有限公司 疲劳度检测延迟补偿测试系统及方法
US10459528B2 (en) 2018-02-28 2019-10-29 Dell Products L.P. Information handling system enhanced gesture management, control and detection
CN108646932B (zh) * 2018-04-20 2021-11-26 歌尔股份有限公司 一种用于电子设备的振动检测方法、装置及电子设备
JP7020998B2 (ja) * 2018-05-22 2022-02-16 京セラ株式会社 測定装置及び測定装置の制御方法
US10852853B2 (en) 2018-06-28 2020-12-01 Dell Products L.P. Information handling system touch device with visually interactive region
US10761618B2 (en) 2018-06-28 2020-09-01 Dell Products L.P. Information handling system touch device with automatically orienting visual display
US10664101B2 (en) 2018-06-28 2020-05-26 Dell Products L.P. Information handling system touch device false touch detection and mitigation
US10817077B2 (en) 2018-06-28 2020-10-27 Dell Products, L.P. Information handling system touch device context aware input tracking
US10635199B2 (en) 2018-06-28 2020-04-28 Dell Products L.P. Information handling system dynamic friction touch device for touchscreen interactions
US10795502B2 (en) 2018-06-28 2020-10-06 Dell Products L.P. Information handling system touch device with adaptive haptic response
JP7069076B2 (ja) * 2019-03-28 2022-05-17 メタウォーター株式会社 情報処理装置、情報処理システム、及びプログラム
CN110795298B (zh) * 2019-11-06 2021-05-11 腾讯科技（深圳）有限公司 触控显示延时的确定方法和装置、存储介质及电子装置
EP4085442A4 (en) 2019-12-30 2024-01-17 Waymo Llc IDENTIFYING PROXY CALIBRATION TARGETS FOR A VEHICLE FLEET
CN113126791B (zh) * 2019-12-31 2022-11-22 荣耀终端有限公司 一种时间戳记录设备、系统、方法、介质及装置
US20220109617A1 (en) * 2020-10-06 2022-04-07 Nvidia Corporation Latency determinations for human interface devices
CN114546146A (zh) * 2020-11-27 2022-05-27 广州视源电子科技股份有限公司 触摸屏的触摸响应延时测量方法、装置、系统及交互平板
DE102021101621A1 (de) 2021-01-26 2022-07-28 Valeo Schalter Und Sensoren Gmbh Vorrichtung und Verfahren zum Überprüfen einer Bedieneinrichtung mit einem berührungsempfindlichen Bedienfeld
CN116540862B (zh) * 2022-01-26 2023-12-01 荣耀终端有限公司 触控操作响应方法和电子设备
CN114647336A (zh) * 2022-03-15 2022-06-21 Oppo广东移动通信有限公司 一种点击延时测量方法、装置、存储介质及电子设备
CN115834958B (zh) * 2022-12-19 2023-10-20 广东保伦电子股份有限公司 一种触控屏幕书写延时测试方法及装置

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB9108497D0 (en) * 1991-04-20 1991-06-05 Ind Limited W Human/computer interface
GB9722766D0 (en) * 1997-10-28 1997-12-24 British Telecomm Portable computers
CN100447721C (zh) * 2005-07-01 2008-12-31 英华达(上海)电子有限公司 提高手机手写输入的识别速度的方法
US20070086508A1 (en) * 2005-10-19 2007-04-19 Illinois Tool Works Inc. Hand-held instrument for measuring temperature
KR100982282B1 (ko) * 2008-09-19 2010-09-15 주식회사 애트랩 센서, 센서의 센싱 방법, 및 센서의 필터
EP2204726A1 (en) * 2008-12-30 2010-07-07 STMicroelectronics R&D Oy Touch screen controller
CN102096519A (zh) * 2009-12-14 2011-06-15 张海宏 一种触摸背影快速取像识别响应方法与装置
US8996166B2 (en) * 2010-12-09 2015-03-31 T-Mobile Usa, Inc. Touch screen testing platform
US8988087B2 (en) * 2011-01-24 2015-03-24 Microsoft Technology Licensing, Llc Touchscreen testing
US9965094B2 (en) * 2011-01-24 2018-05-08 Microsoft Technology Licensing, Llc Contact geometry tests
US9542092B2 (en) * 2011-02-12 2017-01-10 Microsoft Technology Licensing, Llc Prediction-based touch contact tracking
US9274746B2 (en) * 2011-02-18 2016-03-01 Nuance Communications, Inc. Latency hiding techniques for multi-modal user interfaces
US20120280934A1 (en) * 2011-05-04 2012-11-08 Apple Inc. Simulating Single and Multi-Touch Events for Testing A Touch Panel
US8823794B2 (en) * 2011-06-30 2014-09-02 Intel Corporation Measuring device user experience through display outputs
CN102279667B (zh) * 2011-08-25 2016-10-05 南京中兴新软件有限责任公司 一种响应屏幕触摸事件的方法、装置及通讯终端
US9785281B2 (en) * 2011-11-09 2017-10-10 Microsoft Technology Licensing, Llc. Acoustic touch sensitive testing
US10452188B2 (en) * 2012-01-13 2019-10-22 Microsoft Technology Licensing, Llc Predictive compensation for a latency of an input device
US8436829B1 (en) * 2012-01-31 2013-05-07 Google Inc. Touchscreen keyboard simulation for performance evaluation
US8914254B2 (en) * 2012-01-31 2014-12-16 Microsoft Corporation Latency measurement
CN104115097B (zh) * 2012-02-15 2017-06-09 英特尔公司 触摸屏装置的自动化感知质量评估
US8806280B2 (en) * 2012-02-27 2014-08-12 Microsoft Corporation APIs to test a device
US9317147B2 (en) * 2012-10-24 2016-04-19 Microsoft Technology Licensing, Llc. Input testing tool
CN103268194B (zh) * 2013-04-18 2016-01-20 广州视睿电子科技有限公司 一种交互智能平板的延迟时间测试方法及测试工具

Also Published As

Publication number Publication date
IL244593A0 (en) 2016-04-21
CA2924576A1 (en) 2015-04-16
CN105683882B (zh) 2019-11-29
EP3039517A4 (en) 2017-08-02
EP3039517A1 (en) 2016-07-06
US9841839B2 (en) 2017-12-12
US20150097803A1 (en) 2015-04-09
MX2016004317A (es) 2016-07-11
SG11201602426YA (en) 2016-04-28
AU2014332023A1 (en) 2016-04-21
JP2017502535A (ja) 2017-01-19
WO2015054301A1 (en) 2015-04-16
CN105683882A (zh) 2016-06-15

Similar Documents

Publication Publication Date Title
KR20160078352A (ko) 지연 측정 및 시험 시스템 및 방법
US11740705B2 (en) Method and system for controlling a machine according to a characteristic of a control object
JP2017502535A5 (ko)
CN102915112B (zh) 用于近距离动作跟踪的系统和方法
EP2717120B1 (en) Apparatus, methods and computer program products providing finger-based and hand-based gesture commands for portable electronic device applications
US9201545B2 (en) Motion feedback
US9122351B2 (en) Apparatus for detecting proximity of object near a touchscreen
King et al. Perceptual thresholds for single vs. multi-finger haptic interaction
KR100674090B1 (ko) 착용형 범용 3차원 입력 시스템
WO2014113454A1 (en) Dynamic, free-space user interactions for machine control
US20170094178A1 (en) Method and system for determining proper positioning of an object
KR20180029995A (ko) 물리적 모델에 기초한 동작 인식
CN109313502B (zh) 利用选择装置的敲击事件定位
CN113568506A (zh) 用于显示器控制和定制姿势解释的动态用户交互
JP2011507121A (ja) パッシブマトリックス式多点接触タッチセンサのための容量／抵抗交替測定式分析用電子回路
CN104254816A (zh) 数据输入装置
CN106716331A (zh) 模拟触摸显示器的实时响应性
CN109906428B (zh) 在电容传感器上定位有源触控笔的方法和系统
Deber et al. Hammer time! A low-cost, high precision, high accuracy tool to measure the latency of touchscreen devices
CN104142739B (zh) 一种基于光学鼠标传感阵列的激光点追踪系统及方法
US20160104322A1 (en) Apparatus for generating a display control signal and a method thereof
TW201911024A (zh) 偵測手指的電子裝置、方法及系統以及非暫態可讀取媒體
US20150138162A1 (en) Latency measuring and testing system and method
CN106325726A (zh) 触控互动方法
Li et al. Pseudo-haptics for rigid tool/soft surface interaction feedback in virtual environments

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid