KR101766952B1 - 상호작용식 표면들 상에서의 유저 아이덴티티 검출 - Google Patents

상호작용식 표면들 상에서의 유저 아이덴티티 검출 Download PDF

Info

Publication number
KR101766952B1
KR101766952B1 KR1020147028156A KR20147028156A KR101766952B1 KR 101766952 B1 KR101766952 B1 KR 101766952B1 KR 1020147028156 A KR1020147028156 A KR 1020147028156A KR 20147028156 A KR20147028156 A KR 20147028156A KR 101766952 B1 KR101766952 B1 KR 101766952B1
Authority
KR
South Korea
Prior art keywords
user identity
user
interactive surface
identity attributes
delete delete
Prior art date
Application number
KR1020147028156A
Other languages
English (en)
Other versions
KR20140142283A (ko
Inventor
푸랑 이라니
홍 장
Original Assignee
유니버시티 오브 매니토바
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 유니버시티 오브 매니토바 filed Critical 유니버시티 오브 매니토바
Publication of KR20140142283A publication Critical patent/KR20140142283A/ko
Application granted granted Critical
Publication of KR101766952B1 publication Critical patent/KR101766952B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/36—User authentication by graphic or iconic representation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/107—Static hand or arm
    • G06V40/11—Hand-related biometrics; Hand pose recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

상호작용식 표면 상에서의 하나 이상의 유저 아이덴티티 속성들의 검출을 통해 유저 아이덴티티를 결정하는 것에 기초하여 상호작용식 표면과 관련된 컴퓨팅 시스템의 동작적 양태들을 커스텀화하기 위한 기술들이 일반적으로 제공된다. 유저의 손가락 방위, 손가락 무게/압력, 손가락들 사이의 간격, 손가락 길이, 팔 방위, 손잡이 (handedness), 자세 (posture), DNA, 또는 유사한 고유 특징들과 같은 유저 아이덴티티 속성들은, 예를 들면, 적외선 반사를 통해 손가락 방위를 캡쳐하는 카메라 기반의 FTIR (Frustrated Total Internal Reflection) 시스템, 오버헤드 카메라, 또는 확산 조명 (Diffuse Illumination) 을 활용하여, 상호작용식 표면과 관련된/통합된 입력 디바이스를 통해 검출될 수도 있다. 상호작용식 표면의 동기적인 또는 비동기적인 공유된 사용에서의 유저 아이덴티티 결정에 있어서 확신도 레벨을 향상시키기 위해, 다수의 속성들이 사용될 수도 있다.

Description

상호작용식 표면들 상에서의 유저 아이덴티티 검출{USER IDENTITY DETECTION ON INTERACTIVE SURFACES}
본원에서 달리 나타내어지지 않는 한, 본 섹션에서 설명된 내용들은 본 발명에서의 청구항들에 대한 선행 기술이 아니고 본 섹션에 따라 선행기술이 되는 것으로 인정되지 않는다.
컴퓨터들, 텔레비전들, 메시지 보드들, 전자 게시판들, 및 모니터링 디바이스들과 같은 전통적인 미디어 기기 및 컴퓨터 제어 디바이스들은 입력 하드웨어를 사용하는 유저 인터페이스를 통해 직접적으로 제어된다. 통상적으로, 이들은 디바이스를 제어하기 위한 마우스, 원격 제어, 키보드, 스타일러스, 터치 스크린 등과 같은 입력 디바이스들을 사용하여 직접적으로 제어된다. 입력 디바이스들이 디바이스들과 통합되기 때문에, 유저들이 디바이스와 상호작용하기 위해, 키보드에 대한 키스트로크들, 마우스의 이동들, 및 터치스크린 상의 선택들을 통해 디바이스에 대한 액션들을 개시하여, 디바이스들을 동작시키고 제어하기 위해, 유저들은 이러한 입력 디바이스들 및 화면들에 대한 직접적인 액세스를 갖거나 또는 가깝게 근접해야만 한다. 입력 디바이스들이 유저들에게 직접적으로 액세스가능하지 않으면, 유저와 디바이스들 사이의 상호 작용은 제한될 수도 있고 유저는 그 디바이스들을 동작시키거나 제어하지 못할 수도 있고, 따라서 디바이스들의 유용성을 제한하게 된다.
모바일 디바이스들, 월 패널들 (wall panels), 및 유사한 것들과 같은 현대의 디바이스들은 터치 및/또는 제스쳐 검출을 통해 향상된 상호작용성을 제공하지만, 이러한 디바이스들에 대한 한 도전과제는, 다수의 유저들이 동일한 디바이스를 심지어 상이한 시간들에서 사용하기를 시도할 때의 사용의 용이성이다. 각각의 유저는 상이한 요구들을 가질 수도 있고, 상이한 어플리케이션들을 활용할 수도 있고, 및/또는 상이한 자격정보들 (credentials) (예를 들면, 사인 온 자격정보들) 과 관련될 수도 있다. 이러한 상호작용식 디바이스들은 통상적으로, 어떤 유저가 디바이스와 상호작용하고 있는지를 모르며, 결과적으로, 유저 프로파일, 개개의 유저의 실행취소/재실행 (undo/redo) 등을 유지하는 것과 같은 개별맞춤화 특징들 (personalizing features) 의 부족으로 나타날 수도 있다.
개요
본 개시는 일반적으로, 상호작용식 표면들 상에서 유저 아이덴티티를 검출하는 기술들 및 검출된 아이덴티티에 기초한 커스텀화 (customization) 를 설명한다.
몇몇 실시형태들에 따르면, 상호작용식 표면들 상에서 유저 아이덴티티를 검출하는 방법은, 상호작용식 표면 상에서 유저 아이덴티티 속성을 검출하는 것, 검출된 속성에 기초하여 유저 아이덴티티를 결정하는 것, 유저 아이덴티티와 관련된 커스텀화 동작을 결정하는 것, 및 커스텀화 동작을 수행하는 것을 포함할 수도 있다.
다른 예들에 따르면, 유저 아이덴티티를 검출하는 것에 기초하여 동작적 양태들을 커스텀화할 수 있는 컴퓨팅 디바이스는, 명령들을 저장하도록 구성된 메모리 및 명령들과 연계하여 커스텀화 모듈을 실행하도록 구성된 프로세싱 유닛을 포함할 수도 있다. 커스텀화 모듈은, 컴퓨팅 디바이스와 관련된 상호작용식 표면 상에서 유저 아이덴티티 속성을 검출하고, 검출된 속성에 기초하여 유저 아이덴티티를 결정하고, 유저 아이덴티티와 관련된 커스텀화 동작을 결정하고, 커스텀화 동작을 수행하도록 구성될 수도 있다.
다른 예들에 따르면, 컴퓨터 판독가능 저장 매체는 상호작용식 표면들 상에서 유저 아이덴티티를 검출하기 위한 명령들을 저장할 수도 있다. 그 명령들은 상호작용식 표면 상에서 유저 아이덴티티를 검출하는 것, 검출된 속성에 기초하여 유저 아이덴티티를 결정하는 것, 유저 아이덴티티와 관련된 커스텀화 동작을 결정하는 것, 커스텀화 동작을 수행하는 것을 포함할 수도 있다.
또 다른 예들에 따르면, 상호작용식 표면과 연계하여 사용하기 위한 유저 아이덴티티 기반의 커스텀화 모듈은, 프로세싱 유닛 및 상호작용식 표면과 관련된 입력 디바이스를 포함할 수도 있다. 프로세싱 유닛은, 상호작용식 표면 상에서 유저 아이덴티티 속성을 검출하고, 검출된 속성에 기초하여 유저 아이덴티티를 결정하고, 유저 아이덴티티와 관련된 커스텀화 동작을 결정하고, 커스텀화 동작을 수행할 수도 있다.
상기 개요는 단지 예증적인 것이며 어떤 식으로든 제한하려는 의도는 아니다. 상기 상술된 예시적인 양태들, 실시형태들, 및 특징들에 부가하여, 다른 양태들, 실시형태들, 및 특징들이 도면들 및 하기의 상세한 설명으로부터 더욱 명확해질 것이다.
본 개시의 앞서의 특징 및 다른 특징은 첨부 도면들을 함께 취해진, 다음의 설명 및 첨부된 청구항들로부터 보다 완전히 명백해질 것이다. 이들 도면들은 단지 본 개시에 따른 몇몇 실시형태들만을 묘사하고, 따라서 그 범위를 제한하는 것으로 고려되지 않음을 이해한 후, 본 개시는 첨부 도면들의 이용을 통해 추가적인 특수성 및 세부사항들로 설명될 것이다.
도 1a 내지 도 1d는, 다양한 커스텀화들이 검출된 유저 아이덴티티에 기초하여 수행될 수도 있는 예시적 상호작용식 디바이스들을 예시한다.
도 2는 검출된 유저 아이덴티티에 기초하여 커스텀화할 수 있는 상호작용식 시스템에서의 주요 컴포넌트들 및 상호작용들을 예시한다.
도 3은 유저 아이덴티티 검출에 기초하여 상호작용식 표면의 동작적 양태들을 커스텀화하기 위해 사용될 수도 있는 범용 컴퓨팅 디바이스를 예시한다.
도 4는 유저 아이덴티티 검출에 기초하여 상호작용식 표면의 동작적 양태들을 커스텀화하기 위한 특수 목적 프로세서 기반의 시스템을 예시한다.
도 5는 도 4에서의 디바이스와 같은 통신 디바이스에 의해 수행될 수도 있는 예시적인 방법을 예시한 흐름도이다.
도 6은 본원에서 설명된 적어도 몇몇 실시형태들에 따라 모두 배열된, 예시적인 컴퓨터 프로그램 제품의 블록도이다.
상세한 설명
하기의 상세한 설명에서는, 본원의 일부를 형성하는 첨부된 도면들을 참조한다. 도면들에서, 문맥상 다르게 지시하지 않는 한, 유사한 도면 부호는 통상 유사한 컴포넌트를 식별한다. 상세한 설명, 도면들, 및 특허청구범위들에서 설명된 예증적인 실시형태들은 제한적인 것을 의미하는 것은 아니다. 본원에서 제시되는 요지의 취지 또는 범위를 벗어나지 않으면서, 다른 구체예들이 활용될 수도 있고, 다른 변경예들이 이루어질 수도 있다. 본원에서 일반적으로 설명되고, 도면에서 예시된 본 개시의 양태들이 아주 다양하고 상이한 구성들로 정렬되고, 대체되고, 조합되고, 분리되고, 설계될 수 있으며, 이들 모두는 본원에서 명시적으로 고려된 것임을 쉽게 이해할 수 있을 것이다.
본 개시는 일반적으로, 상호작용식 표면들 상에서 유저 아이덴티티를 검출하는 것 및 검출된 아이덴티티에 기초한 커스텀화에 관련된 방법들, 장치들, 시스템들, 디바이스들, 및/또는 컴퓨터 제품들에 대한 것이다.
간략이 언급하면, 상호작용식 표면 상에서 하나 이상의 유저 아이덴티티 속성들의 검출을 통해 유저 아이덴티티를 결정하는 것에 기초하여 상호작용식 표면과 관련된 컴퓨팅 시스템의 동작적 양태들을 커스텀화하기 위한 기술들이 일반적으로 제공된다. 유저의 손가락 방위 (orientation), 손가락 무게/압력, 손가락들 사이의 간격, 손가락 길이, 팔 방위, 손잡이 (handedness), 자세 (posture), DNA, 또는 유사한 고유 특징들과 같은 유저 아이덴티티 속성들은, 예를 들면, 적외선 반사를 통해 손가락 방위를 캡쳐하는 카메라 기반의 FTIR (Frustrated Total Internal Reflection) 시스템, 오버헤드 카메라, 또는 확산 조명 (Diffuse Illumination) 을 활용하여, 상호작용식 표면과 관련된/통합된 입력 디바이스를 통해 검출될 수도 있다. 상호작용식 표면의 동기적인 또는 비동기적인 공유된 사용에서의 유저 아이덴티티 결정에 있어서 확신도 레벨을 향상시키기 위해, 다수의 속성들이 사용될 수도 있다.
도 1a 내지 도 1d는 예시적인 상호작용식 디바이스들을 예시하는데, 여기서 다양한 커스텀화는, 본원에서 설명된 적어도 몇몇의 실시형태들에 따라 배열된, 검출된 유저 아이덴티티에 기초하여 수행될 수도 있다.
도 1a의 다이어그램 (100) 에서 묘사된 바와 같이, 월 패널 (104) 은 다양한 컴퓨팅 서비스들을 제공하기 위한 공유 사용 상호작용식 표면들의 일 예이다. 월 패널 (104) 은, 예를 들면, 터치가 가능한 또는 제스쳐를 검출하는 큰 사이즈의 디스플레이일 수도 있다. 유저 (102) 는 터치 및/또는 제스쳐들을 통해 월 패널 (104) 과 상호작용할 수도 있다. 몇몇 예들에서, 다수의 유저들 (108) 은 동시에 또는 상이한 시간들에서 월 패널 (104) 을 사용할 수도 있다. 각각의 유저에 대해 월 패널 (104) 또는 하부의 (underlying) 컴퓨팅 시스템의 커스텀한 동작적 양태들이 존재할 수도 있다. 예를 들면, 유저들은 그들의 개별적인 자격정보들로 사인 온해야 할 필요가 있을 수도 있고, 하나 이상의 유저 인터페이스 엘리먼트들 (예를 들면, 제시된 제어들, 특성들 등) 은 각 유저의 선호사항들로 조정될 수도 있고, 하나 이상의 어플리케이션들은 유저 요구들/선호사항들 등에 기초하여 활성화될 수도 있다.
또한, 다수의 유저들이 월 패널 (104) 과 동시에 상호작용하는 경우에서, 적절한 액션들 (예를 들면, 어플리케이션을 실행하고, 상호작용을 유저와 관련시키는 등등) 을 취하기 위해, 시스템은 어떤 유저가 월 패널 (104) 의 어떤 부분과 상호작용하고 있는지를 알 필요가 있을 수도 있다. 따라서, 월 패널 (104) 하부의 시스템은 월 패널과 상호작용하고 있는 유저(들) 의 아이덴티티(들) 를 결정할 필요가 있을 수도 있다.
몇몇 실시형태들에 따른 시스템에서, 유저 아이덴티티 및 유저 아이덴티티에 기초한 커스텀화는, 유저의 손가락 방위, 팔 방위, 손잡이, 자세, 및/또는 DNA와 같은 유저 아이덴티티 속성을 검출하는 것에 의해 결정될 수도 있다. 몇몇 예들에서, 결정된 아이덴티티에서의 확신도 레벨을 향상시키기 위해 하나 보다 많은 속성이 검출될 수도 있다. 속성(들) 은 광학적 검출기, 터치 검출기, 또는 생물학적 검출기와 같은 입력 디바이스를 통해 검출될 수도 있다. 검출은 월 패널 (104) 상의 미리 정의된 영역 (106) 으로 한정될 수도 있거나 또는 월 패널 (104) 의 디스플레이 표면을 통해 수행될 수도 있다. 월 패널 (104) 은 기계적 제어들 (예를 들면, 키보드, 마우스 등), 오디오 제어들 (예를 들면, 음성 인식), 및 유사한 것들과 같은 종래의 제어 메커니즘들을 또한 포함할 수도 있다.
도 1b에서의 다이어그램 (110) 은 다른 예의 큰 사이즈의 상호작용식 표면: 투사형 스크린 (projected screen; 112) 을 예시한다. 투사형 스크린 (112) 은 컴퓨팅 디바이스의 데스크탑, 하나 이상의 어플리케이션들 등과 같은 유저 인터페이스를 디스플레이할 수도 있다. 상호작용성을 위해, 광학적 검출기 (114) (예를 들면, 카메라) 는, 하부의 컴퓨팅 시스템의 동작적 양태들을 제어하기 위해, 유저 (102) 의 제스쳐들을 캡쳐하는 데 적합한 투사형 스크린 (112) 과 통합될 수도 있다. 도 1a에서와 같이, 유저 아이덴티티 속성들은, 투사형 스크린 (112) 상의 전용 영역 (116) 을 통해 또는 디스플레이 표면을 통해 검출될 수도 있다.
도 1에서의 다이어그램 (120) 은 다른 예의 상호작용식 표면: 상호작용식 테이블 (122) 을 예시한다. 상호작용식 테이블 (122) 은 유저 인터페이스(들) 를 디스플레이할 수 있을 뿐만 아니라 터치 또는 광학적으로 검출된 제스쳐들의 형태로 유저 입력을 받아들일 수 있는 상호작용식 디스플레이 표면 (124) 을 포함할 수도 있다. 상호작용식 디스플레이 표면 (124) 은 아크릴 유리 또는 유사한 재료로 이루어질 수도 있고 하드 또는 소프트 제어들을 제공할 수도 있다. 소프트 제어들은 미리 정의된 로케이션들에서 디스플레이되는 그리고 유저 (102) 에 의한 제스쳐 또는 터치에 의해 활성화되는 커맨드 버튼들 (128) 또는 유사한 제어 엘리먼트들일 수도 있다. 하드 제어들은, 상호작용식 테이블 (122) 에 커플링된 임의의 버튼들, 스위치들 또는 상당하는 (comparable) 엘리먼트들일 수도 있다. 도 1a 또는 도 1b에서와 같이, 유저 아이덴티티 속성들은 상호작용식 테이블 (122) 상의 전용 영역 (126) 을 통해 또는 상호작용식 디스플레이 표면 (124) 전체에 걸쳐 검출될 수도 있다.
2개의 다른 예시적인 상호작용식 디바이스들이 도 1d의 다이어그램 (130) 에서 도시된다. 모바일 디바이스 (132) 는 스마트폰, 핸드헬드 제어 디바이스, 특수 목적 디바이스 (예를 들면, 측정 디바이스), 또는 상호작용식 디스플레이 표면을 갖는 유사한 컴퓨팅 디바이스일 수도 있고, 이들은 터치 및/또는 제스쳐 기반의 유저 입력 (134) 을 수용할 수도 있다. 모바일 디바이스 (132) 와 같은 작은 폼 팩터의 모바일 디바이스에 의하면, 공유 사용은 본원에서 논의된 디바이스들의 다른 타입들과 비교하여 더 일반적으로 비동기적일 수도 있지만, 모바일 디바이스들에서 공유 사용도 또한 가능하다. 또한, 모바일 디바이스 (132) 는 상이한 시간들에서 상이한 유저들에 의해 사용될 수도 있고 검출된 유저 아이덴티티들은 본원에서 논의된 바와 같이 모바일 디바이스 (132) 의 동작적 양태들을 커스텀화화기 위해 활용될 수도 있다. 이전의 도면들에서와 같이, 유저 아이덴티티 속성들은 모바일 디바이스 (132) 의 상호작용식 표면 상의 전용 영역 (136) 을 통해 또는 상호작용식 디스플레이 전체에 걸쳐 검출될 수도 있다.
다이어그램 (130) 에서의 상호작용식 디스플레이 (140) 는, 유저 인터페이스들을 디스플레이하고 유저 입력을 수용하기 위해 데스크탑 또는 랩탑 컴퓨팅 디바이스와 연계하여 사용될 수도 있다. 이전의 도면들에서와 같이, 유저 아이덴티티 속성들은 상호작용식 디스플레이 (140) 상의 전용 영역 (146) 을 통해 또는 상호작용식 디스플레이 (140) 전체에 걸쳐 검출될 수도 있다. 도 1a 내지 도 1d에서의 예시적인 구현예들이 예시하는 바와 같이, 커스텀화에 기초하여 유저 아이덴티티 검출을 활용하는 디바이스들은 광범위에 걸쳐 변할 수도 있다. 그 범위의 일단 (one end) 은 상대적으로 작은 디스플레이들을 갖는 핸드헬드 디바이스들 (예를 들면, 스마트폰) 이고; 타단은 상대적으로 큰 프로젝션 (projection) 디스플레이들 또는 텔레비전 세트들이다.
도 2는 본원에서 설명된 적어도 몇몇의 실시형태들에 따라 배열된, 검출된 유저 아이덴티티에 기초한 커스텀화가 가능한 상호작용식 시스템에서의 주요 컴포넌트들 및 상호작용들을 예시한다.
다이어그램 (200) 에 도시된 바와 같이, 상호작용식 표면 상에서 하나 이상의 유저 아이덴티티 속성들의 검출을 통해 유저 아이덴티티를 결정하는 것에 기초하여 상호작용식 표면과 관련된 컴퓨팅 시스템의 동작적 양태들을 커스텀화하는 데 적합한 예시적인 시스템은, 3개의 컴포넌트들: 검출 모듈 (202), 유저 식별 모듈 (204), 및 커스텀화 모듈 (206) 에 의존할 수도 있다. 상호작용식 표면 하부의 컴퓨팅 시스템 (상호작용식 시스템 (210)) 은 오퍼레이팅 시스템 (212), 하나 이상의 어플리케이션들 (214), 디스플레이 제어들 (216), 및 입력 모듈 (218) 을 포함할 수도 있다. 검출 모듈 (202), 유저 식별 모듈 (204), 커스텀화 모듈 (206) 은 오퍼레이팅 시스템 (212) 의 일부일 수도 있고, 그들은 별개의 어플리케이션일 수도 있거나, 또는 그들은 디스플레이 제어 어플리케이션과 같은, 추가적인 작업들을 수행하는 어플리케이션의 일부일 수도 있다.
검출 모듈 (202) 은, 유저의 손가락 방위, 팔 방위, 손잡이, 자세, 및/또는 DNA와 같은 유저 아이덴티티 속성들을, 예를 들면, 적외광 반사를 통해 손가락 방위를 캡쳐하는 카메라 기반의 FTIR 시스템을 활용하여, 상호작용식 표면과 관련된 또는 통합된 입력 디바이스를 통해 검출할 수도 있다. 손가락을 사용하는 것은 터치/제스쳐 기반의 디바이스들과 상호작용하는 일반적인 접근법이다. 따라서, 손가락 방위는, 설계자들이 유저 입력들을 구별하기 위해 사용할 수 있는 자연적 속성일 수도 있다.
예를 들면, 상호작용식 테이블은 아크릴 유리를 통해 송신하도록 적외광들의 스트립들을 사용할 수도 있다. 손가락이 유리를 터치하면, 적외광은 하방으로 반사되고, 그 다음 이것은 테이블 아래에 장착된 카메라에 의해 캡쳐될 수도 있다. 반사된 적외광들은 이미지에서 높은 콘트라스트 블롭 (blob) 을 생성할 수도 있고, 블롭은 터치를 나타낼 수도 있다. 터치 지점들을 추출하기 위해 일련의 이미지 프로세싱 기술들이 실행될 수도 있다. 사람의 자연적인 포인팅 제스쳐로부터의 손가락 방위들은 로케이션마다 상이하다. 예를 들면, 유저가 테이블의 남측 (south side) 에 서 있는 경우, 그 또는 그녀의 손가락 방위는 테이블의 동측에 서 있는 유저와는 상이하다.
몇몇 예들에서, 검출 모듈 (202) 은 유저가 상호작용식 표면을 터치하고 있는 경우 유저의 손의 그림자를 추출할 수도 있다. 다른 예들에서, 손가락 방위는 표면의 네 코너들 상에 놓여지고 화면 안쪽을 향하는 작은 카메라들을 통해 캡쳐될 수도 있다. 그 다음, 유저의 손가락 방위들은 신뢰성있게 추출될 수도 있다. 유저 식별 모듈 (204) 은 머신 학습 시스템을 훈련시키는 데 이 손가락 방위를 사용할 수도 있다. 적절한 머신 학습 시스템들의 몇몇 예들은 결정 트리 학습 시스템들, 관련 규칙 학습 시스템들, 베이지안 (Bayesian) 네트워크들, 및 상당하는 것들을 포함할 수도 있다. 일단 훈련되면, 유저 식별 모듈 (204) 은 어느 곳에서 그리고 어떤 유저가 상호작용식 표면과 상호작용하고 있는지를 정확하게 식별할 수도 있다.
커스텀화 모듈 (206) 은, 결정된 유저 식별들 (및/또는 상호작용식 표면 상의 유저 상호작용의 로케이션들) 에 기초하여, 위에서 설명된 것들과 같은 동작적 양태들을 커스텀화할 수도 있다. 다른 예들에서, 포지션 인식 커서 (position awareness cursor; PAC) 는, 예측 에러가 발생하는 경우 유저들이 자기 보정 (self-correction) 을 수행하는 것을 가능하게 하기 위해 사용될 수도 있다. 다른 예들에서, 유저들이 소망의 유저 프로파일을 사용하여 시스템과 계속 상호작용하는 동안 상호작용식 표면을 이리저리 이동하도록 포지션 아바타가 유저들을 지원할 수도 있다.
도 3은, 본원에서 설명된 적어도 몇몇 실시형태들에 따라 배열된, 유저 아이덴티티 검출에 기초하여 상호작용식 표면의 동작적 양태들을 커스텀화하는 데 사용될 수도 있는 범용 컴퓨팅 디바이스를 예시한다. 예를 들면, 컴퓨팅 디바이스 (300) 는 도 1a, 도 1b, 및 도 1c 각각의 예시적인 상호작용식 디스플레이들 (104, 112, 또는 124) 과 같은 상호작용식 표면들을 제어하기 위해 사용될 수도 있다. 예시적인 기본 구성 (302) 에서, 컴퓨팅 디바이스 (300) 는 하나 이상의 프로세서들 (304) 및 시스템 메모리 (306) 를 포함할 수도 있다. 메모리 버스 (308) 는 프로세서 (304) 와 시스템 메모리 (306) 사이에서 통신하기 위해 사용될 수도 있다. 기본 구성 (302) 은 도 3에서 안쪽의 점선 내의 컴포넌트들에 의해 예시된다.
소망하는 구성에 따라, 프로세서 (304) 는, 마이크로프로세서 (μP), 마이크로컨트롤러 (μC), 디지털 신호 프로세서 (DSP), 또는 이들의 임의의 조합을 포함하는 임의의 형태를 취할 수도 있지만, 이들에 제한되는 것은 아니다. 프로세서 (304) 는 레벨 캐시 메모리 (312) 와 같은 하나 이상의 레벨들의 캐싱, 프로세서 코어 (314), 및 레지스터들 (316) 을 포함할 수도 있다. 예시적인 프로세서 코어 (314) 는 산술 로직 유닛 (ALU), 부동소수점 유닛 (FPU), 디지털 신호 프로세싱 코어 (DSP 코어), 또는 이들의 임의의 조합을 포함할 수도 있다. 예시적인 메모리 컨트롤러 (318) 는 프로세서 (318) 와 함께 또한 사용될 수도 있고, 또는 몇몇 구현예들에서 메모리 컨트롤러 (318) 는 프로세서 (304) 의 내부 부분일 수도 있다.
소망하는 구성에 따라, 시스템 메모리 (306) 는 휘발성 메모리 (예컨데, RAM), 불휘발성 메모리 (예컨데, ROM, 플래시 메모리 등) 또는 이들의 임의의 조합을 포함하지만 이들에 제한되지 않는 임의의 형태를 취할 수도 있다. 시스템 메모리 (306) 는 오퍼레이팅 시스템 (320), 어플리케이션 (322) 과 같은 하나 이상의 어플리케이션들, 및 프로그램 데이터 (324) 를 포함할 수도 있다. 어플리케이션 (322) 은 상호작용식 표면과 연계하여 실행될 수도 있고 커스텀화 모듈 (326) 을 포함할 수도 있으며, 커스텀화 모듈 (326) 은 본원에서 설명된 바와 같은 상호작용식 표면과 관련된 동작적 양태들을 커스텀화하기 위해 상호작용식 표면을 통해 검출된 유저 아이덴티티를 활용할 수도 있다. 프로그램 데이터 (324) 는, 본원에서 설명된 바와 같이, 다른 데이터 중에서, 커스텀화 데이터 (328) 등을 포함할 수도 있다.
컴퓨팅 디바이스 (300) 는 부가적인 특징들 또는 기능성, 및 기본 구성 (302) 및 임의의 요구되는 디바이스들 및 인터페이스들 사이의 통신들을 용이하게 하기 위한 부가적인 인터페이스들을 구비할 수도 있다. 예를 들면, 버스/인터페이스 컨트롤러 (330) 는, 스토리지 인터페이스 버스 (334) 를 통한, 기본 구성 (302) 및 하나 이상의 데이터 스토리지 디바이스들 (332) 사이의 통신들을 용이하게 하기 위해 사용될 수도 있다. 데이터 스토리지 디바이스들 (332) 은 하나 이상의 착탈실 스토리지 디바이스들 (336), 하나 이상의 비착탈식 스토리지 디바이스들 (338), 또는 이들의 조합일 수도 있다. 착탈식 스토리지 디바이스들 및 비착탈식 스토리지 디바이스들의 실시형태들은, 몇몇을 거론하자면, 플렉시블 디스크 드라이브들 및 하드 디스크 드라이블 (HDD) 와 같은 자기 디스크 디바이스들, 컴팩트 디스크 (CD) 드라이브들 또는 디지털 다기능 디스크 (DVD) 드라이브들과 같은 광학 디스크 드라이브들, 솔리드 스테이트 드라이브들 (SSD), 및 테이프 드라이브들을 포함한다. 예시적인 컴퓨터 저장 매체는, 컴퓨터 판독가능 명령들, 데이터 구조들, 프로그램 모듈들 또는 다른 데이터와 같은 정보 저장을 위한 임의의 방법 또는 기술에서 구현되는 휘발성 및 불휘발성의, 착탈식 및 비착탈식 매체들을 포함할 수도 있다.
시스템 메모리 (306), 착탈식 스토리지 디바이스들 (336) 및 비착탈식 스토리지 디바이스들 (338) 은 컴퓨터 저장 매체들의 예들이다. 컴퓨터 저장 매체들은, RAM, ROM, EEPROM, 플래시 메모리 또는 다른 메모리 기술, CD-ROM, 디지털 다기능 디스크들 (DVD) 또는 다른 광학 스토리지, 자기 카세트들, 자기 테이프, 자기 디스크 스토리지 또는 다른 자기 스토리지 디바이스들, 또는 소망의 정보를 저장하기 위해 사용될 수도 있고 컴퓨팅 디바이스 (300) 에 의해 액세스될 수도 있는 임의의 다른 매체를 포함하지만, 이들에 제한되는 것은 아니다. 임의의 이러한 컴퓨터 저장 매체들은 컴퓨팅 디바이스 (300) 의 일부일 수도 있다.
컴퓨팅 디바이스 (300) 는 버스/인터페이스 컨트롤러 (330) 를 통해 다양한 인터페이스 디바이스들 (예를 들면, 하나 이상의 출력 디바이스들 (342), 하나 이상의 주변 인터페이스들 (344), 및 하나 이상의 통신 디바이스들 (366)) 로부터 기본 구성 (302) 으로의 통신을 용이하게 하기 위한 인터페이스 버스 (340) 를 또한 포함할 수도 있다. 예시적인 출력 디바이스들 (342) 의 몇몇은, 그래픽 프로세싱 유닛 (348) 및 오디오 프로세싱 유닛 (350) 을 포함하며, 이들은 하나 이상의 A/V 포트들 (352) 를 통해 디스플레이 또는 스피커들과 같은 여러 외부 디바이스들과 통신하도록 구성될 수도 있다. 하나 이상의 예시적인 주변 인터페이스 (344) 는 시리얼 인터페이스 컨트롤러 (354) 또는 패럴렐 인터페이스 컨트롤러 (356) 을 포함하며, 이들은 하나 이상의 I/O 포트들 (358) 을 통해 입력 디바이스들 (예를 들면, 키보드, 마우스, 펜, 음성 입력 디바이스, 터치 입력 디바이스 등) 과 같은 외부 디바이스들과 통신하도록 구성될 수도 있다. 예시적인 통신 디바이스 (366) 는 네트워크 컨트롤러 (360) 를 포함하며, 이것은 하나 이상의 통신 포트들 (364) 를 통한 네트워크 통신 링크를 통해 하나 이상의 다른 컴퓨팅 디바이스들 (362) 과의 통신을 용이하게 하도록 정렬될 수도 있다. 하나 이상의 다른 컴퓨팅 디바이스들 (362) 은 서버들, 모바일 디바이스들, 및 상당하는 디바이스들을 포함할 수도 있다.
네트워크 통신 링크는 통신 매체들의 일 예일 수도 있다. 통신 매체들은 일반적으로 컴퓨터 판독가능 명령들, 데이터 구조들, 프로그램 모듈들, 또는 반송파 또는 다른 전송 메커니즘과 같은 변조된 데이터 신호에서의 다른 데이터에 의해 구체화될 수도 있고, 임의의 정보 전송 매체들을 포함할 수도 있다. "변조된 데이터 신호"는 하나 이상의 특성들 세트를 구비하거나 또는 신호에 정보를 인코딩하도록 하는 방식으로 변경된 신호일 수도 있다. 비제한적인 예로서, 통신 매체들은 유선 네트워크 또는 직결 접속과 같은 유선 매체들, 및 음향, 라디오 주파수 (RF), 마이크로파, 적외선 (IR) 및 다른 무선 매체들과 같은 무선 매체들을 포함할 수도 있다. 본원에서 사용된 컴퓨터 판독가능 매체들이라는 용어는 저장 매체들 및 통신 매체들 양자를 포함할 수도 있다.
컴퓨팅 디바이스 (300) 는 범용 또는 특수화된 서버, 메인프레임, 또는 상기 기능들 중 임의의 것을 포함하는 유사한 컴퓨터의 일부로서 구현될 수도 있다. 컴퓨팅 디바이스 (300) 는 또한 랩탑 컴퓨터 및 비랩탑 컴퓨터 구성들 양자를 포함하는 퍼스널 컴퓨터로서 구현될 수도 있다.
예시적인 실시형태들은 클라우드 서버들 사이에서의 이전 시 어플리케이션 성능들을 유지하기 위한 방법들을 또한 포함할 수도 있다. 이들 방법들은, 본원에서 설명된 구조들을 포함해서, 임의의 수의 방식들로 구현될 수도 있다. 하나의 이러한 방식은, 본 개시에서 설명된 타입의 디바이스들로 이루어진, 머신 동작들에 의할 수도 있다. 다른 옵션적 방식은, 그 방법들의 개개의 동작들 중 하나 이상이, 다른 동작들이 머신들에 의해 수행될 수도 있는 동안 동작들의 일부를 수행하는 하나 이상의 인간 오퍼레이터들과 연계하여 수행되는 것일 수도 있다. 이들 인간 오퍼레이터들은 서로 함께 배치될 필요는 없지만, 각각은 프로그램의 일부를 수행하는 머신과는 함께 있을 수 있다. 다른 실시형태들에서, 인간 상호작용은 예컨대 머신 자동화될 수도 있는 미리 선택된 기준들에 의해 자동화될 수 있다.
도 4는 본원에서 설명된 적어도 몇몇 실시형태들에 따라 배열된, 유저 아이덴티티 검출에 기초하여 상호작용식 표면의 동작적 양태들을 커스텀화하기 위한 특수 목적 프로세서 기반 시스템을 예시한다. 다이어그램 (400) 에서 묘사된 바와 같이, 프로세서 (410) 는 상호작용식 표면을 갖는 컴퓨팅 디바이스 또는 터치 또는 제스쳐 입력에 의해 제어될 수 있는 상호작용식 표면을 갖는 임의의 전자 디바이스 (예를 들면, 텔레비전, ATM 콘솔 또는 상당하는 것들) 의 일부일 수도 있다.
프로세서 (410) 는, 손가락 방위, 팔 방위, 자세, DNA, 또는 다른 속성들과 같은 유저 아이덴티티 속성(들) 을 캡쳐하기 위해 입력 디바이스 (430) 와 같은 캡쳐 디바이스들과 통신하도록 구성된 식별 모듈 (418) 및 커스텀화 모듈 (416) 과 같은 다수의 모듈들을 포함할 수도 있다. 식별 모듈 (418) 에 의한 속성의 검출시, 프로세서 (410) 는 검출된 속성으로부터 결정된 유저 아이덴티티에 의존하여 상호작용식 표면과 관련된 동작적 양태를 조정할 수도 있다.
메모리 (411) 는 프로세서 (410) 의 제어 모듈들에 대한 명령들을 저장하도록 구성될 수도 있고, 이것은 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어의 조합으로서 구현될 수도 있다. 데이터 중 일부는 커스텀화 데이터 (414), 식별 데이터 (412), 또는 유사한 정보를 포함하지만, 이들에 제한되는 것은 아니다. 프로세서 (410) 는, 다른 디바이스들, 예를 들면, 상호작용식 표면 (440) 및/또는 저장 시설 (420) 과 같은 데이터 저장소들과의 전기적 커플링들을 통해 또는 네트워크화된 통신들을 통해 통신하도록 구성될 수도 있다.
도 5는 본원에서 설명된 적어도 몇몇 실시형태들에 따라 배열된, 도 4의 디바이스와 같은 컴퓨팅 디바이스에 의해 수행될 수도 있는 예시적인 방법을 예시하는 흐름도이다. 예시적인 방법들은, 블록들 (522, 524, 526, 및/또는 528) 중 하나 이상에 의해 예시된 바와 같은 하나 이상의 동작들, 기능들 또는 액션들을 포함할 수도 있다. 블록들 (522 내지 528) 에서 설명된 동작들은, 컴퓨팅 디바이스 (510) 의 컴퓨터 판독가능 매체 (520) 와 같은 컴퓨터 판독가능 매체에 컴퓨터 실행가능 명령들로서 또한 저장될 수도 있다.
상호작용식 표면들 상에서 유저 아이덴티티를 검출하는 예시적인 프로세스 및 검출된 아이덴티티에 기초한 커스텀화는 블록 (522) 의 "유저 아이덴티티 속성 검출"로 시작할 수도 있는데, 여기에서는 도 1의 상호작용식 표면 (124) 과 같은 상호작용식 표면과 통합된 또는 관련된 입력 디바이스를 통해 손가락 방위, 팔 방위, 자세, DNA, 또는 유사한 속성들과 같은 유저 아이덴티티 속성을 식별 모듈이 식별할 수도 있다.
블록 (522) 에 블록 (524) 의 "유저 아이덴티티 결정"이 후속될 수도 있는데, 여기에서는, 블록 (522) 에서의 검출된 유저 아이덴티티 속성에 기초하여 유저의 아이덴티티가 결정될 수도 있다. 블록 (524) 에 블록 (526) 의 "유저와 관련된 커스텀화 동작 결정"이 후속될 수도 있는데, 여기에서는, 블록 (524) 에서 결정된 유저 아이덴티티에 기초하여 커스텀화 동작이 결정될 수도 있다. 커스텀화 동작은, 유저 자격정보의 활성화, 유저 인터페이스 속성의 조정, 어플리케이션의 활성화, 또는 유사한 액션들일 수도 있다. 블록 (526) 에 블록 (528) 의 "커스텀화 수행"이 후속될 수도 있는데, 여기에서는, 블록 (526) 에서 결정된 커스텀화 동작이 도 4의 프로세서 (410) 와 같은 상호작용식 표면의 프로세서에 의해 실행될 수도 있다.
상기 설명된 프로세스에 포함된 블록들은 예시의 목적을 위한 것이다. 상호작용식 표면들 상에서 유저 아이덴티티를 검출하는 것 및 검출된 아이덴티티에 기초한 커스텀화는 더 적은 수의 또는 추가적인 블록들에 의한 유사한 프로세스들에 의해 구현될 수도 있다. 몇몇 실시형태들에서, 블록들은 상이한 순서로 수행될 수도 있다. 몇몇 다른 실시형태들에서, 여러 블록들이 제거될 수도 있다. 또 다른 실시형태들에서, 여러 블록들은 추가적인 블록들로 분할되거나, 또는 더 적은 수의 블록들로 함께 결합될 수도 있다.
도 6은 본원에서 설명된 적어도 몇몇 실시형태들에 따라 모두 배열된, 예시적인 컴퓨터 프로그램 제품의 블록도이다.
몇몇 실시형태들에서, 도 6에 도시된 바와 같이, 컴퓨터 프로그램 제품 (600) 은, 예를 들면, 프로세서에 의한 실행시 본원에서 설명된 기능성을 제공할 수도 있는 하나 이상의 머신 판독가능 명령들 (604) 을 또한 포함할 수도 있는 신호 베어링 매체 (602) 를 포함할 수도 있다. 따라서, 예를 들면, 도 3의 프로세서 (304) 를 참조하면, 커스텀화 모듈 (526) 은, 본원에서 설명된 바와 같이 상호작용식 표면들 상에서 유저 아이덴티티를 검출하는 것 및 검출된 아이덴티티에 기초한 커스텀화와 관련된 액션들을 수행하기 위해, 매체 (602) 에 의해 프로세서 (304) 로 전달된 명령들 (604) 에 응답하여, 도 6에 도시된 태스크들 중 하나 이상을 떠맡을 수도 있다. 이들 명령들 중 몇몇은, 예를 들면, 본원에서 설명된 몇몇 실시형태들에 따라, 유저 아이덴티티 속성을 검출하고, 유저 아이덴티티를 결정하고, 유저와 관련된 커스텀화 동작을 결정하고, 그리고 커스텀화를 수행하기 위한 명령들을 포함할 수도 있다.
몇몇 구현예들에서, 도 6에서 묘사된 신호 베어링 매체 (602) 는, 하드디스크 드라이브, 솔리드 스테이트 드라이브, 컴팩트 디스크 (CD), 디지털 다기능 디스크 (DVD), 디지털 테이프, 메모리 등과 같은 그러나 이들에 제한되지 않는 컴퓨터 판독가능 매체 (606) 를 포괄할 수도 있다. 몇몇 구현예들에서, 신호 베어링 매체 (602) 는, 메모리, 판독/기록 (R/W) CD들, R/W DVD들 등과 같은 그러나 이들에 제한되지 않는 기록가능 매체 (608) 를 포괄할 수도 있다. 몇몇 구현예들에서, 신호 베어링 매체 (602) 는, 디지털 및/또는 아날로그 통신 매체 (예를 들면, 광섬유 케이블, 도파관, 유선 통신 링크, 무선 통신 링크 등) 와 같은 그러나 이들에 제한되지 않는 통신 매체 (610) 를 포괄할 수도 있다. 따라서, 예를 들면, 프로그램 제품 (600) 은 RF 신호 베어링 매체에 의해 프로세서 (604) 의 하나 이상의 모듈들로 전달될 수도 있는데, 여기에서, 신호 베어링 매체 (602) 는 무선 통신 매체 (610) (예를 들면, IEEE 802.11 표준안을 준수하는 무선 통신 매체) 에 의해 전달될 수도 있다.
몇몇 실시형태들에 따르면, 상호작용식 표면들 상에서 유저 아이덴티티를 검출하는 방법은, 상호작용식 표면 상에서 유저 아이덴티티 속성을 검출하는 것, 검출된 속성에 기초하여 유저 아이덴티티를 결정하는 것, 유저 아이덴티티와 관련된 커스텀화 동작을 결정하는 것, 및 커스텀화 동작을 수행하는 것을 포함할 수도 있다.
다른 예들에 따르면, 유저 아이덴티티 속성은 유저의 손가락 방위, 손가락 무게/압력, 손가락들 사이의 간격, 손가락 길이, 팔 방위, 손잡이, 자세, 및/또는 DNA 중 하나 이상을 포함할 수도 있다. 그 방법은, 상호작용식 표면과 관련된 입력 디바이스를 통해 유저 아이덴티티 속성을 검출하는 것을 더 포함하고, 입력 디바이스는: 광학적 검출기, 터치 검출기, 또는 생물학적 검출기 중 하나이고, 상호작용식 표면과 통합된 확산 조명, 카메라 기반의 FTIR 시스템, 또는 오버헤드 카메라를 통해 유저 아이덴티티 속성을 검출하는 것을 더 포함할 수도 있다. 그 방법은 또한, 적외광을 디스플레이 스크린으로 내부적으로 송신하는 것, 송신된 적외광의 반사를 내부적으로 캡쳐하는 것, 및 캡쳐된 반사로부터 손가락 방위를 결정하는 것을 포함할 수도 있다.
다른 예들에 따르면, 그 방법은, 유저 아이덴티티를 결정함에 있어서 손가락 방위를 보완하기 위해, 팔 방위, 손잡이, 자세, 및/또는 DNA 중 적어도 하나를 활용하는 것, 멀티 터치 상호작용식 표면 상에서 다수의 유저 아이덴티티 속성을 검출하는 것, 및/또는 검출된 속성들에 기초하여 다수의 유저 아이덴티티들을 결정하는 것을 포함할 수도 있다. 그 방법은 또한, 결정된 유저 아이덴티티를 사용하여 상호작용식 표면과 계속 상호작용하는 동안 유저가 상호작용식 표면을 이리저리 이동하는 것을 가능하게 하기 위해 포지션 아바타를 활용하는 것을 더 포함할 수도 있다. 그 방법은 또한, 플로어 매트, 오버헤드 카메라 또는 임의의 다른 유저 움직임 캡쳐 방법을 통해 유저 움직임을 캡쳐하고 디바이스 주위의 임의의 주어진 포지션에서 입력을 유저와 관련시킬 수도 있다.
또 다른 예들에 따르면, 그 방법은 예측 에러에 응답하여 유저가 자기 보정을 수행하는 것을 가능하게 하기 위해 포지션 인식 커서를 활용하는 것을 포함할 수도 있다. 유저 아이덴티티 속성은 상호작용식 표면의 전용 영역 상에서 검출될 수도 있다. 커스텀화 동작은, 유저 자격정보를 활성화하는 것, 유저 인터페이스 설정을 조정하는 것, 및/또는 어플리케이션을 활성화하는 것 중 하나 이상을 포함할 수도 있다. 상호작용식 표면은, 상호작용식 테이블 컴퓨터, 월 패널, 모바일 컴퓨팅 디바이스, 상호작용식 프로젝션 표면, 데스크탑 컴퓨터, 운송 수단에 탑재된 컴퓨터 (vehicle-mount computer), 또는 웨어러블 컴퓨터일 수도 있다.
다른 예들에 따르면, 유저 아이덴티티를 검출하는 것에 기초하여 동작적 양태들을 커스텀화할 수 있는 컴퓨팅 디바이스는, 명령들을 저장하도록 구성된 메모리 및 명령들과 연계하여 커스텀화 모듈을 실행하도록 구성된 프로세싱 유닛을 포함할 수도 있다. 커스텀화 모듈은, 컴퓨팅 디바이스와 관련된 상호작용식 표면 상에서 유저 아이덴티티 속성을 검출하고, 검출된 속성에 기초하여 유저 아이덴티티를 결정하고, 유저 아이덴티티와 관련된 커스텀화 동작을 결정하고, 커스텀화 동작을 수행하도록 구성될 수도 있다.
몇몇 예들에 따르면, 유저 아이덴티티 속성은 유저의 손가락 방위, 손가락 무게/압력, 손가락들 사이의 간격, 손가락 길이, 팔 방위, 손잡이, 자세, 및/또는 DNA 중 하나 이상을 포함할 수도 있다. 커스텀화 모듈은, 상호작용식 표면과 관련된 입력 디바이스를 통해 유저 아이덴티티 속성을 검출하도록 더 구성될 수도 있는데, 여기서 입력 디바이스는: 광학적 검출기, 터치 검출기, 또는 생물학적 검출기 중 하나이다. 커스텀화 모듈은, 상호작용식 표면과 통합된 확산 조명, 카메라 기반의 FTIR 시스템, 또는 오버헤드 카메라를 통해 유저 아이덴티티 속성을 검출하고, 적외광을 디스플레이 스크린으로 내부적으로 송신하고, 송신된 적외광의 반사를 내부적으로 캡쳐하고, 캡쳐된 반사로부터 손가락 방위를 결정하도록 또한 구성될 수도 있다.
다른 예들에 따르면, 커스텀화 모듈은, 유저 아이덴티티를 결정함에 있어서 손가락 방위를 보완하기 위해, 팔 방위, 손잡이, 자세, 및/또는 DNA 중 적어도 하나를 활용하고; 멀티 터치 상호작용식 표면 상에서 다수의 유저 아이덴티티 속성을 검출하고; 및/또는 검출된 속성들에 기초하여 다수의 유저 아이덴티티들을 결정하도록 구성될 수도 있다. 커스텀화 모듈은, 결정된 유저 아이덴티티를 사용하여 상호작용식 표면과 계속 상호작용하는 동안 유저가 상호작용식 표면을 이리저리 이동하는 것을 가능하게 하기 위해 포지션 아바타를 활용하도록 또한 구성될 수도 있다.
또 다른 예들에 따르면, 커스텀화 모듈은 예측 에러에 응답하여 유저가 자기 보정을 수행하는 것을 가능하게 하기 위해 포지션 인식 커서를 활용하도록 구성될 수도 있다. 유저 아이덴티티 속성은 상호작용식 표면의 전용 영역 상에서 검출될 수도 있다. 커스텀화 동작은, 유저 자격정보를 활성화하는 것, 유저 인터페이스 설정을 조정하는 것, 및/또는 어플리케이션을 활성화하는 것 중 하나 이상을 포함할 수도 있다. 컴퓨팅 디바이스는, 상호작용식 테이블 컴퓨터, 월 패널, 모바일 컴퓨팅 디바이스, 상호작용식 프로젝션 표면, 데스크탑 컴퓨터, 운송 수단에 탑재된 컴퓨터, 또는 웨어러블 컴퓨터일 수도 있다.
다른 예들에 따르면, 컴퓨터 판독가능 저장 매체는 상호작용식 표면들 상에서 유저 아이덴티티를 검출하기 위한 명령들을 저장할 수도 있다. 그 명령들은 상호작용식 표면 상에서 유저 아이덴티티를 검출하는 것, 검출된 속성에 기초하여 유저 아이덴티티를 결정하는 것, 유저 아이덴티티와 관련된 커스텀화 동작을 결정하는 것, 커스텀화 동작을 수행하는 것을 포함할 수도 있다.
다른 예들에 따르면, 유저 아이덴티티 속성은 유저의 손가락 방위, 손가락 무게/압력, 손가락들 사이의 간격, 손가락 길이, 팔 방위, 손잡이, 자세, 및/또는 DNA 중 하나 이상을 포함할 수도 있다. 그 명령들은, 상호작용식 표면과 관련된 입력 디바이스를 통해 유저 아이덴티티 속성을 검출하는 것을 더 포함하고, 입력 디바이스는: 광학적 검출기, 터치 검출기, 또는 생물학적 검출기 중 하나이고, 상호작용식 표면과 통합된 확산 조명, 카메라 기반의 FTIR 시스템, 또는 오버헤드 카메라를 통해 유저 아이덴티티 속성을 검출하는 것을 더 포함할 수도 있다. 그 명령들은 또한, 적외광을 디스플레이 스크린으로 내부적으로 송신하는 것, 송신된 적외광의 반사를 내부적으로 캡쳐하는 것, 및 캡쳐된 반사로부터 손가락 방위를 결정하는 것을 포함할 수도 있다.
다른 예들에 따르면, 그 명령들은, 유저 아이덴티티를 결정함에 있어서 손가락 방위를 보완하기 위해, 팔 방위, 손잡이, 자세, 및/또는 DNA 중 적어도 하나를 활용하는 것, 멀티 터치 상호작용식 표면 상에서 다수의 유저 아이덴티티 속성을 검출하는 것, 및/또는 검출된 속성들에 기초하여 다수의 유저 아이덴티티들을 결정하는 것을 포함할 수도 있다. 그 명령들은 또한, 결정된 유저 아이덴티티를 사용하여 상호작용식 표면과 계속 상호작용하는 동안 유저가 상호작용식 표면을 이리저리 이동하는 것을 가능하게 하기 위해 포지션 아바타를 활용하는 것을 더 포함할 수도 있다.
몇몇 예들에 따르면, 그 명령들은 예측 에러에 응답하여 유저가 자기 보정을 수행하는 것을 가능하게 하기 위해 포지션 인식 커서를 활용하는 것을 포함할 수도 있다. 유저 아이덴티티 속성은 상호작용식 표면의 전용 영역 상에서 검출될 수도 있다. 커스텀화 동작은, 유저 자격정보를 활성화하는 것, 유저 인터페이스 설정을 조정하는 것, 및/또는 어플리케이션을 활성화하는 것 중 하나 이상을 포함할 수도 있다. 상호작용식 표면은, 상호작용식 테이블 컴퓨터, 월 패널, 모바일 컴퓨팅 디바이스, 상호작용식 프로젝션 표면, 데스크탑 컴퓨터, 운송 수단에 탑재된 컴퓨터, 또는 웨어러블 컴퓨터일 수도 있다.
또 다른 예들에 따르면, 상호작용식 표면과 연계하여 사용하기 위한 유저 아이덴티티 기반의 커스텀화 모듈은, 프로세싱 유닛 및 상호작용식 표면과 관련된 입력 디바이스를 포함할 수도 있다. 프로세싱 유닛은, 상호작용식 표면 상에서 유저 아이덴티티 속성을 검출하고, 검출된 속성에 기초하여 유저 아이덴티티를 결정하고, 유저 아이덴티티와 관련된 커스텀화 동작을 결정하고, 커스텀화 동작을 수행할 수도 있다.
몇몇 예들에 따르면, 유저 아이덴티티 속성은 유저의 손가락 방위, 손가락 무게/압력, 손가락들 사이의 간격, 손가락 길이, 팔 방위, 손잡이, 자세, 및/또는 DNA 중 하나 이상을 포함할 수도 있다. 입력 디바이스는 광학적 검출기, 터치 검출기, 또는 생물학적 검출기일 수도 있다. 프로세싱 유닛은, 상호작용식 표면과 통합된 확산 조명, 카메라 기반의 FTIR 시스템, 또는 오버헤드 카메라를 통해 유저 아이덴티티 속성을 또한 검출할 수도 있고,
디스플레이 스크린에 적외광을 내부적으로 송신하는 것; 송신된 적외광의 반사를 내부적으로 캡쳐하는 것; 및 캡쳐된 반사로부터 손가락 방위를 결정하는 것 중 하나 이상을 수행할 수도 있다.
다른 예들에 따르면, 프로세싱 유닛은, 유저 아이덴티티를 결정함에 있어서 손가락 방위를 보완하기 위해, 팔 방위, 손잡이, 자세, 및/또는 DNA 중 적어도 하나를 활용할 수도 있다. 프로세싱 유닛은 또한, 멀티 터치 상호작용식 표면 상에서 다수의 유저 아이덴티티 속성들을 검출하고 검출된 속성들에 기초하여 다수의 유저 아이덴티티들을 결정할 수도 있다. 프로세싱 유닛은, 추가적으로, 결정된 유저 아이덴티티를 사용하여 상호작용식 표면과 계속 상호작용하는 동안 유저가 상호작용식 표면을 이리저리 이동하는 것을 가능하게 하기 위해 포지션 아바타를 활용하거나, 또는 예측 에러에 응답하여 자기 보정을 유저가 수행하는 것을 가능하게 하기 위해 포지션 인식 커서를 활용할 수도 있다. 유저 아이덴티티 속성은 상호작용식 표면의 전용 영역 상에서 검출될 수도 있다. 커스텀화 동작은, 유저 자격정보를 활성화하는 것, 유저 인터페이스 설정을 조정하는 것, 및/또는 어플리케이션을 활성화하는 것 중 하나 이상을 포함할 수도 있다. 커스텀화 모듈은, 상호작용식 테이블 컴퓨터, 월 패널, 모바일 컴퓨팅 디바이스, 상호작용식 프로젝션 표면, 데스크탑 컴퓨터, 운송 수단에 탑재된 컴퓨터, 또는 웨어러블 컴퓨터에 또한 통합될 수도 있다.
시스템들의 양태들의 하드웨어 및 소프트웨어 구현예들 사이에 남아 있는 차이들이 거의 존재하지 않지만, 하드웨어 또는 소프트웨어의 사용은 일반적으로 비용 대 효율의 절충들을 나타내는 디자인 선택이다 (그러나, 어떤 상황들에서 하드웨어와 소프트웨어 사이의 선택이 중요할 수도 있다는 점에서 항상 그런 것은 아니다). 본원에서 설명된 프로세스들 및/또는 시스템들 및/또는 다른 기술들을 유효하게 하는 여러 수단들 (예를 들면, 하드웨어, 소프트웨어, 및/또는 펌웨어) 이 존재하며, 선호되는 수단들은 프로세스들 및/또는 시스템들 및/또는 다른 기술들이 채용되는 상황에 따라 변할 것이다. 예를 들면, 속도 및 정확도가 최고라고 구현자 (implementer) 가 결정하면, 구현자는 주로 하드웨어 및/또는 펌웨어 수단을 선택할 수 있고, 유연성이 최고이면, 구현자는 소프트웨어 구현을 선택할 수도 있거나: 또는, 대안으로, 구현자는 하드웨어, 소프트웨어, 및/또는 펌웨어의 몇몇 조합을 선택할 수도 있다.
앞서의 상세한 설명은 블록 다이어그램들, 플로차트들, 및/또는 예들의 이용을 통해 디바이스들 및/또는 프로세스들의 다양한 실시예들을 제시하였다. 이러한 블록 다이어그램들, 플로우차트들, 및/또는 예들이 하나 이상의 기능들 및/또는 동작들을 포함하는 한, 이러한 블록 다이어그램들, 플로우차트들, 또는 예들 내의 각각의 기능 및/또는 동작은, 광범위한 하드웨어, 소프트웨어, 펌웨어, 또는 이들의 실질적인 임의의 조합에 의해, 개별적으로 및/또는 집합적으로 구현될 수 있다. 일 실시형태에서, 본원에서 설명된 요지의 몇몇 부분들은 ASIC들 (Application Specific Integrated Circuits), FPGA들 (Field Programmable Gate Arrays), DSP들 (digital signal processors), 또는 다른 집적 포맷들을 통해 구현될 수도 있다. 그러나, 당업자라면 본원에서 설명된 실시형태들의 몇몇 양태들이, 전체적으로 또는 부분적으로, 집적 회로들에서, 하나 이상의 컴퓨터들 상에서 작동하는 하나 이상의 컴퓨터 프로그램들 (예를 들면, 하나 이상의 컴퓨터 시스템들 상에서 작동하는 하나 이상의 프로그램들) 로서, 하나 이상의 프로세스들 상에서 작동하는 하나 이상의 프로그램들 (예를 들면, 하나 이상의 마이크로프로세서들 상에서 작동하는 하나 이상의 프로그램들) 로서, 펌웨어로서, 또는 실질적으로 이들의 임의의 조합으로서, 등가적으로 구현될 수 있으며, 소프트웨어 및/또는 펌에어에 대한 코드를 기록하고/하거나 회로부를 설계하는 것은 본 개시의 견지에서 당업자의 스킬 내에 있을 것임을 알 수 있을 것이다.
본 개시는 여러 양태들의 예시들로서 의도된, 본 출원에서 설명된 특정 예들의 관점에서 제한되지 않아야 한다. 많은 수정예들 및 변형예들이 본 개시의 취지와 범위를 벗어나지 않으면서 이루어질 수 있으며, 당업자에게는 명백할 것이다. 본 개시의 범위 내에 있는 기능적으로 등가의 방법들 및 장치들은, 본원에서 열거된 것들에 부가하여, 상기 설명들로부터 당업자에게는 명백할 것이다. 이러한 수정예와 변형예들은 첨부된 특허청구범위의 범위 내에 있는 것으로 의도된다. 본 개시는, 첨부된 특허청구범위 및 이러한 특허청구범위의 명칭이 부여되는 등가물들의 모든 범위의 관점에서만 제한되어야 한다. 본 개시는 특정 방법들, 시약들, 화합물 조성들 또는 생물학적 시스템들로 제한되지 않으며, 당연히 변경될 수 있음이 이해되어야만 한다. 또한, 본원에서 사용된 전문 용어는 특정 실시형태들을 설명하려는 목적이며, 제한하려는 의도는 아님을 이해해야 할 것이다.
또한, 당업자는, 본원에서 설명된 요지의 메커니즘들이 다양한 형태들의 프로그램 제품으로서 배포될 수 있으며, 본원에서 설명된 요지의 예시적인 실시형태들은 상기 배포를 실제 실행하기 위해 사용되는 특정 형태의 신호 베어링 매체에 관계없이 적용됨을 알 수 있을 것이다. 신호 베어링 매체의 예들은, 다음의 것: 플로피 디스크, HDD (hard disk drive), CD (Compact Disc), DVD (Digital Versatile Disk), 디지털 테이프, 컴퓨터 메모리, 솔리드 스테이트 드라이브 등과 같은 기록가능한 타입의 매체; 및 디지털 및/또는 아날로그 통신 매체 (예를 들어, 광섬유 케이블, 도파관, 유선 통신 링크, 무선 통신 링크 등) 와 같은 송신 타입의 매체를 포함하지만, 이들에 제한되지 않는다.
당업자라면, 본원에서 설명된 형태로 디바이스들 및/또는 프로세스들을 설명하고, 그 후 이렇게 설명된 디바이스들 및/또는 프로세스들을 데이터 프로세싱 시스템들에 통합시키도록 엔지니어링 실무를 사용하는 것이 종래 기술에서 일반적임을 알 수 있을 것이다. 즉, 본원에서 설명된 디바이스들 및/또는 프로세스들의 적어도 일부는 적절한 분량의 실험을 통해 데이터 프로세싱 시스템에 통합될 수 있다. 당업자라면, 통상의 데이터 프로세싱 시스템이 하나 이상의 시스템 유닛 하우징, 비디오 디스플레이 디바이스, 휘발성 및 불휘발성 메모리와 같은 메모리, 마이크로프로세서들 및 디지털 신호 프로세서들과 같은 프로세서들, 오퍼레이팅 시스템들, 드라이버들, 그래픽 유저 인터페이스들, 및 어플리케이션 프로그램들과 같은 컴퓨터 사용의 엔티티들 (computational entities), 터치 패드 또는 스크린과 같은 하나 이상의 상호작용 디바이스들, 및/또는 피드백 루프들 및 제어 모터들 (예를 들면, 갠트리 시스템들의 포지션 및/또는 속도를 검출하기 위한 피드백; 컴포넌트들 및/또는 분량들을 이동시키고/시키거나 조정하기 위한 제어 모터들) 을 일반적으로 포함함을 알 수 있을 것이다.
통상의 데이터 프로세싱 시스템은, 데이터 컴퓨팅/통신 및/또는 네트워크 컴퓨팅/통신 시스템들에서 일반적으로 발견되는 것들과 같은 임의의 적절한 상업적으로 이용 가능한 컴포넌트들을 활용하여 구현될 수도 있다. 본원에서 설명된 요지는 상이한 다른 컴포넌트들 내에 포함된, 또는 그 상이한 다른 컴포넌트들과 연결된 상이한 컴포넌트들을 가끔 설명한다. 이와 같이 묘사된 아키텍쳐들은 단순히 예증적인 것이며, 동일한 기능을 달성하는 많은 다른 아키텍쳐들이 구현될 수 있음을 이해해야 할 것이다. 개념적인 면에서, 동일한 기능성을 달성하기 위한 컴포넌트들의 임의의 배치는, 소망의 기능성이 달성되도록 유효하게 "관련"된다. 그러므로, 특정 기능성을 달성하기 위해 본원에서 결합된 임의의 두 컴포넌트들은, 아키텍쳐들 또는 중간 컴포넌트들에 관계없이, 소망의 기능성이 달성되도록 서로 "관련된" 것으로서 보여질 수 있다. 마찬가지로, 이렇게 관련된 임의의 두 컴포넌트들은 소망의 기능을 달성하도록 서로 "동작적으로 연결된" 것으로, 또는 "동작적으로 커플링된" 것으로도 보여질 수 있으며, 이렇게 결합될 수 있는 임의의 두 컴포넌트들은 소망의 기능을 달성하도록 서로 "동작적으로 커플링될 수 있는" 것으로도 보여질 수 있다. 동작가능하게 커플링될 수 있는 것의 구체적인 예들은 물리적으로 결합될 수 있고 및/또는 물리적으로 상호작용하는 컴포넌트들 및/또는 무선으로 상호작용 가능한 및/또는 무선으로 상호작용하는 컴포넌트들 및/또는 논리적으로 상호작용하는 및/또는 논리적으로 상호작용 가능한 컴포넌트들을 포함하지만, 이들에 제한되는 것은 아니다.
본원에서의 실질적인 임의의 단복수 용어들의 사용과 관련하여, 당업자라면, 상황 및/또는 어플리케이션에 적절하게 복수에서 단수로 및/또는 단수에서 복수로 변경할 수 있을 것이다. 다양한 단수/복수 교환들은 명료함을 위해 본원에서 명시적으로 언급될 수도 있다.
대체로, 본원에서, 그리고 특히 첨부의 청구항들 (예컨대, 첨부의 청구항들의 본문들) 에서 사용되는 용어들은 대체로 "개방형" 용어들로서 의도된다 (예컨대, 용어 "포함하는"은 "포함하지만 그것으로 제한되지는 않는" 것으로서 해석되어야 하며, 용어 "가지는"은 "적어도 ~를 가지는" 것으로서 해석되어야 하고, 용어 "포함한다"는 "포함하지만 그것으로 제한되지는 않는다"로 해석되어야 하는 등이다) 는 것이 당업자들에게는 이해될 것이다. 특정한 수의 도입된 청구항 한정이 의도된다면, 이러한 의도는 청구항에서 명시적으로 언급될 것이고, 그러한 한정이 없으면 그러한 의도는 없다는 것이 당업자에게는 추가로 이해될 것이다.<예를 들어, 이해를 돕기 위한 것으로서, 다음의 첨부의 청구항들이 청구항 한정들을 도입하기 위해 도입어구들인 "적어도 하나의" 및 "하나 이상의"의 사용을 포함할 수도 있다. 그러나, 이러한 어구들의 사용은, 부정관사들인 "a" 또는 "an"에 의한 청구항 한정의 도입이, 심지어 동일한 청구항이 도입 어구들인 "하나 이상의" 또는 "적어도 하나의"와 "a" 또는 "an" (예컨대, "a" 및/또는 "an"은 "적어도 하나의" 또는 "하나 이상의"를 의미하는 것으로 해석되어야 한다) 와 같은 부정관사들을 포함하는 경우에도, 그런 도입된 청구항 한정을 담고 있는 임의의 특정한 청구항을 하나의 그러한 한정만을 담고 있는 예들로 한정하는 것이라고 해석되지 않아야 하고; 동일한 것이 청구항 한정들을 도입하는데 사용되는 정관사들의 사용에 대해서도 유효하다. 덧붙여서, 도입된 청구항 한정의 구체적인 수가 명시적으로 언급되는 경우에도, 그러한 한정이 최소한 언급된 수를 의미하는 것으로 해석하여야 한다 (예컨대, 다른 수식어 없이 가장 기본적인 것만 갖춘 "2개의 언급"은, 적어도 2개의 언급, 또는 둘 이상의 언급을 의미한다) 는 것을 당업자들은 인식할 것이다.
더욱이, "A, B, 및 C 중 적어도 하나 등"에 유사한 관례 (convention) 가 사용되는 그런 경우들에서, 대체로 이러한 구조는, 당업자가 그 관례를 이해할 것이라는 뜻으로 의도된다 (예컨대, "A, B, 및 C 중 적어도 하나를 갖는 시스템"은 A 단독, B 단독, C 단독, A 및 B를 함께, A 및 C를 함께, B 및 C를 함께, 그리고/또는 A, B, 및 C를 함께 등등을 가지는 시스템들을 포함하지만 그러한 시스템들로 한정되지는 않을 것이다). 상세한 설명이든, 청구범위이든 또는 도면이든, 2 개 이상의 택일적 용어들을 나타내는 사실상 임의의 이접 (disjunctive) 단어 및/또는 어구는, 용어들 중 하나, 용어들 중 어느 한쪽 또는 용어들 양쪽 모두를 포함할 가능성들을 의도하는 것으로 이해되어야 한다는 것이 당업자에 의해 추가로 이해될 것이다. 예를 들어, 어구 "A 또는 B"는 "A" 또는 "B" 또는 "A 및 B"의 가능성들을 포함하는 것으로 이해될 것이다.
덧붙여서, 본 개시의 특징들 또는 양태들이 마쿠쉬 그룹들의 용어로 기재되는 경우, 그로써, 이 당업자들은 본 개시가 또한 마쿠쉬 그룹의 멤버들로 된 서브그룹 또는 임의의 개개의 멤버의 관점에서도 설명된다는 것이 이해될 것이다.
당업자에 의해 이해될 바와 같이, 임의의 및 모든 목적들에 대해, 이를테면 기재된 설명을 제공하는 견지에서, 본원에서 개시되는 모든 범위들 또한 임의의 및 모든 가능한 하위범위들 및 그 하위범위들의 조합들을 포괄한다. 임의의 열거된 범위는 적어도 동일한 절반들, 1/3들, 1/4들, 1/5들, 1/10들 등으로 나누어지는 충분히 설명되고 가능한 동일한 범위로서 쉽게 인식될 수 있다. 비제한적인 예로서, 본원에서 논의되는 각각의 범위는 하부의 1/3, 중간의 1/3 및 상부의 1/3 등으로 손쉽게 나누어질 수 있다. 당업자들에 의해 또한 이해될 바와 같이, "~까지", "적어도" "보다 큰," "~ 미만" 등등과 같은 모든 표현들은 언급된 수를 포함하고 위에서 논의된 바와 같이 뒤에서 하위범위로 나누어질 수 있는 범위들을 말한다. 마지막으로, 당업자들에 의해 또한 이해될 바와 같이, 범위는 각 개개의 멤버를 포함한다. 그래서, 예를 들어, 1 내지 3 개의 셀들을 갖는 그룹은 1, 2, 또는 3 개의 셀들을 갖는 그룹들을 말한다. 마찬가지로, 1 내지 5 개의 셀들을 갖는 그룹은 1, 2, 3, 4, 또는 5 개의 셀들을 갖는 그룹들을 말하는 등등이다.
다양한 양태들 및 실시형태들이 본원에서 개시되었지만, 다른 양태들 및 실시형태들은 당업자들에게 명확할 것이다. 본원에서 개시된 다양한 양태들 및 실시형태들은 다음의 청구항들에 의해 나타내어진 진정한 범위 및 정신을 예시할 목적이고 제한하려는 의도는 아니다.

Claims (48)

  1. 상호작용식 표면 상에서 유저 아이덴티티를 결정하는 방법으로서,
    적외광을 상기 상호작용식 표면으로부터 디스플레이 스크린으로 송신하는 것;
    상기 상호작용식 표면 아래에 장착된 카메라에서 송신된 적외광의 반사를 캡쳐하는 것; 및
    상기 송신된 적외광의 반사로부터, 유저의 손가락들 사이의 간격과, 상기 유저의 손가락들 중 하나 이상의 길이와, 그리고 상기 유저의 손잡이 (handedness), 상기 유저의 자세 (posture) 및 상기 유저의 손가락들의 하나 이상의 방위 (orientation) 중 적어도 하나를 결정하는 것
    을 통해 상기 상호작용식 표면 상에서 유저 아이덴티티 속성들을 결정하는 것;
    상기 유저 아이덴티티 속성들과 관련된 예측 에러가 없음에 응답하여, 상기 유저 아이덴티티 속성들에 기초하여 상기 유저 아이덴티티를 결정하는 것; 및
    상기 유저 아이덴티티 속성들과 관련된 예측 에러에 응답하여,
    상기 상호작용식 표면 상에 포지션 인식 커서 (position awareness cursor) 를 디스플레이하는 것;
    상기 유저 아이덴티티 속성들과 관련된 상기 예측 에러를 자기 보정 (self-correct) 하기 위해서 상기 상호작용식 표면 상에서 디스플레이되는 상기 포지션 인식 커서 상에서 액션을 검출하는 것; 및
    상기 유저 아이덴티티 속성들에 기초하여 상기 유저 아이덴티티를 결정하는 것을 포함하는, 유저 아이덴티티를 결정하는 방법.
  2. 제 1항에 있어서,
    상기 유저 아이덴티티 속성들은 하나 이상의 손가락들의 무게/압력, 및 상기 유저의 DNA 중 하나 이상을 더 포함하는, 유저 아이덴티티를 결정하는 방법.
  3. 제 2항에 있어서,
    상기 상호작용식 표면과 관련된 입력 디바이스를 통해 상기 유저 아이덴티티 속성들을 결정하는 것을 더 포함하고, 상기 입력 디바이스는: 광학적 검출기, 터치 검출기, 및 생물학적 검출기의 세트 중에서 하나인, 유저 아이덴티티를 결정하는 방법.
  4. 제 3항에 있어서,
    상기 상호작용식 표면과 통합된 확산 조명, 카메라 기반의 FTIR (Frustrated Total Internal Reflection) 시스템, 및 오버헤드 카메라의 세트 중에서 하나를 통해 상기 유저 아이덴티티 속성들을 결정하는 것을 더 포함하는, 유저 아이덴티티를 결정하는 방법.
  5. 삭제
  6. 삭제
  7. 제 1항에 있어서,
    멀티 터치 상호작용식 표면 상에서 상기 유저 아이덴티티 속성들을 결정하는 것; 및
    상기 유저 아이덴티티 속성들에 기초하여 다수의 유저 아이덴티티들을 결정하는 것을 더 포함하는, 유저 아이덴티티를 결정하는 방법.
  8. 제 7항에 있어서,
    결정된 유저 아이덴티티를 사용하여 상기 상호작용식 표면과 계속 상호작용하는 동안 유저가 상기 상호작용식 표면을 이리저리 이동하는 것을 가능하게 하기 위해 포지션 아바타를 활용하는 것을 더 포함하는, 유저 아이덴티티를 결정하는 방법.
  9. 삭제
  10. 제 1항에 있어서,
    상기 유저 아이덴티티 속성들은 상기 상호작용식 표면의 전용 영역 상에서 검출되는, 유저 아이덴티티를 결정하는 방법.
  11. 삭제
  12. 삭제
  13. 상호작용식 표면 상에서 유저 아이덴티티의 결정에 기초하여 동작적 양태들을 커스텀화할 수 있는 컴퓨팅 디바이스로서,
    명령들을 저장하도록 구성된 메모리; 및
    상기 명령들과 연계하여 커스텀화 모듈을 실행하도록 구성된 프로세싱 유닛을 포함하고,
    상기 커스텀화 모듈은:
    적외광을 상기 상호작용식 표면으로부터 디스플레이 스크린으로 송신하고;
    상기 상호작용식 표면 아래에 장착된 카메라에서 송신된 적외광의 반사를 캡쳐하고;
    상기 송신된 적외광의 반사로부터, 유저의 손가락들 사이의 간격과, 상기 유저의 손가락들 중 하나 이상의 길이와, 그리고 상기 유저의 손잡이 (handedness), 상기 유저의 자세 (posture) 및 상기 유저의 손가락들의 하나 이상의 방위 (orientation) 중 적어도 하나를 포함하는, 유저 아이덴티티 속성들을 결정하는 것;
    상기 유저 아이덴티티 속성들과 관련된 예측 에러가 없음에 응답하여, 상기 유저 아이덴티티 속성들에 기초하여 상기 유저 아이덴티티를 결정하는 것; 및
    상기 유저 아이덴티티 속성들과 관련된 예측 에러에 응답하여,
    상기 상호작용식 표면 상에 포지션 인식 커서 (position awareness cursor) 를 디스플레이하는 것;
    상기 유저 아이덴티티 속성들과 관련된 상기 예측 에러를 자기 보정 (self-correct) 하기 위해서 상기 상호작용식 표면 상에서 디스플레이되는 상기 포지션 인식 커서 상에서 액션을 검출하는 것; 및
    상기 유저 아이덴티티 속성들에 기초하여 상기 유저 아이덴티티를 결정하도록 구성되는, 컴퓨팅 디바이스.
  14. 제 13항에 있어서,
    상기 유저 아이덴티티 속성들은 유저의 하나 이상의 손가락들의 무게/압력, 및 상기 유저의 DNA 중 하나 이상을 더 포함하는, 컴퓨팅 디바이스.
  15. 삭제
  16. 제 14항에 있어서,
    상기 커스텀화 모듈은:
    상기 상호작용식 표면과 통합된 확산 조명, 카메라 기반의 FTIR (Frustrated Total Internal Reflection) 시스템, 및 오버헤드 카메라의 세트로부터 하나를 통해 상기 유저 아이덴티티 속성들을 결정하도록 더 구성되는, 컴퓨팅 디바이스.
  17. 삭제
  18. 삭제
  19. 제 13항에 있어서,
    상기 커스텀화 모듈은:
    멀티 터치 상호작용식 표면 상에서 상기 유저 아이덴티티 속성들을 결정하고: 그리고
    상기 유저 아이덴티티 속성들에 기초하여 다수의 유저 아이덴티티들을 결정하도록 더 구성되는, 컴퓨팅 디바이스.
  20. 삭제
  21. 삭제
  22. 삭제
  23. 제 13항에 있어서,
    상기 커스텀화 동작은, 유저 자격정보를 활성화하는 것, 유저 인터페이스 설정을 조정하는 것, 및 어플리케이션을 활성화하는 것의 세트로부터 하나 이상을 포함하는, 컴퓨팅 디바이스.
  24. 제 13항에 있어서,
    상기 컴퓨팅 디바이스는, 상호작용식 테이블 컴퓨터, 월 패널, 모바일 컴퓨팅 디바이스, 상호작용식 프로젝션 표면, 데스크탑 컴퓨터, 운송 수단 탑재 컴퓨터, 및 웨어러블 컴퓨터의 세트중에서 하나인, 컴퓨팅 디바이스.
  25. 삭제
  26. 삭제
  27. 삭제
  28. 삭제
  29. 삭제
  30. 삭제
  31. 삭제
  32. 삭제
  33. 삭제
  34. 삭제
  35. 삭제
  36. 삭제
  37. 상호작용식 표면과 연계하여 사용하기 위한 유저 아이덴티티 기반의 커스텀화 모듈로서,
    상기 상호작용식 표면과 관련된 입력 디바이스; 및
    프로세싱 유닛을 포함하고,
    상기 프로세싱 유닛은:
    적외광을 상기 상호작용식 표면으로부터 디스플레이 스크린으로 송신하고;
    상기 상호작용식 표면 아래에 장착된 카메라에서 송신된 적외광의 반사를 캡쳐하고;
    상기 송신된 적외광의 반사로부터, 유저의 손가락들 사이의 간격과, 상기 유저의 손가락들 중 하나 이상의 길이와, 그리고 상기 유저의 손잡이 (handedness), 상기 유저의 자세 (posture) 및 상기 유저의 손가락들의 하나 이상의 방위 (orientation) 중 적어도 하나를 포함하는 다수의 유저 아이덴티티 속성들을 결정하는 것;
    상기 다수의 유저 아이덴티티 속성들과 관련된 예측 에러가 없음에 응답하여, 상기 다수의 유저 아이덴티티 속성들에 기초하여 다수의 유저 아이덴티티를 결정하는 것; 및
    상기 다수의 유저 아이덴티티 속성들과 관련된 예측 에러에 응답하여,
    상기 상호작용식 표면 상에 포지션 인식 커서 (position awareness cursor) 를 디스플레이하는 것;
    상기 다수의 유저 아이덴티티 속성들과 관련된 상기 예측 에러를 자기 보정 (self-correct) 하기 위해서 상기 상호작용식 표면 상에서 디스플레이되는 상기 포지션 인식 커서 상에서 액션을 검출하는 것; 및
    상기 다수의 유저 아이덴티티 속성들에 기초하여 상기 다수의 유저 아이덴티티를 결정하도록 구성되는, 유저 아이덴티티 기반의 커스텀화 모듈.
  38. 제 37항에 있어서,
    상기 다수의 유저 아이덴티티 속성들은 하나 이상의 손가락들의 무게/압력, 및 상기 유저의 DNA 중 하나 이상을 더 포함하는, 유저 아이덴티티 기반의 커스텀화 모듈.
  39. 제 38항에 있어서,
    상기 입력 디바이스는: 광학적 검출기, 터치 검출기, 및 생물학적 검출기의 세트중에서 하나인, 유저 아이덴티티 기반의 커스텀화 모듈.
  40. 제 39항에 있어서,
    상기 프로세싱 유닛은:
    상기 상호작용식 표면과 통합된 확산 조명, 카메라 기반의 FTIR (Frustrated Total Internal Reflection) 시스템, 및 오버헤드 카메라의 세트로부터의 하나를 통해 상기 유저 아이덴티티 속성들을 결정하도록 더 구성되는, 유저 아이덴티티 기반의 커스텀화 모듈.
  41. 삭제
  42. 삭제
  43. 삭제
  44. 삭제
  45. 삭제
  46. 제 37항에 있어서,
    상기 다수의 유저 아이덴티티 속성은 상기 상호작용식 표면의 전용 영역 상에서 검출되는, 유저 아이덴티티 기반의 커스텀화 모듈.
  47. 삭제
  48. 삭제
KR1020147028156A 2012-05-02 2012-05-02 상호작용식 표면들 상에서의 유저 아이덴티티 검출 KR101766952B1 (ko)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CA2012/050283 WO2013163720A1 (en) 2012-05-02 2012-05-02 User identity detection on interactive surfaces

Publications (2)

Publication Number Publication Date
KR20140142283A KR20140142283A (ko) 2014-12-11
KR101766952B1 true KR101766952B1 (ko) 2017-08-09

Family

ID=49514128

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020147028156A KR101766952B1 (ko) 2012-05-02 2012-05-02 상호작용식 표면들 상에서의 유저 아이덴티티 검출

Country Status (3)

Country Link
US (1) US20130322709A1 (ko)
KR (1) KR101766952B1 (ko)
WO (1) WO2013163720A1 (ko)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8209620B2 (en) * 2006-01-31 2012-06-26 Accenture Global Services Limited System for storage and navigation of application states and interactions
US10055562B2 (en) * 2013-10-23 2018-08-21 Intel Corporation Techniques for identifying a change in users
KR102191151B1 (ko) * 2013-12-30 2020-12-16 삼성디스플레이 주식회사 전자 기기 및 전자 기기의 구동 방법
US9971490B2 (en) * 2014-02-26 2018-05-15 Microsoft Technology Licensing, Llc Device control
US10387882B2 (en) 2015-07-01 2019-08-20 Klarna Ab Method for using supervised model with physical store
US9904916B2 (en) 2015-07-01 2018-02-27 Klarna Ab Incremental login and authentication to user portal without username/password
CN105125219A (zh) * 2015-09-24 2015-12-09 长沙丰达智能科技有限公司 多功能智能晨检机
CN110036356B (zh) * 2017-02-22 2020-06-26 腾讯科技（深圳）有限公司 Vr系统中的图像处理
DE102018207379A1 (de) * 2018-05-14 2019-11-14 Audi Ag Verfahren zum Betreiben eines Kraftfahrzeugsystems anhand einer benutzerspezifischen Benutzereinstellung, Speichermedium, Zuordnungseinrichtung, Kraftfahrzeug und Servervorrichtung zum Betreiben im Internet
CN109543385A (zh) * 2018-11-23 2019-03-29 Oppo广东移动通信有限公司 事件处理方法及相关设备
CN109766679B (zh) * 2018-12-17 2021-04-09 达闼机器人有限公司 身份认证方法、装置、存储介质和电子设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090027357A1 (en) * 2007-07-23 2009-01-29 Smart Technologies, Inc. System and method of detecting contact on a display
US20090109180A1 (en) * 2007-10-25 2009-04-30 International Business Machines Corporation Arrangements for identifying users in a multi-touch surface environment
US20110080254A1 (en) * 2009-10-07 2011-04-07 Samsung Electronics Co., Ltd. System and method for logging in multiple users to a consumer electronics device by detecting gestures with a sensory device

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7630522B2 (en) * 2006-03-08 2009-12-08 Microsoft Corporation Biometric measurement using interactive display systems
EP2047308A4 (en) * 2006-08-03 2010-11-24 Perceptive Pixel Inc MULTILAYER DISPLAY THROUGH PREVENTIVE INTERNAL TOTAL REFLECTION
US8147316B2 (en) * 2006-10-10 2012-04-03 Wms Gaming, Inc. Multi-player, multi-touch table for use in wagering game systems
US8009147B2 (en) * 2007-09-27 2011-08-30 At&T Intellectual Property I, Lp Multi-touch interfaces for user authentication, partitioning, and external device control
US20090219253A1 (en) * 2008-02-29 2009-09-03 Microsoft Corporation Interactive Surface Computer with Switchable Diffuser
US20100097324A1 (en) * 2008-10-20 2010-04-22 Dell Products L.P. Parental Controls Based on Touchscreen Input
US8941466B2 (en) * 2009-01-05 2015-01-27 Polytechnic Institute Of New York University User authentication for devices with touch sensitive elements, such as touch sensitive display screens

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090027357A1 (en) * 2007-07-23 2009-01-29 Smart Technologies, Inc. System and method of detecting contact on a display
US20090109180A1 (en) * 2007-10-25 2009-04-30 International Business Machines Corporation Arrangements for identifying users in a multi-touch surface environment
US20110080254A1 (en) * 2009-10-07 2011-04-07 Samsung Electronics Co., Ltd. System and method for logging in multiple users to a consumer electronics device by detecting gestures with a sensory device

Also Published As

Publication number Publication date
KR20140142283A (ko) 2014-12-11
US20130322709A1 (en) 2013-12-05
WO2013163720A1 (en) 2013-11-07

Similar Documents

Publication Publication Date Title
KR101766952B1 (ko) 상호작용식 표면들 상에서의 유저 아이덴티티 검출
KR102345911B1 (ko) 가상 입력 장치 및 이를 이용한 사용자 입력 수신 방법
KR101847754B1 (ko) 근접 기반 입력을 위한 장치 및 방법
US8289292B2 (en) Electronic device with touch input function and touch input method thereof
WO2016090888A1 (zh) 图标的移动方法、装置、设备及非易失性计算机存储介质
US10540132B2 (en) Remote device control via transparent display
US20110175920A1 (en) Method for handling and transferring data in an interactive input system, and interactive input system executing the method
US20130002586A1 (en) Mode switch method of multi-function touch panel
KR20160014481A (ko) Idle 모드에서 동작하는 전자 장치 및 방법
US20140157128A1 (en) Systems and methods for processing simultaneously received user inputs
US20130027290A1 (en) Input Mode of a Device
US20160162098A1 (en) Method for providing user interface using multi-point touch and apparatus for same
CN104798014B (zh) 基于姿势的分区切换
US20180074646A1 (en) Gesture recognition and control based on finger differentiation
US9880733B2 (en) Multi-touch remote control method
US20150370443A1 (en) System and method for combining touch and gesture in a three dimensional user interface
CN104166460B (zh) 一种电子设备及信息处理的方法
KR101231513B1 (ko) 터치를 이용한 컨텐츠 제어방법, 장치, 이를 위한 기록매체 및 이를 포함하는 사용자 단말
CN104951211B (zh) 一种信息处理方法和电子设备
TWI468989B (zh) 基於手勢之輸入命令
KR20140086805A (ko) 전자 장치, 그 제어 방법 및 컴퓨터 판독가능 기록매체
US20140035876A1 (en) Command of a Computing Device
CN103870105A (zh) 信息处理的方法及电子设备
JP6166250B2 (ja) 情報処理装置及びその制御方法、プログラム
Taing et al. Handpad: a virtual mouse for controlling laptops in a smart home

Legal Events

Date Code Title Description
A201 Request for examination
AMND Amendment
E902 Notification of reason for refusal
AMND Amendment
E90F Notification of reason for final refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant