PL411338A1 - Sposób interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej oraz system do interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej - Google Patents

Sposób interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej oraz system do interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej

Info

Publication number
PL411338A1
PL411338A1 PL411338A PL41133815A PL411338A1 PL 411338 A1 PL411338 A1 PL 411338A1 PL 411338 A PL411338 A PL 411338A PL 41133815 A PL41133815 A PL 41133815A PL 411338 A1 PL411338 A1 PL 411338A1
Authority
PL
Poland
Prior art keywords
depth map
user
head
virtual objects
determined
Prior art date
Application number
PL411338A
Other languages
English (en)
Inventor
Radosław Paweł Chmielewski
Błażej Podkówka
Original Assignee
Samsung Electronics Polska Spółka Z Ograniczoną Odpowiedzialnością
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Polska Spółka Z Ograniczoną Odpowiedzialnością filed Critical Samsung Electronics Polska Spółka Z Ograniczoną Odpowiedzialnością
Priority to PL411338A priority Critical patent/PL411338A1/pl
Priority to EP16156954.6A priority patent/EP3059663B1/en
Publication of PL411338A1 publication Critical patent/PL411338A1/pl

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G06V10/12—Details of acquisition arrangements; Constructional details thereof
    • G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/147—Details of sensors, e.g. sensor lenses
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Vascular Medicine (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

Sposób interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej za pomocą gestów, w którym wirtualne obiekty generowane w jednostce obliczeniowej (110) wyposażonej w procesor (111) i pamięć (112) i wyświetla na przyłączonym do jednostki obliczeniowej wyświetlaczu (120), przy czym przetwarzania obrazów dokonuje się w odpowiedzi na gesty dłoni użytkownika i pozycję głowy użytkownika odbierane przez kamerę (130) do pomiaru głębi wyposażoną w akcelerometr (131) przyłączoną do jednostki obliczeniowej (110) i skierowaną na scenę w świecie rzeczywistym obejmującą głowę i dłonie użytkownika siedzącego przy blacie. W jednostce obliczeniowej (110) wykonuje się następujące kroki: z kamery (130) pobiera się sygnał reprezentujący serię map głębi, w postaci mapy bitowej, dla pustego obszaru i oblicza się uśrednioną mapę głębi, którą zapisuje się w pamięci (112); określa się położenie krawędzi blatu w uśrednionej mapie głębi; dokonuje się transformacji współrzędnych głębi z widoku kamery do współrzędnych, gdzie środkiem układu współrzędnych jest określony wcześniej średni punkt krawędzi blatu; pobiera się sygnał reprezentujący aktualną mapę głębi, w postaci mapy bitowej; oblicza się różnicową mapę głębi reprezentującą różnice pomiędzy aktualną mapą głębi a uśrednioną mapą głębi; w różnicowej mapie głębi określa się pozycję głowy użytkownika; w różnicowej mapie głębi określa się pozycję co najmniej jednej dłoni użytkownika; wyświetla na wyświetlaczu (120) wirtualny obiekt w pozycji określonej przez aktualne położenie głowy użytkownika oraz manipuluje się wirtualnym obiektem w odpowiedzi na gesty wykonywane dłonią użytkownika.
PL411338A 2015-02-23 2015-02-23 Sposób interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej oraz system do interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej PL411338A1 (pl)

Priority Applications (2)

Application Number Priority Date Filing Date Title
PL411338A PL411338A1 (pl) 2015-02-23 2015-02-23 Sposób interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej oraz system do interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej
EP16156954.6A EP3059663B1 (en) 2015-02-23 2016-02-23 A method and a system for interacting with virtual objects in a three-dimensional space

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PL411338A PL411338A1 (pl) 2015-02-23 2015-02-23 Sposób interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej oraz system do interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej

Publications (1)

Publication Number Publication Date
PL411338A1 true PL411338A1 (pl) 2016-08-29

Family

ID=55637143

Family Applications (1)

Application Number Title Priority Date Filing Date
PL411338A PL411338A1 (pl) 2015-02-23 2015-02-23 Sposób interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej oraz system do interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej

Country Status (2)

Country Link
EP (1) EP3059663B1 (pl)
PL (1) PL411338A1 (pl)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110388919B (zh) * 2019-07-30 2023-05-23 上海云扩信息科技有限公司 增强现实中基于特征图和惯性测量的三维模型定位方法
TW202205841A (zh) * 2020-07-21 2022-02-01 佐臻股份有限公司 具影像及深度傳輸的監視系統
CN117348734B (zh) * 2023-12-06 2024-04-16 山东大学 一种双人漫游模式的交互系统及方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103778635B (zh) * 2006-05-11 2016-09-28 苹果公司 用于处理数据的方法和装置
CN102841733B (zh) * 2011-06-24 2015-02-18 株式会社理光 虚拟触摸屏系统以及自动切换交互模式的方法
KR101256046B1 (ko) * 2011-08-12 2013-04-18 한국과학기술원 공간 제스처 인식을 위한 신체 트래킹 방법 및 시스템
US9047507B2 (en) * 2012-05-02 2015-06-02 Apple Inc. Upper-body skeleton extraction from depth maps
US9864433B2 (en) * 2012-07-13 2018-01-09 Softkinetic Software Method and system for human-to-computer gesture based simultaneous interactions using singular points of interest on a hand

Also Published As

Publication number Publication date
EP3059663A1 (en) 2016-08-24
EP3059663B1 (en) 2018-09-05

Similar Documents

Publication Publication Date Title
WO2018125742A3 (en) Dynamic depth-based content creation in virtual reality environments
KR101877846B1 (ko) 헤드 장착 디스플레이로 확장된 디스플레이를 제공하는 디바이스, 방법 및 시스템
US20170140552A1 (en) Apparatus and method for estimating hand position utilizing head mounted color depth camera, and bare hand interaction system using same
RU2015113441A (ru) Бесконтактный ввод
JP2013235373A5 (pl)
MY201730A (en) Gaze point determination method and apparatus, electronic device, and computer storage medium
US20160343166A1 (en) Image-capturing system for combining subject and three-dimensional virtual space in real time
EP3695381B1 (en) Floor detection in virtual and augmented reality devices using stereo images
JP2019525278A (ja) 屋内測距方法
TW201322178A (zh) 擴增實境的方法及系統
JP2013097699A5 (pl)
CN104765156B (zh) 一种三维显示装置和三维显示方法
JP2016024273A5 (pl)
GB2532614A (en) Surface and image intergration for model evaluation and landmark determination
KR101916663B1 (ko) 이용자의 시선 방향 또는 중력 방향 중 적어도 하나를 이용하여 3차원 영상을 표시하는 3차원 디스플레이 장치
JP2016530581A5 (pl)
TW201610750A (zh) 可與３ｄ影像互動之手勢控制系統
US11302023B2 (en) Planar surface detection
US20150277570A1 (en) Providing Onscreen Visualizations of Gesture Movements
US10861223B2 (en) Passthrough visualization
PL411338A1 (pl) Sposób interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej oraz system do interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej
JPWO2018198909A1 (ja) 情報処理装置、情報処理方法及びプログラム
WO2015118301A3 (en) Three dimensional image generation
US20210327160A1 (en) Authoring device, authoring method, and storage medium storing authoring program
Kim et al. Pointing gesture interface for large display environments based on the kinect skeleton model