PL411338A1 - Sposób interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej oraz system do interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej - Google Patents

Sposób interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej oraz system do interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej

Info

Publication number
PL411338A1
PL411338A1 PL411338A PL41133815A PL411338A1 PL 411338 A1 PL411338 A1 PL 411338A1 PL 411338 A PL411338 A PL 411338A PL 41133815 A PL41133815 A PL 41133815A PL 411338 A1 PL411338 A1 PL 411338A1
Authority
PL
Poland
Prior art keywords
depth map
user
head
virtual objects
determined
Prior art date
Application number
PL411338A
Other languages
English (en)
Inventor
Radosław Paweł Chmielewski
Błażej Podkówka
Original Assignee
Samsung Electronics Polska Spółka Z Ograniczoną Odpowiedzialnością
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Polska Spółka Z Ograniczoną Odpowiedzialnością filed Critical Samsung Electronics Polska Spółka Z Ograniczoną Odpowiedzialnością
Priority to PL411338A priority Critical patent/PL411338A1/pl
Priority to EP16156954.6A priority patent/EP3059663B1/en
Publication of PL411338A1 publication Critical patent/PL411338A1/pl

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G06V10/12—Details of acquisition arrangements; Constructional details thereof
    • G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/147—Details of sensors, e.g. sensor lenses
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Vascular Medicine (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

Sposób interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej za pomocą gestów, w którym wirtualne obiekty generowane w jednostce obliczeniowej (110) wyposażonej w procesor (111) i pamięć (112) i wyświetla na przyłączonym do jednostki obliczeniowej wyświetlaczu (120), przy czym przetwarzania obrazów dokonuje się w odpowiedzi na gesty dłoni użytkownika i pozycję głowy użytkownika odbierane przez kamerę (130) do pomiaru głębi wyposażoną w akcelerometr (131) przyłączoną do jednostki obliczeniowej (110) i skierowaną na scenę w świecie rzeczywistym obejmującą głowę i dłonie użytkownika siedzącego przy blacie. W jednostce obliczeniowej (110) wykonuje się następujące kroki: z kamery (130) pobiera się sygnał reprezentujący serię map głębi, w postaci mapy bitowej, dla pustego obszaru i oblicza się uśrednioną mapę głębi, którą zapisuje się w pamięci (112); określa się położenie krawędzi blatu w uśrednionej mapie głębi; dokonuje się transformacji współrzędnych głębi z widoku kamery do współrzędnych, gdzie środkiem układu współrzędnych jest określony wcześniej średni punkt krawędzi blatu; pobiera się sygnał reprezentujący aktualną mapę głębi, w postaci mapy bitowej; oblicza się różnicową mapę głębi reprezentującą różnice pomiędzy aktualną mapą głębi a uśrednioną mapą głębi; w różnicowej mapie głębi określa się pozycję głowy użytkownika; w różnicowej mapie głębi określa się pozycję co najmniej jednej dłoni użytkownika; wyświetla na wyświetlaczu (120) wirtualny obiekt w pozycji określonej przez aktualne położenie głowy użytkownika oraz manipuluje się wirtualnym obiektem w odpowiedzi na gesty wykonywane dłonią użytkownika.
PL411338A 2015-02-23 2015-02-23 Sposób interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej oraz system do interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej PL411338A1 (pl)

Priority Applications (2)

Application Number Priority Date Filing Date Title
PL411338A PL411338A1 (pl) 2015-02-23 2015-02-23 Sposób interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej oraz system do interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej
EP16156954.6A EP3059663B1 (en) 2015-02-23 2016-02-23 A method and a system for interacting with virtual objects in a three-dimensional space

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PL411338A PL411338A1 (pl) 2015-02-23 2015-02-23 Sposób interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej oraz system do interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej

Publications (1)

Publication Number Publication Date
PL411338A1 true PL411338A1 (pl) 2016-08-29

Family

ID=55637143

Family Applications (1)

Application Number Title Priority Date Filing Date
PL411338A PL411338A1 (pl) 2015-02-23 2015-02-23 Sposób interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej oraz system do interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej

Country Status (2)

Country Link
EP (1) EP3059663B1 (pl)
PL (1) PL411338A1 (pl)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110388919B (zh) * 2019-07-30 2023-05-23 上海云扩信息科技有限公司 增强现实中基于特征图和惯性测量的三维模型定位方法
TW202205841A (zh) * 2020-07-21 2022-02-01 佐臻股份有限公司 具影像及深度傳輸的監視系統
CN117348734B (zh) * 2023-12-06 2024-04-16 山东大学 一种双人漫游模式的交互系统及方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101657825B (zh) * 2006-05-11 2014-02-19 普莱姆传感有限公司 根据深度图对人形进行建模
CN102841733B (zh) * 2011-06-24 2015-02-18 株式会社理光 虚拟触摸屏系统以及自动切换交互模式的方法
KR101256046B1 (ko) * 2011-08-12 2013-04-18 한국과학기술원 공간 제스처 인식을 위한 신체 트래킹 방법 및 시스템
US9047507B2 (en) * 2012-05-02 2015-06-02 Apple Inc. Upper-body skeleton extraction from depth maps
WO2014009561A2 (en) * 2012-07-13 2014-01-16 Softkinetic Software Method and system for human-to-computer gesture based simultaneous interactions using singular points of interest on a hand

Also Published As

Publication number Publication date
EP3059663A1 (en) 2016-08-24
EP3059663B1 (en) 2018-09-05

Similar Documents

Publication Publication Date Title
WO2018125742A3 (en) Dynamic depth-based content creation in virtual reality environments
CN103139463B (zh) 扩增实境的方法、系统及移动装置
JP6626223B2 (ja) 屋内測距方法
RU2015113441A (ru) Бесконтактный ввод
JP2013235373A5 (pl)
US20160343166A1 (en) Image-capturing system for combining subject and three-dimensional virtual space in real time
US20170140552A1 (en) Apparatus and method for estimating hand position utilizing head mounted color depth camera, and bare hand interaction system using same
EP4411519A3 (en) Depth based foveated rendering for display systems
MY201730A (en) Gaze point determination method and apparatus, electronic device, and computer storage medium
WO2014153139A3 (en) Systems and methods for displaying a three-dimensional model from a photogrammetric scan
WO2016099906A3 (en) Assisted object placement in a three-dimensional visualization system
EP3695381B1 (en) Floor detection in virtual and augmented reality devices using stereo images
WO2017054421A1 (zh) 调整虚拟现实图像的方法及装置
JP2013097699A5 (pl)
RU2016120976A (ru) Устройство, способ и система обеспечения увеличенного дисплея с использованием шлема-дисплея
US10861223B2 (en) Passthrough visualization
JP2016024273A5 (pl)
JP2016530581A5 (pl)
CN106125903A (zh) 多人交互系统及方法
KR101916663B1 (ko) 이용자의 시선 방향 또는 중력 방향 중 적어도 하나를 이용하여 3차원 영상을 표시하는 3차원 디스플레이 장치
US20150277570A1 (en) Providing Onscreen Visualizations of Gesture Movements
US20200033940A1 (en) Information processing apparatus, information processing method, and program
JP2004265222A (ja) インタフェース方法、装置、およびプログラム
PL411338A1 (pl) Sposób interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej oraz system do interakcji z wirtualnymi obiektami w przestrzeni trójwymiarowej
US11302023B2 (en) Planar surface detection