KR102092374B1 - Furniture design apparatus displaying personalized guide information - Google Patents

Furniture design apparatus displaying personalized guide information Download PDF

Info

Publication number
KR102092374B1
KR102092374B1 KR1020180002957A KR20180002957A KR102092374B1 KR 102092374 B1 KR102092374 B1 KR 102092374B1 KR 1020180002957 A KR1020180002957 A KR 1020180002957A KR 20180002957 A KR20180002957 A KR 20180002957A KR 102092374 B1 KR102092374 B1 KR 102092374B1
Authority
KR
South Korea
Prior art keywords
guide information
display device
posture
furniture
information
Prior art date
Application number
KR1020180002957A
Other languages
Korean (ko)
Other versions
KR20190084803A (en
Inventor
석다니엘
이보경
신준기
배효신
Original Assignee
한국과학기술원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국과학기술원 filed Critical 한국과학기술원
Priority to KR1020180002957A priority Critical patent/KR102092374B1/en
Publication of KR20190084803A publication Critical patent/KR20190084803A/en
Application granted granted Critical
Publication of KR102092374B1 publication Critical patent/KR102092374B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00Computer-aided design [CAD]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • G06F9/453Help systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/003Navigation within 3D models or images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • Computer Graphics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Architecture (AREA)
  • Evolutionary Computation (AREA)
  • Geometry (AREA)

Abstract

디스플레이 장치를 이용한 가구 디자인 방법은 디스플레이 장치가 사용자의 자세 정보를 획득하는 단계, 상기 디스플레이 장치가 화면에 가구 객체를 출력하는 단계, 상기 디스플레이 장치가 상기 화면에 상기 가구 객체를 구성하는 복수의 부위 중 적어도 하나의 부위에 대한 레이아웃(layout)을 추천하는 가이드 정보를 출력하는 단계 및 상기 디스플레이 장치가 입력 명령에 따라 상기 적어도 하나의 부위에 대한 변경된 레이아웃을 출력하는 단계를 포함한다. 상기 가이드 정보는 상기 자세 정보에 따라 결정된다.A furniture design method using a display device includes: a display device obtaining user posture information, a step in which the display device outputs a furniture object on a screen, and the display device among a plurality of parts constituting the furniture object on the screen And outputting guide information recommending a layout for at least one site, and outputting a modified layout for the at least one site according to an input command by the display device. The guide information is determined according to the posture information.

Description

맞춤형 가이드 정보를 출력하는 가구 디자인 장치{FURNITURE DESIGN APPARATUS DISPLAYING PERSONALIZED GUIDE INFORMATION}Furniture design device that outputs customized guide information {FURNITURE DESIGN APPARATUS DISPLAYING PERSONALIZED GUIDE INFORMATION}

이하 설명하는 기술은 맞춤형 가구를 디자인하는 장치에 관한 것이다.The technique described below relates to a device for designing custom furniture.

VR(Virtual Reality)은 컴퓨터를 이용하여 만들어낸 가공의 상황이나 환경을 사람의 감각기관을 통해 사용자가 몰입감을 느끼고 상호작용하게 하는 기술을 말한다. 최근 다양한 VR 장비가 등장하면서 영화, 게임 등에서 새로운 분야로 각광받고 있다. 또한 AR(Augmented Reality) 장치를 이용한 다양한 콘텐츠도 개발되고 있다. 최근에는 구글 글라스와 같이 사용자 머리에 착용(head-mounted)하는 AR 장치도 개발된 바 있다.VR (Virtual Reality) refers to a technology that allows a user to feel and interact with a human being through a sensory organ in a processing situation or environment created using a computer. Recently, as various VR equipments have appeared, it has been spotlighted as a new field in movies and games. Also, various contents using AR (Augmented Reality) devices are being developed. Recently, AR devices that are worn on the user's head, such as Google Glass, have been developed.

한국공개특허 제10-2012-0044461호Korean Patent Publication No. 10-2012-0044461

이하 설명하는 기술은 VR 또는 AR 장치를 이용하여 사용자에게 맞춤형 가구를 디자인하는 방법을 제공하고자 한다.The technology described below is intended to provide a method for designing custom furniture to a user using a VR or AR device.

디스플레이 장치를 이용한 가구 디자인 방법은 디스플레이 장치가 사용자의 자세 정보를 획득하는 단계, 상기 디스플레이 장치가 화면에 가구 객체를 출력하는 단계, 상기 디스플레이 장치가 상기 화면에 상기 가구 객체를 구성하는 복수의 부위 중 적어도 하나의 부위에 대한 레이아웃(layout)을 추천하는 가이드 정보를 출력하는 단계 및 상기 디스플레이 장치가 입력 명령에 따라 상기 적어도 하나의 부위에 대한 변경된 레이아웃을 출력하는 단계를 포함한다. 상기 가이드 정보는 상기 자세 정보에 따라 결정되는 맞춤형 가이드 정보를 출력한다.A furniture design method using a display device includes: a display device obtaining user posture information, a step in which the display device outputs a furniture object on a screen, and the display device among a plurality of parts constituting the furniture object on the screen And outputting guide information recommending a layout for at least one site, and outputting a modified layout for the at least one site according to an input command by the display device. The guide information outputs customized guide information determined according to the posture information.

맞춤형 가이드 정보를 출력하는 가구 디자인 장치는 자세 인식 장치가 생성한 사용자의 자세 정보를 수신하는 통신 장치, 복수의 부위로 구성되는 가구 객체 및 상기 복수의 부위 중 적어도 하나의 부위에 대한 레이아웃(layout)을 추천하는 가이드 정보를 출력하는 디스플레이 장치, 가구 객체를 표현하는 데이터 및 상기 자세 정보에 따라 상기 가이드 정보를 결정하는 모델을 저장하는 저장 장치 및 상기 데이터를 기준으로 상기 가구 객체를 출력하게 제어하고, 상기 적어도 하나의 부위에 대하여 상기 모델을 이용하여 상기 자세 정보에 맞는 상기 가이드 정보를 결정하고, 사용자의 입력 명령에 따라 상기 적어도 하나의 부위에 대한 변경된 레이아웃을 출력하도록 제어하는 연산 장치를 포함한다.The furniture design device for outputting customized guide information includes a communication device that receives posture information of a user generated by the posture recognition device, a furniture object composed of a plurality of parts, and a layout for at least one part of the plurality of parts A display device for outputting guide information recommending, a storage device for storing data representing furniture objects and a model for determining the guide information according to the posture information, and controlling to output the furniture object based on the data, And an arithmetic unit for determining the guide information suitable for the posture information using the model for the at least one region, and controlling to output a changed layout for the at least one region according to a user input command.

이하 설명하는 기술은 사용자의 체형에 따른 맞춤형 정보를 제공하여 편리하게 인체공학적인 가구를 디자인할 수 있다.The technology described below can conveniently design ergonomic furniture by providing customized information according to the user's body type.

도 1은 가구 디자인 장치의 구성을 도시한 예이다.
도 2는 가구 디자인 장치를 이용한 가구 디자인에 대한 예이다.
도 3은 가구 객체의 구성을 디자인하는 예이다.
도 4는 가이드 정보 결정에 고려한 요소에 대한 예이다.
도 5는 가이드 정보를 출력하는 예이다.
도 6은 책상 높이에 대한 가이드 정보를 결정하는 요소에 대한 예이다.
도 7은 책상 너비에 대한 가이드 정보를 결정하는 요소에 대한 예이다.
도 8은 책상 깊이에 대한 가이드 정보를 결정하는 요소에 대한 예이다.
도 9는 선반 높이에 대한 가이드 정보를 결정하는 요소에 대한 예이다.
도 10은 선반의 깊이 및 너비에 대한 가이드 정보를 결정하는 요소에 대한 예이다.
도 11은 주변 장치에 대한 가이드 정보를 결정하는 요소에 대한 예이다.
도 12는 헤드 마운트 디스플레이 장치에 출력하는 화면에 대한 예이다.
1 is an example showing the configuration of a furniture design device.
2 is an example of furniture design using a furniture design device.
3 is an example of designing the configuration of a furniture object.
4 is an example of factors considered in determining guide information.
5 is an example of outputting guide information.
6 is an example of an element for determining guide information for a desk height.
7 is an example of an element for determining guide information for a desk width.
8 is an example of an element for determining guide information for a desk depth.
9 is an example of an element for determining guide information for a shelf height.
10 is an example of an element for determining guide information on the depth and width of a shelf.
11 is an example of an element for determining guide information for a peripheral device.
12 is an example of a screen output to a head mounted display device.

이하 설명하는 기술은 다양한 변경을 가할 수 있고 여러 가지 실시례를 가질 수 있는 바, 특정 실시례들을 도면에 예시하고 상세하게 설명하고자 한다. 그러나, 이는 이하 설명하는 기술을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 이하 설명하는 기술의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.The technique described below may be applied to various changes and may have various embodiments, and specific embodiments will be illustrated in the drawings and described in detail. However, this is not intended to limit the technology described below to specific embodiments, and should be understood to include all modifications, equivalents, or substitutes included in the spirit and scope of the technology described below.

제1, 제2, A, B 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 해당 구성요소들은 상기 용어들에 의해 한정되지는 않으며, 단지 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 이하 설명하는 기술의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.Terms such as first, second, A, B, etc. can be used to describe various components, but the components are not limited by the above terms, and only for distinguishing one component from other components Used only. For example, the first component may be referred to as a second component, and similarly, the second component may be referred to as a first component without departing from the scope of the technology described below. The term and / or includes a combination of a plurality of related described items or any one of a plurality of related described items.

본 명세서에서 사용되는 용어에서 단수의 표현은 문맥상 명백하게 다르게 해석되지 않는 한 복수의 표현을 포함하는 것으로 이해되어야 하고, "포함한다" 등의 용어는 설시된 특징, 개수, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 의미하는 것이지, 하나 또는 그 이상의 다른 특징들이나 개수, 단계 동작 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 배제하지 않는 것으로 이해되어야 한다.In the terminology used herein, a singular expression should be understood to include a plurality of expressions unless the context clearly interprets otherwise, and terms such as “comprises” describe features, counts, steps, operations, and components described. It is to be understood that it means that a part or a combination thereof is present, and does not exclude the presence or addition possibility of one or more other features or numbers, step operation components, parts or combinations thereof.

도면에 대한 상세한 설명을 하기에 앞서, 본 명세서에서의 구성부들에 대한 구분은 각 구성부가 담당하는 주기능 별로 구분한 것에 불과함을 명확히 하고자 한다. 즉, 이하에서 설명할 2개 이상의 구성부가 하나의 구성부로 합쳐지거나 또는 하나의 구성부가 보다 세분화된 기능별로 2개 이상으로 분화되어 구비될 수도 있다. 그리고 이하에서 설명할 구성부 각각은 자신이 담당하는 주기능 이외에도 다른 구성부가 담당하는 기능 중 일부 또는 전부의 기능을 추가적으로 수행할 수도 있으며, 구성부 각각이 담당하는 주기능 중 일부 기능이 다른 구성부에 의해 전담되어 수행될 수도 있음은 물론이다.Prior to the detailed description of the drawings, it is intended to clarify that the division of components in this specification is only divided by the main functions of each component. That is, two or more components to be described below may be combined into one component, or one component may be divided into two or more for each subdivided function. In addition, each of the components to be described below may additionally perform some or all of the functions of other components in addition to the main functions in charge of the components, and some of the main functions of each of the components are different. Needless to say, it may also be carried out in a dedicated manner.

또, 방법 또는 동작 방법을 수행함에 있어서, 상기 방법을 이루는 각 과정들은 문맥상 명백하게 특정 순서를 기재하지 않은 이상 명기된 순서와 다르게 일어날 수 있다. 즉, 각 과정들은 명기된 순서와 동일하게 일어날 수도 있고 실질적으로 동시에 수행될 수도 있으며 반대의 순서대로 수행될 수도 있다.In addition, in performing the method or the operation method, each of the processes constituting the method may occur differently from the specified order, unless a specific order is explicitly described in context. That is, each process may occur in the same order as specified, may be performed substantially simultaneously, or may be performed in the reverse order.

이하 설명하는 기술은 AR 장치 또는 VR 장치를 이용하여 가구를 디자인하는 기법에 관한 것이다. 이하 설명하는 기술은 가구를 사용하는 사용자의 체형 등을 고려한 맞춤형 가구를 디자인하기 위한 기법이다.The technology described below relates to a technique for designing furniture using an AR device or a VR device. The technique described below is a technique for designing customized furniture in consideration of the body shape of the user who uses the furniture.

VR 장치나 AR 장치는 헤드 마운트 디스플레이 장치 형태로 구현될 수 있다. 헤드 마운트 디스플레이 장치는 사용자의 머리 부위에 장착되는 것으로, 물리적인 형태는 다양할 수 있다. 헤드 마운트 디스플레이 장치는 VR 장치 또는 AR 장치일 수 있다. 헤드 마운트 디스플레이 장치는 기본적으로 일정한 화면에 영상을 출력하여 사용자에게 가상적인 환경을 제공한다. The VR device or the AR device may be implemented in the form of a head mounted display device. The head mounted display device is mounted on a user's head, and the physical shape may vary. The head mounted display device may be a VR device or an AR device. The head mounted display device basically outputs an image on a constant screen to provide a virtual environment to the user.

물론 이하 설명하는 기술인 헤드 마운트형 장치에만 적용되는 것은 아니다. 스마트폰, 태블릿 PC와 같은 포터블 장치도 AR 환경을 제공할 수 있다. 따라서 이하 설명하는 기술은 VR 환경이나 AR 환경을 제공할 수 있는 다양한 장치에 적용될 수 있다. 다만 설명의 편의를 위해 헤드마운트형 장치를 기준으로 설명하고자 한다.Of course, the technology described below is not only applied to the head-mounted device. Portable devices such as smartphones and tablet PCs can also provide an AR environment. Therefore, the technology described below can be applied to various devices capable of providing a VR environment or an AR environment. However, for convenience of description, the description is based on the head mounted device.

가구는 집안에서 사용하는 기구를 의미한다. 예컨대, 책상, 테이블, 서랍장, 소파, 의자, 장롱, 싱크대, 선반, 붙박이장 등을 포함한다. 가구는 하나의 단일 제품(책상, 의자 등)일 수도 있고, 복수의 기구를 함께 사용하는 주방시스템과 같은 가구일 수 있다. 주방시스템은 주방에서 사용되는 일체의 가구 장치를 의미한다. 주방시스템은 싱크대, 서랍장, 식탁과 같은 전통적인 가구를 포함하고, 나아가 일체형(빌트인) 가전(오븐, 냉장고, 식기세척기 등)를 포함할 수 있다.Furniture means utensils used in the house. Examples include desks, tables, chests of drawers, sofas, chairs, cupboards, sinks, shelves, and built-in cabinets. The furniture may be a single product (desk, chair, etc.), or may be furniture such as a kitchen system using a plurality of appliances together. The kitchen system means any furniture device used in the kitchen. The kitchen system includes traditional furniture such as a sink, chest of drawers, and a dining table, and may further include integrated (built-in) appliances (oven, refrigerator, dishwasher, etc.).

이하 설명하는 기술은 사용자의 체형을 고려하여, 사용자가 이용하는 특정 대상을 디자인하기 위한 것이다. 따라서 디자인 대상이 반드시 가구로 한정되는 것은 아닐 수 있다. 즉 인체공학적인 설계 또는 개인 맞춤형 설계가 중요한 대상에 대한 디자인에 사용될 수도 있다. 예컨대, 이하 설명하는 기술은 자동차 실내 디자인, 재활용 보조 기구 디자인, 의상 디자인 등에도 적용될 수 있다. 다만 설명의 편의를 위해 이하 디자인 대상을 책상이라고 가정한다. The technique described below is for designing a specific object used by the user in consideration of the user's body shape. Therefore, the design object may not necessarily be limited to furniture. That is, an ergonomic design or a personalized design may be used for designing an important object. For example, the technology described below can be applied to automobile interior design, recycling aid design, and clothing design. However, for convenience of description, it is assumed that the design object is a desk.

도 1은 가구 디자인 장치의 구성을 도시한 예이다. 가구 디자인 장치는 자세 인식 장치(50), 헤드 마운트 디스플레이 장치(100) 및 입력 장치(80)를 포함한다. 1 is an example showing the configuration of a furniture design device. The furniture design device includes a posture recognition device 50, a head mounted display device 100, and an input device 80.

자세 인식 장치(50)는 사용자의 자세를 인식하는 장치이다. 자세 인식 장치(50)는 카메라 및 센서 등을 사용하여 사용자의 자세를 인식할 수 있다. 자세 인식 장치(50)는 다양한 영상 처리 기법을 사용하여 사용자의 자세를 인식할 수 있다. 자세 인식 장치(50)는 상용화된 장치를 활용할 수도 있다. 예컨대, 자세 인식 장치(50)는 마이크로소프트사의 키넥트(Kinect)와 같은 장치일 수 있다. 자세 인식 장치(50)는 기본적으로 카메라를 사용하여 사용자가 포함된 영상을 획득하고, 영상을 분석하여 사용자의 자세를 파악할 수 있다. 나아가 자세 인식 장치(50)는 스테레오 카메라를 사용하여 깊이 정보를 바탕으로 3차원 공간에서의 사용자 자세를 인식할 수도 있다. 자세 인식 장치(50)는 키넥트와 같이 적외선 빔 프로젝터와 적외선 카메라를 이용하여 사용자를 인식할 수도 있다. The posture recognition device 50 is a device that recognizes a posture of a user. The posture recognition device 50 may recognize a user's posture using a camera and a sensor. The posture recognition device 50 may recognize a user's posture using various image processing techniques. The posture recognition device 50 may utilize a commercialized device. For example, the posture recognition device 50 may be a device such as Microsoft's Kinect. The posture recognition device 50 may acquire an image including the user by using a camera, and analyze the image to grasp the user's posture. Furthermore, the posture recognition device 50 may recognize a user posture in a 3D space based on depth information using a stereo camera. The posture recognition device 50 may recognize a user using an infrared beam projector and an infrared camera, such as Kinect.

자세 인식 장치(50)는 3차원 공간에서 사용자의 동작을 인식할 수 있다. 자세 인식 장치(50)는 사용자의 움직임, 사용자의 특정 신체 부위의 움직임, 신체 부위 움직임에 의한 제스처를 인식한다. 여기서 제스처는 특정한 입력 명령으로 사용될 수 있다.The posture recognition device 50 may recognize a user's motion in a 3D space. The posture recognition device 50 recognizes a gesture caused by a user's movement, a user's specific body part movement, or a body part movement. Here, the gesture can be used as a specific input command.

자세 인식 장치(50)는 영상에서 사용자를 인식하고, 사용자의 복수의 신체 부위의 위치를 식별하여 실시간으로 사용자의 자세를 인식할 수 있다. 자세 인식 장치(50)는 영상에서 사용자를 인식하고, 사용자의 신체 부위에 대한 위치를 획득한다. 자세 인식 장치(50)는 사용자의 신체 위치를 기준으로 현재 사용자의 자세 정보를 획득한다. 자세 정보는 특정 신체 부위의 위치, 3차원 공간에서 특정 신체 부위의 위치, 특정 신체 부위의 길이, 복수의 신체 부위 사이의 거리, 복수의 위치로 결정되는 특정 신체 부위의 각도, 복수의 신체 부위의 각도 등을 포함한다.The posture recognition device 50 may recognize a user in an image and recognize a user's posture in real time by identifying locations of a plurality of body parts of the user. The posture recognition device 50 recognizes a user from an image and acquires a position of a user's body part. The posture recognition device 50 acquires posture information of the current user based on the user's body position. The posture information includes the position of a specific body part, the position of a specific body part in a three-dimensional space, the length of a specific body part, the distance between the plurality of body parts, the angle of the specific body part determined by the multiple positions, the Angles and the like.

헤드 마운트 디스플레이 장치(100)는 사용자의 머리 부위에 착용된다. 헤드 마운트 디스플레이 장치(100)는 사용자의 위치 및 시선 방향에 따라 현실감 있는 영상을 제공한다. 헤드 마운트 디스플레이 장치(100)는 자세 인식 장치(50)로부터 자세 정보를 수신한다. 이를 통해 헤드 마운트 디스플레이 장치(100)는 사용자의 현재 자세를 획득하고, 자세 정보를 기반으로 가구 디자인을 위한 정보 내지 시각적 데이터를 생성한다. 한편 헤드 마운트 디스플레이 장치(100)는 자세 인식 장치(50)로부터 복수의 신체 부위의 위치 정보만을 수신하고, 수신한 위치 정보에 기반하여 사용자의 자세를 결정할 수도 있다. The head mounted display device 100 is worn on a user's head. The head mounted display device 100 provides a realistic image according to a user's location and gaze direction. The head mounted display device 100 receives posture information from the posture recognition device 50. Through this, the head mounted display device 100 acquires a user's current posture and generates information or visual data for furniture design based on the posture information. Meanwhile, the head mounted display device 100 may receive only position information of a plurality of body parts from the posture recognition device 50 and determine the user's posture based on the received position information.

헤드 마운트 디스플레이 장치(100)는 가구 디자인을 위한 객체를 화면에 출력한다. 헤드 마운트 디스플레이 장치(100)는 화면에 출력된 특정 객체를 선택하는 사용자의 명령을 수신하고, 명령에 따라 변경된 디자인을 갖는 가구 객체를 출력할 수 있다. 여기서 사용자 명령은 영상 분석으로 결정되는 사용자의 제스처, 별도의 입력 장치로부터 수신되는 명령 및 음성 인식으로 결정되는 명령 중 적어도 하나를 포함한다.The head mounted display device 100 outputs an object for furniture design on the screen. The head mounted display device 100 may receive a user's command to select a specific object output on the screen, and output a furniture object having a changed design according to the command. Here, the user command includes at least one of a user's gesture determined by video analysis, a command received from a separate input device, and a command determined by speech recognition.

헤드 마운트 디스플레이 장치(100)는 통신 장치(110), 저장장치(120), 센서장치(130), 제어회로(140) 및 출력장치(150)를 포함한다. The head mounted display device 100 includes a communication device 110, a storage device 120, a sensor device 130, a control circuit 140 and an output device 150.

통신장치(110)는 외부 객체로부터 특정 데이터를 수신한다. 통신장치(110)는 자세 인식 장치(50)로부터 자세 정보를 수신한다. 통신장치(110)는 입력장치(80)로부터 정보를 수신할 수 있다. 나아가 통신장치(100)는 가구 객체에 대한 데이터, 가구 디자인을 위한 애플리케이션 데이터 등도 서버로부터 수신할 수 있다. 통신장치(100)는 근거리 통신(블루투스 등), 와이파이, 이동통신 등과 같은 다양한 통신 방식 중 적어도 하나를 이용하여 데이터를 수신할 수 있다. The communication device 110 receives specific data from an external object. The communication device 110 receives posture information from the posture recognition device 50. The communication device 110 may receive information from the input device 80. Furthermore, the communication device 100 may also receive data on furniture objects, application data for furniture design, and the like from the server. The communication device 100 may receive data using at least one of various communication methods such as short-range communication (Bluetooth, etc.), Wi-Fi, mobile communication, and the like.

저장장치(120)는 헤드 마운트 디스플레 장치(100) 동작을 위한 기본 데이터, 통신장치(110)로부터 수신한 데이터, 가구 디자인을 위한 프로그램, 가구 객체에 대한 디자인 데이터 등을 저장한다. 기본 데이터는 OS, 프로그램 설치 및 실행을 위한 데이터 등을 포함한다. 디자인 데이터는 컴퓨터 장치에서 시각적으로 객체를 표현하는 다양한 포맷 중 어느 하나에 따른다. 저장장치(120)는 플래시 메모리, 하드디스크 등과 같은 장치로 구현될 수 있다. 나아가 후술하겠지만 저장장치(120)는 가이드 정보를 결정하기 위한 모델 내지 데이터를 저장할 수도 있다.The storage device 120 stores basic data for operating the head mounted display device 100, data received from the communication device 110, a program for furniture design, and design data for furniture objects. The basic data includes OS, data for program installation and execution, and the like. The design data conforms to any one of a variety of formats for visually representing objects on a computer device. The storage device 120 may be implemented as a device such as a flash memory or hard disk. Furthermore, as will be described later, the storage device 120 may store models or data for determining guide information.

헤드 마운트 디스플레 장치(100)는 헤드 마운트 디스플레 장치(100)를 착용한 사용자의 시선 방향에 따른 영상을 출력한다. 센서장치(130)는 헤드 마운트 디스플레 장치(100)의 위치 및 방향을 감지한다. 센서 장치(130)는 가속도 센서, 자이로 센서, 지자기 센서, 이미지 센서 등과 같이 다양한 센서로 구현될 수 있다. The head mounted display device 100 outputs an image according to a gaze direction of a user wearing the head mounted display device 100. The sensor device 130 detects the position and direction of the head mounted display device 100. The sensor device 130 may be implemented with various sensors such as an acceleration sensor, a gyro sensor, a geomagnetic sensor, and an image sensor.

출력장치(150)는 가구 객체, 디자인을 위한 화면(인터페이스) 등을 출력하는 디스플레이 장치이다.The output device 150 is a display device that outputs a furniture object, a screen (interface) for design, and the like.

제어회로(140)는 통신장치(110), 저장장치(120), 센서장치(130) 및 출력장치(150)의 동작을 제어하는 구성이다. 예컨대, 제어회로(140)는 저장장치(120)에 저장된 프로그램(앱) 및 데이터를 이용하여 출력장치(150)에 일정한 객체를 출력하게 한다. 제어회로(140)는 통신장치(110) 및 센서장치(130)로부터 입력되는 데이터에 따라 출력되는 객체가 변경되게 제어한다. 제어회로(140)는 사용자의 자세 정보에 기반하여 가구 객체를 디자인하는데 도움이 되는 가이드 정보를 결정한다. 가이드 정보는 출력 장치(150)를 통해 출력된다. 가이드 정보에 대해서는 후술한다. 제어회로(140)는 CPU, AP와 같이 일정한 연산이 가능한 연산 장치를 포함한다. 제어회로(140)는 연산 장치와 일정한 프로그램이 임베딩된 메모리를 포함할 수 있다.The control circuit 140 is a component that controls the operation of the communication device 110, the storage device 120, the sensor device 130, and the output device 150. For example, the control circuit 140 outputs a certain object to the output device 150 using programs (apps) and data stored in the storage device 120. The control circuit 140 controls the object output according to the data input from the communication device 110 and the sensor device 130 to be changed. The control circuit 140 determines guide information to help design a furniture object based on the user's posture information. Guide information is output through the output device 150. Guide information will be described later. The control circuit 140 includes a computing device capable of constant calculation, such as a CPU and an AP. The control circuit 140 may include a memory in which a computing device and a certain program are embedded.

도 1에 도시하지 않았지만, 헤드 마운트 디스플레 장치(100)는 사용자로부터 물리적인 명령을 입력받는 입력 인터페이스 장치, 사용자 음성을 입력받는 마이크 등을 포함할 수도 있다.Although not illustrated in FIG. 1, the head mounted display device 100 may include an input interface device that receives a physical command from a user, a microphone that receives a user voice, and the like.

입력 장치(80)는 사용자의 명령을 입력받는 장치이다. 입력 장치(80)는 사용자로부터 물리적인 움직임을 입력받을 수 있다. 예컨대, 입력 장치(80)는 키보드, 마우스 등과 같이 다양한 형태를 가질 수 있다. 예컨대, 사용자는 일정한 자세에서 손에 파지한 입력 장치(80)의 버튼을 눌러 명령을 입력할 수도 있다. 이를 통해 사용자는 자신의 움직임에 따라 출력장치(150)에서 출력되는 가상 공간에서 특정한 객체를 선택할 수 있다. 사용자가 입력 장치(80)를 이용하여 현재 출력되는 가구 객체에서 디자인을 변경하고자 하는 특정한 부위를 선택할 수 있다. 나아가 입력 장치(80)는 사용자의 음성 명령을 입력받는 마이크일 수도 있다. 이 경우 헤드 마운트 디스플레이 장치(100)는 음성을 인식하여 특정한 명령을 수신할 수 있다. 입력 장치(80)는 유선 또는 무선 통신을 통해 일정한 명령을 헤드 마운트 디스플레이 장치(100)에 전달한다. 사용자는 입력 명령을 통해 출력되는 화면의 시점을 변경(예컨대, 1인칭에서 3인칭으로 변환), 출력하는 화면에 대한 변경(배경 변경 등), 디자인할 가구 객체 변경, 가구 객체의 특정 부위 선택, 가구의 특정 부위에 대한 디자인 변경 시작, 가구의 특정 부위에 대한 디자인 변경 종료 등을 할 수 있다.The input device 80 is a device that receives a user's command. The input device 80 may receive physical movement from a user. For example, the input device 80 may have various forms such as a keyboard and a mouse. For example, the user may input a command by pressing a button of the input device 80 held in the hand in a certain posture. Through this, the user can select a specific object in the virtual space output from the output device 150 according to his movement. The user may select a specific part to change the design from the currently output furniture object using the input device 80. Furthermore, the input device 80 may be a microphone that receives a user's voice command. In this case, the head mounted display device 100 may recognize a voice and receive a specific command. The input device 80 transmits a certain command to the head mounted display device 100 through wired or wireless communication. The user changes the viewpoint of the screen that is output through the input command (for example, converting from the first person to the third person), changes to the output screen (such as changing the background), changes the furniture object to design, selects a specific part of the furniture object, You can start design changes for a specific part of furniture, end design changes for a specific part of furniture, and so on.

도 2는 가구 디자인 장치를 이용한 가구 디자인에 대한 예이다. 도 2에서 가구 디자인 장치는 자세 인식 장치(50), 헤드 마운트 디스플레이 장치(100) 및 입력 장치(80)를 포함한다. 사용자의 제스처를 입력 명령을 삼는 경우, 물리적인 별도의 입력 장치(80)는 사용하지 않을 수도 있다.2 is an example of furniture design using a furniture design device. 2, the furniture design device includes a posture recognition device 50, a head mounted display device 100, and an input device 80. When a user's gesture is an input command, a separate physical input device 80 may not be used.

도 2 상단에서 점선 사각형 영역(200)은 헤드 마운트 디스플레이 장치(100)가 출력하는 화면에 대한 예를 도시한다. 헤드 마운트 디스플레이 장치(100)는 기본적으로 디자인 대상이 되는 가구 객체를 화면에 출력한다. 다양한 가구를 디자인할 수 있지만 책상을 예로 도시하였다. In FIG. 2, the dotted square area 200 shows an example of a screen output by the head mounted display device 100. The head mounted display device 100 basically outputs a furniture object, which is a design target, on a screen. Various furniture can be designed, but the desk is shown as an example.

헤드 마운트 디스플레이 장치(100)는 가구 객체 외에 다른 객체를 화면에 출력할 수도 있다. 예컨대, 헤드 마운트 디스플레이 장치(100)는 실제 가구가 배치될 장소와 동일한 화면을 화면에 출력할 수 있다. 헤드 마운트 디스플레이 장치(100)는 건물을 구성하는 벽, 기둥과 같은 구조물을 출력할 수 있다. 또한 헤드 마운트 디스플레이 장치(100)는 실내에 이미 배치된 다른 가구를 출력할 수 있다. 예컨대, 책상을 디자인한다면, 헤드 마운트 디스플레이 장치(100)는 책상이 배치될 공부방에 이미 배치된 책장, 서랍장 등을 출력할 수 있다. 이를 통해 사용자는 실제 가구가 배치될 공간을 고려하여 가구를 디자인할 수 있다. 헤드 마운트 디스플레이 장치(100)는 화면에 출력되는 공간, 배경, 가구 객체 등에 대한 데이터를 사전에 보유하고, 해당 데이터를 기반으로 화면을 구성하고 출력한다. The head mounted display device 100 may output other objects in addition to furniture objects on the screen. For example, the head mounted display device 100 may output a screen identical to a place where actual furniture is to be placed on the screen. The head mounted display device 100 may output structures such as walls and columns constituting a building. In addition, the head-mounted display device 100 may output other furniture that has already been placed indoors. For example, if a desk is designed, the head mounted display device 100 may output a bookshelf, a chest of drawers, etc., which are already placed in the study room where the desk is to be placed. Through this, the user can design the furniture in consideration of the space where the actual furniture will be placed. The head mounted display device 100 previously holds data on a space, background, furniture object, and the like output on the screen, and configures and outputs the screen based on the data.

가구 객체는 복수의 부위로 구성된다. 도 2에 도시한 책상을 예로 설명한다. 도 2에 도시한 가구 객체는 책상 본체와 책상 본체 위에 놓인 선반으로 구성된다. 책상 본체는 책상을 구성하는 복수의 부위 및 각 부위의 크기 내지 길이로 정의될 수 있다. 책상의 높이(①로 표시)는 바닥부터 책상 상단까지의 길이를 의미한다. 책상의 너비(②로 표시)는 책상의 하나의 측면(다리 부위)과 다른 하나의 측면 사이의 길이를 의미한다. 책상의 깊이(③으로 표시)는 책상의 정면(사용자가 마주하는 면)과 후면 사이의 길이를 의미한다. 발판(foot rest)의 높이(④로 표시)는 바닥면부터 발판까지의 길이를 의미한다. Furniture objects consist of a plurality of parts. The desk shown in Fig. 2 will be described as an example. The furniture object shown in FIG. 2 is composed of a desk body and a shelf placed on the desk body. The desk body may be defined by a plurality of parts constituting the desk and the size or length of each part. The height of the desk (indicated by ①) means the length from the floor to the top of the desk. The width of the desk (indicated by ②) means the length between one side (leg part) of the desk and the other side. The depth of the desk (indicated by ③) means the length between the front side (face facing the user) and the back side of the desk. The height of the foot rest (indicated by ④) means the length from the bottom surface to the footrest.

선반은 2단으로 구성되어 있다. 1단 선반의 높이(⑤로 표시)는 바닥면부터 1단 선반이 시작하는 하단까지의 길이를 의미한다. 경우에 따라 도 2와 달리 1단 선반의 높이는 책상 상단부터 1단 선반이 시작하는 하단까지의 길이가 될 수도 있다. 1단 선반의 높이(⑥으로 표시)는 바닥면부터 2단 선반이 시작하는 하단까지의 길이를 의미한다. 전체 선반의 높이(⑦로 표시)는 바닥면부터 선반의 상단면(도 2에서는 2단 선반의 상단면)까지의 길이를 의미한다. 도 2에 도시하지 않았지만 선반의 깊이, 선반을 일정하게 구획하는 칸막이의 간격 등도 디자인 요소가 될 수 있다.The shelf has two stages. The height of the first stage shelf (indicated by ⑤) means the length from the bottom surface to the bottom of the first stage shelf. In some cases, unlike FIG. 2, the height of the first stage shelf may be a length from the top of the desk to the bottom of the first stage shelf. The height of the first stage shelf (indicated by ⑥) means the length from the bottom surface to the bottom of the second stage shelf. The height of the entire shelf (indicated by ⑦) means the length from the bottom surface to the top surface of the shelf (in FIG. 2, the top surface of the second-stage shelf). Although not shown in FIG. 2, the depth of the shelf, the spacing of the partitions that divide the shelf regularly, and the like may also be design elements.

도 3은 가구 객체의 구성을 디자인하는 예이다. 사용자는 헤드 마운트 디스플레이 장치(100)에 출력되는 가구 객체의 디자인을 변경할 수 있다. 사용자는 가구 객체를 구성하는 복수의 부위 중 적어도 하나의 부위를 선택하고, 선택한 부위의 레이아웃(layout)을 변경할 수 있다. 여기서 레이아웃은 특정 부위의 일방향 길이(length), 너비(width), 깊이(depth), 크기 및 위치 중 적어도 하나의 요소로 결정된다. 3 is an example of designing the configuration of a furniture object. The user can change the design of the furniture object output to the head mounted display device 100. The user may select at least one part of a plurality of parts constituting the furniture object, and change the layout of the selected part. Here, the layout is determined by at least one element of one-way length, width, depth, size, and position of a specific region.

도 3(A)는 책상의 길이가 변경되는 예이다. 도 3(A)는 책상의 우측면을 연장한 예이다. 도 3(A)에서 점선은 변경 전 부위를 도시한다. 예컨대, 사용자는 책상의 우측면을 선택하고, 선택한 상태에서 우측면은 잡고 늘리거나 줄이는 방식으로 책상의 길이를 조절할 수 있다. 또는 사용자는 변경할 부위를 선택하고, 해당 부위의 길이를 입력하여 해당 부위의 레이아웃을 변경할 수도 있다. 도 3(B)는 책상의 높이가 변경되는 예이다. 도 3(B)에서 점선은 연장된 높이를 나타낸다. 예컨대, 사용자는 책상의 상판면을 선택하고, 상판면의 높이를 조절하여 책상의 높이를 변경할 수 있다. 도 3(C)는 1단 선반의 높이가 변경되는 예이다. 도 3(C)에서 점선은 1단 선반의 연장된 높이를 나타낸다. 예컨대, 사용자는 1단 선반의 상판면을 선택하여, 상판면을 늘리거나 줄이는 방식으로 1단 선반의 높이를 변경할 수 있다. 도 3(D)는 책상의 깊이가 변경되는 예이다. 도 3(D)에서 점선은 늘어난 책상의 깊이를 나타낸다. 예컨대, 사용자는 책상의 상판면을 선택하고, 상판면을 당기거나 밀어서 책상의 깊이를 조절할 수 있다.3 (A) is an example in which the length of a desk is changed. 3 (A) is an example of extending the right side of the desk. The dotted line in FIG. 3 (A) shows the site before the change. For example, the user can adjust the length of the desk by selecting the right side of the desk, holding the right side in the selected state, and stretching or reducing it. Alternatively, the user may select a site to be changed, and input the length of the site to change the layout of the site. 3 (B) is an example in which the height of the desk is changed. The dotted line in FIG. 3 (B) represents the extended height. For example, the user can change the height of the desk by selecting the top surface of the desk and adjusting the height of the top surface. 3 (C) is an example in which the height of the first-stage shelf is changed. In FIG. 3 (C), the dotted line represents the extended height of the first stage shelf. For example, the user can change the height of the first-stage shelf by selecting the top surface of the first-stage shelf and increasing or decreasing the top plate surface. 3 (D) is an example in which the depth of the desk is changed. The dotted line in FIG. 3 (D) represents the depth of the stretched desk. For example, the user can select the top surface of the desk and adjust the depth of the desk by pulling or pushing the top surface.

사용자가 가구 객체의 특정 부위의 레이아웃을 변경하는 방식은 다양할 수 있다. (1) 먼저 사용자가 헤드 마운트 디스플레이 장치(100)에 출력되는 가구 객체의 특정 부위를 선택해야 한다. 헤드 마운트 디스플레이 장치(100)는 가구 객체와 함께 가구 객체의 특정 부위를 선택할 수 있는 객체를 출력할 수 있다. 예컨대, 헤드 마운트 디스플레이 장치(100)는 화면에 사용자의 손과 같은 객체를 출력하여 사용자 동작에 따라 특정 부위에 접촉하는 상태를 구현할 수 있다. (i) 사용자는 특정 제스처를 통해 특정 부위를 선택할 수 있다. (ii) 사용자는 화면 상 특정 부위와 접촉한 상태에서 별도의 물리적인 입력 장치를 사용하여 해당 부위를 선택할 수도 있다. (iii) 사용자는 화면 상 특정 부위와 접촉한 상태에서 음성 입력으로 해당 부위를 선택할 수도 있다. (2) 이후 사용자는 선택한 부위의 레이아웃을 변경할 수 있다. (i) 사용자는 특정한 부위를 선택한 상태에서 해당 부위의 위치나 크기를 변경하는 방식으로 레이아웃을 변경할 수 있다. 예컨대, 사용자는 물리적 입력 장치의 버튼을 누른 상태에서 위치를 변경하여 해당 부위의 레이아웃을 변경할 수 있다. (ii) 사용자는 특정한 부위를 선택한 후 해당 부위의 크기나 위치에 해당하는 정보를 입력하여 레이아웃을 변경할 수 있다. 예컨대, 사용자는 별도의 입력 장치 또는 음성 입력을 통해 특정 수치나 정보를 입력하여 해당 부위의 레이아웃을 변경할 수도 있다. (iii) 사용자는 특정한 부위를 선택한 후 화면에 나오는 레이아웃 샘플(예) 중 하나를 선택하여 해당 부위의 레이아웃을 변경할 수도 있다. There are various ways in which a user changes the layout of a specific part of a furniture object. (1) First, the user must select a specific part of the furniture object output to the head mounted display device 100. The head mounted display device 100 may output an object capable of selecting a specific portion of the furniture object together with the furniture object. For example, the head mounted display device 100 may output an object such as a user's hand on the screen to implement a state of contacting a specific area according to a user's motion. (i) The user can select a specific part through a specific gesture. (ii) The user may select a corresponding part using a separate physical input device while in contact with a specific part on the screen. (iii) The user may select a corresponding part by voice input while in contact with a specific part on the screen. (2) After that, the user can change the layout of the selected site. (i) The user can change the layout by selecting a specific part and changing the position or size of the part. For example, the user may change the layout of the corresponding part by changing the position while pressing the button of the physical input device. (ii) After selecting a specific site, the user can change the layout by entering information corresponding to the size or location of the site. For example, the user may input a specific numerical value or information through a separate input device or voice input to change the layout of the corresponding site. (iii) After selecting a specific site, the user can change the layout of the site by selecting one of the layout samples (example) on the screen.

헤드 마운트 디스플레이 장치(100)는 가구 객체를 디자인하는 화면에 가구 객체를 디자인하는데 도움이 되는 정보(가이드 정보)를 출력한다. 헤드 마운트 디스플레이 장치(100)는 가구 객체를 구성하는 특정 부위에 대한 레이아웃을 추천할 수 있다. 예컨대, 헤드 마운트 디스플레이 장치(100)는 특정 부위의 길이, 높이, 너비 및 깊이 중 적어도 하나를 추천할 수 있다. 또한 헤드 마운트 디스플레이 장치(100)는 특정 공간에서 복수의 가구가 사용되는 경우, 복수의 가구의 위치를 추천할 수도 있다. 예컨대, 책상과 의자가 같이 사용되는 경우 의자의 위치 등을 추천할 수 있다. 가이드 정보는 자세 인식 장치(50)가 인식하는 사람의 자세 정보를 기준으로 결정될 수 있다. 헤드 마운트 디스플레이 장치(100)는 사용자의 신체 특성(체형) 내지 자세 특성에 따라 맞춤형 가이드 정보를 출력한다. 이를 통해 사용자는 편리하게 인체공학적인 가구를 디자인할 수 있다. 헤드 마운트 디스플레이 장치(100)는 특정 부위의 바람직한 위치 내지 배치 가능한 영역을 가이드 정보로 출력할 수 있다.The head mounted display device 100 outputs information (guide information) that is helpful in designing furniture objects on a screen for designing furniture objects. The head mounted display device 100 may recommend a layout for a specific part of a furniture object. For example, the head mounted display device 100 may recommend at least one of length, height, width, and depth of a specific area. In addition, the head mounted display device 100 may recommend the location of a plurality of furniture when a plurality of furniture is used in a specific space. For example, when a desk and a chair are used together, the position of the chair, etc. may be recommended. Guide information may be determined based on posture information of a person recognized by the posture recognition device 50. The head mounted display device 100 outputs customized guide information according to a user's body characteristics (body shape) or posture characteristics. This allows users to conveniently design ergonomic furniture. The head mounted display device 100 may output a desired location or a placeable area of a specific region as guide information.

도 4는 가이드 정보 결정에 고려한 요소에 대한 예이다. 도 4는 가이드 정보 결정에 고려한 요소를 테이블 형태로 표시하였다. 4 is an example of factors considered in determining guide information. 4 shows elements considered in determining guide information in a table form.

도 4에서 가이드 정보 결정에서 고려할 항목의 유형은 신체(body), 물건(object) 및 여유 공간(space clearance)을 예로 도시하였다. 물론 디자인하고자하는 대상에 따라 다양한 기준 내지 항목이 사용될 수도 있다. 신체는 신체 자세(body posture), 신체 활동(body activity), 신체 여유 공간(body clearance) 및 신체 접근성(body reachability)을 항목으로 갖는다. 각 항목은 서로 연관되며 기능적으로 중복된 내용을 의미하기도 한다. 신체 자세는 사용자의 바람직한 자세와 관련된다. 신체 활동은 가구를 사용하는 사용자 신체 부위의 위치 내지 동작을 고려한 항목이다. 신체 여유 공간은 가구를 사용하는 사용자 신체 부위에 대한 여유 공간을 의미한다. 신체 접근성은 가구를 사용하는 사용자 신체의 도달 가능 범위를 고려한 항목이다. 물건 이용 편리성은 가구와 함께 이용하는 다른 물건을 고려한 항목이다. 여유 공간은 가구 자체와 관련된 여유 공간을 나타내는 항목이다.In FIG. 4, the types of items to be considered in determining guide information are illustrated as a body, an object, and a space clearance. Of course, various criteria or items may be used depending on the object to be designed. The body has body posture, body activity, body clearance and body reachability. Each item is related to each other and may also mean functionally redundant content. Body posture is related to the user's desired posture. Physical activity is an item that considers the location or motion of a user's body part using furniture. The free body space means free space for a user's body part using furniture. Body accessibility is an item that considers the reach of the user's body using furniture. The convenience of using objects is an item that considers other objects used with furniture. The free space is an item indicating the free space associated with the furniture itself.

도 4에서 가이드 정보는 가이드 정보의 종류를 나타낸다. 도 4는 책상을 고려한 항목으로 가구 객체의 종류에 따라 도 4와 다른 가이드 정보가 사용될 수 있다. 도 6 내지 도 12에서 몇 가지 가이드 정보를 결정하는 예를 설명한다.In FIG. 4, guide information indicates a kind of guide information. 4 is an item considering a desk, and guide information different from FIG. 4 may be used according to the type of furniture object. An example of determining some guide information in FIGS. 6 to 12 will be described.

도 4에서 가이드 정보 변수는 가이드 정보를 결정하는데 고려할 변수를 의미한다. 도 4에서 이탤릭(italic)체로 구분한 항목은 정적(static) 변수이고, 밑줄로 표시한 항목은 동적(dynamic) 변수이다. 동적 변수는 사용자의 자세 및 가구 객체의 디자인에 따라 실시간으로 변동될 수 있다. 헤드 마운트 디스플레이 장치(100)는 정적 변수와 실시간으로 변경되는 동적 변수를 고려하여 가이드 정보를 결정하고, 현재 가장 적절한 가이드 정보를 화면에 출력한다.In FIG. 4, the guide information variable means a variable to be considered in determining guide information. In FIG. 4, items separated by italics are static variables, and items denoted by underlines are dynamic variables. The dynamic variable can be changed in real time according to the user's posture and the design of the furniture object. The head mounted display device 100 determines guide information in consideration of a static variable and a dynamic variable changed in real time, and outputs the most appropriate guide information to the screen.

가이드 정보는 도 4에 표시한 정보 외에도 일반적으로 알려진 인체공학적인 정보를 더 사용하여 결정될 수 있다.Guide information may be determined by using generally known ergonomic information in addition to the information shown in FIG. 4.

도 5는 가이드 정보를 출력하는 예이다. 도 5는 헤드 마운트 디스플레이 장치(100)의 화면에서 가이드 정보가 출력되는 예이다. 도 5에서 사각형 영역은 화면에 출력되는 화면에 대한 예이고, 붉은색 화살표는 화면에서 출력되는 가이드 정보를 설명하기 위해 부가적으로 표시한 것이다. 5 is an example of outputting guide information. 5 is an example in which guide information is output on the screen of the head mounted display device 100. In FIG. 5, a square area is an example of a screen displayed on a screen, and a red arrow is additionally displayed to describe guide information output from the screen.

도 5(A)는 신체 자세와 관련된 가이드 정보를 출력하는 예이다. 도 5(A)는 3인칭 시점에서 책상을 이용하는 사용자의 등의 각도 및 팔꿈치 각도를 표시한다. 각도는 일정한 게이지(gauge) 형태로 표현된다. 게이지는 붉은색과 초록색 영역으로 구분되며 붉은색은 부적절한 각도를 나타내고, 초록색은 바람직한 각도를 나타낸다. 이를 통해 사용자는 현재 자신의 자세가 바람직한 자세인지 판단할 수 있다. 가이드 정보는 전술한 바와 같이 동적 변수에 따라 정보가 달라진다. 따라서 사용자는 현재 자신의 자세가 바람직한 상태인지 확인하고, 바람직한 자세를 기준으로 가구를 디자인할 수 있다.5A is an example of outputting guide information related to body posture. 5 (A) shows the angle of the back and the elbow of the user using the desk in the third person view. The angle is expressed in the form of a constant gauge. The gauge is divided into red and green areas, with red representing an inappropriate angle and green representing a desirable angle. Through this, the user can determine whether his current posture is a desirable posture. As described above, guide information is changed according to dynamic variables. Therefore, the user can check whether his current posture is in a desirable state and design furniture based on the preferred posture.

도 5(B)는 신체 활동과 관련된 가이드 정보를 출력하는 예이다. 도 5(B)는 책상의 높이에 대한 가이드 정보이다. 화면에 책상 상부판의 위치를 일정한 영역으로 출력한다. 가이드 정보는 다양한 방법으로 표시할 수 있다. 도 5(B)는 서 있는 자세에서 바람직한 책상의 높이를 붉은색 점선 영역으로 표현하였다.5B is an example of outputting guide information related to physical activity. 5 (B) is guide information on the height of the desk. The position of the desk top plate is displayed on the screen in a certain area. Guide information can be displayed in various ways. 5 (B), the height of the desk in the standing position is represented by a dotted red area.

도 5(C)는 신체 활동과 관련된 가이드 정보를 출력하는 예이다. 도 5(C)는 책상에 사용할 다른 객체에 해당하는 모니터의 높이(위치)를 추천하는 예이다. 모니터의 높이는 사용자의 눈 높이와 관련된다. 헤드 마운트 디스플레이 장치(100)는 의자에 앉아 있는 사용자의 자세를 기준으로 모니터 높이에 대한 가이드 정보를 출력할 수 있다. 도 5(C)는 바람직한 모니터의 위치를 점선 영역으로 표시한다. 나아가 화면에 특정 위치에 배치된 모니터를 표시할 수도 있다.5 (C) is an example of outputting guide information related to physical activity. 5 (C) is an example of recommending the height (position) of the monitor corresponding to another object to be used for the desk. The height of the monitor is related to the height of the user's eyes. The head mounted display device 100 may output guide information on the monitor height based on the posture of the user sitting on the chair. Fig. 5 (C) shows the preferred position of the monitor as a dotted area. Furthermore, a monitor arranged at a specific location may be displayed on the screen.

도 5(D)는 신체 접근성과 관련된 가이드 정보를 출력하는 예이다. 도 5(D)는 선반의 높이를 추천하는 예이다. 헤드 마운트 디스플레이 장치(100)는 현재 사용자의 자세 정보를 따라 팔이 닿을 수 있는 영역을 기준으로 선반의 높이에 대한 가이드 정보를 출력할 수 있다. 도 5(D)는 바람직한 화면에 선반의 위치를 점선 영역으로 표시한다. 상단 점선은 도달 가능성을 고려한 상한선에 해당하고, 하단 점선은 선반의 구조 내지 사용자의 자세를 고려한 하한선에 해당한다.5 (D) is an example of outputting guide information related to physical accessibility. 5 (D) is an example of recommending the height of the shelf. The head mounted display device 100 may output guide information about the height of the shelf based on the area where the arm can reach according to the current user's posture information. 5 (D) shows the location of the shelf on the preferred screen as a dashed area. The upper dotted line corresponds to the upper limit line considering the reachability, and the lower dotted line corresponds to the lower limit line considering the structure of the shelf or the posture of the user.

도 5(E)는 물건 이용 편리성과 관련된 가이드 정보를 출력하는 예이다. 도 5(E)는 책상을 사용하는 사용자가 편리하게 접근할 수 있는 영역을 고려한 가이드 정보를 출력한다. 예컨대, 헤드 마운트 디스플레이 장치(100)는 왼손이 접근하기 편리한 영역과 오른손이 접근하기 편리한 영역을 일정하게 표시할 수 있다. 또 헤드 마운트 디스플레이 장치(100)는 거리에 따라 비교적 근접한 거리를 주요 업무 범위 내지 주요 업무 각도로 일정하게 표시할 수 있다. 주요 업무 범위는 내지 각도는 팔꿈치를 책상 끝에 두었을 때 도달 가능한 범위일 수 있다. 나아가 헤드 마운트 디스플레이 장치(100)는 비교적 먼 거리를 확장된 업무 범위 내지 확장된 업무 각도로 일정하게 표시할 수 있다. 확장된 업무 범위 내지 각도는 어깨를 책상 끝에 두었을 때 도달 가능한 범위일 수 있다.5 (E) is an example of outputting guide information related to the convenience of using an object. 5 (E) outputs guide information in consideration of an area that can be conveniently accessed by a user who uses a desk. For example, the head-mounted display device 100 may constantly display an area accessible to the left hand and an area accessible to the right hand. In addition, the head mounted display device 100 may display a relatively close distance according to the distance from the main work range to the main work angle. The main scope of work may be an angle that can be reached when the elbow is placed at the end of the desk. Furthermore, the head mounted display device 100 may display a relatively long distance constantly from an extended work range to an extended work angle. The extended working range or angle may be a reachable range when the shoulder is placed at the end of the desk.

도 5(F)는 여유 공간과 관련된 가이드 정보를 출력하는 예이다. 책상과 함께 의자를 사용하는 경우 헤드 마운트 디스플레이 장치(100)는 책상의 위치를 고려하여 적절한 의자의 위치를 가이드 정보로 출력할 수 있다. 도 5(F)는 바닥면에 의자가 배치될 수 있는 한계선을 표시한 예이다.5 (F) is an example of outputting guide information related to the free space. When a chair is used together with a desk, the head mounted display device 100 may output the appropriate chair position as guide information in consideration of the desk position. 5 (F) is an example in which a limit line in which a chair can be arranged on the floor surface is displayed.

도 6은 책상 높이에 대한 가이드 정보를 결정하는 요소에 대한 예이다. 책상의 높이는 바닥면부터 책상 상판의 상단(top surface of the desk)까지의 길이라고 가정한다. 책상 높이에 대한 가이드 정보는 상한선과 하한선으로 표시될 수 있다. 이 경우 사용자는 상한선 내지 하한선 사이로 책상의 높이를 설정할 수 있다. 도 6(A)는 앉은 자세에서 책상 높이를 결정하는 예이다. 도 6(B)는 서 있는 자세에서 책상 높이를 결정하는 예이다. 책상 높이에 대한 가이드 정보는 아래 표 1과 같이 결정될 수 있다. 아래 책상 높이는 책상에서 키보드로 타이핑(typing)을 수행하는 자세를 가정하였다.6 is an example of an element for determining guide information for a desk height. The height of the desk is assumed to be the length from the bottom surface to the top surface of the desk. Guide information on the desk height may be displayed as an upper limit line and a lower limit line. In this case, the user can set the height of the desk between the upper and lower limits. 6 (A) is an example of determining a desk height in a sitting position. 6 (B) is an example of determining a desk height in a standing position. Guide information on the desk height may be determined as shown in Table 1 below. The height of the desk below assumes a posture of typing on the desk.

항목Item 수식Equation

앉은 자세
(Sitting)


Sitting position
(Sitting)
물리적 하한 한계선
(Physical Restriction)
Lower physical limit
(Physical Restriction)
= seat height + thigh clearance + table top thickness= seat height + thigh clearance + table top thickness
하한선(Min)Lower limit line (Min) = seat height + elbow rest height + elbow end to pivot length- elbow to wrist ×sin20= seat height + elbow rest height + elbow end to pivot length- elbow to wrist × sin20 상한선(Max)Upper limit (Max) = seat height + elbow rest height + elbow end to pivot length - elbow to wrist length ×sin10= seat height + elbow rest height + elbow end to pivot length-elbow to wrist length × sin10
서있는 자세
(Standing)

Standing posture
(Standing)
하한선(Min)Lower limit line (Min) = elbow height + elbow end to pivot - elbow to wrist length ×sin20= elbow height + elbow end to pivot-elbow to wrist length × sin20
상한선(Max)Upper limit (Max) = elbow height + elbow end to pivot - elbow to wrist length ×sin10= elbow height + elbow end to pivot-elbow to wrist length × sin10

seat height는 의자 높이를 의미하며 바닥면에서 의자 상단까지의 길이로 정의된다. thigh clearance는 사용자 허벅지의 두께를 의미한다. table top thickness는 책상 상판의 두께를 의미한다. elbow rest height은 앉은 자세에서 팔꿈치 높이는 의자 상단에서 팔꿈치까지의 길이로 정의된다. elbow height은 서있는 자세에서 팔꿈치 높이는 바닥에서 팔꿈치까지의 길이로 정의된다. elbow end to pivot length은 팔꿈치 하단에서 회전 중심까지의 길이를 의미한다. 결국 "seat height + elbow rest height + elbow end to pivot length" 또는 "elbow height + elbow end to pivot length"은 현재 사용자의 자세에서 바닥면부터 팔꿈치 회전 관절까지의 거리를 나타낸다. elbow to wrist length는 팔꿈치 끝 부분에서 손목까지의 거리를 나타낸다. 수직선을 기준으로 타이핑을 위한 팔꿈치 회전의 상한각도는 70도이고, 하한각도는 100도이다. seat height means the height of the chair and is defined as the length from the floor to the top of the chair. The thigh clearance means the thickness of the user's thigh. Table top thickness means the thickness of the desk top. The elbow rest height is defined as the height of the elbow in the sitting position from the top of the chair to the elbow. elbow height is defined as the height of the elbow in the standing position from the floor to the elbow. The elbow end to pivot length means the length from the bottom of the elbow to the center of rotation. As a result, "seat height + elbow rest height + elbow end to pivot length" or "elbow height + elbow end to pivot length" indicates the distance from the floor surface to the elbow rotation joint in the current user's posture. elbow to wrist length indicates the distance from the tip of the elbow to the wrist. The upper limit angle of the elbow rotation for typing based on the vertical line is 70 degrees, and the lower limit angle is 100 degrees.

도 7은 책상 너비에 대한 가이드 정보를 결정하는 요소에 대한 예이다. 책상 너비는 책상 길이 방향에서 책상 상판의 일방향 끝에서 끝까지의 거리라고 정의한다. 책상 너비에 대한 가이드 정보는 아래 표 2와 같이 결정될 수 있다. 7 is an example of an element for determining guide information for a desk width. The desk width is defined as the distance from one end of the desk top to the other in the lengthwise direction of the desk. Guide information on the desk width may be determined as shown in Table 2 below.

항목Item 수식Equation 물리적 한계
(Physical Restriction)
Physical limitations
(Physical Restriction)
= elbow to elbow breadth= elbow to elbow breadth
주요 업무 범위
(Primary work zone)
Main business scope
(Primary work zone)
= radius of elbow pivot to handtip length(0-135도)= radius of elbow pivot to handtip length (0-135 degrees)
확장된 업무 범위
(Secondary work zone)
Extended business scope
(Secondary work zone)
= radius of shoulder to handtip length(0-180도)= radius of shoulder to handtip length (0-180 degrees)

물리적 한계는 하나의 팔꿈치와 다른 하나의 팔꿈치 사이의 거리(elbow to elbow breadth)이다. 책상의 최소 너비를 두 개의 팔꿈치 사이의 거리(너비)라고 정의한다. elbow pivot은 팔꿈치 회전 중심이다. elbow pivot to handtip length는 팔꿈치 회전 중심에서 손끝(handtip)까지의 거리이다. 주요 업무 범위는 팔꿈치 회전 중심을 기준으로 손끝이 회전할 수 있는 반경에 해당한다. 주요 업무 범위는 팔꿈치의 회전 각도를 고려하여 0-135도(수직선 기준으로는 45도)로 제한하였다. 확장된 업무 범위는 어깨를 중심으로 손끝이 회전할 수 있는 반경에 해당한다. 도 7에서 왼손의 주요 업무 범위는 주황색으로 표시하였고, 오른손의 주요 업무 범위는 연두색으로 표시하였다. 또 각 손의 확장된 업무 범위는 노란색으로 표시하였다. 이와 같이 책상의 너비는 업무 범위의 영역에 따라 결정될 수 있다. 즉, 책상의 너비는 사용자 신체(손)의 도달 가능 범위에 따라 결정될 수 있다.The physical limit is the distance between one elbow and the other (elbow to elbow breadth). Define the minimum width of the desk as the distance (width) between the two elbows. The elbow pivot is the center of rotation of the elbow. The elbow pivot to handtip length is the distance from the elbow rotation center to the handtip. The main scope of work corresponds to the radius at which the fingertip can rotate based on the center of rotation of the elbow. The main scope of work was limited to 0-135 degrees (45 degrees on a vertical line) considering the rotation angle of the elbow. The extended scope of work corresponds to the radius at which the fingertip can rotate around the shoulder. In FIG. 7, the main business scope of the left hand is indicated in orange, and the main business scope of the right hand is indicated in light green. In addition, the extended scope of work for each hand is indicated in yellow. As such, the width of the desk may be determined according to the area of the work scope. That is, the width of the desk may be determined according to the reachable range of the user's body (hand).

도 8은 책상 깊이에 대한 가이드 정보를 결정하는 요소에 대한 예이다. 책상의 깊이는 사용자 방향의 책상 상판 끝에서 반대 방향 끝까지의 거리로 정의된다. 도 8(A)는 앉은 자세에서 책상 깊이를 결정하는 예이다. 도 8(B)는 서 있는 자세에서 책상 깊이를 결정하는 예이다. 책상 깊이에 대한 가이드 정보는 아래 표 3과 같이 결정될 수 있다. 8 is an example of an element for determining guide information for a desk depth. The depth of the desk is defined as the distance from the end of the desk top in the user direction to the opposite end. 8 (A) is an example of determining a desk depth in a sitting position. 8 (B) is an example of determining a desk depth in a standing position. Guide information on the depth of the desk may be determined as shown in Table 3 below.

항목Item 수식Equation 물리적 하한 한계
(Physical Restriction)
Lower physical limit
(Physical Restriction)
= buttock-knee length - maximum body depth + knee height ×sin20 + foot length ×cos20= buttock-knee length-maximum body depth + knee height × sin20 + foot length × cos20

상한값
(Primary work zone)

Upper limit
(Primary work zone)
= shoulder to spine ×cos20 - maximum body depth/2 + Square root{shoulder to handtip^2 - (shoulder to handtip ×sin20 + spine height - desk height)^2}= shoulder to spine × cos20-maximum body depth / 2 + Square root {shoulder to handtip ^ 2-(shoulder to handtip × sin20 + spine height-desk height) ^ 2}

책상 깊이의 물리적 하한값은 앉은 자세를 고려하여 결정될 수 있다. buttock-knee length는 엉덩이 끝에서 무룹까지의 거리를 의미한다. maximum body depth는 몸의 상면과 하면 사이의 수평 거리 중 가장 긴 거리를 의미한다. 'buttock-knee length - maximum body depth'는 무릎 깊이(Knee depth)에 해당한다. 하한값은 무릎 깊이에 종아리부터 발끝까지의 수평 거리를 더한 값에 해당한다. 결국 하한값은 사람이 일반적인 자세로 최대한 책상에 밀착한 상태에서 몸의 전면부에서 발끝이 도달하는 거리에 해당한다.The physical lower limit of the desk depth may be determined by considering the sitting position. The buttock-knee length is the distance from the tip of the hip to the murub. The maximum body depth means the longest of the horizontal distances between the upper and lower surfaces of the body. The 'buttock-knee length-maximum body depth' corresponds to the knee depth. The lower limit corresponds to the knee depth plus the horizontal distance from the calf to the toe. In the end, the lower limit corresponds to the distance that the toes reach from the front of the body while the person is as close to the desk as possible in a general posture.

책상 깊이의 상한값은 서있는 자세를 고려하여 결정될 수 있다. shoulder to spine은 어깨에서 등뼈(척추)가 끝나는 부위(spine)까지의 거리를 의미한다. shoulder to handtip은 어깨에서 손끝까지의 거리를 의미한다. spine height는 바닥면에서 spine까지의 거리이다. 수식에서 'Square root'는 제곱근을 구하는 수식이고, '^2'는 제곱 연산을 의미한다.The upper limit of the desk depth can be determined by considering the standing posture. Shoulder to spine refers to the distance from the shoulder to the spine. shoulder to handtip means the distance from the shoulder to the fingertip. The spine height is the distance from the bottom surface to the spine. In the formula, 'Square root' is the formula to find the square root, and '^ 2' means the square operation.

도 9는 선반 높이에 대한 가이드 정보를 결정하는 요소에 대한 예이다. 선번의 높이는 바닥면에서 선반 상판까지의 거리로 정의한다. 도 9(A)는 앉은 자세에서 선반 높이를 결정하는 예이다. 도 9(B)는 서 있는 자세에서 선반 높이를 결정하는 예이다. 선반 높이에 대한 가이드 정보는 아래 표 4와 같이 결정될 수 있다. 9 is an example of an element for determining guide information for a shelf height. The height of the turn is defined as the distance from the bottom to the top of the shelf. 9 (A) is an example of determining a shelf height in a sitting position. 9 (B) is an example of determining the shelf height in a standing position. Guide information on the shelf height can be determined as shown in Table 4 below.

항목Item 수식Equation 앉은 자세
(Sitting)
Sitting position
(Sitting)
하한값Lower limit = eye height= eye height
상한선(Max)Upper limit (Max) shoulder height sitting + Square root {shoulder to handtip^2 - (desk depth - shelf depth + maximum body depth/2)^2} + shelf thicknessshoulder height sitting + Square root {shoulder to handtip ^ 2-(desk depth-shelf depth + maximum body depth / 2) ^ 2} + shelf thickness
서있는 자세
(Standing)

Standing posture
(Standing)

상한선(Max)

Upper limit (Max)
= shoulder height standing + Square root {shoulder to handtip ^2 - (desk depth - shelf depth + maximum body depth/2)^2} + shelf thickness= shoulder height standing + Square root {shoulder to handtip ^ 2-(desk depth-shelf depth + maximum body depth / 2) ^ 2} + shelf thickness

eye height는 눈 높이를 의미한다. 일반적으로 책상에 사용하는 선반은 눈 높이보다 높다. 따라서 앉은 자세에서 눈 높이를 선반 높이의 하한값으로 정의한다. shoulder height sitting는 앉은 자세에서 어깨의 높이이다. shoulder height standing은 서있는 자세에서 어깨의 높이이다. desk depth는 책상 깊이이다. shelf depth는 선반의 깊이이다. shelf thickness는 선반 상판의 두께이다. 연산식 및 다른 변수는 전술한 정의에 따른다.eye height means eye height. The shelves used for desks are usually higher than the eye level. Therefore, the eye height in a sitting position is defined as the lower limit of the shelf height. shoulder height sitting is the height of the shoulder in a sitting position. shoulder height standing is the height of the shoulder in a standing position. desk depth is the desk depth. shelf depth is the depth of the shelf. shelf thickness is the thickness of the shelf top. The arithmetic expression and other variables follow the above definition.

도 10은 선반의 깊이 및 너비에 대한 가이드 정보를 결정하는 요소에 대한 예이다. 선반의 깊이는 사용자 방향의 선반 상판 끝에서 반대 방향 끝까지의 거리이다. 선반의 너비는 길이 방향에서 선반의 일반향 끝에서 반대 방향 끝까지의 거리이다. 도 10은 1단 선반(1st Shelf)와 2단 선반(2nd Shelf)로 구성되는 선반에 대한 예이다. 선반 깊이 및 너비에 대한 가이드 정보는 아래 표 5와 같이 결정될 수 있다. 도 10은 앉은 자세를 가정한다.10 is an example of an element for determining guide information on the depth and width of a shelf. The depth of the shelf is the distance from the end of the shelf top in the user direction to the opposite end. The width of the shelf is the distance from the lengthwise end of the shelf to the opposite end of the shelf. 10 is an example of a shelf composed of a 1st shelf (1st Shelf) and a 2nd shelf (2nd Shelf). Guide information on shelf depth and width can be determined as shown in Table 5 below. 10 assumes a sitting position.

항목Item 수식Equation



1단 선반




1-tier shelf

B

B
= Square root {shoulder to handtip ^2 - (shelf 1 height - shoulder height sitting )^2}= Square root {shoulder to handtip ^ 2-(shelf 1 height-shoulder height sitting) ^ 2}

최소 깊이(A)

Depth (A)
= Square root {shoulder to handtip ^2 - (shelf1 height - shoulder height sitting )^2}
- desk depth - maximum body depth /2 + shelf 1 depth
= Square root {shoulder to handtip ^ 2-(shelf1 height-shoulder height sitting) ^ 2}
-desk depth-maximum body depth / 2 + shelf 1 depth
너비
(reachable width 1st)
width
(reachable width 1st)
= Dist (left shoulder, right shoulder) + Square root {B ^2 - (desk depth - maximum body depth /2 + shelf1 depth )^2}= Dist (left shoulder, right shoulder) + Square root {B ^ 2-(desk depth-maximum body depth / 2 + shelf1 depth) ^ 2}




2단 선반




2-stage shelf

D

D
= Square root {shoulder to handtip ^2 - (shelf 2 height - shoulder height sitting )^2}= Square root {shoulder to handtip ^ 2-(shelf 2 height-shoulder height sitting) ^ 2}

최소 깊이(C)

Depth (C)
= Square root {shoulder to handtip ^2 - (shelf2 height - shoulder height sitting )^2}
- desk depth - maximum body depth /2 + shelf 2 depth
= Square root {shoulder to handtip ^ 2-(shelf2 height-shoulder height sitting) ^ 2}
-desk depth-maximum body depth / 2 + shelf 2 depth
너비
(reachable width 2nd)
width
(reachable width 2nd)
= Dist (left shoulder, right shoulder) + Square root { D ^2 - (desk depth - maximum body depth /2 + shelf 2 depth )^2}= Dist (left shoulder, right shoulder) + Square root {D ^ 2-(desk depth-maximum body depth / 2 + shelf 2 depth) ^ 2}

B는 어깨를 기준으로 손끝이 1단 선반에 닿는 거리를 의미한다. D는 어깨를 기준으로 손끝이 2단 선반에 닿는 거리를 의미한다. shelf 1 height는 1단 선반의 높이를 의미한다. self 1 depth는 1단 선반의 깊이를 의미한다. shelf 2 height는 2단 선반의 높이를 의미한다. self 2 depth는 2단 선반의 깊이를 의미한다. 나머지 연산식이나 변수는 전술한 설명에 따른다. 선반의 깊이는 앉은 자세에서 사용자의 손이 도달 가능한 거리를 고려하여 결정된다. 선반의 너비는 사용자의 손이 도달 가능한 거리를 고려하여 결정된다.B refers to the distance that the fingertip touches the first shelf with respect to the shoulder. D is the distance that the fingertip touches the 2nd shelf relative to the shoulder. shelf 1 height means the height of the 1st shelf. self 1 depth means the depth of the first stage shelf. shelf 2 height means the height of the 2nd shelf. self 2 depth means the depth of the 2-stage shelf. The remaining arithmetic expressions or variables follow the above description. The depth of the shelf is determined by considering the distance that the user's hand can reach in a sitting position. The width of the shelf is determined taking into account the distance the user's hand can reach.

도 11은 주변 장치에 대한 가이드 정보를 결정하는 요소에 대한 예이다. 도 11(A)는 모니터 위치에 대한 예이다. 모니터 위치는 눈으로부터 최소 30cm 떨어지는 것이 바람직하다. 모니터 위치는 눈이 위치한 수평선과 모니터의 하단의 각도를 기준으로 결정될 수 있다. 도 11(A)에 도시한 바와 같이 상기 수평선 기준으로 모니터 하단의 각도가 30도이면 가장 바람직하다. 상기 수평선 기준으로 모니터 하단의 각도가 45도이면 허용할 수 있는 범위이다. 따라서 모니터 위치는 눈과의 거리, 고정된 자세에서 시선 범위를 기준으로 결정될 수 있다. 도 11(B)는 키보드 위치에 대한 예이다. 키보드는 책상에서 손목이 위치하는 위치에 따라 결정된다. 일반적으로 선목의 지지 위치(Wrist rest)에서 7 ~ 10cm 정도 떨어지는 것이 바람직하다. 11 is an example of an element for determining guide information for a peripheral device. 11 (A) is an example of a monitor position. Preferably, the monitor position is at least 30 cm away from the eyes. The monitor position may be determined based on the horizontal line where the eye is located and the angle of the bottom of the monitor. As shown in FIG. 11 (A), it is most preferable if the angle of the bottom of the monitor is 30 degrees based on the horizontal line. If the angle of the bottom of the monitor is 45 degrees based on the horizontal line, it is an allowable range. Therefore, the monitor position can be determined based on the distance from the eye and the gaze range in a fixed posture. 11 (B) is an example of a keyboard position. The keyboard is determined by the position of the wrist on the desk. In general, it is desirable to fall about 7 to 10 cm from the support rest of the timber (Wrist rest).

도 12는 헤드 마운트 디스플레이 장치에 출력하는 화면에 대한 예이다. 도 12(A)는 사용자의 시선 관점(1인칭)에서 출력되는 화면에 대한 에이다. 도 12(A)는 선반의 레이아웃에 대한 가이드 정보를 출력하는 화면이다. 일반적으로 사용자는 도 12(A)와 같은 1인칭 시점으로 가구를 디지인하게 된다.12 is an example of a screen output to a head mounted display device. 12 (A) is a view of a screen output from the user's gaze point of view (first person). 12 (A) is a screen for outputting guide information for the layout of the shelf. In general, the user designs the furniture in the first person view as shown in FIG. 12 (A).

나아가 사용자는 디자인한 가구를 사용하는 사용자 본인을 3인칭 관점에서 살펴볼 수 있다. 도 12(B)는 3인칭 관점으로 가구를 사용하는 사용자를 나타내는 화면이다. 예컨대, 사용자가 가구를 디자인하는 중에 일정한 명령(음성 명령 등)을 입력하면, 1인칭 관점에서 3인칭 관점으로 화면이 전환될 수 있다. 이를 통해 사용자는 현재 디자인된 가구를 사용하는 사용자를 관찰할 수 있다. 이 화면에서 사용자의 자세에 대한 정보(등의 각도 등)를 출력할 수도 있다. Furthermore, the user can look at the user who uses the designed furniture from a third person perspective. 12 (B) is a screen showing a user who uses furniture from a third person perspective. For example, if a user inputs a certain command (voice command, etc.) while designing furniture, the screen may be switched from a first person perspective to a third person perspective. This allows the user to observe the user using the currently designed furniture. On this screen, information about the user's posture (such as the angle of the back) may be output.

또한, 상술한 바와 같은 헤드 마운트 디스플레이 장치를 이용한 가구 디자인 방법은 컴퓨터에서 실행될 수 있는 실행가능한 알고리즘을 포함하는 프로그램(또는 어플리케이션)으로 구현될 수 있다. 상기 프로그램은 비일시적 판독 가능 매체(non-transitory computer readable medium)에 저장되어 제공될 수 있다.In addition, the furniture design method using the head mounted display device as described above may be implemented as a program (or application) including executable algorithms that can be executed on a computer. The program may be stored and provided in a non-transitory computer readable medium.

비일시적 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, 상술한 다양한 어플리케이션 또는 프로그램들은 CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등과 같은 비일시적 판독 가능 매체에 저장되어 제공될 수 있다.The non-transitory readable medium means a medium that stores data semi-permanently and that can be read by a device, rather than a medium that stores data for a short time, such as registers, caches, and memory. Specifically, the various applications or programs described above may be stored and provided in a non-transitory readable medium such as a CD, DVD, hard disk, Blu-ray disk, USB, memory card, ROM, and the like.

본 실시례 및 본 명세서에 첨부된 도면은 전술한 기술에 포함되는 기술적 사상의 일부를 명확하게 나타내고 있는 것에 불과하며, 전술한 기술의 명세서 및 도면에 포함된 기술적 사상의 범위 내에서 당업자가 용이하게 유추할 수 있는 변형 예와 구체적인 실시례는 모두 전술한 기술의 권리범위에 포함되는 것이 자명하다고 할 것이다.The drawings attached to the present embodiment and the present specification merely represent a part of the technical spirit included in the above-described technology, and are easily understood by those skilled in the art within the scope of the technical spirit included in the above-described technical specification and drawings. It will be apparent that all examples and specific examples that can be inferred are included in the scope of the above-described technology.

50 : 자세 인식 장치
80 : 입력 장치
100 : 헤드 마운트 디스플레이 장치
110 : 통신장치
120 : 저장장치
130 : 센서장치
140 : 제어회로
150 : 출력장치
50: posture recognition device
80: input device
100: head mounted display device
110: communication device
120: storage device
130: sensor device
140: control circuit
150: output device

Claims (15)

디스플레이 장치가 사용자의 자세 정보를 획득하는 단계;
상기 디스플레이 장치가 화면에 가구 객체를 출력하는 단계;
상기 디스플레이 장치가 상기 화면에 상기 가구 객체를 구성하는 복수의 부위 중 적어도 하나의 부위에 대한 레이아웃(layout)을 추천하는 가이드 정보를 출력하는 단계; 및
상기 디스플레이 장치가 입력 명령에 따라 상기 적어도 하나의 부위에 대한 변경된 레이아웃을 출력하는 단계를 포함하되,
상기 자세 정보는 별도의 자세 인식 장치가 전달하는 복수의 신체 부위의 위치들을 포함하고,
상기 가이드 정보는 상기 복수의 신체 부위의 위치들로부터 추정되는 사용자 체형 및 사용자 자세에 따라 결정되는 정보이고,
상기 가이드 정보는 신체 자세, 신체 활동, 신체 여유 공간, 신체 접근성 및 가구에 배치되는 물건 이용 편리성 중 적어도 하나의 항목을 기준으로, 상기 적어도 하나의 부위에 대한 배치 위치 내지 크기에 대한 후보 위치 내지 가용 영역을 제공하는 가상의 화상 정보인 맞춤형 가이드 정보를 출력하는 디스플레이 장치를 이용한 가구 디자인 방법.
The display device obtaining user posture information;
The display device outputting a furniture object to a screen;
Outputting guide information for recommending a layout for at least one of a plurality of parts constituting the furniture object on the screen by the display device; And
The display device comprises the step of outputting the changed layout for the at least one site according to the input command,
The posture information includes positions of a plurality of body parts transmitted by separate posture recognition devices,
The guide information is information determined according to the user's body shape and the user's posture estimated from the positions of the plurality of body parts,
The guide information is based on at least one item of body posture, physical activity, free body space, physical accessibility, and convenience of using objects disposed in furniture, candidate positions for placement positions or sizes for the at least one site, or A furniture design method using a display device that outputs customized guide information, which is virtual image information providing an available area.
제1항에 있어서,
상기 자세 정보는 상기 디스플레이 장치를 착용한 사용자의 자세를 인식하는 상기 별도의 자세 인식 장치를 통해 획득되고, 네트워크를 통해 상기 디스플레이 장치에 전달되는 디스플레이 장치를 이용한 가구 디자인 방법.
According to claim 1,
The posture information is obtained through the separate posture recognition device that recognizes the posture of a user wearing the display device, and a furniture design method using a display device transmitted to the display device through a network.
제1항에 있어서,
상기 가이드 정보는 특정 신체 부위의 가용 범위를 고려하여 결정되는 맞춤형 가이드 정보를 출력하는 디스플레이 장치를 이용한 가구 디자인 방법.
According to claim 1,
The guide information is a furniture design method using a display device that outputs customized guide information determined in consideration of an available range of a specific body part.
제1항에 있어서,
상기 가이드 정보는 상기 자세 정보로 결정되는 사용자의 특정 신체 부위의 위치 및 상기 특정 신체 부위와 연결된 다른 신체 부위에 대한 정보를 기준으로 결정되는 맞춤형 가이드 정보를 출력하는 디스플레이 장치를 이용한 가구 디자인 방법.
According to claim 1,
The guide information is a furniture design method using a display device that outputs customized guide information determined based on a location of a specific body part of a user determined by the posture information and information about other body parts connected to the specific body part.
제1항에 있어서,
상기 가이드 정보는 상기 가구 객체에 배치되는 다른 물건의 배치 위치를 더 이용하여 결정되는 맞춤형 가이드 정보를 출력하는 디스플레이 장치를 이용한 가구 디자인 방법.
According to claim 1,
The guide information is a furniture design method using a display device that outputs customized guide information determined by further using a placement position of another object disposed on the furniture object.
제1항에 있어서,
상기 가이드 정보는 다른 가구 객체의 레이아웃에 따라 결정되는 상기 사용자의 특정 신체 부위의 위치를 더 이용하여 결정되는 맞춤형 가이드 정보를 출력하는 디스플레이 장치를 이용한 가구 디자인 방법.
According to claim 1,
The guide information is a furniture design method using a display device that outputs customized guide information determined by further using a location of a specific body part of the user determined according to the layout of other furniture objects.
제1항에 있어서,
상기 가이드 정보는
상기 가구 객체를 구성하는 복수의 부위 중 적어도 하나의 부위의 일방향 길이 내지 크기, 상기 자세 정보 중 고정된 위치를 갖는 신체 부위의 위치, 상기 자세 정보 중 변동되는 신체 부위의 위치 및 상기 자세 정보 중 변동되는 신체 부위의 각도 중 적어도 하나에 따라 결정되는 맞춤형 가이드 정보를 출력하는 디스플레이 장치를 이용한 가구 디자인 방법.
According to claim 1,
The guide information above
One-way length or size of at least one of the plurality of parts constituting the furniture object, a position of a body part having a fixed position among the posture information, a position of a body part that changes among the posture information, and a change among the posture information Furniture design method using a display device for outputting customized guide information determined according to at least one of the angle of the body part.
제1항에 있어서,
상기 디스플레이 장치는 VR(Virtual Reality) 장치 또는 AR(Augmented Reality) 장치인 맞춤형 가이드 정보를 출력하는 디스플레이 장치를 이용한 가구 디자인 방법.
According to claim 1,
The display device is a furniture design method using a display device that outputs customized guide information that is a virtual reality (VR) device or an augmented reality (AR) device.
제1항에 있어서,
상기 디스플레이 장치가 3인칭 시점으로 기 가구 객체를 사용하는 사용자 객체를 화면에 출력하는 단계를 더 포함하는 맞춤형 가이드 정보를 출력하는 디스플레이 장치를 이용한 가구 디자인 방법.
According to claim 1,
The display device is a furniture design method using a display device for outputting customized guide information further comprising the step of outputting a user object using a pre-furniture object to a screen in a third person view.
별도의 자세 인식 장치가 생성한 사용자의 자세 정보를 수신하는 통신 장치;
복수의 부위로 구성되는 가구 객체 및 상기 복수의 부위 중 적어도 하나의 부위에 대한 레이아웃(layout)을 추천하는 가이드 정보를 출력하는 디스플레이 장치;
가구 객체를 표현하는 데이터 및 상기 자세 정보에 따라 상기 가이드 정보를 결정하는 모델을 저장하는 저장 장치; 및
상기 데이터를 기준으로 상기 가구 객체를 출력하게 제어하고, 상기 적어도 하나의 부위에 대하여 상기 모델을 이용하여 상기 자세 정보에 맞는 상기 가이드 정보를 결정하고, 사용자의 입력 명령에 따라 상기 적어도 하나의 부위에 대한 변경된 레이아웃을 출력하도록 제어하는 연산 장치를 포함하되,
상기 자세 정보는 별도의 자세 인식 장치가 전달하는 복수의 신체 부위의 위치들을 포함하고,
상기 가이드 정보는 상기 복수의 신체 부위의 위치들로부터 추정되는 사용자 체형 및 사용자 자세에 따라 결정되는 정보이고,
상기 가이드 정보는 신체 자세, 신체 활동, 신체 여유 공간, 신체 접근성 및 가구에 배치되는 물건 이용 편리성 중 적어도 하나의 항목을 기준으로, 상기 적어도 하나의 부위에 대한 배치 위치 내지 크기에 대한 후보 위치 내지 가용 영역을 제공하는 가상의 화상 정보인 맞춤형 가이드 정보를 출력하는 가구 디자인 장치.
A communication device receiving posture information of a user generated by a separate posture recognition device;
A display device for outputting guide information recommending a layout for at least one of the plurality of parts and a furniture object composed of a plurality of parts;
A storage device for storing data representing furniture objects and a model for determining the guide information according to the posture information; And
The furniture object is controlled to be output based on the data, and the guide information suitable for the posture information is determined using the model for the at least one part, and the at least one part is determined according to a user's input command. It includes a computing device for controlling to output a modified layout for,
The posture information includes positions of a plurality of body parts transmitted by separate posture recognition devices,
The guide information is information determined according to a user's body shape and a user's posture estimated from locations of the plurality of body parts,
The guide information is based on at least one item of body posture, physical activity, free body space, physical accessibility, and convenience of using objects disposed in furniture, candidate positions for placement positions or sizes for the at least one site, or Furniture design device that outputs customized guide information, which is virtual image information that provides an available area.
제10항에 있어서,
상기 연산 장치는 특정 신체 부위의 가용 범위를 기준으로 상기 가이드 정보를 결정하는 맞춤형 가이드 정보를 출력하는 가구 디자인 장치.
The method of claim 10,
The computing device is a furniture design device that outputs customized guide information for determining the guide information based on an available range of a specific body part.
제10항에 있어서,
상기 연산 장치는 상기 자세 정보로 결정되는 사용자의 특정 신체 부위의 위치 및 상기 특정 신체 부위와 연결된 다른 신체 부위에 대한 정보를 기준으로 상기 가이드 정보를 결정하는 맞춤형 가이드 정보를 출력하는 가구 디자인 장치.
The method of claim 10,
The computing device outputs customized guide information for determining the guide information based on a location of a specific body part of the user determined by the posture information and information about other body parts connected to the specific body part.
제10항에 있어서,
상기 연산 장치는 상기 가구 객체에 배치되는 다른 물건의 배치 위치 및 상기 자세 정보로 결정되는 사용자의 특정 신체 부위의 위치를 기준으로 상기 가이드 정보를 결정하는 맞춤형 가이드 정보를 출력하는 가구 디자인 장치.
The method of claim 10,
The computing device outputs personalized guide information for determining the guide information based on a position of a specific body part of the user determined by the posture information and the placement position of another object disposed in the furniture object.
제10항에 있어서,
상기 연산 장치는 실시간으로 변하는 상기 자세 정보에 따라 상기 가이드 정보를 변경하도록 제어하는 맞춤형 가이드 정보를 출력하는 가구 디자인 장치.
The method of claim 10,
The computing device outputs customized guide information for controlling to change the guide information according to the posture information changing in real time.
디스플레이 장치가 사용자의 자세 정보를 획득하는 단계;
상기 디스플레이 장치가 화면에 특정 객체를 출력하는 단계;
상기 디스플레이 장치가 상기 화면에 상기 특정 객체를 구성하는 복수의 부위 중 적어도 하나의 부위에 대한 레이아웃(layout)을 추천하는 가이드 정보를 출력하는 단계; 및
상기 디스플레이 장치가 입력 명령에 따라 상기 적어도 하나의 부위에 대한 변경된 레이아웃을 출력하는 단계를 포함하되,
상기 자세 정보는 별도의 자세 인식 장치가 전달하는 복수의 신체 부위의 위치들을 포함하고,
상기 가이드 정보는 상기 복수의 신체 부위의 위치들로부터 추정되는 사용자 체형 및 사용자 자세에 따라 결정되는 정보이고,
상기 가이드 정보는 신체 자세, 신체 활동, 신체 여유 공간, 신체 접근성 및 가구에 배치되는 물건 이용 편리성 중 적어도 하나의 항목을 기준으로, 상기 적어도 하나의 부위에 대한 배치 위치 내지 크기에 대한 후보 위치 내지 가용 영역을 제공하는 가상의 화상 정보인 맞춤형 가이드 정보를 출력하는 디스플레이 장치를 이용한 가구 디자인 방법.
The display device obtaining user posture information;
Outputting a specific object on the screen by the display device;
Outputting guide information recommending a layout for at least one of a plurality of parts constituting the specific object on the screen by the display device; And
The display device comprises the step of outputting the changed layout for the at least one site according to the input command,
The posture information includes positions of a plurality of body parts transmitted by separate posture recognition devices,
The guide information is information determined according to a user's body shape and a user's posture estimated from locations of the plurality of body parts,
The guide information is based on at least one item of body posture, physical activity, free body space, physical accessibility, and convenience of using objects disposed in furniture, candidate positions for placement positions or sizes for the at least one site, or A furniture design method using a display device that outputs customized guide information, which is virtual image information providing an available area.
KR1020180002957A 2018-01-09 2018-01-09 Furniture design apparatus displaying personalized guide information KR102092374B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180002957A KR102092374B1 (en) 2018-01-09 2018-01-09 Furniture design apparatus displaying personalized guide information

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180002957A KR102092374B1 (en) 2018-01-09 2018-01-09 Furniture design apparatus displaying personalized guide information

Publications (2)

Publication Number Publication Date
KR20190084803A KR20190084803A (en) 2019-07-17
KR102092374B1 true KR102092374B1 (en) 2020-03-23

Family

ID=67512646

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180002957A KR102092374B1 (en) 2018-01-09 2018-01-09 Furniture design apparatus displaying personalized guide information

Country Status (1)

Country Link
KR (1) KR102092374B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022019546A1 (en) * 2020-07-23 2022-01-27 삼성전자주식회사 Method and electronic device for generating partial virtual models of objects

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003203252A (en) 2001-10-26 2003-07-18 Canon Inc Image display device and its method and storage medium
JP2006252468A (en) 2005-03-14 2006-09-21 Canon Inc Image processing method and image processing system
JP2009123018A (en) * 2007-11-15 2009-06-04 Canon Inc Image processor and image processing method
JP2014109802A (en) * 2012-11-30 2014-06-12 Casio Comput Co Ltd Image processor, image processing method and program

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120044461A (en) 2010-10-28 2012-05-08 (주)브이엔에스텍 The simulated training apparatus and method using mixed reality

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003203252A (en) 2001-10-26 2003-07-18 Canon Inc Image display device and its method and storage medium
JP2006252468A (en) 2005-03-14 2006-09-21 Canon Inc Image processing method and image processing system
JP2009123018A (en) * 2007-11-15 2009-06-04 Canon Inc Image processor and image processing method
JP2014109802A (en) * 2012-11-30 2014-06-12 Casio Comput Co Ltd Image processor, image processing method and program

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022019546A1 (en) * 2020-07-23 2022-01-27 삼성전자주식회사 Method and electronic device for generating partial virtual models of objects

Also Published As

Publication number Publication date
KR20190084803A (en) 2019-07-17

Similar Documents

Publication Publication Date Title
US11366512B2 (en) Systems and methods for operating an input device in an augmented/virtual reality environment
US11487353B2 (en) Systems and methods for configuring a hub-centric virtual/augmented reality environment
CN109564472B (en) Method, medium, and system for selecting an interaction method with a virtual object
EP3599532B1 (en) A system for importing user interface devices into virtual/augmented reality
Ren et al. 3D selection with freehand gesture
Panger Kinect in the kitchen: testing depth camera interactions in practical home environments
US9857868B2 (en) Method and system for ergonomic touch-free interface
Xu et al. DMove: Directional motion-based interaction for augmented reality head-mounted displays
Simeone et al. Feet movement in desktop 3D interaction
EP3549127B1 (en) A system for importing user interface devices into virtual/augmented reality
Lee et al. Posing and acting as input for personalizing furniture
IL176182A0 (en) Control apparatus for use with a computer or video game
US20160205352A1 (en) Method for providing telepresence using avatars, and system and computer-readable recording medium using the same
Bernardos et al. A comparison of head pose and deictic pointing interaction methods for smart environments
Wu et al. Activeergo: Automatic and personalized ergonomics using self-actuating furniture
WO2021092191A1 (en) Smart mirror and table top devices with sensor fusion of camera vision, acoustic, and multi-point capacitive touch control
Liang et al. Functional workspace optimization via learning personal preferences from virtual experiences
Lee et al. Interactive and situated guidelines to help users design a personal desk that fits their bodies
Menzner et al. Above surface interaction for multiscale navigation in mobile virtual reality
US20220253808A1 (en) Virtual environment
KR102092374B1 (en) Furniture design apparatus displaying personalized guide information
Lai et al. The cognitive load and usability of three walking metaphors for consumer virtual reality
Joshi et al. An instrumented office chair with a steerable projector for personal spatial augmented reality
Ang et al. Put down the controller, enable “walking” in a virtual reality (vr) environment: A review
KR20220111383A (en) Smart mirror apparatus for providing augmented reality service and operating method thereof

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant