KR102168223B1 - 기초 구조물에 3차원 입체 디자인을 합성한 이미지를 포함하는 건축 정보를 제공하는 방법 및 그 시스템 - Google Patents

기초 구조물에 3차원 입체 디자인을 합성한 이미지를 포함하는 건축 정보를 제공하는 방법 및 그 시스템 Download PDF

Info

Publication number
KR102168223B1
KR102168223B1 KR1020200089352A KR20200089352A KR102168223B1 KR 102168223 B1 KR102168223 B1 KR 102168223B1 KR 1020200089352 A KR1020200089352 A KR 1020200089352A KR 20200089352 A KR20200089352 A KR 20200089352A KR 102168223 B1 KR102168223 B1 KR 102168223B1
Authority
KR
South Korea
Prior art keywords
information
architectural design
user device
basic image
image information
Prior art date
Application number
KR1020200089352A
Other languages
English (en)
Inventor
어상규
Original Assignee
어상규
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 어상규 filed Critical 어상규
Priority to KR1020200089352A priority Critical patent/KR102168223B1/ko
Application granted granted Critical
Publication of KR102168223B1 publication Critical patent/KR102168223B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/04—Indexing scheme for image data processing or generation, in general involving 3D image data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20084—Artificial neural networks [ANN]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/20—Indexing scheme for editing of 3D models
    • G06T2219/2004—Aligning objects, relative positioning of parts

Abstract

본 발명은 건축 정보를 제공하는 방법 및 단말에 관한 것으로서, 구체적으로, 기초 구조물에 3차원 입체 디자인을 합성한 이미지를 포함하는 건축 정보를 제공하는 방법 및 그 시스템에 관한 것이다.

Description

기초 구조물에 3차원 입체 디자인을 합성한 이미지를 포함하는 건축 정보를 제공하는 방법 및 그 시스템{METHOD AND SYSTEM FOR PROVIDING ARCHITECTURAL INFORMATION INCLUDING IMAGES OF 3D DESIGN SYNTHESIZED ON BASIC STRUCTURE}
본 발명은 건축 정보를 제공하는 방법 및 단말에 관한 것으로서, 구체적으로, 기초 구조물에 3차원 입체 디자인을 합성한 이미지를 포함하는 건축 정보를 제공하는 방법 및 그 시스템에 관한 것이다.
또한 본 발명은 기초 구조물에 3차원 입체 디자인을 합성한 이미지를 포함하는 건축 정보를 제공하는 방법에 인공지능(artificial intelligence), 가상/증강현실(VR, AR), 사물인터넷(IoT, internet-of-things) 등의 4차 산업을 접목시킨 기술에 관한 것이다.
최근 단말을 통하여 많은 정보가 사용자에게 제공되는 기술들이 개발되고 있다.
이와 관련하여, 현실 정보에 기반하여 생성된 2차원(2D), 3차원(3D) 정보들이 다양한 컨텐츠로서 제공되고 있다. 이와 관련된 무료/유료 서비스들이 인터넷 및/또는 어플리케이션들을 통하여 제공되고 있다.
이에 본 발명은 건축 정보를 제공하는 효율적인 방법 및 단말로서, 기초 구조물에 3차원 입체 디자인을 합성한 이미지를 포함하는 건축 정보를 제공하는 방법 및 그 시스템을 제안하려고 한다.
또한 본 발명은, 전술한 바와 같이, 기초 구조물에 3차원 입체 디자인을 합성한 이미지를 포함하는 건축 정보를 제공하는 방법에 인공지능(artificial intelligence), 가상/증강현실(VR, AR), 사물인터넷(IoT) 등의 4차 산업을 접목시킨 기술에 관한 것이다.
현재, 디지털기술과 정보통신기술(ICT, information and communication technology)의 융합에 의한 제4차 산업 혁명이 눈앞에 전개되고 있다. 4차 산업혁명은 사물인터넷(IoT), 로봇공학, 가상현실(VR) 및 인공지능(AI)과 같은 혁신적인 기술이 우리가 살고 일하는 방식을 변화시키는 현재 및 미래를 의미한다. 디지털 혁명(Digital Revolution)이라고 하는 3차 산업혁명이 일으킨 컴퓨터와 정보기술(IT)의 발전이 계속 이루어지고 있는 형태이지만 발전의 폭발성과 파괴성 때문에 3차 산업 혁명이 계속된다고 하기 보다 새로운 시대로 여겨진다.
현재 진행되고 있는 제4차 산업혁명의 특징은 디지털, 바이오, 오프라인 등의 각 기술의 융합으로 각종 정보 및 데이터의 생성과 수집 기술, 수집된 각종 정보 및 데이터의 분류 및 분석, 이러한 분석을 통하여 반복 학습에 의한 최적의 목표값(새로운 SW)을 도출하고 있다. 이러한 제4차 산업혁명과 관련된 기술들은 우선 인공지능(Artificial Intelligence: AI)이 핵심으로 부상하고 있고, 그 외에 빅데이터(Big data), 사물인터넷(loT), 블록체인(Block chain) 등이 있다. 이들의 기술들은 단독으로 또는 융합된 기술사상으로 컴퓨터, 인터넷, 모바일, 로봇 등 다양한 산업분야에 적용됨으로써 인간이 상상할 수 없을 정도의 비약적인 사회 변화와 산업발전을 촉진하고 있다.
세계 각국에서는 제4차 산업혁명이 일어나면서 한 시대를 지배하던 패러다임이 완전히 사라지고 상호 간 보완과 경쟁 관계에 있던 패러다임이 새로운 패러다임으로 자리를 대신하고 있다. 제4차 산업혁명은 현실세계에서 데이터를 수집하여(데이터 확보), 가상세계에서 이를 분석하여 지식을 추출하고(데이터분석), 이를 다시 현실세계에 활용(현실에 적용)하는 가치창출 방식에 주목하면서, 종전의 정보통신기술(ICT)을 넘어서는 다양한 SW분야로서 AI, 빅데이터, IoT, 블록체인, 클라우드 컴퓨팅, 모바일 등에 관한 지능정보기술의 개발이 진행되고 있다. 특히 제4차 산업혁명의 중심지표는 기술적으로 발전한 각종 기술들이 상호 간 융합하면편서 컴퓨터의 소프트웨어(SW)를 기반으로 한 AI가 가장 중요한 지위에 있다.
이러한 컴퓨터와 정보통신기술(ICT)의 융합현상은 모든 사물 및 다양한 빅데이터가 네트워크를 통해 상호연결 및 결합(융합)되는 IoT 및 블록체인, 그리고 이들의 기술 경계를 넘어 혁신과 기업의경계가 무너지는 산업현장에서 뚜렷한 현상이 나타나고 있다. 각국 4차 산업혁명의 특징은 초연결 사회, 융합, 탈경계라는 목표를 가지고 컴퓨터와 정보통신기술(ICT)의 발전에 의해 인간과 인간, 사물과 사물, 인간과 사물이 상호 간에 연결된 초연결사회(hyper-connected society)를 형성하고, 이로 인하여 산업 경계가 없어지는 사회 융합이 이루어지는 새로운 기술적 혁명을 일으키고 있다. 제4차 산업혁명 시대는 컴퓨터, 스마트폰, SNS, 모바일 등으로 소통하던 과거의 정보화사회와 달리, AI와 빅데이터, IoT, 블록체인 등으로 융합된 네트워크를 구축함으로서 초연결사회가 형성되고, 이러한 초연결사회에서는 오프라인과 온라인의 융합을 통해 가치혁신산업으로서의 신사업 및 신상품 등 그동안 생각하지 못한 새로운 성장과 혁신, 가치창출을 달성하고 있다.
앞으로는 수십억 인구가 모바일 기기로 연결되어 거대용량의 데이터 및 정보의 수집과 저장이 가능하고, 그 수집된 데이터와 정보는 인간의 지식과 유사한 인공신경망의 딥러닝 기술로 초연결성을 가지게 됨으로써 AI와 빅데이터의 결합 기술, AI와 IoT의 결합 기술, AI와 빅데이터 및 IoT의 복합결합기술의 발전으로 제조, 유통, 의료, 교육, 금융, 영화 등 다양한 분야에서 지능적이고 혁신적인 변화가 일어나고 있다. 즉, 제4차 산업혁명 관련기술의 융합 및 응용으로 기존의 인터넷과 모바일 발전에 의한 산업성장보다 획기적이고 진보된 지능정보사회로 변화하고 있다.
국내공개특허공보 10-2013-0101622 (공개일자: 2013년09월16일)
본 발명의 일 실시예는 건축 정보를 제공하는 방법 및 단말을 제공하는데 그 목적이 있다.
또한, 본 발명의 일 실시예는 사용자에게 건축 디자인에 대한 정보를 효율적으로 제공하는데 그 목적이 있다.
본 발명에서 얻을 수 있는 효과는 이상에서 언급한 효과들로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
본 발명의 일 실시예는 기초 구조물에 3차원 입체 디자인을 합성한 이미지를 사용자에게 제공하는 시스템에 있어서, 상기 기초 구조물을 촬영함으로써 제1 기초 이미지 정보를 획득하고 제1 건축 디자인 정보를 출력(output)하는 사용자 장치; 및 상기 제1 기초 이미지 정보에 기반하여 상기 제1 건축 디자인 정보를 생성하여 상기 사용자 장치에게 전달하는 서버; 를 포함하고, 상기 서버는, 상기 제1 기초 이미지 정보에 HOG(Histogram of Oriented Gradient), Haar-like feature, Co-occurrence HOG, LBP(local binary pattern) 및 FAST(features from accelerated segment test) 중 적어도 어느 하나에 기반하는 객체 추출 알고리즘을 적용함으로써 객체 정보를 획득하고, 상기 객체 정보에 기반하여 상기 제1 건축 디자인 정보를 생성하고, 상기 제1 건축 디자인 정보는 상기 제1 기초 구조물에 추천 건축 디자인에 상응하는 3차원 이미지가 합성되는 증강 현실 이미지(Augmented Reality image)를 포함하는 것을 특징으로 하는 시스템을 제안한다.
상기 서버는, 복수의 제2 기초 이미지 정보와 상기 제2 복수의 기초 이미지 정보 각각에 매칭되는 복수의 제2 건축 디자인 정보를 학습데이터로 설정하여 인공신경망을 학습시키고, 상기 학습된 인공신경망에 상기 제1 기초 이미지 정보 또는 상기 제1 객체 정보를 입력함으로써, 상기 제1 건축 디자인 정보를 상기 학습된 인공신경망으로부터 획득하는 것을 특징으로 하고, 상기 복수의 제2 기초 이미지 정보는 상기 제1 기초 이미지 정보보다 이전에 생성된 정보이고, 상기 복수의 제2 건축 디자인 정보 각각은 상기 복수의 제2 기초 이미지 정보 각각에 기반하여 생성된 것일 수 있다.
또한 본 발명의 일 실시예는 기초 구조물에 3차원 입체 디자인을 합성한 이미지를 사용자에게 제공하는 제1 사용자 장치에 있어서, 상기 기초 구조물을 촬영함으로써 복수의 사진 및 복수의 영상 중 적어도 어느 하나를 획득하는 입력 모듈; 복수의 사진 및 복수의 영상 중 적어도 어느 하나에 기반하여 제1 기초 이미지 정보를 획득하고, 상기 제1 기초 이미지 정보로부터 제1 객체 정보 및 벡터 정보를 획득하고, 상기 제1 객체 정보 및 벡터 정보로부터 제1 건축 디자인 정보를 생성하는 제어 모듈; 상기 제1 건축 디자인 정보를 출력(output)하는 출력 모듈; 및 상기 입력 모듈, 상기 제어 모듈 및 상기 출력 모듈에 공급하기 위한 전력을 충전하는 내부 배터리; 를 포함하는 제1 사용자 장치를 제안한다.
상기 제어 모듈은, 상기 제1 기초 이미지 정보에 HOG(Histogram of Oriented Gradient), Haar-like feature, Co-occurrence HOG, LBP(local binary pattern) 및 FAST(features from accelerated segment test) 중 적어도 어느 하나에 기반하는 객체 추출 알고리즘을 적용함으로써 상기 제1 객체 정보를 획득하고, 상기 제1 건축 디자인 정보는 상기 기초 구조물에 추천 건축 디자인에 상응하는 3차원 이미지가 합성되는 증강 현실 이미지(Augmented Reality image)를 포함하는 것을 특징으로 하고, 상기 제어 모듈은, 복수의 제2 기초 이미지 정보와 상기 제2 복수의 기초 이미지 정보 각각에 매칭되는 복수의 제2 건축 디자인 정보를 학습데이터로 설정하여 인공신경망을 학습시키고, 상기 학습된 인공신경망에 상기 제1 기초 이미지 정보 또는 상기 제1 객체 정보를 입력함으로써, 상기 제1 건축 디자인 정보를 상기 학습된 인공신경망으로부터 획득하는 것을 특징으로 할 수 있다.
상기 복수의 제2 기초 이미지 정보는 상기 제1 기초 이미지 정보보다 이전에 생성된 정보이고, 상기 복수의 제2 건축 디자인 정보 각각은 상기 복수의 제2 기초 이미지 정보 각각에 기반하여 생성된 것일 수 있다.
본 발명의 일 실시예는, 사용자 장치가 건축 디자인 정보를 제공하는 방법에 있어서, 상기 사용자 장치가, 건물에 대한 기초 이미지 정보를 획득하는 단계; 및 상기 사용자 장치가, 상기 획득된 기초 이미지 정보에 기반하여 상기 건축 디자인 정보를 제공하는 단계를 포함하고, 상기 건축 디자인 정보는, 상기 건물에 기반하여 설계되는 건축 디자인을 나타내는 정보를 포함하는, 방법을 제안한다.
상기 건축 디자인 정보는, 복수의 후보 건축 디자인을 나타내는 정보를 포함할 수 있다.
상기 방법은, 상기 사용자 장치가, 상기 복수의 후보 건축 디자인을 나타내는 정보를 상기 사용자 장치의 디스플레이를 통하여 표시하는 단계; 상기 사용자 장치가, 상기 복수의 후보 건축 디자인 중에서 하나의 후보 건축 디자인에 대한 선택을 상기 디스플레이를 통하여 입력받는 단계; 및 상기 사용자 장치가, 상기 선택된 하나의 후보 건축 디자인을 나타내는 정보를 상기 디스플레이를 통하여 표시하는 단계; 를 더 포함할 수 있다.
상기 방법은, 상기 사용자 장치가, 상기 건물에 대한 기초 이미지 정보를 서버에게 송신하는 단계; 상기 사용자 장치가, 상기 건축 디자인 정보를 상기 서버로부터 수신하는 단계; 및 상기 사용자 장치가, 상기 수신된 건축 디자인 정보를 상기 사용자 장치의 디스플레이를 통하여 표시하는 단계; 를 더 포함할 수 있다.
상기 건축 디자인 정보는 상기 서버에 의해 빅데이터 분석을 통하여 생성될 수 있다.
상기 방법은, 상기 사용자 장치가, 사용자 정보를 획득하는 단계; 상기 사용자 장치가, 상기 획득된 사용자 정보에 기반하여 생성된 적어도 하나의 추천 후보 건축 디자인을 나타내는 정보를 상기 서버로부터 수신하는 단계; 및 상기 사용자 장치가, 상기 적어도 하나의 추천 후보 건축 디자인을 나타내는 정보를 상기 사용자 장치의 디스플레이를 통하여 표시하는 단계; 를 더 포함할 수 있다.
상기 건축 디자인 정보는, 상기 획득된 사용자 정보에 따라 상이한 정보를 포함할 수 있다.
상기 사용자 정보는, 결제 정보 및 회원권 정보 중 적어도 하나를 포함할 수 있다.
상기 방법은, 건축과 관련되는 정부 정책을 나타내는 정책 정보가 상기 서버에 의해 수신되고, 상기 건축 디자인 정보는, 상기 정책 정보 및 상기 건물의 위치를 나타내는 위치 정보에 기반하여 결정되고, 상기 사용자 장치가, 상기 정책 정보 및 상기 위치 정보에 기반하여 결정된 건축 디자인 정보를 상기 서버로부터 수신하는 단계; 및 상기 정책 정보 및 상기 위치 정보에 기반하여 결정된 건축 디자인 정보이 선택되었음을 나타내는 정보를 상기 서버에게 전송하는 단계; 를 더 포함하고, 상기 정책 정보는 상기 건물과 인접 건물 사이의 관계를 나타내는 정보를 포함할 수 있다.
상기 방법은, 상기 사용자 장치가, 상기 건물에 대한 영상 정보 또는 상기 건물에 대한 실측 정보를 통하여 상기 건물에 대한 기초 이미지 정보를 획득하는 단계; 를 더 포함할 수 있다.
상기 방법은, 상기 사용자 장치가, 상기 기초 이미지 정보를 다른 사용자 장치에게 송신하는 단계; 상기 사용자 장치가, 적어도 하나의 후보 건축 디자인을 나타내는 정보를 포함하는 상기 건축 디자인 정보를 상기 다른 사용자 장치로부터 수신하는 단계; 및 상기 사용자 장치가, 상기 적어도 하나의 후보 건축 디자인을 나타내는 정보를 상기 사용자 장치의 디스플레이를 통하여 제공하는 단계; 를 더 포함할 수 있다.
상기 적어도 하나의 후보 건축 디자인을 나타내는 정보는 상기 다른 사용자 장치에 의해 획득될 수 있다.
또한, 본 개시의 일 실시예는, 건물에 대한 기초 이미지 정보를 획득하는 제어부; 상기 획득된 기초 이미지 정보에 기반하여 건축 디자인 정보를 제공하는 디스플레이부; 를 포함하고, 상기 건축 디자인 정보는, 상기 건물에 기반하여 설계되는 건축 디자인을 나타내는 정보를 포함하는, 사용자 장치를 제안한다.
또한, 본 발명의 일 실시예는, 신호를 송수신하는 서버; 및 건물에 대한 기초 이미지 정보를 획득하고, 상기 획득된 기초 이미지 정보를 상기 서버에게 송신하고, 상기 서버로부터 건축 디자인 정보를 수신하고, 상기 수신된 건축 디자인 정보를 디스플레이를 통하여 제공하는 사용자 장치; 를 포함하는, 시스템을 제안한다.
본 발명의 일 실시예는 건축 정보를 제공하는 효율적인 방법 및 개선된(enhanced) 사용자 장치를 제공할 수 있으며, 사용자는 본 발명을 통하여 간편하게 건축 디자인을 제공받을 수 있다.
또한, 본 발명의 일 실시예를 통하여 시공을 하지 않고도 완성된 건물의 예측도를 획득하여 시간/비용을 절역할 수 있다는 측면에서 기술적인 효과가 있다.
본 발명에서 얻을 수 있는 효과는 이상에서 언급한 효과들로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
본 발명의 특정한 바람직한 실시예들의 상기에서 설명한 바와 같은 또한 다른 측면들과, 특징들 및 이득들은 첨부 도면들과 함께 처리되는 하기의 설명으로부터 보다 명백하게 될 것이다.
도 1은 본 발명의 일 실시예에 따른 건축 정보를 제공하는 방법을 나타내는 흐름도이다.
도 2a 내지 도 2c는 본 발명의 일 실시예에 따른 건축 정보가 사용자에게 제공되는 모습을 나타내는 도면이다.
도 3은 본 발명의 일 실시예에 따른 건축 정보를 제공하는 방법을 나타내는 흐름도이다.
도 4는 본 발명의 일 실시예에 따른 시스템을 나타내는 블록도이다.
상기 도면들을 통해, 유사 참조 번호들은 동일한 혹은 유사한 엘리먼트들과, 특징들 및 구조들을 도시하기 위해 사용된다는 것에 유의해야만 한다.
이하, 본 발명의 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.
실시예를 설명함에 있어서 본 발명이 속하는 기술 분야에 익히 알려져 있고 본 발명과 직접적으로 관련이 없는 기술 내용에 대해서는 설명을 생략한다. 이는 불필요한 설명을 생략함으로써 본 발명의 요지를 흐리지 않고 더욱 명확히 전달하기 위함이다.
마찬가지 이유로 첨부 도면에 있어서 일부 구성요소는 과장되거나 생략되거나 개략적으로 도시되었다. 또한, 각 구성요소의 크기는 실제 크기를 전적으로 반영하는 것이 아니다. 각 도면에서 동일한 또는 대응하는 구성요소에는 동일한 참조 번호를 부여하였다.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시 예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시 예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시 예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.
이때, 처리 흐름도 도면들의 각 블록과 흐름도 도면들의 조합들은 컴퓨터 프로그램 인스트럭션들에 의해 수행될 수 있음을 이해할 수 있을 것이다. 이들 컴퓨터 프로그램 인스트럭션들은 범용 컴퓨터, 특수용 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서에 탑재될 수 있으므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서를 통해 수행되는 그 인스트럭션들이 흐름도 블록(들)에서 설명된 기능들을 수행하는 수단을 생성하게 된다. 이들 컴퓨터 프로그램 인스트럭션들은 특정 방식으로 기능을 구현하기 위해 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 지향할 수 있는 컴퓨터 이용 가능 또는 컴퓨터 판독 가능 메모리에 저장되는 것도 가능하므로, 그 컴퓨터 이용가능 또는 컴퓨터 판독 가능 메모리에 저장된 인스트럭션들은 흐름도 블록(들)에서 설명된 기능을 수행하는 인스트럭션 수단을 내포하는 제조 품목을 생산하는 것도 가능하다. 컴퓨터 프로그램 인스트럭션들은 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에 탑재되는 것도 가능하므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에서 일련의 동작 단계들이 수행되어 컴퓨터로 실행되는 프로세스를 생성해서 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 수행하는 인스트럭션들은 흐름도 블록(들)에서 설명된 기능들을 실행하기 위한 단계들을 제공하는 것도 가능하다.
또한, 각 블록은 특정된 논리적 기능(들)을 실행하기 위한 하나 이상의 실행 가능한 인스트럭션들을 포함하는 모듈, 세그먼트 또는 코드의 일부를 나타낼 수 있다. 또, 몇 가지 대체 실행 예들에서는 블록들에서 언급된 기능들이 순서를 벗어나서 발생하는 것도 가능함을 주목해야 한다. 예컨대, 잇달아 도시되어 있는 두 개의 블록들은 사실 실질적으로 동시에 수행되는 것도 가능하고 또는 그 블록들이 때때로 해당하는 기능에 따라 역순으로 수행되는 것도 가능하다.
이 때, 본 실시 예에서 사용되는 '~부'라는 용어는 소프트웨어 또는 FPGA(field-Programmable Gate Array) 또는 ASIC(Application Specific Integrated Circuit)과 같은 하드웨어 구성요소를 의미하며, '~부'는 어떤 역할들을 수행한다. 그렇지만 '~부'는 소프트웨어 또는 하드웨어에 한정되는 의미는 아니다. '~부'는 어드레싱할 수 있는 저장 매체에 있도록 구성될 수도 있고 하나 또는 그 이상의 프로세서들을 재생시키도록 구성될 수도 있다. 따라서, 일 예로서 '~부'는 소프트웨어 구성요소들, 객체지향 소프트웨어 구성요소들, 클래스 구성요소들 및 태스크 구성요소들과 같은 구성요소들과, 프로세스들, 함수들, 속성들, 프로시저들, 서브루틴들, 프로그램 코드의 세그먼트들, 드라이버들, 펌웨어, 마이크로코드, 회로, 데이터, 데이터베이스, 데이터 구조들, 테이블들, 어레이들, 및 변수들을 포함한다. 구성요소들과 '~부'들 안에서 제공되는 기능은 더 작은 수의 구성요소들 및 '~부'들로 결합되거나 추가적인 구성요소들과 '~부'들로 더 분리될 수 있다. 뿐만 아니라, 구성요소들 및 '~부'들은 디바이스 또는 보안 멀티미디어카드 내의 하나 또는 그 이상의 CPU들을 재생시키도록 구현될 수도 있다.
본 발명의 실시예들을 구체적으로 설명함에 있어서, 특정 시스템의 예를 주된 대상으로 할 것이지만, 본 명세서에서 청구하고자 하는 주요한 요지는 유사한 기술적 배경을 가지는 여타의 통신 시스템 및 서비스에도 본 명세서에 개시된 범위를 크게 벗어나지 아니하는 범위에서 적용 가능하며, 이는 당해 기술분야에서 숙련된 기술적 지식을 가진 자의 판단으로 가능할 것이다.
본 발명의 일 실시예에 따라 기초 구조물(10)을 촬영함으로써 기초 이미지 정보를 획득하고 건축 정보(또는 건축 디자인 정보)를 표시(display) 및/또는 출력(output)하는 사용자 장치(200)는 단말, 사용자 단말, 휴대용 단말, 스마트폰 등으로 대체될 수 있다.
또한 본 발명의 일 실시예에 따른 사용자 장치(200)는 기초 구조물을 촬영하여 기초 이미지 정보를 생성하고, 상기 기초 이미지 정보로부터 객체 정보 및/또는 벡터 정보를 추출하고, 상기 기초 이미지 정보, 객체 정보 및/또는 벡터 정보에 기반하여 건축 디자인 정보를 생성함으로써 디스플레이를 통하여 표시 및/또는 출력하는 독자적인 및/또는 독립적인 장치일 수도 있다. 따라서 이하 객체 정보, 벡터 정보, 건축 디자인 정보와 관련하여 서버에 의해 수행된다고 설명되는 내용은 상기 사용자 장치(200)에 의해 수행될 수도 있다.
기초 이미지 정보는 사용자가 하나의 사용자 장치(200)를 이용하여 복수의 장소(및/또는 복수의 각도/방향)에서 촬영한 사진 및/또는 영상에 기반하여 생성되거나, 및/또는 복수의 사용자 장치를 이용하여 복수의 장소(및/또는 복수의 각도/방향)에서 촬영한 사진 및/또는 영상을 결합함으로써 생성될 수도 있다.
본 발명의 일 실시예는 기초 구조물에 3차원 입체 디자인을 합성한 이미지를 사용자에게 제공하는 시스템(100)에 있어서, 상기 기초 구조물을 촬영함으로써 제1 기초 이미지 정보를 획득하고 제1 건축 디자인 정보를 출력(output)하는 사용자 장치(200)와 상기 제1 기초 이미지 정보에 기반하여 상기 제1 건축 디자인 정보를 생성하여 상기 사용자 장치(200)에게 전달하는 서버(500)를 포함하는 시스템(100)을 제안한다.
기초 구조물은 콘크리트 구조물, 목재, 목조 구조물, 뼈대, 기둥 등을 포함할 수 있다.
기초 이미지 정보는 상기 기초 구조물을 촬영한 영상, 또는 상기 영상에 기반하여 생성되는 2D 이미지 및/또는 3D 이미지를 포함할 수 있다.
건축 디자인 정보는 기초 구조물(건물)의 외관에 추가되는 외형(또는 디자인)에 대한 정보, 상기 기초 구조물(건물)에 증축(또는 증설)되는 적어도 하나의 건축 자재에 대한 정보 등을 포함할 수 있으며, 이와 관련되는 이미지, 2D 설계 도면, 3D 설계 도면, 건축 디자인에 대한 입체 영상, 증강 현실(AR, Augmented Reality) 이미지, 가상 현실(VR, Virtual Reality) 이미지 등을 포함할 수 있다.
상기 서버(500)는 상기 제1 기초 이미지 정보에 HOG(Histogram of Oriented Gradient), Haar-like feature, Co-occurrence HOG, LBP(local binary pattern) 및 FAST(features from accelerated segment test) 중 적어도 어느 하나에 기반하는 객체 추출 알고리즘을 적용함으로써 객체 정보를 획득하고, 상기 객체 정보에 기반하여 상기 제1 건축 디자인 정보를 생성하고, 상기 제1 건축 디자인 정보는 상기 제1 기초 구조물에 추천 건축 디자인에 상응하는 3차원 이미지가 합성되는 증강 현실(AR, Augmented Reality) 이미지를 포함하는 것을 특징으로 할 수 있다.
상기 서버(500)는 복수의 제2 기초 이미지 정보와 상기 제2 복수의 기초 이미지 정보 각각에 매칭되는 복수의 제2 건축 디자인 정보를 학습데이터로 설정하여 제1 인공신경망을 학습시킴으로써, 학습된 제1 인공신경망을 구비할 수 있다.
또한 상기 서버(500)는 상기 학습된 인공신경망에 상기 제1 기초 이미지 정보 또는 상기 제1 객체 정보를 입력함으로써, 상기 제1 건축 디자인 정보를 상기 학습된 제1 인공신경망으로부터 획득하는 것을 특징으로 할 수 있다. 이때 복수의 제2 기초 이미지 정보는 상기 제1 기초 이미지 정보보다 이전에 생성된 정보이고, 복수의 제2 건축 디자인 정보 각각은 상기 복수의 제2 기초 이미지 정보 각각에 기반하여 생성된 것일 수 있다.
또한 상기 서버(500)는 복수의 제2 기초 이미지 정보를 학습데이터로 설정하여 제2 인공 신경망을 학습시키고, 상기 복수의 제2 기초 이미지 정보 각각으로부터 추출된 복수의 제2 객체 정보(및/또는 상기 복수의 제2 기초 이미지 정보)를 학습데이터로 설정하여 제3 인공 신경망을 학습시킬 수 있다. 또한 상기 서버(500)는 복수의 제2 기초 이미지 정보, 복수의 제2 객체 정보 및 제2 건축 디자인 정보 중 적어도 어느 하나를 학습데이터로 설정하여 제4 인공 신경망을 학습시킬 수 있다. 여기서 제2 인공 신경망 내지 제4 인공 신경망은 RNN(Recurrent Neural Network), DNN(Deep Neural Network) 및 DRNN(Dynamic Recurrent Neural Network) 등 다양한 모델들이 활용될 수 있다.
또한 상기 서버(500)는 상기 학습된 인공신경망에 제1 기초 이미지 정보를 상기 학습된 제2 인공신경망에 입력함으로써, 상기 학습된 제2 인공신경망으로부터 제1 건축 디자인 정보를 획득할 할 수 있다. 또한 상기 서버(500)는 상기 학습된 인공신경망에 제1 객체 정보를 상기 학습된 제3 인공신경망에 입력함으로써, 상기 학습된 제3 인공신경망으로부터 제1 건축 디자인 정보를 획득할 할 수도 있다. 또한 상기 서버(500)는 상기 학습된 인공신경망에 제1 기초 이미지 정보 및/또는 제1 객체 정보를 상기 학습된 제4 인공신경망에 입력함으로써, 상기 학습된 제4 인공신경망으로부터 제1 건축 디자인 정보를 획득할 수도 있다.
한편 제2 인공신경망에 제1 기초 이미지 정보가 입력된 시점으로부터 제1 건축 디자인 정보가 상기 제2 인공신경망으로부터 획득되는 시점 사이의 간격을 제1 시간, 제3 인공신경망에 제2 기초 이미지 정보 및/또는 제2 객체 정보가 입력된 시점으로부터 제1 건축 디자인 정보가 상기 제3 인공 신경망으로부터 획득되는 시점 사이의 간격을 제2 시간, 제4 인공신경망에 제2 기초 이미지 정보 및/또는 제2 객체 정보가 입력된 시점으로부터 제1 건축 디자인 정보가 상기 제3 인공 신경망으로부터 획득되는 시점 사이의 간격을 제3 시간으로 볼 수 있으며, 제1 시간 내지 제3 시간은 서버(500)에 의해 판단되거나 획득될 수 있다.
한편 제2 인공신경망에 제1 기초 이미지 정보가 입력된 시점으로부터 상기 제2 인공신경망으로부터 획득된 제1 건축 디자인 정보가 사용자 장치(200)의 디스플레이를 통하여 표시(display)되거나 및/또는 출력(output)되는 시점 사이의 간격을 제4 시간, 제3 인공신경망에 제1 기초 이미지 정보 및/또는 제1 객체 정보가 입력된 시점으로부터 상기 제3 인공신경망으로부터 획득된 제1 건축 디자인 정보가 사용자 장치(200)의 디스플레이를 통하여 표시되거나 및/또는 출력되는 시점 사이의 간격을 제5 시간, 제4 인공신경망에 제1 기초 이미지 정보 및/또는 제1 객체 정보가 입력된 시점으로부터 상기 제4 인공신경망으로부터 획득된 제1 건축 디자인 정보가 사용자 장치(200)의 디스플레이를 통하여 표시되거나 및/또는 출력되는 시점 사이의 간격을 제6 시간으로 볼 수 있으며, 제4 시간 내지 제6 시간은 사용자 장치(200)에 의해 판단되거나 획득될 수 있다.
이를 위해 서버(500)는 상기 제1 건축 디자인 정보를 상기 사용자 장치(200)에게 전달할 때, 상기 기초 이미지 정보 및/또는 상기 제1 객체 정보가 상기 제2 인공신경망, 제3 인공신경망 또는 제4 인공신경망에 입력되는 시점을 나타내는 정보가 함께 상기 사용자 장치(200)에게 전달될 수 있다.
또한 사용자 장치(200)는 제1 시간 내지 제3 시간을 나타내는 정보를 서버(500)로부터 수신할 수 있으며, 상기 서버(500)는 제4 시간 내지 제6 시간을 나타내는 정보를 상기 사용자 장치(200)로부터 수신할 수 있다.
또한 사용자 장치(200) 및/또는 서버(500)는 제2 인공신경망으로부터 획득된 제1 건축 디자인 정보를 제1 추천 건축 디자인 정보로 설정하고, 제3 인공신경망으로부터 획득된 제1 건축 디자인 정보를 제2 추천 건축 디자인 정보로 설정하고, 제4 인공신경망으로부터 획득된 제1 건축 디자인 정보를 제3 추천 건축 디자인 정보로 설정할 수 있다.
또한 서버(500)는 제1 추천 건축 디자인 정보 내지 제3 추천 건축 디자인 정보 모두를 사용자 장치(200)에게 전달하거나, 제1 추천 건축 디자인 정보 내지 제3 추천 건축 디자인 정보 중 일부 정보만을 상기 사용자 장치(200)에게 전달할 수도 있다.
예를 들면, 서버(500)는 제1 시간 내지 제6 시간 중 적어도 어느 하나에 기반하여 제1 추천 건축 디자인 정보 내지 제3 추천 건축 디자인 정보 모두를 사용자 장치(200)에게 전달할지 또는 제1 추천 건축 디자인 정보 내지 제3 추천 건축 디자인 정보 중 일부 정보만을 상기 사용자 장치(200)에게 전달할지 여부를 결정 및/또는 판단할 수도 있다. 또한 서버(500)는 제1 시간 내지 제6 시간 중 적어도 어느 하나에 기반하여 제1 기초 이미지 정보 및/또는 제1 객체 정보를 제2 인공 신경망 내지 제4 인공 신경망 중 적어도 어느 하나에 입력할지 여부를 결정 및/또는 판단할 수도 있다.
일 예로, 서버(500)는 제1 시간이 제2 시간보다 짧은지, 및/또는 제2 시간이 제3 시간보다 짧은지 여부에 기반하여 제1 추천 건축 디자인 정보 내지 제3 추천 건축 디자인 정보 모두를 사용자 장치(200)에게 전달할지 또는 제1 추천 건축 디자인 정보 내지 제3 추천 건축 디자인 정보 중 일부 정보만을 상기 사용자 장치(200)에게 전달할지 여부를 결정 및/또는 판단할 수도 있다.
또한 서버(500)는 제1 시간이 제2 시간보다 짧은지, 및/또는 제2 시간이 제3 시간보다 짧은지 여부에 기반하여 제1 기초 이미지 정보 및/또는 제1 객체 정보를 제2 인공 신경망 내지 제4 인공 신경망 중 적어도 어느 하나에 입력할지 여부를 결정 및/또는 판단할 수도 있다.
일 예로, 서버(500)는 제1 시간이 제1 시간 기준치보다 짧은지, 및/또는 제2 시간이 제2 시간 기준치보다 짧은지, 및/또는 제3 시간이 제3 시간 기준치보다 짧은지 여부에 기반하여 제1 추천 건축 디자인 정보 내지 제3 추천 건축 디자인 정보 모두를 사용자 장치(200)에게 전달할지 또는 제1 추천 건축 디자인 정보 내지 제3 추천 건축 디자인 정보 중 일부 정보만을 상기 사용자 장치(200)에게 전달할지 여부를 결정 및/또는 판단할 수도 있다. 여기서 제1 시간 기준치는 제2 시간 기준치보다 짧게 설정되고, 상기 제2 시간 기준치는 제3 시간 기준치보다 짧게 설정될 수 있다.
또한 서버(500)는 제1 시간이 제1 시간 기준치보다 짧은지, 및/또는 제2 시간이 제2 시간 기준치보다 짧은지, 및/또는 제3 시간이 제3 시간 기준치보다 짧은지 여부에 기반하여 제1 기초 이미지 정보 및/또는 제1 객체 정보를 제2 인공 신경망 내지 제4 인공 신경망 중 적어도 어느 하나에 입력할지 여부를 결정 및/또는 판단할 수도 있다.
일 예로, 서버(500)는 제1 시간 내지 제6 시간 중 적어도 어느 하나에 기반하여 제1 인공신경망 내지 제4 인공신경망 중 적어도 어느 하나의 학습 모드(learning mode)를 중단시키도록 제어할 수 있다. 즉, 적어도 하나의 제2 기초 이미지 정보, 적어도 하나의 제2 객체 정보, 적어도 하나의 제2 건축 디자인 정보 중 적어도 어느 하나를 학습데이터로 설정하여 제1 인공신경망 내지 제4 인공신경망 중 적어도 어느 하나에 입력함으로써 제1 인공신경망 내지 제4 인공신경망 중 적어도 어느 하나를 학습시키는 과정을 생략할 수 있다.
또한 서버(500)는 i) 제1 시간 내지 제6 시간 중 적어도 어느 하나에 기반하여, 및/또는 ii) 제1 시간이 제2 시간보다 짧은지(및/또는 제2 시간이 제3 시간보다 짧은지) 여부에 기반하여, 및/또는 iii) 제1 시간이 제1 시간 기준치보다 짧은지(및/또는 제2 시간이 제2 시간 기준치보다 짧은지 및/또는 제3 시간이 제3 시간 기준치보다 짧은지) 여부에 기반하여, 상기 제1 인공신경망 내지 상기 제4 인공신경망 중 적어도 어느 하나의 학습 모드(learning mode)를 중단시키도록 제어할 수도 있다.
도 1은 본 발명의 일 실시예에 따른 건축 정보를 제공하는 방법을 나타내는 흐름도이다.
도 1을 참조하면, 본 발명의 일 실시예는 기초 구조물에 3차원 입체 디자인을 합성한 이미지를 포함하는 건축 정보를 사용자에게 제공하는 방법에 있어서, 기초 구조물에 대한 기초 이미지 정보를 획득하는 단계를 포함한다(S110).
예를 들면, 사용자는 카메라 및/또는 소정의 측정 장치를 포함하는 사용자 장치(200)를 이용하여 기초 구조물을 촬영할 수 있으며(도 2a 참조), 상기 사용자 장치(200)는 상기 촬영된 기초 구조물(또는 이에 상응하는 영상)에 기반하여 기초 이미지 정보를 획득할 수 있다.
예를 들면, 사용자는 도 2a에 도시된 바와 같이 사용자 장치(200)를 이용하여 기초 구조물(10)을 촬영하거나 및/또는 측정할 수 있으며, 이러한 과정을 통하여 기초 이미지 정보를 획득할 수 있다.
또한 사용자 장치(200)는 기초 구조물을 촬영한 영상 및/또는 상기 기초 이미지 정보를 서버에게 전달할 수 있다.
여기서 기초 구조물은 콘크리트 구조물, 목재, 목조 구조물, 뼈대, 기둥 등을 포함할 수 있다.
또한 사용자 장치(200)에 구비되는 카메라 및/또는 소정의 측정 장치는 입력 모듈(530)에 포함되는 구성 요소일 수 있다.
또한 사용자 장치(200) 및/또는 서버(500)는 사용자 장치(200)가 기초 구조물을 촬영하는 동안 소정의 기준을 만족하지 못하는 경우에는 소정의 메시지(예; 알람 메시지, 경고 메시지, 재촬영을 요구하는 메시지 등)를 생성하여 사용자 장치(200)를 통하여 표시(display) 및/또는 출력(output)되도록 제어할 수 있다.
예를 들면, 사용자 장치(200)를 통하여 촬영된 사진 및/또는 영상에서 소정의 개수 이상의 잡음 객체가 검출되거나 잡음 객체들에 상응하는 영역의 면적이 상기 사진 및/또는 영상에서 차지하는 비율이 소정의 비율 기준치(임계값)를 넘는 경우에는 사용자 장치(200) 및/또는 서버(500)는 소정의 메시지를 생성할 수 있다.
또한 서버(500)는, 상기 서버(500) 및/또는 제어 모듈에 의해 생성되는 기초 이미지 정보가 소정의 기준을 만족하는 경우에는 상기 기초 이미지 정보를 유효 기초 이미지 정보로 설정하되, 소정의 기준을 만족하지 못하는 경우에는 소정의 메시지(예; 알람 메시지, 경고 메시지, 재촬영을 요구하는 메시지 등)를 생성하여 사용자 장치(200)를 통하여 표시(display) 및/또는 출력(output)되도록 제어할 수 있다.
예를 들면, 상기 서버(500) 및/또는 제어 모듈에 의해 생성되는 기초 이미지 정보에서 소정의 개수 이상의 잡음 객체가 검출되거나 잡음 객체들에 상응하는 영역의 면적이 상기 사진 및/또는 영상에서 차지하는 비율이 소정의 비율 기준치(임계값)를 넘는 경우에는 사용자 장치(200) 및/또는 서버(500)는 소정의 메시지를 생성할 수 있다.
다만, 상기 서버(500) 및/또는 제어 모듈에 의해 생성되는 기초 이미지 정보에서 잡음 객체가 발견되지 않거나, 잡음 객체의 개수가 소정의 개수 미만으로 검출되거나, 및/또는 상기 기초 이미지 정보에서 잡음 객체들에 상응하는 영역의 면적이 상기 사진 및/또는 영상에서 차지하는 비율이 소정의 비율 기준치(임계값) 미만인 경우에는 상기 기초 이미지 정보를 유효 기초 이미지 정보로 설정할 수 있다.
한편, 잡음 객체는 기초 구조물에 형성되는 그림자, 기초 구조물에 인접하는 수목(tree) 영역 및/또는 기초 구조물에 인접하는 벽면 영역 등을 포함할 수 있다. 또한 잡음 객체는 사용자 장치(200)를 통하여 촬영된 사진 및/또는 영상에 HOG(Histogram of Oriented Gradient), Haar-like feature, Co-occurrence HOG, LBP(local binary pattern), FAST(features from accelerated segment test) 등과 같은 객체 특징 추출을 위한 다양한 알고리즘을 적용함으로써 추출 및/또는 식별되거나, 서버(500) 및/또는 제어 모듈에 의해 생성되는 기초 이미지 정보에 상기 객체 특징 추출을 위한 다양한 알고리즘을 적용함으로써 추출 및/또는 식별될 수 있다.
또한 서버(500)는 기초 이미지 정보 및/또는 객체 정보로부터 복수의 벡터 값(vector value)을 추출하고, 상기 복수의 벡터 값 상호 간의 벡터 각도를 추출할 수 있다.
예를 들면, 서버(500)는 기초 이미지 정보 및/또는 객체 정보로부터 추출되는 복수의 벡터(또는 벡터 값)로부터 제1 벡터(v1 또는 [x1, y1, z1]) 및 제2 벡터(v2 또는 [x2, y2, z2]) 사이의 각도를 추출할 때 아래의 수학식 1에 기반할 수 있다.
[수학식 1]
Figure 112020075065267-pat00001
또한 서버(500)는, 예를 들면, 상기 수학식 1에 따른 각도 추출을 N번 수행할 수 있으며, “각도 추출을 수행한 총 N번” 대비 “추출되는 각도가 0(도) 내지 제1 각도인 제1 케이스, 추출되는 각도가 제2 각도 내지 제3 각도 사이인 제2 케이스 및 추출되는 각도가 제4 각도 내지 180도 사이인 제3 케이스의 합(sum)”의 비율이 임계값을 넘는 경우(이상인 경우)에만 기초 이미지 정보, 객체 정보, 및/또는 벡터 정보에 기반하여 에 기반하여 건축 디자인 정보를 생성할 수 있다. 여기서 벡터 정보는 복수의 벡터(또는 벡터 값)을 포함하거나 및/또는 제1 케이스 내지 제3 케이스에 상응하는 일부 특정 벡터(또는 벡터 값)을 포함할 수 있다. 또한 제1 각도는 0보다 크되 제2 각도보다 작은 각도를 나타낼 수 있으며, 제2 각도는 상기 제1 각도보다 크고, 제3 각도는 상기 제2 각도보다 크고, 제4 각도는 상기 제3 각도보다 크되 180보다 작은 각도를 나타낼 수 있다.
상기 비율이 상기 임계값보다 낮은 경우(미만인 경우)에는 소정의 메시지(예; 알람 메시지, 재촬영 요청 메시지 등)을 생성하여 출력할 수 있다.
또한 사용자 장치(200)가 스마트폰이 아닌 기초 구조물의 촬영 및 건축 디자인 정보의 생성을 모두 수행하는 독립적인 단말인 경우에는 상기 사용자 장치(200)의 내부 배터리의 충전 전력에 기반하여 상이한 동작을 수행할 수도 있다. 여기서 충전 전력은 내부 배터리의 잔류 전력, 저장 전력 등으로 대체될 수 있다.
예를 들면, 사용자 장치(200)는 내부 배터리의 충전 전력이 임계값 이상인 경우에는 복수의 벡터(또는 벡터 값)를 모두 고려하여 상기 건축 디자인 정보를 생성하되, 상기 임계값 미만인 경우에는 제1 케이스 내지 제3 케이스에 상응하는 일부 특정 벡터(또는 벡터 값) 만을 고려하여 상기 건축 디자인 정보를 생성할 수 있다.
또한, 사용자 장치(200)는 내부 배터리의 충전 전력이 전력 임계값 이상인 경우에는 기초 이미지 정보, 객체 정보 및/또는 복수의 벡터(또는 벡터 값)를 모두 고려하여 상기 건축 디자인 정보를 생성하되, 상기 전력 임계값 미만인 경우에는 제1 케이스 내지 제3 케이스에 상응하는 일부 특정 벡터(또는 벡터 값) 만을 고려하여 상기 건축 디자인 정보를 생성하거나 및/또는 상기 제1 인공신경망 내지 상기 제4 인공신경망 중 적어도 어느 하나의 학습 모드(learning mode)를 중단시키도록 제어할 수도 있다. (이때 제1 인공신경망 내지 제4 인공신경망은 사용자 장치(200) 내부에서 구현되는 것이며, 상기 제1 인공신경망 내지 제4 인공신경망의 제어도 제어 모듈(410)에 의해 구현될 수 있다)
이는 기초 이미지 정보 및/또는 객체 정보 내에 기초 구조물 만 포함되는 경우일수록 상기 기초 이미지 정보 및/또는 객체 정보 내에는 평행하거나 수직하는 벡터가 주(main)를 이룰 것임을 고려한 것이다.
또한 상기 기초 이미지 정보, 객체 정보 및/또는 벡터 정보는 다른 사용자 장치에 의해 획득되거나 및/또는 생성되는 정보일 수도 있다. 예를 들면, 상기 사용자 장치(200)의 내부 배터리 충전 전력이 상기 전력 임계값 이상인 경우에는 상기 사용자 장치(200)는 다른 사용자 장치로부터 적어도 하나의 기초 이미지 정보 만을 수신하고 상기 적어도 하나의 기초 이미지 정보로부터 적어도 하나의 객체 정보 및 적어도 하나의 벡터 정보를 직접 추출하여 건축 디자인 정보를 생성할 수 있겠으나, 상기 내부 배터리 충전 전력이 상기 전력 임계값 미만인 경우에는 상기 적어도 하나의 객체 정보 및 상기 적어도 하나의 벡터 정보는 다른 사용자 장치에 의해 직접 추출되도록 하는 제어 명령을 상기 사용자 장치(200)가 다른 사용자 장치에게 전달할 수 있으며 상기 사용자 장치는 상기 다른 사용자 장치로부터 수신한 적어도 하나의 기초 이미지 정보, 상기 적어도 하나의 객체 정보 및 상기 적어도 하나의 벡터 정보를 더 고려하여 건축 디자인 정보를 생성할 수 있다.
또한 본 발명의 일 실시예에 따른 방법은, 기초 이미지 정보에 기반하여 건축 디자인 정보를 생성하는 단계를 포함한다(S120).
예를 들면, 서버(500)는 사용자 장치(200)로부터 수신한 기초 이미지 정보에 기반하여 건축 디자인 정보를 생성할 수 있다.
여기서 건축 디자인 정보는 상기 기초 이미지 정보에 관련되는 기초 구조물(건물)에 기반하여 설계되는 건축 디자인을 나타내는 정보를 포함할 수 있다.
예를 들어, 건축 디자인 정보는 기초 구조물(건물)의 외관에 추가되는 외형(또는 디자인)에 대한 정보, 상기 기초 구조물(건물)에 증축(또는 증설)되는 적어도 하나의 건축 자재에 대한 정보 등을 포함할 수 있다.
여기서 건축 자재에 대한 정보는 건축 자재의 타입, 개수, 모양, 길이, 크기, 무게 등에 대한 정보를 포함할 수 있다.
또한, 건축 디자인 정보는 건물에 대한 이미지, 2D 설계 도면, 3D 설계 도면, 건축 디자인에 대한 입체 영상 등을 포함할 수 있다.
또한, 건축 디자인 정보는 건축 정보, 건물의 외관(또는 외형)에 대한 정보, 또는 건물의 디자인에 대한 정보 등으로 대체되어 호칭될 수 있다.
또한 본 발명의 일 실시예에 따른 방법은, 건축 디자인 정보를 사용자 장치(200)에게 전달하는 단계를 포함한다(S130).
예를 들면, 서버(500)는 기초 이미지 정보에 기반하여 생성한 건축 디자인 정보를 사용자 장치(200)에게 전달할 수 있다.
또한 본 발명의 일 실시예에 따른 방법은, 건축 디자인 정보를 사용자 장치(200)의 디스플레이를 통하여 표시하는 단계를 포함한다(S140). 이와 관련하여 도 2b를 참조하여 구체적으로 후술한다.
도 2a 내지 도 2c는 본 발명의 일 실시예에 따른 건축 정보가 사용자에게 제공되는 모습을 나타내는 도면이다.
도 2b를 참조하면, 본 발명의 일 실시예는 사용자 장치(200)를 통하여 사용자에게 건축 디자인 정보를 제공할 수 있다. 한편 도 2b에서는 도면화의 편의를 위해 하나의 후보 건축 디자인만 도시되어 있으나, 이는 일 예에 불과하며, 복수의 후보 건축 디자인이 사용자 장치(200)를 통하여 제공될 수 있다. 예를 들면, 상기 복수의 후보 건축 디자인이 한번에 사용자 장치(200)의 디스플레이를 통하여 표시될 수 있다.
또한 사용자 장치(200)는, 예를 들면, 복수의 후보 건축 디자인을 순차적으로 표시하거나, 하나의 후보 건축 디자인만 사용자 장치(200)의 디스플레이에 표시하되, 상기 디스플레이에 추가적인 오브젝트(object)(예; 선택 버튼, 선택 이미지)를 더 표시하여 사용자가 상기 오브젝트를 선택하면 사용자 장치(200)의 디스플레이에 다음(next) 또는 다른 후보 건축 디자인이 표시되도록 할 수 있다.
이를 위해 본 발명의 일 실시예는 상기 사용자 장치(200)가 상기 복수의 후보군에 대한 정보를 상기 사용자 장치(200)의 디스플레이를 통하여 표시하는 단계, 상기 사용자 장치(200)가 상기 복수의 후보군 중 하나의 후보를 상기 디스플레이를 통하여 입력 받는 단계, 및 상기 사용자 장치(200)가 상기 선택된 후보에 대한 정보를 상기 디스플레이를 통하여 표시하는 단계를 포함할 수 있다.
이와 같이, 사용자 장치(200)가 디스플레이(화면)을 통하여 복수의 후보들을 표시하면 상기 사용자 장치(200)의 사용자는 상기 표시된 복수의 후보들 중 어느 하나를 선택할 수 있다. 상기 사용자의 선택은, 상기 사용자의 음성 정보를 획득하는 동작을 통하여 수행되거나 상기 사용자 장치(200)의 디스플레이(예; 사용자의 터치를 인식하는 기능을 포함하는 장치)를 통하여 사용자의 터치에 대한 정보를 획득하거나, 키보드 또는 마우스 등의 장치를 통하여 획득함으로써 수행될 수 있다.
또한, 사용자가 복수의 후보들 중 어느 하나를 선택하면, 상기 사용자 장치(200)의 디스플레이는 선택된 하나의 후보 건축 디자인에 대한 구체적인 정보를 표시하거나 선택 받기 전보다 더 큰 이미지를 표시할 수 있다. 예를 들어, 디스플레이의 10% 크기로 표시되는 복수의 후보 건축 디자인을 사용자가 선택하면, 선택된 후보 건축 디자인이 디스플레이의 절반 이상의 크기로 표시될 수 있다.
도 3은 본 발명의 일 실시예에 따른 건축 정보를 제공하는 방법을 나타내는 흐름도이다.
도 3을 참조하면, 본 발명의 일 실시예는 사용자 장치(200)가 건축 디자인 정보를 제공하는 방법에 있어서, 사용자 장치(200)가 건물에 대한 기초 이미지 정보를 서버(500)에게 송신하는 단계(S310), 서버(500)가 상기 수신된 기초 이미지 정보에 기반하여 건축 디자인 정보를 사용자 장치(200)에게 송신하는 단계(S320), 및 사용자 장치(200)가 상기 수신된 건축 디자인 정보를 상기 사용자 장치(200)의 디스플레이를 통하여 표시하는 단계(S330)를 포함한다.
여기서 건축 디자인 정보는 상기 서버(500)에 의해 빅데이터 분석을 통하여 생성될 수 있다. 예를 들어 서버(500)는 머신 러닝 기술, 인공 지능 기술에 기반하여 상기 건축 디자인 정보를 생성/선택할 수 있다. 서버(500)는 사용자 장치(200) 또는 다른 서버를 통하여 학습 데이터를 수집할 수 있으며, 상기 수집된 학습 데이터에 뉴럴 네트워크(Neural Network), 서포트 벡터 머신(Support Vector Machine) 및 판단 트리(Decision Tree) 모델 중 적어도 하나의 머신 러닝 분류(Machine Learning Classification) 모델을 적용하여 상기 건축 디자인 정보를 생성/선택할 수 있다.
또한, 본 발명의 일 실시예는, 사용자 장치(200)가 사용자 정보를 획득하는 단계, 상기 사용자 장치(200)가 상기 획득된 사용자 정보에 기반하여 생성된 적어도 하나의 추천 후보 건축 디자인을 나타내는 정보를 상기 서버(500)로부터 수신하는 단계, 및 상기 사용자 장치(200)가 상기 적어도 하나의 추천 후보 건축 디자인을 나타내는 정보를 상기 사용자 장치(200)의 디스플레이를 통하여 표시하는 단계를 더 포함할 수 있다.
또한, 본 발명의 일 실시예는, 사용자 장치(200)의 사용자에 대한 정보에 기반하여 건축 디자인 정보를 제공하는 방법을 제안한다.
예를 들어, 건축 디자인 정보는 사용자 장치(200)에 의해 획득된 사용자 정보에 기반하여 상이한 정보를 포함할 수 있다. 즉, 상기 사용자 장치(200)는 상기 사용자에 대한 정보에 따라 상이한 정보를 사용자에게 제공할 수 있다. 여기서 사용자 정보는 결제 정보 및 회원권 정보 등을 포함할 수 있다. 여기서 결제 정보는 사용자 장치(200)의 사용자가 납부한 금액을 나타낼 수 있으며, 회원권 정보는 정기 구독권, VIP 회원권 등을 나타내는 정보일 수 있다. 또한, 상기 회원권 정보는 상기 결제 정보에 기반하여 결정될 수 있으며, 예를 들어, 사용자 장치(200)의 사용자가 납부한 금액이 소정의 임계값을 초과하는 경우 상기 사용자에 대한 사용자 정보는 VIP 회원권을 나타내는 회원권 정보와 매핑(또는 결합)될 수 있다. 또한, 상기 VIP 회원권과 관련되는 사용자 정보가 사용자 장치(200)에 입력되는 경우, 상기 사용자 장치(200)는 입력된 기초 이미지 정보에 기반하는 건축 디자인 정보를 (필터링 없이) 모두 제공할 수 있다.
또한, 본 발명의 일 실시예에 따른 사용자 장치(200)는 동일한 건물에 대한 건축 디자인 정보를 단계적으로 제공할 수 있다. 예를 들어, 사용자 장치(200)는 (사용자 정보에 기반하여) 1단계 정보만을 제공하거나, 1단계 정보 및 2단계 정보 모두를 제공할 수 있다. 예를 들어, 1단계 정보는 건축 디자인 정보에 포함되는 복수의 정보 중 일부만을 포함할 수 있으며, 2단계 정보는 상기 건축 디자인 정보에 포함되는 복수의 정보 모두를 포함하거나 또는 상기 복수의 정보 중에서 상기 1단계 정보보다 많은 정보를 포함하는 정보를 포함할 수 있다. 물론, 이는 설명의 편의를 위해 2단계로 나눈 경우만을 설명한 것이고, 더 많은 단계로 나뉘어 단계적으로 응용될 수 있음은 물론이다. 예를 들어, 1단계 정보는 건축 디자인 정보의 실루엣 또는 테마 만을 제공하고, 2단계 정보는 상기 1단계 정보보다 세부적인 항목/정보를 포함할 수 있다.
또한, 도 1을 참조하면, 건물에 대한 기초 이미지 정보를 획득하는 단계(S110)는 상기 사용자 장치(200)가 상기 건물에 대한 영상 정보 또는 상기 건물에 대한 실측 정보를 통하여 상기 건물에 대한 기초 이미지 정보를 획득하는 단계를 포함할 수 있다.
일 예로, 사용자가 사용자 장치(200)를 이용하여 획득한 영상 정보를 건물에 대한 기초 이미지 정보로서 획득/이용할 수 있다. 예를 들어, 도 4의 통신 모듈(420)을 통하여 상기 영상 정보를 획득/수신할 수 있다. 또한, 예를 들면, 상기 사용자 장치(200)를 통하여 획득한 영상 정보가 2차원(2D)인 경우, 이를 3차원(3D)로 복원하는 기술을 이용함으로써 건물에 대한 기초 이미지 정보를 획득할 수 있다.
다른 예로, 사용자는 사용자 장치(200)의 측정 장치를 이용하여 획득한 실측 정보를 건물에 대한 기초 이미지 정보로서 획득/이용할 수 있다. 여기서 측정 장치는 도 4의 측정부(400)를 지칭하거나 상기 측정부(400)를 포함할 수 있다.
또한, 본 발명의 일 실시예는, 다른 사용자 장치(200)를 통하여 선택된/획득된 건축 디자인 정보를 사용자에게 제공할 수 있다.
예를 들어, 도 1의 방법은, 사용자 장치(200)가 상기 기초 이미지 정보를 다른 사용자 장치(200)에게 송신하는 단계, 상기 사용자 장치(200)가 적어도 하나의 후보 건축 디자인을 나타내는 정보를 포함하는 상기 건축 디자인 정보를 상기 다른 사용자 장치(200)로부터 수신하는 단계, 및 상기 사용자 장치(200)가 상기 적어도 하나의 후보 건축 디자인을 나타내는 정보를 상기 사용자 장치(200)의 디스플레이를 통하여 제공하는 단계를 더 포함할 수 있다. 상기 적어도 하나의 후보 건축 디자인을 나타내는 정보는 상기 다른 사용자 장치(200)에 의해 획득되는 정보일 수 있다.
또한, 건축 디자인 정보는 건물의 위치 정보에 기반하여 결정될 수 있다. 여기서 위치 정보는 기초 이미지 정보와 관련되는 건물(이하, "기초 건물"이라 칭한다)이 위치하는 위도/경도, GPS(Global Positioning System) 좌표, 도로명 주소, 건물명, 랜드마크 명칭 등일 수 있다. 예를 들어, 사용자가 사용자 장치(200)의 측정 장치(예; 입력 모듈(430)의 카메라)를 이용하여 기초 건물의 기초 이미지 정보를 획득하는 경우, i) 상기 사용자 장치(200)가 위치하는 장소에 기반하여 결정되는 위치 정보 또는 ii) 상기 사용자 장치(200)가 위치하는 장소와 상기 사용자 장치(200)의 측정 장치가 측정하는 방향(또는 측정되는 대상의 이미지) 등을 고려하여 상기 기초 건물의 위치 정보를 획득할 수 있다.
또한, 예를 들면, 본 발명의 일 실시예에 따른 사용자 장치(200)는 상기 기초 건물과 주변 건물(즉, 상기 기초 건물로부터 일정 거리 내에 위치하는 다른 건물)과의 관계를 고려하여 건축 디자인 정보를 제공할 수 있다.
예를 들어, 상기 기초 건물에 대한 건축 디자인 정보는 상기 주변 건물의 외관(예; 색상, 높이, 건축 자재 등)을 고려하여 통일성 있는 디자인, 건축 설계 등을 포함할 수 있다.
일 예로, 건축 디자인 정보는 상기 주변 건물의 외관과 동일한 외관을 갖는 건축 디자인 또는 건축 설계에 대한 정보를 포함할 수 있다.
다른 예로, 건축 디자인 정보는 상기 주변 건물의 외관에 대한 복수의 항목들 중에서 일부 항목만을 동일하게 설정한 건축 디자인 또는 건축 설계에 대한 정보를 포함하도록 하여, 기초 건물이 주변 건물과의 조화를 이룰 수 있도록 할 수 있다.
이를 통해, 본 발명의 일 실시예에 따른 사용자 장치(200)는, 주변 건물과 높이가 동일하거나 색상이 동일하거나 건축 자재가 동일하게 하여, 기초 건물이 완공(또는 완성)되었을 때 주변 건물과 어울릴 수 있도록 할 수 있다.
또한, 주변 건물과 어울리는 건축 디자인을 선택(또는 결정)하는 것은 서버(500)의 저장 모듈(550)(즉, 데이터베이스)에 저장된 학습데이터에 기반하는 기계 학습(machine learning)을 통하여 수행될 수 있다.
또한, 주변 건물과 어울리는 건축 디자인은 건물의 높이가 동일하거나, 건물의 색상이 동일하거나, 건물의 색상 차이가 소정의 기준보다 낮은 경우(예를 들어, 색상/채도/명도의 차이가 소정의 임계값 미만)이거나, 또는 건축 양식(예; 한옥, 고딕 양식, 르네상스 양식, 원시 형태, 목조 형태, 벽돌 형태, 현대건축, 그리스/아르카이크기(期), 고전기(古典期), 헬레니즘기, 초기 그리스도교기, 로마네스크식, 고딕식, 바로크식, 로코코식, 아르누보식 등이다. 그리고 현대건축에서는 건축가의 개성에 입각한 작가의 양식에 따라서 르코르뷔지에 양식, 라이트 양식, 가우디 양식 등)이 동일한 경우를 포함할 수 있다.
또한, 예를 들면, 본 발명의 일 실시예에 따른 건축 디자인 정보는 지자체 등의 정부 기관 또는 기타 기관으로부터 획득된 정보에 기반하여 결정된 건축 디자인 또는 건축 설계를 포함할 수 있다.
예를 들어, 지자체 등의 정부 기관이 해당 지역의 건물들을 통일성 있게 유도하려는 정책이 있는 경우, 상기 정부 기관은 이러한 정보를 본 발명의 일 실시예에 따른 사용자 장치(200) 또는 서버(500)에 제공할 수 있다. 이 경우 상기 사용자 장치(200) 또는 서버(500)는 건축 디자인 정보를 생성할 때 이러한 정책을 고려하여 건축 디자인 정보를 생성 또는 결정할 수 있다.
일 예로, 정책에 따라 해당 지역에서 한옥 스타일의 건물들을 건축토록 유도하는 정책을 나타내는 정보가 상기 사용자 장치(200) 또는 상기 서버(500)에 의해 획득되는 경우, 상기 건축 디자인 정보는 한옥 스타일의 후보 건축 디자인을 포함할 수 있으며, 이러한 한옥 스타일의 후보 건축 디자인을 선택하는 경우 상기 정책을 나타내는 정보에 따라 상기 정부 기관에 의해 금전적인(또는 정책적인) 지원을 받을 수 있다는 정보를 더 포함할 수 있다. 여기서 금전적인 지원을 건축에 들어가는 비용을 지원받는 것을 의미할 수 있으며, 정책적인 지원은 세금 감면, (빠른) 건축 허가, 착공 제한 지역 등과 관련되는 지원을 의미할 수 있다. 여기서 (빠른) 건축 허가는 소정의 기준치보다 짧은 기간 내에 건축 허가를 내어줄 것을 나타내는 정보일 수 있다. 또한, 사용자 장치(200)의 사용자가 상기 한옥 스타일의 후보 건축 디자인을 선택하는 경우, 상기 사용자 장치(200) 또는 서버(500)의 관리자는 상기 정부 기관 등에게 소정의 보상(리워드)를 요청하고, 요청한 보상을 상기 정부 기관 등으로부터 받을 수 있다. 여기서 보상(리워드)는 본 발명의 일 실시예에 따른 서비스(또는 방법)에서 사용될 수 있는 포인트 또는 전자 화폐(또는 가상 화폐)일 수 있으며, 포인트 또는 전자 화폐(또는 가상 화폐)에 대한 통상적인 가치(예; 제1 가치)보다 더 큰 가치(예; 제2 가치)로써 본 발명의 일 실시예에 따른 서비스(또는 방법)에서 활용될 수 있다.
또한, 본 발명의 일 실시예에 따른 서비스(또는 방법)에 따라 사용자가 특정 스타일(예; 한옥 스타일)의 후보 건축 디자인을 선택하는 경우, 상기 사용자가 특정 스타일(예; 한옥 스타일)의 후보 건축 디자인을 선택하였음을 나타내는 정보가 본 발명의 일 실시예에 따른 서비스(또는 방법)를 이용하는 다른 사용자 장치(200)에게 직접 전송되거나 서버(500)를 통하여 간접적으로 전송될 수 있다. 또한,
또한, 서버(500)는 특정 개수(예; 임계값) 이상의 사용자(또는 사용자 장치(200))이 특정 스타일(예; 한옥 스타일)의 후보 건축 디자인을 선택하였음이 확인되는 경우, 상기 특정 개수 이상의 사용자(또는 사용자 장치(200))에게 상기 제2 가치보다 더 높은 제3 가치만큼의 리워드를 할 수 있다. 또한, 서버(500)는 이러한 추가 리워드가 제공될 수 있음을 나타내는 메시지를 사용자(또는 사용자 장치(200))들에게 알림(알람)하는 메시지를 전송(transmitting)(또는 방송(broadcasting))할 수 있다.
이를 위해, 본 발명의 일 실시예에 따른 방법은, 서버(500)가 정책에 대한 정보를 정부 기관 등으로부터 수신하는 단계, 상기 서버(500)가 정책에 따른 정보에 기반하여 후보 건축 디자인을 생성하는 단계, 상기 서버(500)가 상기 정책에 따른 정보에 기반하여 생성된 후보 건축 디자인을 사용자 장치(200)에게 전송하는 단계, 상기 사용자 장치(200)가 상기 정책에 따른 정보에 기반하여 생성된 후보 건축 디자인을 상기 사용자 장치(200)의 디스플레이를 통하여 표시하는 단계, 상기 사용자 장치(200)의 입력부(예; 터치 패드, 마우스, 키보드 등의 입력 장치)를 통하여 사용자로부터 후보 건축 디자인을 선택하였음을 나타내는 신호를 수신하는 단계, 상기 사용자 장치(200)가 상기 정책에 따른 정보에 기반하여 생성된 후보 건축 디자인이 선택되었음을 나타내는 정보 및/또는 상기 정보 기관에게 보조금, 성과금, 광고비, 중개료, 수수료, 보상금 등의 보상을 요청함을 나타내는 정보를 상기 정보 기관에게 직/간접적으로 전송하는 단계, 상기 정보 기관으로부터 보조금 등의 보상을 수신하는 단계를 포함할 수 있다.
추가적으로, 상기 건축 디자인은 주변 건물뿐만 아니라, 상기 기초 건물이 위치하는 장소의 주변 환경을 더 고려하여 결정될 수 있다. 예를 들어, 상기 건축 디자인 정보는 상기 기초 건물이 도시 지역에 위치하는지 또는 산악(또는 바닷가) 지역에 위치하는지 등을 더 고려하여 결정될 수 있다.
도 4는 본 발명의 일 실시예에 따른 시스템을 나타내는 블록도이다.
도 4를 참조하면, 서버(500)는 제어 모듈(510), 통신 모듈(520), 입력 모듈(530), 출력 모듈(540), 및/또는 저장 모듈(550)을 포함할 수 있으며, 상기 서버(500)는 본 발명의 이사 서비스 플랫폼을 제공하거나 지원하는 웹사이트(및/또는 모바일앱)를 운용하는 서버일 수 있다.
제어 모듈(410, 510)은 본 발명의 일 실시예에 따른 동작/단계/과정을 구현할 수 있도록 사용자 장치(200) 및/또는 서버(500)를 직/간접적으로 제어할 수 있다. 또한 제어 모듈(410, 510)은 적어도 하나의 프로세서를 포함할 수 있으며, 프로세서는 적어도 하나의 중앙 처리 유닛(CPU) 및/또는 적어도 하나의 그래픽 처리 디바이스(GPU)를 포함할 수 있다.
또한 제어 모듈(410, 510)은 API(Application Programming Interface), IoT(Internet of Things), IIoT(Industrial Internet of Things), ICT(Information & Communication Technology) 기술에 기반하여 제어 정보(예; 명령어) 등을 생성하거나 및/또는 관리할 수 있다.
통신 모듈(420, 520)은 사용자 장치(200), 서버(500) 및/또는 다른 네트워크 엔티티 등과 각종 데이터, 신호, 정보를 송수신할 수 있다. 또한, 통신 모듈(420, 520)은 무선 통신 모듈(예: 셀룰러 통신 모듈, 근거리 무선 통신 모듈, 또는 GNSS(global navigation satellite system) 통신 모듈) 또는 유선 통신 모듈(예: LAN(local area network) 통신 모듈, 또는 전력선 통신 모듈)을 포함할 수 있다. 또한, 통신 모듈(420, 520)은 제1 네트워크(예: 블루투스, WiFi direct 또는 IrDA(Infrared Data Association) 같은 근거리 통신 네트워크) 또는 제2 네트워크(예: 셀룰러 네트워크, 인터넷, 또는 컴퓨터 네트워크(예: LAN 또는 WAN)와 같은 원거리 통신 네트워크)를 통하여 외부 전자 장치와 통신할 수 있다. 이런 여러 종류의 통신 모듈들은 하나의 구성 요소(예: 단일 칩)으로 통합되거나, 또는 서로 별도의 복수의 구성 요소들(예: 복수 칩들)로 구현될 수 있다.
또한 본 발명의 통신 모듈(520)은 아래와 같은 통신표준 기술에 기반하여 동작할 수 있다.
본 발명에서, 하향링크(downlink, DL)는 기지국(base station, BS)에서 사용자 기기(user equipment, UE)로의 통신을 의미하며, 상향링크(uplink, UL)는 UE에서 BS로의 통신을 의미한다. 하향링크에서 전송기(transmitter)는 BS의 일부이고, 수신기(receiver)는 UE의 일부일 수 있다. 상향링크에서 전송기는 UE의 일부이고, 수신기는 BS의 일부일 수 있다. 본 발명에서 BS는 제 1 통신 장치로, UE는 제 2 통신 장치로 표현될 수도 있다. BS는 고정국(fixed station), Node B, eNB(evolved-NodeB), gNB(Next Generation NodeB), BTS(base transceiver system), 접속 포인트(access point, AP), 네트워크 혹은 5G 네트워크 노드, AI 시스템, RSU(road side unit), 로봇 등의 용어에 의해 대체될 수 있다. 또한, UE는 단말(terminal), MS(Mobile Station), UT(User Terminal), MSS(Mobile Subscriber Station), SS(Subscriber Station), AMS(Advanced Mobile Station), WT(Wireless terminal), MTC(Machine-Type Communication) 장치, M2M(Machine-to-Machine) 장치, D2D(Device-to-Device) 장치, 차량(vehicle), 로봇(robot), AI 모듈 등의 용어로 대체될 수 있다.
이하의 기술은 CDMA(Code Division Multiple Access), FDMA(Frequency Division Multiple Access), TDMA(Time Division Multiple Access), OFDMA(Orthogonal Frequency Division Multiple Access), SC-FDMA(Single Carrier FDMA) 등과 같은 다양한 무선 접속 시스템에 사용될 수 있다. CDMA는 UTRA(Universal Terrestrial Radio Access)나 CDMA2000과 같은 무선 기술로 구현될 수 있다. TDMA는 GSM(Global System for Mobile communications)/GPRS(General Packet Radio Service)/EDGE(Enhanced Data Rates for GSM Evolution)와 같은 무선 기술로 구현될 수 있다. OFDMA는 IEEE 802.11 (Wi-Fi), IEEE 802.16 (WiMAX), IEEE 802-20, E-UTRA(Evolved UTRA) 등과 같은 무선 기술로 구현될 수 있다. UTRA는 UMTS(Universal Mobile Telecommunications System)의 일부이다. 3GPP(3rd Generation Partnership Project) LTE(Long Term Evolution)은 E-UTRA를 사용하는 E-UMTS(Evolved UMTS)의 일부이고 LTE-A(Advanced)/LTE-A pro는 3GPP LTE의 진화된 버전이다. 3GPP NR(New Radio or New Radio Access Technology)는 3GPP LTE/LTE-A/LTE-A pro의 진화된 버전이다.
설명을 명확하게 하기 위해, 3GPP 통신 시스템(예, LTE-A, NR)을 기반으로 설명하지만 본 발명의 기술적 사상이 이에 제한되는 것은 아니다. LTE는 3GPP TS 36.xxx Release 8 이후의 기술을 의미한다. 세부적으로, 3GPP TS 36.xxx Release 10 이후의 LTE 기술은 LTE-A로 지칭되고, 3GPP TS 36.xxx Release 13 이후의 LTE 기술은 LTE-A pro로 지칭된다. 3GPP NR은 TS 38.xxx Release 15 이후의 기술을 의미한다. LTE/NR은 3GPP 시스템으로 지칭될 수 있다. "xxx"는 표준 문서 세부 번호를 의미한다. LTE/NR은 3GPP 시스템으로 통칭될 수 있다.
본 발명(disclosure)에서, 노드(node)라 함은 UE와 통신하여 무선 신호를 전송/수신할 수 있는 고정된 포인트(point)을 말한다. 다양한 형태의 BS들이 그 명칭에 관계없이 노드로서 이용될 수 있다. 예를 들어, BS, NB, eNB, 피코-셀 eNB(PeNB), 홈 eNB(HeNB), 릴레이(relay), 리피터(repeater) 등이 노드가 될 수 있다. 또한, 노드는 BS가 아니어도 될 수 있다. 예를 들어, 무선 리모트 헤드(radio remote head, RRH), 무선 리모트 유닛(radio remote unit, RRU)가 될 수 있다. RRH, RRU 등은 일반적으로 BS의 전력 레벨(power level) 더욱 낮은 전력 레벨을 갖는다. 일 노드에는 최소 하나의 안테나가 설치된다. 상기 안테나는 물리 안테나를 의미할 수도 있으며, 안테나 포트, 가상 안테나, 또는 안테나 그룹을 의미할 수도 있다. 노드는 포인트(point)라고 불리기도 한다.
본 발명에서 셀(cell)이라 함은 하나 이상의 노드가 통신 서비스를 제공하는 일정 지리적 영역 혹은 무선 자원을 말한다. 지리적 영역의 "셀"은 노드가 반송파를 이용하여 서비스를 제공할 수 있는 커버리지(coverage)라고 이해될 수 있으며, 무선 자원의 "셀"은 상기 반송파에 의해 설정(configure)되는 주파수 크기인 대역폭(bandwidth, BW)와 연관된다. 노드가 유효한 신호를 전송할 수 있는 범위인 하향링크 커버리지와 UE로부터 유효한 신호를 수신할 수 있는 범위인 상향링크 커버리지는 해당 신호를 나르는 반송파에 의해 의존하므로 노드의 커버리지는 상기 노드가 사용하는 무선 자원의 "셀"의 커버리지와 연관되기도 한다. 따라서 "셀"이라는 용어는 때로는 노드에 의한 서비스의 커버리지를, 때로는 무선 자원을, 때로는 상기 무선 자원을 이용한 신호가 유효한 세기로 도달할 수 있는 범위를 의미하는 데 사용될 수 있다.
본 발명에서 특정 셀과 통신한다고 함은 상기 특정 셀에 통신 서비스를 제공하는 BS 혹은 노드와 통신하는 것을 의미할 수 있다. 또한, 특정 셀의 하향링크/상향링크 신호는 상기 특정 셀에 통신 서비스를 제공하는 BS 혹은 노드로부터의/로의 하향링크/상향링크 신호를 의미한다. UE에게 상향링크/하향링크 통신 서비스를 제공하는 셀을 특히 서빙 셀(serving cell)이라고 한다. 또한, 특정 셀의 채널 상태/품질은 상기 특정 셀에 통신 서비스를 제공하는 BS 혹은 노드와 UE 사이에 형성된 채널 혹은 통신 링크의 채널 상태/품질을 의미한다.
한편, 무선 자원과 연관된 "셀"은 하향링크 자원(DL resources)와 상향링크 자원(UL resources)의 조합, 즉, DL 컴포넌트 반송파(component carrier, CC) 와 UL CC의 조합으로 정의될 수 있다. 셀은 DL 자원 단독, 또는 DL 자원과 UL 자원의 조합으로 설정될(configured) 수도 있다. 반송파 집성(carrier aggregation)이 지원되는 경우, DL 자원(또는, DL CC)의 반송파 주파수(carrier frequency)와 UL 자원(또는, UL CC)의 반송파 주파수(carrier frequency) 사이의 링키지(linkage)는 해당 셀을 통해 전송되는 시스템 정보(system information)에 의해 지시될 수 있다. 여기서, 반송파 주파수는 각 셀 혹은 CC의 중심 주파수(center frequency)와 같을 수도 혹은 다를 수도 있다. 이하에서는 1차 주파수(primary frequency) 상에서 동작하는 셀을 1차 셀(primary cell, Pcell) 혹은 PCC로 지칭하고, 2차 주파수(Secondary frequency)(또는 SCC) 상에서 동작하는 셀을 2차 셀(secondary cell, Scell) 혹은 SCC로 칭한다. Scell이라 함은 UE가 BS와 RRC(Radio Resource Control) 연결 수립(connection establishment) 과정을 수행하여 상기 UE와 상기 BS 간에 RRC 연결이 수립된 상태, 즉, 상기 UE가 RRC_CONNECTED 상태가 된 후에 설정될 수 있다. 여기서 RRC 연결은 UE의 RRC와 BS의 RRC가 서로 RRC 메시지를 주고받을 수 있는 통로를 의미할 수 있다. Scell은 UE에게 추가적인 무선 자원을 제공하기 위해 설정될 수 있다. UE의 성능(capabilities)에 따라, Scell이 Pcell과 함께, 상기 UE를 위한 서빙 셀의 모음(set)을 형성할 수 있다. RRC_CONNECTED 상태에 있지만 반송파 집성이 설정되지 않았거나 반송파 집성을 지원하지 않는 UE의 경우, Pcell로만 설정된 서빙 셀이 단 하나 존재한다.
셀은 고유의 무선 접속 기술을 지원한다. 예를 들어, LTE 셀 상에서는 LTE 무선 접속 기술(radio access technology, RAT)에 따른 전송/수신이 수행되며, 5G 셀 상에서는 5G RAT에 따른 전송/수신이 수행된다.
반송파 집성 기술은 광대역 지원을 위해 목표 대역폭(bandwidth)보다 작은 시스템 대역폭을 가지는 복수의 반송파들을 집성하여 사용하는 기술을 말한다. 반송파 집성은 각각이 시스템 대역폭('채널 대역폭'이라고도 함)을 형성하는 복수의 반송파 주파수들을 사용하여 하향링크 혹은 상향링크 통신을 수행한다는 점에서, 복수의 직교하는 부반송파들로 분할된 기본 주파수 대역을 하나의 반송파 주파수에 실어 하향링크 혹은 상향링크 통신을 수행하는 OFDMA 기술과 구분된다. 예를 들어, OFDMA 혹은 직교 주파수 분할 다중화(orthogonal frequency division multiplexing, OFDM)의 경우에는 일정 시스템 대역폭을 갖는 하나의 주파수 대역이 일정 부반송파 간격을 갖는 복수의 부반송파들로 분할되고, 정보/데이터가 상기 복수의 부반송파들 내에서 매핑되며, 상기 정보/데이터가 맵핑된 상기 주파수 대역은 주파수 상향 변환(upconversion)을 거쳐 상기 주파수 대역의 반송파 주파수로 전송된다. 무선 반송파 집성의 경우에는 각각이 자신의 시스템 대역폭 및 반송파 주파수를 갖는 주파수 대역들이 동시에 통신에 사용될 수 있으며, 반송파 집성에 사용되는 각 주파수 대역은 일정 부반송파 간격을 갖는 복수의 부반송파들로 분할될 수 있다.
3GPP 기반 통신 표준은 물리 계층(physical layer)의 상위 계층(upper layer)(예, 매제 접속 제어(medium access control, MAC) 계층, 무선 링크 제어(radio link control, RLC) 계층, 패킷 데이터 수렴 프로토콜(protocol data convergence protocol, PDCP) 계층, 무선 자원 제어(radio resource control, RRC) 계층, 서비스 데이터 적응 프로토콜(service data adaptation protocol, SDAP), 비-접속 층(non-access stratum, NAS) 계층)로부터 기원한 정보를 나르는 자원 요소(resource element)들에 대응하는 하향링크 물리 채널들과, 물리 계층에 의해 사용되나 상위 계층으로부터 기원하는 정보를 나르지 않는 자원 요소들에 대응하는 하향링크 물리 신호들을 정의한다. 예를 들어, 물리 하향링크 공유 채널(physical downlink shared channel, PDSCH), 물리 브로드캐스트 채널(physical broadcast channel, PBCH), 물리 멀티캐스트 채널(physical multicast channel, PMCH), 물리 제어 포맷 지시자 채널(physical control format indicator channel, PCFICH), 물리 하향링크 제어 채널(physical downlink control channel, PDCCH)이 하향링크 물리 채널들로서 정의되어 있으며, 참조 신호와 동기 신호가 하향링크 물리 신호들로서 정의되어 있다. 파일럿(pilot)이라고도 지칭되는 참조 신호(reference signal, RS)는 BS와 UE가 서로 알고 있는 기정의된 특별한 파형의 신호를 의미하는데, 예를 들어, 셀 특정적 RS(cell specific RS), UE-특정적 RS(UE-specific RS, UE-RS), 포지셔닝 RS(positioning RS, PRS), 채널 상태 정보 RS(channel state information RS, CSI-RS), 복조 참조 신호(demodulation reference signal, DMRS)가 하향링크 참조 신호들로서 정의된다. 한편, 3GPP 기반 통신 표준은 상위 계층으로부터 기원한 정보를 나르는 자원 요소들에 대응하는 상향링크 물리 채널들과, 물리 계층에 의해 사용되나 상위 계층으로부터 기원하는 정보를 나르지 않는 자원 요소들에 대응하는 상향링크 물리 신호들을 정의하고 있다. 예를 들어, 물리 상향링크 공유 채널(physical uplink shared channel, PUSCH), 물리 상향링크 제어 채널(physical uplink control channel, PUCCH), 물리 임의 접속 채널(physical random access channel, PRACH)가 상향링크 물리 채널로서 정의되며, 상향링크 제어/데이터 신호를 위한 복조 참조 신호(demodulation reference signal, DMRS)와 상향링크 채널 측정에 사용되는 사운딩 참조 신호(sounding reference signal, SRS)가 정의된다.
본 발명에서 물리 하향링크 제어 채널(physical downlink control channel, PDCCH)와 물리 하향링크 공유 채널(physical downlink shared channel, PDSCH)는 물리 계층의 하향링크 제어 정보(downlink control information, DCI)와 하향링크 데이터를 나르는 시간-주파수 자원의 집합 혹은 자원요소의 집합을 각각(respectively) 의미할 수 있다. 또한, 물리 상향링크 제어 채널(physical uplink control channel), 물리 상향링크 공유 채널(physical uplink shared channel, PUSCH) 및 물리 임의 접속 채널(physical random access channel)는 물리 계층의 상향링크 제어 정보(uplink control information, UCI), 상향링크 데이터 및 임의 접속 신호를 나르는 시간-주파수 자원의 집합 혹은 자원요소의 집합을 각각 의미한다. 이하에서 UE가 상향링크 물리 채널(예, PUCCH, PUSCH, PRACH)를 전송한다는 것은 해당 상향링크 물리 채널 상에서 혹은 통해서 DCI, 상향링크 데이터, 또는 임의 접속 신호를 전송한다는 것을 의미할 수 있다. BS가 상향링크 물리 채널을 수신한다는 것은 해당 상향링크 물리 채널 상에서 혹은 통해서 DCI, 상향링크 데이터, 또는 임의 접속 신호를 수신한다는 것을 의미할 수 있다. BS가 하향링크 물리 채널(예, PDCCH, PDSCH)를 전송한다는 것은 해당 하향링크 물리 채널 상에서 혹은 통해서 DCI 혹은 상향링크 데이터를 전송한다는 것과 동일한 의미로 사용된다. UE가 하향링크 물리 채널을 수신한다는 것은 해당 하향링크 물리 채널 상에서 혹은 통해서 DCI 혹은 상향링크 데이터를 수신한다는 것을 의미할 수 있다.
본 발명에서 수송 블록(transport block)은 물리 계층을 위한 페이로드이다. 예를 들어, 상위 계층 혹은 매체 접속 제어(medium access control, MAC) 계층으로부터 물리 계층에 주어진 데이터가 기본적으로 수송 블록으로 지칭된다.
본 발명에서 HARQ는 오류 제어 방법의 일종이다. 하향링크를 통해 전송되는 HARQ-ACK은 상향링크 데이터에 대한 오류 제어를 위해 사용되며, 상향링크를 통해 전송되는 HARQ-ACK은 하향링크 데이터에 대한 오류 제어를 위해 사용된다. HARQ 동작을 수행하는 전송단은 데이터(예, 수송 블록, 코드워드)를 전송한 후 긍정 확인(ACK)를 기다린다. HARQ 동작을 수행하는 수신단은 데이터를 제대로 받은 경우만 긍정 확인(ACK)을 보내며, 수신 데이터에 오류가 생긴 경우 부정 확인(negative ACK, NACK)을 보낸다. 전송단이 ACK을 수신한 경우에는 (새로운) 데이터를 전송할 수 있고, NACK을 수신한 경우에는 데이터를 재전송할 수 있다. BS가 스케줄링 정보와 상기 스케줄링 정보에 따른 데이터를 전송한 뒤, UE로부터 ACK/NACK을 수신하고 재전송 데이터가 전송될 때까지 시간 딜레이(delay)가 발생한다. 이러한 시간 딜레이는 채널 전파 지연(channel propagation delay), 데이터 디코딩(decoding)/인코딩(encoding)에 걸리는 시간으로 인해 발생한다. 따라서, 현재 진행 중인 HARQ 프로세스가 끝난 후에 새로운 데이터를 보내는 경우, 시간 딜레이로 인해 데이터 전송에 공백이 발생한다. 따라서, 시간 딜레이 구간 동안에 데이터 전송에 공백이 생기는 것을 방지하기 위하여 복수의 독립적인 HARQ 프로세스가 사용된다. 예를 들어, 초기 전송과 재전송 사이에 7번의 전송 기회(occasion)가 있는 경우, 통신 장치는 7개의 독립적인 HARQ 프로세스를 운영하여 공백 없이 데이터 전송을 수행할 수 있다. 복수의 병렬 HARQ 프로세스들을 활용하면, 이전 UL/DL 전송에 대한 HARQ 피드백을 기다리는 동안 UL/DL 전송이 연속적으로 수행될 수 있다.
본 발명에서 채널 상태 정보(channel state information, CSI)는 UE와 안테나 포트 사이에 형성되는 무선 채널(혹은 링크라고도 함)의 품질을 나타낼 수 있는 정보를 통칭한다. CSI는 채널 품질 지시자(channel quality indicator, CQI), 프리코딩 행렬 지시자 (precoding matrix indicator, PMI), CSI-RS 자원 지시자(CSI-RS resource indicator, CRI), SSB 자원 지시자(SSB resource indicator, SSBRI), 레이어 지시자(layer indicator. LI), 랭크 지시자(rank indicator, RI) 또는 참조 신호 수신 품질(reference signal received power, RSRP) 중 적어도 하나를 포함할 수 있다.
본 발명에서 주파수 분할 다중화(frequency division multiplexing, FDM)라 함은 신호/채널/사용자들을 서로 다른 주파수 자원에서 전송/수신하는 것을 의미할 수 있으며, 시간 분할 다중화(time division multiplexing, CDM)이라 함은 신호/채널/사용자들을 서로 다른 시간 자원에서 전송/수신하는 것을 의미할 수 있다.
본 발명에서 주파수 분할 듀플렉스(frequency division duplex, FDD)는 상향링크 반송파에서 상향링크 통신이 수행되고 상기 상향링크용 반송파에 링크된 하향링크용 반송파에서 하향링크 통신이 수행되는 통신 방식을 말하며, 시간 분할 듀플렉스(time division duplex, TDD)라 함은 상향링크 통신과 하향링크 통신이 동일 반송파에서 시간을 나누어 수행되는 통신 방식을 말한다.
본 발명에서 사용된 배경기술, 용어, 약어 등에 관해서는 본 발명 이전에 공개된 표준 문서에 기재된 사항을 참조할 수 있다. 예를 들어, 3GPP TS 36, 24, 38 시리즈에 해당하는 문서(http://www.3gpp.org/specifications/specification-numbering)를 참조할 수 있다.
입력 모듈(430, 530)은 사용자 장치(200), 서버(500) 및/또는 다른 네트워크 엔티티의 구성요소(예: 제어 모듈(510) 등)에 사용될 명령 또는 데이터를 사용자 장치(200) 및/또는 서버(500)의 외부(예: 사용자(예; 제1 사용자, 제2 사용자 등), 서버(500)의 관리자 등)로부터 수신할 수 있다. 또한, 입력 모듈(430, 530)은 사용자 장치(200) 및/또는 서버(500)에 설치된 터치인식가능 디스플레이, 터치패드, 버튼형 인식 모듈, 음성인식센서, 마이크, 마우스, 또는 키보드 등을 포함할 수 있다. 여기서 터치인식가능 디스플레이, 터치패드, 버튼형 인식 모듈은 감압식 및/또는 정전식 방식을 통하여 사용자의 신체(예; 손가락)를 통한 터치를 인식할 수 있다.
출력 모듈(440, 540)은 사용자 장치(200) 및/또는 서버(500)의 제어 모듈(410, 510)에 의해 생성되거나 통신 모듈(420, 520)을 통하여 획득된 신호(예; 음성 신호), 정보, 데이터, 이미지, 및/또는 각종 객체(object) 등을 표시하는 모듈이다. 예를 들면, 출력 모듈(440, 540)은 디스플레이, 스크린, 표시부(displaying unit), 스피커 및/또는 발광장치(예; LED 램프) 등을 포함할 수 있다.
저장 모듈(550)은 사용자 장치(200) 및/또는 서버(500)의 동작을 위한 기본 프로그램, 응용 프로그램, 설정 정보 등의 데이터를 저장한다. 또한, 저장 모듈은 플래시 메모리 타입(Flash Memory Type), 하드 디스크 타입(Hard Disk Type), 멀티미디어 카드 마이크로 타입(Multimedia Card Micro Type), 카드 타입의 메모리(예를 들면, SD 또는 XD 메모리 등), 자기 메모리, 자기 디스크, 광디스크, 램(Random Access Memory, RAM), SRAM(Static Random Access Memory), 롬(Read-Only Memory, ROM), PROM(Programmable Read-Only Memory), EEPROM(Electrically Erasable Programmable Read-Only Memory) 중 적어도 하나의 저장매체를 포함할 수 있다.
또한, 저장 모듈(550)은 사용자 장치(200) 및/또는 서버(500)를 사용하는 고객(제1 사용자)의 개인정보, 관리자(제2 사용자)의 개인정보 등을 저장할 수 있다. 여기서 개인정보는 이름, 아이디(ID; identifier), 패스워드, 도로명 주소, 전화 번호, 휴대폰 번호, 이메일 주소, 및/또는 서버(500)에 의해 생성되는 리워드(reward)(예; 포인트 등)를 나타내는 정보 등을 포함할 수 있다. 또한, 제어 모듈(410, 510)은 상기 저장 모듈(550)에 저장된 각종 이미지, 프로그램, 컨텐츠, 데이터 등을 이용하여 다양한 동작을 수행할 수 있다.
이와 같이, 본 발명의 다양한 실시예들은 특정 관점에서 컴퓨터 리드 가능 기록 매체(computer readable recording medium)에서 컴퓨터 리드 가능 코드(computer readable code)로서 구현될 수 있다. 컴퓨터 리드 가능 기록 매체는 컴퓨터 시스템에 의해 리드될 수 있는 데이터를 저장할 수 있는 임의의 데이터 저장 디바이스이다. 컴퓨터 리드 가능 기록 매체의 예들은 읽기 전용 메모리(read only memory: ROM: ROM)와, 랜덤-접속 메모리(random access memory: RAM: 'RAM)와, 컴팩트 디스크- 리드 온니 메모리(compact disk-read only memory: CD-ROM)들과, 마그네틱 테이프(magnetic tape)들과, 플로피 디스크(floppy disk)들과, 광 데이터 저장 디바이스들, 및 캐리어 웨이브(carrier wave)들(인터넷을 통한 데이터 송신 등)을 포함할 수 있다. 컴퓨터 리드 가능 기록 매체는 또한 네트워크 연결된 컴퓨터 시스템들을 통해 분산될 수 있고, 따라서 컴퓨터 리드 가능 코드는 분산 방식으로 저장 및 실행된다. 또한, 본 발명의 다양한 실시예들을 성취하기 위한 기능적 프로그램들, 코드, 및 코드 세그먼트(segment)들은 본 발명이 적용되는 분야에서 숙련된 프로그래머들에 의해 쉽게 해석될 수 있다.
또한 본 발명의 다양한 실시예들에 따른 장치 및 방법은 하드웨어, 소프트웨어 또는 하드웨어 및 소프트웨어의 조합의 형태로 실현 가능하다는 것을 알 수 있을 것이다. 이러한 소프트웨어는 예를 들어, 삭제 가능 또는 재기록 가능 여부와 상관없이, ROM 등의 저장 장치와 같은 휘발성 또는 비휘발성 저장 장치, 또는 예를 들어, RAM, 메모리 칩, 장치 또는 집적 회로와 같은 메모리, 또는 예를 들어 콤팩트 디스크(compact disk: CD), DVD, 자기 디스크 또는 자기 테이프 등과 같은 광학 또는 자기적으로 기록 가능함과 동시에 기계(예를 들어, 컴퓨터)로 읽을 수 있는 저장 매체에 저장될 수 있다. 본 발명의 다양한 실시예들에 따른 방법은 제어부 및 메모리를 포함하는 컴퓨터 또는 휴대 단말에 의해 구현될 수 있고, 이러한 메모리는 본 발명의 실시예들을 구현하는 명령들을 포함하는 프로그램 또는 프로그램들을 저장하기에 적합한 기계로 읽을 수 있는 저장 매체의 한 예임을 알 수 있을 것이다.
따라서, 본 발명은 본 명세서의 청구항에 기재된 장치 또는 방법을 구현하기 위한 코드를 포함하는 프로그램 및 이러한 프로그램을 저장하는 기계(컴퓨터 등)로 읽을 수 있는 저장 매체를 포함한다. 또한, 이러한 프로그램은 유선 또는 무선 연결을 통해 전달되는 통신 신호와 같은 임의의 매체를 통해 전자적으로 이송될 수 있고, 본 발명은 이와 균등한 것을 적절하게 포함한다.
본 명세서와 도면에 개시된 본 발명의 실시 예들은 본 발명의 기술 내용을 쉽게 설명하고, 본 발명의 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 발명의 범위를 한정하고자 하는 것은 아니다. 또한 앞서 설명된 본 발명에 따른 실시예들은 예시적인 것에 불과하며, 당해 분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 범위의 실시예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 다음의 특허청구범위에 의해서 정해져야 할 것이다.

Claims (2)

  1. 기초 구조물에 3차원 입체 디자인을 합성한 이미지를 사용자에게 제공하는 시스템에 있어서,
    상기 기초 구조물을 촬영함으로써 제1 기초 이미지 정보를 획득하고 제1 건축 디자인 정보를 출력(output)하는 사용자 장치; 및
    상기 제1 기초 이미지 정보에 기반하여 상기 제1 건축 디자인 정보를 생성하여 상기 사용자 장치에게 전달하는 서버; 를 포함하고,
    상기 서버는,
    상기 제1 기초 이미지 정보에 HOG(Histogram of Oriented Gradient), Haar-like feature, Co-occurrence HOG, LBP(local binary pattern) 및 FAST(features from accelerated segment test) 중 적어도 어느 하나에 기반하는 객체 추출 알고리즘을 적용함으로써 객체 정보를 획득하고,
    상기 사용자 장치의 내부 배터리 정보를 상기 사용자 장치로부터 수신하고,
    상기 객체 정보로부터 복수의 벡터 값을 추출하고,
    수학식 1에 기반하여 상기 복수의 벡터 값에 포함되는 적어도 하나의 제1 벡터(x1, y1, z1)와 적어도 하나의 제2 벡터(x2, y2, z2) 사이의 각도(
    Figure 112020502660296-pat00008
    )를 산출하고,
    [수학식 1]
    Figure 112020502660296-pat00009

    상기 복수의 벡터 값 중에서 상기 산출되는 각도가 0 내지 제1 각도인 제1 케이스, 상기 산출되는 각도가 제2 각도 내지 제3 각도 사이인 제2 케이스 및 상기 산출되는 각도가 제4 각도 내지 180도 사이인 제3 케이스인 경우의 합(sum)의 비율이 소정의 비율 임계치 미만인 경우에는 재촬영 요청 메시지를 생성하여 상기 사용자 장치를 통하여 표시되도록 제어하고,
    상기 복수의 벡터 값 중에서 상기 산출되는 각도가 상기 제1 케이스, 상기 제2 케이스 및 상기 제3 케이스인 경우의 합의 비율이 상기 비율 임계치 이상인 경우에는 상기 제1 기초 이미지 정보, 상기 객체 정보 및 상기 복수의 벡터 값에 기반하여 상기 제1 건축 디자인 정보를 생성하고,
    상기 제1 건축 디자인 정보는 상기 기초 구조물에 추천 건축 디자인에 상응하는 3차원 이미지가 합성되는 증강 현실 이미지(Augmented Reality image)를 포함하는 것을 특징으로 하고,
    상기 서버는,
    복수의 제2 기초 이미지 정보와 상기 복수의 제2 기초 이미지 정보 각각에 매칭되는 복수의 제2 건축 디자인 정보를 학습데이터로 설정하여 인공신경망을 학습시키고,
    상기 학습된 인공신경망에 상기 제1 기초 이미지 정보 또는 상기 객체 정보를 입력함으로써, 상기 제1 건축 디자인 정보를 상기 학습된 인공신경망으로부터 획득하는 것을 특징으로 하고,
    상기 복수의 제2 기초 이미지 정보는 상기 제1 기초 이미지 정보보다 이전에 생성된 정보이고,
    상기 복수의 제2 건축 디자인 정보 각각은 상기 복수의 제2 기초 이미지 정보 각각에 기반하여 생성된 것인,
    시스템.
  2. 기초 구조물에 3차원 입체 디자인을 합성한 이미지를 사용자에게 제공하는 제1 사용자 장치에 있어서,
    상기 기초 구조물을 촬영함으로써 복수의 사진 및 복수의 영상 중 적어도 어느 하나를 획득하는 입력 모듈;
    복수의 사진 및 복수의 영상 중 적어도 어느 하나에 기반하여 제1 기초 이미지 정보를 획득하고, 상기 제1 기초 이미지 정보로부터 제1 객체 정보 및 벡터 정보를 획득하고, 상기 제1 객체 정보 및 벡터 정보로부터 제1 건축 디자인 정보를 생성하는 제어 모듈;
    상기 제1 건축 디자인 정보를 출력(output)하는 출력 모듈; 및
    상기 입력 모듈, 상기 제어 모듈 및 상기 출력 모듈에 공급하기 위한 전력을 충전하는 내부 배터리; 를 포함하고,
    상기 제어 모듈은,
    상기 제1 기초 이미지 정보에 HOG(Histogram of Oriented Gradient), Haar-like feature, Co-occurrence HOG, LBP(local binary pattern) 및 FAST(features from accelerated segment test) 중 적어도 어느 하나에 기반하는 객체 추출 알고리즘을 적용함으로써 상기 제1 객체 정보를 획득하고,
    상기 제1 객체 정보로부터 복수의 벡터 값을 추출하고,
    수학식 1에 기반하여 상기 복수의 벡터 값에 포함되는 적어도 하나의 제1 벡터(x1, y1, z1)와 적어도 하나의 제2 벡터(x2, y2, z2) 사이의 각도(
    Figure 112020502660296-pat00010
    )를 산출하고,
    [수학식 1]
    Figure 112020502660296-pat00011

    상기 복수의 벡터 값 중에서 상기 산출되는 각도가 0 내지 제1 각도인 제1 케이스, 상기 산출되는 각도가 제2 각도 내지 제3 각도 사이인 제2 케이스 및 상기 산출되는 각도가 제4 각도 내지 180도 사이인 제3 케이스인 경우의 합(sum)의 비율이 소정의 비율 임계치 미만인 경우에는 재촬영 요청 메시지를 생성하여 상기 사용자 장치를 통하여 표시되도록 제어하고,
    상기 복수의 벡터 값 중에서 상기 산출되는 각도가 상기 제1 케이스, 상기 제2 케이스 및 상기 제3 케이스인 경우의 합의 비율이 상기 비율 임계치 이상인 경우에는 상기 제1 기초 이미지 정보, 상기 객체 정보 및 상기 복수의 벡터 값에 기반하여 상기 제1 건축 디자인 정보를 생성하고,
    상기 제1 건축 디자인 정보는 상기 기초 구조물에 추천 건축 디자인에 상응하는 3차원 이미지가 합성되는 증강 현실 이미지(Augmented Reality image)를 포함하는 것을 특징으로 하고,
    상기 제어 모듈은,
    복수의 제2 기초 이미지 정보와 상기 복수의 제2 기초 이미지 정보 각각에 매칭되는 복수의 제2 건축 디자인 정보를 학습데이터로 설정하여 인공신경망을 학습시키고,
    상기 학습된 인공신경망에 상기 제1 기초 이미지 정보 또는 상기 제1 객체 정보를 입력함으로써, 상기 제1 건축 디자인 정보를 상기 학습된 인공신경망으로부터 획득하는 것을 특징으로 하고,
    상기 복수의 제2 기초 이미지 정보는 상기 제1 기초 이미지 정보보다 이전에 생성된 정보이고,
    상기 복수의 제2 건축 디자인 정보 각각은 상기 복수의 제2 기초 이미지 정보 각각에 기반하여 생성된 것인,
    제1 사용자 장치.
KR1020200089352A 2020-07-20 2020-07-20 기초 구조물에 3차원 입체 디자인을 합성한 이미지를 포함하는 건축 정보를 제공하는 방법 및 그 시스템 KR102168223B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200089352A KR102168223B1 (ko) 2020-07-20 2020-07-20 기초 구조물에 3차원 입체 디자인을 합성한 이미지를 포함하는 건축 정보를 제공하는 방법 및 그 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200089352A KR102168223B1 (ko) 2020-07-20 2020-07-20 기초 구조물에 3차원 입체 디자인을 합성한 이미지를 포함하는 건축 정보를 제공하는 방법 및 그 시스템

Publications (1)

Publication Number Publication Date
KR102168223B1 true KR102168223B1 (ko) 2020-10-21

Family

ID=73034690

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200089352A KR102168223B1 (ko) 2020-07-20 2020-07-20 기초 구조물에 3차원 입체 디자인을 합성한 이미지를 포함하는 건축 정보를 제공하는 방법 및 그 시스템

Country Status (1)

Country Link
KR (1) KR102168223B1 (ko)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130101622A (ko) 2012-02-14 2013-09-16 구대근 증강 현실 기반의 3 차원 디자인을 위한 디자인 평가용 모바일 장치, 디자인 평가 시스템 및 디자인 평가 방법
KR20160121257A (ko) * 2015-04-10 2016-10-19 서울과학기술대학교 산학협력단 증강현실을 이용한 건축 디자인 검증 시스템과 방법
KR20200070287A (ko) * 2017-10-05 2020-06-17 어플리케이션스 모빌스 오버뷰 인코포레이티드 객체 인식 방법

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130101622A (ko) 2012-02-14 2013-09-16 구대근 증강 현실 기반의 3 차원 디자인을 위한 디자인 평가용 모바일 장치, 디자인 평가 시스템 및 디자인 평가 방법
KR20160121257A (ko) * 2015-04-10 2016-10-19 서울과학기술대학교 산학협력단 증강현실을 이용한 건축 디자인 검증 시스템과 방법
KR20200070287A (ko) * 2017-10-05 2020-06-17 어플리케이션스 모빌스 오버뷰 인코포레이티드 객체 인식 방법

Similar Documents

Publication Publication Date Title
US11153721B2 (en) Sensor network enhancement mechanisms
US10237717B2 (en) Method for proximity-based notification in wireless communication system, and device for same
DE102020201015A1 (de) Technologien zum verteilen iterativer berechnungen in heterogenen computerumgebungen
CN112369049B (zh) 无线网络中的分布式位置确定
KR20190104928A (ko) Xr 디바이스 및 xr 디바이스 제어 방법
EP3016442A2 (en) Method for scanning neighboring devices and electronic device thereof
EP3623836A1 (en) Location estimation component, localization module, computer program product and proximity system for enabling proximity services in mobile networks
US20160358013A1 (en) Method and system for ambient proximity sensing techniques between mobile wireless devices for imagery redaction and other applicable uses
CN103428890B (zh) 机器型通信用户设备与无线小区的选择性合并
CN110140381A (zh) 用于编码多个小区和波束的系统信息的系统和方法
KR20160063041A (ko) 근접 서비스 데이터 송신 방법 및 그 전자 장치
US11366917B2 (en) XR device and method for controlling the same
JP6363214B2 (ja) デバイス・ツー・デバイスセッションのための分散セットアップのシステム、方法、及びデバイス
KR20190103099A (ko) Xr 디바이스 및 그 제어 방법
KR102183476B1 (ko) 웹 브라우저 기반 회의 서비스 제공 시스템
KR20190098925A (ko) Xr 디바이스 및 그 제어 방법
US11611847B2 (en) Antenna selection and device orientation
CN106465352A (zh) 用于寻呼消息覆盖增强的控制信道传输
KR20210026172A (ko) 멀티미디어 디바이스 및 그 제어 방법
WO2022073207A1 (zh) 模型评估方法及装置
KR20210051469A (ko) Xr 디바이스 및 그 제어 방법
Agrawal Embedded sensor systems
KR20190106851A (ko) Xr 컨텐츠 제공 방법 및 xr 컨텐츠 제공 디바이스
KR102168223B1 (ko) 기초 구조물에 3차원 입체 디자인을 합성한 이미지를 포함하는 건축 정보를 제공하는 방법 및 그 시스템
WO2020063168A1 (zh) 一种数据处理方法、终端、服务器和计算机存储介质

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant