KR20220076191A - Providing system for realistic interactive smart contents and the method thereof - Google Patents

Providing system for realistic interactive smart contents and the method thereof Download PDF

Info

Publication number
KR20220076191A
KR20220076191A KR1020200165101A KR20200165101A KR20220076191A KR 20220076191 A KR20220076191 A KR 20220076191A KR 1020200165101 A KR1020200165101 A KR 1020200165101A KR 20200165101 A KR20200165101 A KR 20200165101A KR 20220076191 A KR20220076191 A KR 20220076191A
Authority
KR
South Korea
Prior art keywords
data
unit
production
site
creation system
Prior art date
Application number
KR1020200165101A
Other languages
Korean (ko)
Other versions
KR102410690B1 (en
Inventor
강문철
Original Assignee
주식회사 크레아코퍼레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 크레아코퍼레이션 filed Critical 주식회사 크레아코퍼레이션
Priority to KR1020200165101A priority Critical patent/KR102410690B1/en
Publication of KR20220076191A publication Critical patent/KR20220076191A/en
Application granted granted Critical
Publication of KR102410690B1 publication Critical patent/KR102410690B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8545—Content authoring for generating interactive applications
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00—Animation
    • G06T13/20—3D [Three Dimensional] animation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8146—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/30—Computing systems specially adapted for manufacturing

Abstract

본 발명의 일실시례에 따른 실감형 인터랙티브 스마트 콘텐츠 생성시스템은 생산현장의 현장VR 및 오브젝트를 360°촬영하는 VR촬영부, 현장VR의 정보 매핑, 스티칭, 리터칭 및 장면간 이동에 대응하는 편집 데이터를 입력받고 상기 편집 데이터를 형식 변환하는 VR제작부, 제품의 전체 제조 공정과 부분 공정을 블록형태로 제작한 순서도가 표시되는 공정화면부, 컴퓨터 그래픽을 이용하여 생성한 모델링 데이터, 애니메이션 데이터 및 후편집 데이터를 통합하여 통합 데이터를 생성하는 CG제작부, 실제 공정과정을 영상과 사진으로 촬영 및 제작하는 영상·스냅촬영부 및 상기 제작된 VR, CG, 영상·스냅 촬영한 컨텐츠를 보정하는 매핑·디자인부로 구성되어 제작되는 것을 특징으로 하는 실감형 인터랙티브 스마트 콘텐츠 생성시스템에 관한 것이다.The immersive interactive smart content creation system according to an embodiment of the present invention includes a VR shooting unit that shoots 360° of on-site VR and objects at the production site, information mapping, stitching, retouching, and editing data corresponding to movement between scenes. VR production unit that receives input and converts the edited data into a format, a process screen unit that displays a flowchart of the entire manufacturing process and partial process of the product in block form, modeling data generated using computer graphics, animation data, and post-editing It consists of a CG production unit that integrates data to create integrated data, a video/snap recording unit that shoots and produces images and photos of the actual process, and a mapping/design unit that corrects the VR, CG, and video/snapshot contents produced above. It relates to an immersive interactive smart content creation system, characterized in that it is constructed and produced.

Description

실감형 인터랙티브 스마트 콘텐츠 생성시스템 및 그 방법{PROVIDING SYSTEM FOR REALISTIC INTERACTIVE SMART CONTENTS AND THE METHOD THEREOF}Realistic interactive smart content creation system and method

본 발명은 실감형 인터랙티브 스마트 콘텐츠 생성시스템 및 그 방법에 관한 것으로, 보다 상세하게는 산업용 안전교육 및 직무능력을 강화하는 실감형 인터랙티브 스마트 콘텐츠 생성시스템 및 그 방법에 관한 것이다.The present invention relates to a immersive interactive smart content creation system and method, and more particularly, to a immersive interactive smart content creation system and method for enhancing industrial safety education and job competency.

제조업 현장에서는 작업자가 공정과정이나 작업에 있어서 텍스트로 이해하기에는 어려운 부분들이 많아 직무능력을 키우는데 실제 작업을 통해 일정시간 이상이 소요되어야 숙련이 가능하고, 현장에서의 안전사고 역시 빈번하게 일어나고 있다.In the manufacturing field, there are many parts that are difficult for workers to understand as texts in the process or work.

그러나, 이러한 현장업무 중심의 산업에서 직무교육과 안전교육은 사진과 텍스트로 이루어진 경우가 많기 때문에 실무자들의 업무 이해와 관심을 유도하기 힘든 경향이 있다.However, in this field-oriented industry, job training and safety education are often made up of photos and texts, so it tends to be difficult to induce the understanding and interest of working-level workers.

따라서 360° VR기술을 이용하여 풍부한 액션과 작업영상을 통해 현장 직무능력을 강화시킬 수 있는 콘텐츠와 안전교육 콘텐츠 개발이 필요하다.Therefore, it is necessary to develop contents and safety education contents that can strengthen field job skills through rich action and work images using 360° VR technology.

본 발명은 이와 같은 문제점을 해결하기 위해 창안된 것으로서, 현장에서 생산 및 가공되는 제품을 CG제작을 통해 공정과정을 애니메이션화하고 VR촬영을 이용하여 현장 내 주요지점과 제품을 360°촬영하여 현장감을 높이며, 각 공정별 사진과 작업영상을 통하여 풍부한 액션을 통해 작업자들의 안전교육 효과를 증대시키고 현장의 위험요인, 안전작업방법 등을 교육할 수 있는 것과 동시에 직무능력을 강화시키는 실감형 인터랙티브 스마트 콘텐츠 생성시스템을 제공함을 목적으로 한다.The present invention was devised to solve such a problem, and it animates the process process through CG production of products produced and processed in the field, and uses VR shooting to shoot 360° of main points and products in the field to increase the sense of presence. , a realistic interactive smart content creation system that enhances the safety training effect of workers through rich actions through photos and work videos for each process, and can educate on-site risk factors and safe work methods, while at the same time strengthening job skills is intended to provide.

상기한 목적을 달성하기 위한 본 발명의 일실시례에 따른 실감형 인터랙티브스마트 콘텐츠는 생산현장의 현장VR 및 오브젝트를 360° 촬영하는 VR촬영부, 촬영된 현장VR의 정보 매핑, 스티칭, 리터칭 및 장면간 이동에 대응하는 편집 데이터를 입력받고 상기 편집 데이터를 형식변환하는 VR제작부, 제품의 전체 제조 공정과 부분 공정을 블록형태로 제작한 순서도가 표시되는 공정화면부, 컴퓨터 그래픽을 이용하여 생성한 모델링 데이터, 애니메이션 데이터 및 후편집 데이터를 통합하여 통합 데이터를 생성하는 CG제작부, 실제 공정과정을 영상과 사진으로 촬영 및 제작하는 영상·스냅촬영부 및 상기 제작된 VR, CG, 영상, 스냅 촬영한 컨텐츠를 보정하는 매핑·디자인부 로 구성되어 제작되는 것을 포함한다.Realistic interactive smart content according to an embodiment of the present invention for achieving the above object is a VR shooting unit that shoots 360° of on-site VR and objects in the production site, information mapping, stitching, retouching and scenes of the captured on-site VR A VR production unit that receives edit data corresponding to movement between movements and converts the edited data into a format, a process screen that displays a flowchart of the entire manufacturing process and partial processes of the product in block form, modeling created using computer graphics A CG production unit that creates integrated data by integrating data, animation data, and post-editing data, a video/snap recording unit that shoots and produces images and photos of the actual process, and VR, CG, video, and snapshot contents It includes those that are made up of a mapping and design department that corrects

본 발명의 일측에 따르면 상기 VR 촬영부는, 생산현장에서 주요 지점에서 360° VR촬영을 하는 현장VR 및 촬영된 파노라마 사진을 스티칭, 리터칭하고 공정제품 종류 및 구조를 360° 회전과 부품 설명이 가능하도록 하는 오브젝트 VR을 이용하여 촬영할 수 있다.According to one aspect of the present invention, the VR photographing unit is configured to stitch and retouch on-site VR that takes 360° VR shooting at key points in the production site and the captured panoramic photos, and to rotate 360° of product types and structures and explain parts. You can shoot using object VR.

본 발명의 일측에 따르면, 상기 VR 제작부는, 상기 촬영된 VR 파노라마 사진에 핫스팟 아이콘을 제작, 편집하여 작업 안전수칙, 위험요소, 등의 현장정보를 제공하고 매핑작업을 통해 자연스럽게 VR로 제작할 수 있다.According to one aspect of the present invention, the VR production unit creates and edits a hotspot icon in the captured VR panoramic photo, provides on-site information such as work safety rules, risk factors, etc., and can be naturally produced in VR through a mapping operation. .

본 발명의 일측에 따르면, 상기 CG제작부는, 공정제품의 상세 모델링 및 배경 Material, 조명 등을 모델링하고 공정제품의 Timeline에 따라 1식-1분이내의 애니메이션으로 제작하여 랜더링과정을 거쳐 후편집으로 자막, BGM을 추가하여 제작할 수 있다.According to one aspect of the present invention, the CG production unit models detailed modeling of the process product, background material, lighting, etc., produces animations within 1 meal - 1 minute according to the timeline of the process product, goes through a rendering process, and is subtitled after editing. , can be produced by adding BGM.

본 발명의 일측에 따르면, 상기 영상·스냅 촬영부는 According to one aspect of the present invention, the image/snap photographing unit

공정화면부에 상세공정의 사진이미지 혹은 공정영상을 제공하는데 있어서 필요한 스냅사진과 공정 영상을 촬영하여 제공할 수 있다.In order to provide a detailed process photographic image or process image to the process screen unit, snapshots and process images may be taken and provided.

본 발명의 일측에 따르면, 매핑·디자인부는According to one aspect of the present invention, the mapping and design unit

촬영된 실사형 VR과 오브젝트 VR, 공정 제품 Animation 영상, 상세 공정 별 스냅사진 및 영상을 전체적으로 통합하는데 있어서 매핑과 같은 그래픽 보정을 통하여 이질감을 느끼지 않도록 함과 동시에 제작 콘텐츠 내 다국적 음성해설(나래이션)을 삽입할 수 있다.In integrating the filmed live-action VR, object VR, process product animation image, detailed process snapshots and images as a whole, graphic correction such as mapping is used to not feel a sense of difference and, at the same time, multinational audio commentary (narration) is provided in the production content. can be inserted.

본 발명의 일측에 따르면, VR 콘텐츠 생성 시스템에 있어서,According to one aspect of the present invention, in a VR content creation system,

오브젝트에 대한 모델링 데이터를 생성하는 모델링 데이터 생성부, CG효과를 적용하여 상기 오브젝트의 생산, 조립, 수리 중 적어도 어느 하나에 대한 공정을 표현하는 CG공정데이터를 생성하는 CG공정데이터 생성부, 상기 오브젝트가 존재하는 공간의 실사 영상 또는 사진을 이용하여 실사 데이터를 생성하는 실사데이터 생성부 및 상기 모델링 데이터, 상기 CG공정데이터, 상기 실사데이터를 통합하여 콘텐츠를 생성하는 통합콘텐츠 생성부를 포함하되, 상기 통합콘텐츠 생성부는,A modeling data generation unit that generates modeling data for an object, a CG process data generation unit that applies a CG effect to generate CG process data expressing a process for at least any one of production, assembly, and repair of the object, the object Including a live-action data generating unit for generating live-action data using a live-action image or photo of a space in which is present, and an integrated content generating unit for generating content by integrating the modeling data, the CG process data, and the live-action data, the integration content creation unit,

상기 모델링 데이터, 상기 CG공정데이터, 상기 실사데이터가 독립적으로 열람 가능하도록 한다. The modeling data, the CG process data, and the actual data can be viewed independently.

본 발명에 의하면, 제품의 VR촬영을 통해 구조와 공정과정을 CG 제작을 통해 애니메이션화하고 전체 공정과정과 순서 및 각 세부 공정별 사진과 작업영상을 VR촬영을 통한 풍부한 액션으로 작업자들의 안전교육 효과를 증대시키고 현장의 위험요인, 안전작업방법 등을 교육할 수 있는 것과 동시에 현장 직무능력을 강화시키고 공정별 작업과정과 목적을 이해시킬 수 있는 효과가 있다.According to the present invention, the structure and process process are animated through CG production through VR shooting of the product, and the safety education effect of workers can be improved through rich action through VR shooting of the entire process and sequence, and photos and work images for each detailed process. It has the effect of strengthening the field job competency and understanding the work process and purpose of each process, while at the same time being able to educate on-site risk factors and safe work methods.

도 1은 본 발명의 일실시례에 따른 실감형 인터랙티브 스마트 콘텐츠 생성시스템의 서비스 프로세스를 나타낸 도면이다.
도 2는 본 발명의 일실시례에 따른 실감형 인터랙티브 스마트 콘텐츠 생성시스템의 서비스 구조도이다.
도 3은 본 발명의 밸브 제작 공정을 예시로 한 전체 공정도 화면 구성도이다.
도 4는 도 3의 일실시례에 따른 세부 공정도 화면이다.
도 5는 본 발명의 일실시례에 따른 메뉴별 화면 구성을 나타낸 도면이다.
도 6은 본 발명의 일실시례에 따른 VR현장 투어의 화면이다.
도 7은 본 발명의 일실시례에 따른 공정 VR 현장 정보 화면이다.
도 8은 본 발명의 일실시례에 따른 공정 VR 안전 수칙 정보 화면이다.
도 9는 본 발명의 예시인 밸브 제작 공정을 CG를 통한 애니메이션으로 제작한 화면이다.
도 10은 본 발명의 일실시례에 따른 VR콘텐츠 생성 시스템을 나타낸 블록도이다.1 is a diagram illustrating a service process of an immersive interactive smart content creation system according to an embodiment of the present invention.
2 is a service structure diagram of an immersive interactive smart content creation system according to an embodiment of the present invention.
3 is a block diagram of the entire process diagram screen exemplifying the valve manufacturing process of the present invention.
4 is a detailed process diagram screen according to the embodiment of FIG. 3 .
5 is a view showing a screen configuration for each menu according to an embodiment of the present invention.
6 is a screen of a VR field tour according to an embodiment of the present invention.
7 is a process VR field information screen according to an embodiment of the present invention.
8 is a process VR safety rule information screen according to an embodiment of the present invention.
9 is a screen in which the valve manufacturing process, which is an example of the present invention, is produced as an animation through CG.
10 is a block diagram illustrating a VR content generation system according to an embodiment of the present invention.

이하 첨부된 도면을 참조로 본 발명의 바람직한 실시례를 상세히 설명하기로한다. 이에 앞서, 본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니되며, 발명자는 그 자신의 발명을 가장 최선의 방법으로 설명하기 위해 용어의 개념을 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적사상에 부합하는 의미와 개념으로 해석되어야만 한다. 따라서, 본 명세서에 기재된 실시례와 도면에 도시된 구성은 본 발명의 가장 바람직한 일실시례에 불과할 뿐이고 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 본 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형예들이 있을 수 있음을 이해하여야 한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings. Prior to this, the terms or words used in the present specification and claims should not be construed as being limited to conventional or dictionary meanings, and the inventor should properly understand the concept of the term in order to best describe his invention. Based on the principle that it can be defined, it should be interpreted as meaning and concept consistent with the technical idea of the present invention. Accordingly, the configuration shown in the embodiments and drawings described in the present specification is merely the most preferred embodiment of the present invention and does not represent all the technical spirit of the present invention, so at the time of the present application, various It should be understood that there may be equivalents and variations.

도 1은 본 발명의 일실시례에 따른 실감형 인터랙티브 스마트 콘텐츠 생성시스템의 전체 서비스 프로세스 구성을 나타내는 도면이고, 도 2는 일실시례에 따른 실감형 인터랙티브 스마트 콘텐츠 생성시스템의 서비스 구조도이며, 도 3은 본 발명의 밸브 제작 공정을 예시로 한 전체 공정도 화면 구성도이고, 도 4는 도 3의 일실시례에서의 세부 공정도 화면이며, 도 5는 일실시례에 따른 메뉴 별 화면 구성을 나타낸 도면이고, 도 6은 본 발명의 일실시례에 따른 VR현장 투어의 화면이고, 도 7은 일실시례에 따른 공정 VR현장 정보 화면이며, 도 8은 도 7의 일실시례에서의 공정 VR 안전 수칙 정보 화면이고, 도 9는 본 발명의 예시인 밸브 제작 공정을 CG로 표현한 화면이며, 도 10은 본 발명의 일실시례에 따른 VR콘텐츠 생성 시스템을 나타낸 블록도이다.1 is a view showing the overall service process configuration of the immersive interactive smart content generating system according to an embodiment of the present invention, FIG. 2 is a service structure diagram of the immersive interactive smart content generating system according to an embodiment, and FIG. 3 is an overall process diagram screen configuration diagram illustrating the valve manufacturing process of the present invention, FIG. 4 is a detailed process diagram screen in an embodiment of FIG. 3, and FIG. 5 is a screen configuration for each menu according to an embodiment 6 is a screen of a VR field tour according to an embodiment of the present invention, FIG. 7 is a process VR field information screen according to an embodiment, and FIG. 8 is a process VR safety in the embodiment of FIG. It is a rule information screen, and FIG. 9 is a screen expressing the valve manufacturing process, which is an example of the present invention, in CG, and FIG. 10 is a block diagram showing a VR content generation system according to an embodiment of the present invention.

우선, 도 1을 참고하면, 실감형 인터랙티브 스마트 콘텐츠 생성시스템의 서비스 프로세스는 구성요소 제작(110), 콘텐츠 매핑(120), 배포/공유(130)를 포함할 수 있다. First, referring to FIG. 1 , the service process of the immersive interactive smart content creation system may include component production 110 , content mapping 120 , and distribution/sharing 130 .

구성요소 제작(110)은 각 용도별 카메라를 이용하여 생산현장에서 주요 지점에서 360° VR촬영하는 현장VR 촬영부(111), 공정의 전체적인 과정 및 세부과정을 표현한 공정화면부(112), 제품의 처음부터 완성까지의 순서와 작업 순서를 컴퓨터 그래픽으로 표현한 CG제작부(113), 작업하는 작업자의 순간의 모습을 사진 촬영하고 공정하는 과정을 촬영하는 영상·스냅촬영부(114) 및 완성된 제품을 360° VR로 촬영하는 오브젝트 VR촬영을 취합하여 콘텐츠에 제공될 수 있는 기본구성요소를 구성할 수 있다.Component production 110 includes a field VR photographing unit 111 that takes 360° VR photography at a major point in the production site using a camera for each purpose, a process screen unit 112 that expresses the overall process and detailed process of the product, The CG production unit 113, which expresses the sequence and work sequence from start to finish with computer graphics, a video/snap recording unit 114 that takes pictures of the moment of the worker working and the process of processing, and the finished product Objects taken in 360° VR By combining VR shots, basic components that can be provided to content can be composed.

이때, VR촬영부(111)에서는 현장 내 주요 지점을 선별하여 촬영시 현장전체의 모습이 포함될 수 있도록 현장을 가리는 장애물 없이 촬영한다.At this time, the VR photographing unit 111 selects major points in the field and shoots without obstacles that block the scene so that the entire scene can be included when shooting.

또한, CG제작부(113)에서 CG작업 시 공정제품의 상세 모델링 및 배경 Material, 조명 등을 모델링하고 공정제품의 Timeline에 따라 1식-1분이내의 애니메이션으로 제작하여 랜더링 과정을 거쳐 후편집으로 자막, BGM(Back Ground Music)을 추가하여 제작한다.In addition, during CG work in the CG production unit 113, detailed modeling of the process product, background material, lighting, etc. are modeled, and animation is produced within 1 meal - 1 minute according to the timeline of the process product. Produced by adding BGM (Background Music).

여기서, 상기 CG작업은 일실시례로 제품 제조 과정을 CG제작으로 도 9에 표현되어 있으며, 제작에 있어서 랜더링과 모델링 과정을 통해 최대한 실사에 가깝도록 제작하고 경우에 따라 공정 과정을 설명할 수 있는 자막과 흥미롭게 느낄 수 있는 BGM(배경음악) 혹은 효과음과 같은 청각적 요소를 넣을 수 있다. Here, the CG work is expressed in FIG. 9 as a CG production of a product manufacturing process as an example, and in production, it is produced as close to real life as possible through a rendering and modeling process in production, and in some cases, the process process can be explained. You can add subtitles, interesting BGM (background music), or auditory elements such as sound effects.

콘텐츠 매핑(120)은 상기 구성요소 제작 단계에서 촬영된 실사형 VR과 오브젝트 VR을 다른 정보들과 제공할 때, 오브젝트나 구성물 표면에 텍스처 등을 씌워 질감과 반사된 풍경 등을 처리하는 매핑 과정을 통해 VR촬영된 실감형 인터랙티브 스마트 콘텐츠 생성시스템을 더욱 현실감 있도록 구성할 수 있다.The content mapping 120 is a mapping process of processing the texture and the reflected landscape by covering the surface of an object or composition with a texture, etc. Through this, it is possible to configure the realistic interactive smart content creation system filmed in VR to be more realistic.

이때, 촬영된 실사형 VR과 오브젝트 VR, 공정 제품 Animation 영상, 상세 공정 별 스냅사진 및 영상을 전체적으로 통합하는데 있어서 매핑과 같은 그래픽 보정을 통하여 이질감을 느끼지 않도록 함과 동시에 제작 콘텐츠 내 다국적 음성해설(나래이션)을 삽입한다.At this time, in integrating the filmed live-action VR, object VR, process product animation image, detailed process snapshots and images as a whole, graphic correction such as mapping is used to avoid feeling a sense of difference and at the same time, multinational voice commentary (narration) in the production content ) is inserted.

즉, 다국적 음성해설(나래이션)은 국내 현장에서 근무하는 외국인 노동자의 안전교육이나 직무교육에 사용될 수도 있으며, 해외 홍보의 효과를 내기 위한 용도로도 사용이 가능할 수 있다.In other words, multinational voice commentary (narration) can be used for safety education or job training for foreign workers working in domestic fields, and can also be used for overseas promotion.

또한, 상기 촬영된 VR 파노라마 사진에 핫스팟 아이콘을 제작, 편집하여 작업 안전수칙, 위험요소, 등의 현장정보를 제공하고 매핑작업을 통해 자연스럽게 보이도록 편집한다.In addition, a hotspot icon is created and edited in the captured VR panoramic photo to provide on-site information such as work safety rules, risk factors, and the like, and is edited to look natural through mapping work.

여기서, VR 파노라마 사진에 핫스팟 아이콘은 도 7과 도 8의 VR 사진에 특징에 따라 추가된 기호를 통해 확인할 수 있다.Here, the hotspot icon in the VR panoramic photo can be identified through a symbol added according to the characteristics of the VR photo of FIGS. 7 and 8 .

배포/공유(130)는 상기 제작된 콘텐츠를 스마트폰, PC, 태블릿 등 스마트 디바이스를 이용하여 필요한 정보를 전달받을 수 있다.The distribution/share 130 may receive necessary information for the produced content using a smart device, such as a smart phone, PC, or tablet.

보다 상세하게는 도 5에 도시된 바와 같이, 상기 콘텐츠는 실행화면, 메뉴 화면, 오브젝트360화면, 밸브 애니메이션 화면(밸브 제조 현장일 경우), 전체 공정 화면, 현장 VR화면등으로 확인할 수 있다.In more detail, as shown in FIG. 5 , the content can be checked through an execution screen, a menu screen, an object 360 screen, a valve animation screen (in the case of a valve manufacturing site), an entire process screen, a field VR screen, and the like.

또한, 도 2를 참조하면, 실감형 인터랙티브 스마트 콘텐츠 생성시스템의 메인화면부터 제품소개 및 상기 공정별 영상 및 VR자료들의 순서와 과정에 따라 확인할 수 있도록 구성되어 있다.In addition, referring to FIG. 2 , it is configured so that the main screen of the immersive interactive smart content creation system can be checked according to the order and process of product introduction and the video and VR materials for each process.

그리고, 도 3을 참조하면 본 발명의 일실사례로 밸브 제작 공정의 전체 제작 공정을 확인 할 수 있다.And, referring to FIG. 3 , it is possible to confirm the entire manufacturing process of the valve manufacturing process as a one-room example of the present invention.

즉, 설계를 제외한 모형제작의 단계부터 포장/출하의 단계까지 분류되어 있으며 각 공정에 따라 화면 이동 시 상기 구성요소 제작에서 촬영된 VR, 스냅사진, 작업영상 등을 확인 할 수 있다.In other words, it is classified from the stage of model making except for design to the stage of packaging/shipment, and when moving the screen according to each process, you can check the VR, snapshots, and work images taken in the component manufacturing.

보다 상세하게는 도 4에 도시된 바와 같이, 텍스트로 설명이 명시됨과 동시에 사진 및 영상으로 해당 상세 공정을 확인 할 수 있으며, 사용자에 따라 안전교육과 직무교육의 목적으로 사용이 가능하다.In more detail, as shown in FIG. 4 , the detailed process can be confirmed with pictures and images while the description is specified in text, and it can be used for the purpose of safety education and job training depending on the user.

한편, 도 10을 참조하면, VR 콘텐츠 생성 시스템(1000)을 블록도로 나타낸 것으로 실가형 인터랙티브 스마트 콘텐츠의 모델링 데이터, CG공정데이터 및 실사데이터 및 상기 데이터들을 독립적으로 열람 가능함과 동시에 상기 각 데이터에 따른 콘텐츠를 생성할 수 있는 구성을 나누어 표현했다.On the other hand, referring to FIG. 10 , it is a block diagram showing the VR content generation system 1000, and the modeling data, CG process data, and actual data of real-value interactive smart content, and the data can be independently viewed and at the same time according to each data The composition that can create content is divided and expressed.

이상과 같이, 본 발명은 비록 한정된 실시례와 도면에 의해 설명되었으나, 본 발명은 이것에 의해 한정되지 않으며 본 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 본 발명의 기술사상과 아래에 기재될 특허청구범위의 균등범위 내에서 다양한 수정 및 변형이 가능함은 물론이다.As described above, although the present invention has been described with reference to limited examples and drawings, the present invention is not limited thereto, and the technical idea of the present invention and the following by those skilled in the art to which the present invention pertains. Of course, various modifications and variations are possible within the scope of equivalents of the claims to be described.

110: 구성요소 제작
111: VR 촬영부
112: 공정화면부
113: CG제작부
114: 영상스냅촬영부
120: 콘텐츠 매핑
130: 배포/공유
1000: VR 콘텐츠 생성 시스템
1010: 모델링 데이터 생성부
1020: CG공정데이터 생성부
1030: 실사데이터 생성부
1040: 통합콘텐츠 생성부110: Build Components
111: VR shooting unit
112: process screen unit
113: CG production department
114: video snapshot recording unit
120: content mapping
130: distribute/share
1000: VR content creation system
1010: modeling data generation unit
1020: CG process data generation unit
1030: due diligence data generation unit
1040: integrated content creation unit

Claims (5)

생산현장의 현장VR 및 오브젝트를 360°촬영하는 VR촬영부;
상기 촬영된 현장VR의 정보 매핑, 스티칭, 리터칭 및 장면간 이동에 대응하는 편집 데이터를 입력받고 상기 편집 데이터를 형식변환하는 VR제작부;
제품의 전체 제조 공정과 부분 공정을 블록형태로 제작한 순서도가 표시되는 공정화면부;
컴퓨터 그래픽을 이용하여 생성한 모델링 데이터, 애니메이션 데이터 및 후편집 데이터를 통합하여 통합 데이터를 생성하는 CG제작부;
실제 공정과정을 영상과 사진으로 촬영 및 제작하는 영상·스냅촬영부; 및
상기 제작된 VR, CG, 작업영상, 스냅 촬영한 컨텐츠를 보정하는 매핑ㅁ디자인부;
로 구성되어 제작되는 것을 특징으로 하는 실감형 인터랙티브 스마트 콘텐츠 생성시스템.
VR filming unit that shoots 360° of on-site VR and objects at the production site;
a VR production unit that receives edit data corresponding to information mapping, stitching, retouching, and movement between scenes of the captured on-site VR and converts the edit data into a format;
a process screen unit on which a flowchart of the entire manufacturing process and partial processes of the product is displayed in block form;
a CG production unit that generates integrated data by integrating modeling data, animation data, and post-editing data generated using computer graphics;
a video/snap recording unit that shoots and produces images and photos of the actual process; and
a mapping and design unit that corrects the produced VR, CG, work video, and snap-shot contents;
A realistic interactive smart content creation system, characterized in that it is composed of
 제 1항에 있어서,
상기 VR 촬영부는,
생산현장에서 주요 지점에서 360°VR촬영을 하는 현장VR 및 촬영된 파노라마 사진을 스티칭, 리터칭하고 공정제품 종류 및 구조를 360°회전과 부품 설명이 가능하도록 하는 오브젝트 VR을 이용하여 촬영하고,
상기 VR 제작부는
상기 촬영된 VR 파노라마 사진에 핫스팟 아이콘을 제작, 편집하여 작업 안전수칙, 위험요소, 등의 현장정보를 제공하고 매핑작업을 통해 자연스럽게 VR로 제작할 수 있는 것을 특징으로 하는 실감형 인터랙티브 스마트 콘텐츠 생성시스템.
The method of claim 1,
The VR shooting unit,
On-site VR that shoots 360° VR at key points in the production site, stitching and retouching the captured panoramic photos, and object VR that enables 360° rotation of process product types and structures and part descriptions,
The VR production department
Realistic interactive smart content creation system, characterized in that it can create and edit hotspot icons in the captured VR panoramic photos to provide on-site information such as work safety rules, risk factors, etc., and to create them in VR naturally through mapping work.
 제 1항에 있어서,
상기 공정 화면부는
공정의 성격이나 종류에 따라 색상별 분류가 가능하고, 화면 탭을 통해 상세 공정으로 이동이 가능한 것과 동시에 공정의 상세설명을 제공하고 작업사진, 영상, 공정 VR을 통한 현장위험요소, 안전수칙, 현장정보 제공 및 음성으로 된 공정소개가 가능하고,
상기 CG제작부는
공정제품의 상세 모델링 및 배경 Material, 조명 등을 모델링하고 공정제품의 Timeline에 따라 1식-1분이내의 애니메이션으로 제작하여 랜더링과정을 거쳐 후편집으로 자막, BGM을 추가하여 제작하는 것을 특징으로 하는 실감형 인터랙티브 스마트 콘텐츠 생성시스템.
The method of claim 1,
The process screen
It is possible to classify by color according to the nature or type of the process, move to the detailed process through the screen tab, and at the same time provide a detailed description of the process, and site risk factors, safety rules, and site through work photos, videos, and process VR It is possible to provide information and introduce the process in voice,
The CG production department
Detailed modeling, background material, lighting, etc. of the process product are modeled, and the animation is produced within 1 meal - 1 minute according to the timeline of the process product. An interactive smart content creation system.
 제 1항에 있어서
상기 영상·스냅 촬영부는
공정화면부에 상세공정의 사진이미지 혹은 공정영상을 제공하는데 있어서 필요한 스냅사진과 공정 영상을 촬영하여 제공하고,
매핑디자인부는
촬영된 실사형 VR과 오브젝트 VR, 공정 제품 Animation 영상, 상세 공정 별 스냅사진 및 영상을 전체적으로 통합하는데 있어서 매핑과 같은 그래픽 보정을 통하여 이질감을 느끼지 않도록 함과 동시에 제작 콘텐츠 내 다국적 음성해설(나래이션)을 삽입하는 것을 특징으로 하는 실감형 인터랙티브 스마트 콘텐츠 생성시스템.
2. The method of claim 1
The video/snap recording unit
In order to provide a detailed process photo image or process image to the process screen, snapshot photos and process images are taken and provided.
Mapping design department
In integrating the filmed live-action VR, object VR, process product animation image, detailed process snapshots and images as a whole, graphic correction such as mapping is used to not feel a sense of difference and, at the same time, multinational audio commentary (narration) is provided in the production content. Realistic interactive smart content creation system, characterized in that it is inserted.
 VR 콘텐츠 생성 시스템에 있어서,
오브젝트에 대한 모델링 데이터를 생성하는 모델링 데이터 생성부;
CG효과를 적용하여 상기 오브젝트의 생산, 조립, 수리 중 적어도 어느 하나에 대한 공정을 표현하는 CG공정데이터를 생성하는 CG공정데이터 생성부;
상기 오브젝트가 존재하는 공간의 실사 영상 또는 사진을 이용하여 실사 데이터를 생성하는 실사데이터 생성부; 및
상기 모델링 데이터, 상기 CG공정데이터, 상기 실사데이터를 통합하여 콘텐츠를 생성하는 통합콘텐츠 생성부를 포함하되,
상기 통합콘텐츠 생성부는,
상기 모델링 데이터, 상기 CG공정데이터, 상기 실사데이터가 독립적으로 열람가능하도록 구성되는 것을 특징으로 하는 실감형 인터랙티브 스마트 콘텐츠 생성시스템.In the VR content creation system,
a modeling data generator for generating modeling data for an object;
a CG process data generation unit for generating CG process data expressing a process for at least any one of production, assembly, and repair of the object by applying a CG effect;
a live-action data generation unit for generating live-action data by using an actual image or photo of a space in which the object exists; and
Including an integrated content generation unit for generating content by integrating the modeling data, the CG process data, and the actual data,
The integrated content generation unit,
The immersive interactive smart content creation system, characterized in that the modeling data, the CG process data, and the live-action data are configured to be independently viewable.
KR1020200165101A 2020-11-30 2020-11-30 Providing system for realistic interactive smart contents and the method thereof KR102410690B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200165101A KR102410690B1 (en) 2020-11-30 2020-11-30 Providing system for realistic interactive smart contents and the method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200165101A KR102410690B1 (en) 2020-11-30 2020-11-30 Providing system for realistic interactive smart contents and the method thereof

Publications (2)

Publication Number Publication Date
KR20220076191A true KR20220076191A (en) 2022-06-08
KR102410690B1 KR102410690B1 (en) 2022-06-20

Family

ID=81981279

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200165101A KR102410690B1 (en) 2020-11-30 2020-11-30 Providing system for realistic interactive smart contents and the method thereof

Country Status (1)

Country Link
KR (1) KR102410690B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102627538B1 (en) * 2022-12-05 2024-01-25 주식회사 카이토리 System for providing 360 degree panoramic video based safety education contents generating service

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180049587A (en) * 2016-11-03 2018-05-11 대우조선해양 주식회사 System and method for production process managemetnt automation of ship and plant
KR20190059624A (en) * 2017-11-23 2019-05-31 이진용 Method for sending digital contents production using emoticons and providing commercial service
KR102117008B1 (en) * 2019-07-30 2020-06-01 한국동서발전(주) System and Method for Inspecting Power Plant using VR Panoramic Contents

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180049587A (en) * 2016-11-03 2018-05-11 대우조선해양 주식회사 System and method for production process managemetnt automation of ship and plant
KR20190059624A (en) * 2017-11-23 2019-05-31 이진용 Method for sending digital contents production using emoticons and providing commercial service
KR102117008B1 (en) * 2019-07-30 2020-06-01 한국동서발전(주) System and Method for Inspecting Power Plant using VR Panoramic Contents

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102627538B1 (en) * 2022-12-05 2024-01-25 주식회사 카이토리 System for providing 360 degree panoramic video based safety education contents generating service

Also Published As

Publication number Publication date
KR102410690B1 (en) 2022-06-20

Similar Documents

Publication Publication Date Title
Nebeling et al. 360proto: Making interactive virtual reality & augmented reality prototypes from paper
Wright Compositing visual effects: Essentials for the aspiring artist
US20210264139A1 (en) Creating videos with facial expressions
Jung et al. Storyboarding and pre-visualization with x3d
KR102410690B1 (en) Providing system for realistic interactive smart contents and the method thereof
Byrne The visual effects arsenal: VFX solutions for the independent filmmaker
Ilmaranta Cinematic space in virtual production
JP2006221489A (en) Cg animation manufacturing system
Ganbar Nuke 101: professional compositing and visual effects
Nop et al. Development of character design frameworks using game engine: unreal engine
Wickes Foundation Blender Compositing
del Blanco García et al. Technology transfer: From the film industry to architecture
Pardeshi et al. Recent Trends in VFX (Virtual Effects) and SFX (Special Effects)
Mokhov et al. Dataflow programming and processing for artists and beyond
Mokhov et al. Hands-on: rapid interactive application prototyping for media arts and stage performance and beyond
WO2018018076A1 (en) Creating videos with facial expressions
US9715900B2 (en) Methods, circuits, devices, systems and associated computer executable code for composing composite content
Luis-Tello et al. Interaction According to Immersion in Virtual Environments: Graphic Development and PBRS in Environments with Real-Time Rendering and Virtual Reality
Mikami et al. Diorama engine-a 3D directing tool for 3D computer animation production
Muzaffar o’g’li COMPUTER TECHNOLOGY FOR SPECIAL EFFECTS
La Manna Changes and Evolution in Audiovisual Production: The impact of digital and virtual technologies on standards and practices
Shi Visual Expression in 3D Narrative Animation
EL FAHLI Visual Effects as a Filmmaking Tool
Jo et al. CollageVis: Rapid Previsualization Tool for Indie Filmmaking using Video Collages
Atiker Understanding the “HYBRID” media in design education

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant