KR101184690B1 - An apparatus for producing education contents using mobile terminal imbedded motion tracking program and tracking cradle interconnected to mobile terminal - Google Patents

An apparatus for producing education contents using mobile terminal imbedded motion tracking program and tracking cradle interconnected to mobile terminal Download PDF

Info

Publication number
KR101184690B1
KR101184690B1 KR1020120008150A KR20120008150A KR101184690B1 KR 101184690 B1 KR101184690 B1 KR 101184690B1 KR 1020120008150 A KR1020120008150 A KR 1020120008150A KR 20120008150 A KR20120008150 A KR 20120008150A KR 101184690 B1 KR101184690 B1 KR 101184690B1
Authority
KR
South Korea
Prior art keywords
tracking
instructor
motion tracking
mobile terminal
image
Prior art date
Application number
KR1020120008150A
Other languages
Korean (ko)
Inventor
김우기
피창호
양혜선
Original Assignee
(주)나누미넷
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)나누미넷 filed Critical (주)나누미넷
Priority to KR1020120008150A priority Critical patent/KR101184690B1/en
Application granted granted Critical
Publication of KR101184690B1 publication Critical patent/KR101184690B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/20—Education
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02—Alarms for ensuring the safety of persons
    • G08B21/0202—Child monitoring systems using a transmitter-receiver system carried by the parent and the child
    • G08B21/0277—Communication between units on a local network, e.g. Bluetooth, piconet, zigbee, Wireless Personal Area Networks [WPAN]

Abstract

PURPOSE: A mobile terminal with a motion trace program and a device for producing education contents using tracking cradle connected to the mobile terminal are provided to enabling a student to improve learning efficiency with various education contents without a spatial limit. CONSTITUTION: A mobile terminal(50) includes a contents production program and a Bluetooth module. A tracking cradle includes a body unit(10), a cradle unit, the Bluetooth module, a processor, up and down a driving unit, and left and right a driving unit. The processor outputs up and down a driving signal or left or right a driving signal by analyzing a motion tracking signal. Up and down the driving unit rotates the cradle unit in up and down a direction according to up and down the driving signal of the processor. Left and right the driving unit rotates the body unit in left and right a direction according to left and right the driving signal of the processor.

Description

모션 추적 프로그램이 내장된 모바일 단말기와 이와 연동하는 트래킹 크래들을 이용한 교육 컨텐츠 제작장치{AN APPARATUS FOR PRODUCING EDUCATION CONTENTS USING MOBILE TERMINAL IMBEDDED MOTION TRACKING PROGRAM AND TRACKING CRADLE INTERCONNECTED TO MOBILE TERMINAL}TECHNICAL APPARATUS FOR PRODUCING EDUCATION CONTENTS USING MOBILE TERMINAL IMBEDDED MOTION TRACKING PROGRAM AND TRACKING CRADLE INTERCONNECTED TO MOBILE TERMINAL}

본 발명은 모션 추적 프로그램이 내장된 모바일 단말기와 이에 연동하는 트래킹 크래들을 이용한 교육 컨텐츠 제작장치에 관한 것으로서, 보다 상세하게는 강사가 교육 컨텐츠를 제작함에 있어 모션 추적 및 동영상 촬영이 가능한 프로그램이 내장된 태블릿 PC의 출력 신호에 따라 트래킹 크래들이 팬, 틸트 구동되어 강사의 위치를 자동 추적하면서 강사가 영상의 정해진 지점에 위치하도록 한 상태에서 교육용 컨텐츠를 제작할 수 있도록 하는 기술에 관한 것이다.The present invention relates to a mobile terminal having a built-in motion tracking program and an apparatus for producing educational contents using a tracking cradle interlocked with the mobile terminal, and more particularly, a program capable of tracking a motion and shooting a video when an instructor produces educational contents. The tracking cradle is pan-and-tilt driven according to the output signal of the tablet PC to automatically track the position of the instructor while allowing the instructor to produce educational contents while keeping the instructor at a fixed point of the video.

인터넷 및 IT 기반 기술의 발전으로 인하여, 학교나 학원을 중심으로 하는 오프라인 교육의 공간적 제한과 거리 등의 환경의 제약을 벗어날 수 있도록 인터넷을 이용한 온라인 교육 시장의 규모가 점차 확대되고 있다.Due to the development of the Internet and IT-based technologies, the size of the online education market using the Internet is gradually expanding to overcome the environmental constraints such as the space limitation and distance of offline education centering on schools and institutes.

그러나, 기존 온라인 교육은 초기 제작 비용의 부담으로 인해 개인 및 소규모 기관의 참여가 어려워 일부 공교육 기관 또는 대형 사교육 기관의 전유물이 되었고, 개인아니 지역 교육기관의 참여가 극히 제한되고 있는 실정이다.However, due to the burden of initial production costs, the existing online education has become difficult to participate in private and small institutions, and has become the exclusive property of some public or large private educational institutions, and the participation of local or non-private educational institutions is extremely limited.

한편, 최근 스마트폰과 태블릿 PC의 사용자가 증대되고 이를 바탕으로 각종 멀티미디어 기기를 이용한 교육 관련 서비스의 요구가 커지고 있다.Meanwhile, the number of users of smartphones and tablet PCs has recently increased, and the demand for education-related services using various multimedia devices has increased.

따라서, 최근 붐이 일고 있는 멀티미디어 기기를 이용한 교육 관련 서비스를 온라인 교육과 연결시켜 스마트폰과 태블릿 PC 등의 모바일 단말기를 이용하여 강사가 자신의 교육 화면 영상을 직접 제작할 수 있도록 하는 기술에 대한 필요성이 증대되고 있는 실정이다. Therefore, there is a need for a technology that allows an instructor to directly create a training screen image using a mobile terminal such as a smartphone and a tablet PC by connecting education-related services using multimedia devices with online education. It is increasing.

본 발명은 이러한 종래 문제점을 해결하기 위해 제안된 것으로서, 본 발명의 목적은 강사가 별도의 전문 장비의 도움 없이 모션 추적 프로그램이 내장된 모바일 단말과 모바일 단말기와 연동하여 팬,틸트 기능을 제공하는 트래킹 크래들을 이용하여 손쉽게 셀프 동영상을 제작할 수 있도록 하는 것이다.The present invention has been proposed to solve such a conventional problem, an object of the present invention is to provide a pan, tilt function in conjunction with a mobile terminal and a mobile terminal in which the instructor is equipped with a motion tracking program without the help of a separate professional equipment The cradle makes it easy to make self videos.

본 발명의 또 다른 목적은 모바일 단말기에 최적화된 모션 추적 프로그램을 제작하여 제한된 자원을 갖는 모바일 단말기에서도 정확한 모션 추적을 통해 강사의 움직임을 정확하게 추적하여 동영상 내에서 강사가 항상 일정한 위치에 있도록 하여 추가 인력없이도 충분한 정도의 교육용 컨텐츠를 제작할 수 있도록 하는 것이다. Another object of the present invention is to create a motion tracking program optimized for a mobile terminal to accurately track the movement of the instructor through accurate motion tracking even in a mobile terminal with limited resources so that the instructor is always in a certain position in the video additional personnel It is to be able to produce a sufficient amount of educational content without.

상기와 같은 목적을 달성하기 위한 본 발명의 일 측면에 따르면, 모션 추적 프로그램이 내장된 모바일 단말과 이와 연동하는 트래킹 크래들을 이용한 교육 컨텐츠 제작장치에 있어서, 강사의 움직임을 추적하는 모션 추적 기능과 동영상 촬영기능을 갖는 컨텐츠 제작 프로그램과, 모션 추적 결과에 따른 모션 추적 신호를 송출하는 블루투스 모듈이 내장된 모바일 단말기와 몸체부와, 상기 몸체부의 일측에 상하회전 가능하도록 설치되고 상기 모바일 기기를 장착하기 위한 거치부와, 상기 모바일 단말기의 모션 추적신호를 수신하는 블루투스 모듈과, 상기 모션 추적신호를 분석하여 상하 또는 좌우 회전 구동신호를 출력하는 프로세서와, 상기 프로세서로부터 상하회전 구동신호를 수신하는 경우 상기 거치부를 상하 방향으로 회전시키는 상하회전 구동부와, 상기 프로세서로부터 좌우회전 구동신호를 수신하는 경우 상기 몸체부를 좌우방향으로 회전시키는 좌우회전 구동부를 포함하는 트래킹 크래들을 포함하는 것을 특징으로 하는 교육 컨텐츠 제작장치가 제공된다.According to an aspect of the present invention for achieving the above object, in the educational content production apparatus using a mobile terminal and a tracking cradle interlocked with a motion tracking program, a motion tracking function and a video for tracking the movement of the instructor A mobile terminal and a body part having a content production program having a shooting function and a Bluetooth module for transmitting a motion tracking signal according to a motion tracking result, and installed to be able to rotate up and down on one side of the body part for mounting the mobile device. A cradle unit, a Bluetooth module that receives the motion tracking signal of the mobile terminal, a processor that analyzes the motion tracking signal and outputs up and down or left and right rotation driving signals, and when receiving a up and down rotation driving signal from the processor Up and down rotation hole for rotating the part in the up and down direction Part and, when receiving a rotary driving the left and right signals from the processor to educational content creation device comprises a cradle track including a rotary drive unit for rotating the left and right parts of the right and left direction in the body is provided.

여기서, 상기 거치부는 상기 몸체의 상단에 설치되고, 평면부와 상기 평면부 양단에 하방으로 절곡연장되어 상기 상하 회전 구동부에 연결되는 절곡부를 포함하는 상하회전 몸체와, 상기 상하회전 몸체에 탈착가능하게 결합되는 거치대를 포함할 수 있다.Here, the mounting portion is installed on the upper end of the body, and the upper and lower rotating body including a bent portion connected to the vertical rotation drive is extended downward bent on both ends of the flat portion and the flat portion, and detachable to the vertical rotation body It may include a cradle that is coupled.

그리고, 상기 컨텐츠 제작 프로그램은 강사의 교육 동영상을 촬영하여 교육 컨텐츠를 제작하는 동영상 촬영 모듈과, 강사의 모션을 추적하는 모션 추적 모듈과, 모션 추적에 따라 상기 트래킹 크래들의 팬과 틸트 동작을 제어하기 위한 팬/틸트 연동모듈과, 완성된 교육 컨텐츠를 보안 인코딩하여 동영상 관리서버로 전송하는 보안 전송 모듈을 포함하는 것이 바람직하다.The content production program includes a video recording module for photographing an instructor's education video to produce educational content, a motion tracking module for tracking the instructor's motion, and controlling pan and tilt motions of the tracking cradle according to motion tracking. It is preferable to include a pan / tilt interworking module for, and a secure transmission module for transmitting the encoded training content to the video management server.

그리고, 상기 컨텐츠 제작 프로그램은 촬영 영상의 픽셀 변화량을 검출하여 추적 대상 강사의 윤곽선을 추출하고, 상기 윤곽선의 위치 변화량에 기초하여 모션 추적을 수행하는 것이 바람직하며, 상기 윤곽선을 통한 모션 추적은 촬영 영상으로부터 추적 대상인 강사의 몸체를 기준영상으로 획득하는 기준영상 획득단계, 상기 획득된 기준영상을 이미지화하는 기준영상 이미지화 단계, 이미지화된 기준영상의 윤곽선을 기준패턴으로 생성하는 기준패턴 생성단계, 생성된 기준패턴에 대한 좌표값을 기준좌표로 인식하는 기준좌표 매칭단계, 촬영 영상으로부터 기준영상 이미지의 위치 변화를 추적하는 이미지 위치 추적단계 및 상기 기준영상 이미지의 위치 변화량을 검출하는 위치 변화량 검출단계를 통해 수행될 수 있다.In addition, the content creation program detects the pixel change amount of the captured image, extracts the contour of the tracking target instructor, and performs motion tracking based on the position change amount of the outline, and the motion tracking through the outline is performed by the captured image. A reference image acquisition step of acquiring a body of an instructor to be tracked as a reference image, a reference image imaging step of imaging the obtained reference image, a reference pattern generation step of generating an outline of the imaged reference image as a reference pattern, and generated criteria A reference coordinate matching step for recognizing a coordinate value of a pattern as a reference coordinate, an image position tracking step for tracking a position change of a reference image image from a captured image, and a position change amount detection step for detecting a position change amount of the reference image image Can be.

또한, 상기 컨텐츠 제작 프로그램은 화면을 미리 설정된 개수의 구획으로 분할하고 상기 강사 윤곽선의 기준점이 현재 구획을 벗어나는 경우 위치 변화량에 대응되는 모션 추적 신호를 생성하는 것이 보다 바람직하다.The content creation program may further divide the screen into a predetermined number of sections and generate a motion tracking signal corresponding to a position change amount when the reference point of the instructor outline is out of the current section.

또한, 영상 분석 연산량을 감소시키기 위해 상기 강사 윤곽선의 기준점은 강사 신체의 각 부분 중 위치 변화량이 가장 적은 부분의 중심점으로 선택되는 것이 더욱 바람직하다.In addition, in order to reduce the amount of image analysis calculation, the reference point of the instructor contour is more preferably selected as the center point of the portion having the smallest amount of change in position of the instructor body.

또한, 상기 컨텐츠 제작 프로그램은 판서 내용이 잘 보일 수 있도록 하기 위해, 화면에서 판서가 이루어진 판서 영역을 실시간으로 추출하고, 상기 판서영역과 상기 강사 윤곽선을 비교하여 공통 영역이 존재하는 경우, 해당 공통영역의 판서 내용이 드러나도록 상기 윤곽선 내의 영역 중 상기 공통영역에 해당하는 영역을 미리 설정된 투명도로 표시되도록 영상처리하는 것이 더욱 바람직하다.In addition, the content production program extracts the writing area in which the writing is made from the screen in real time, and compares the writing area with the instructor outline in order to make the writing contents well visible. More preferably, the image processing is performed such that the region corresponding to the common region among the regions in the outline is displayed with a predetermined transparency so that the writing content of the outline is revealed.

또한, 영상 분석 연산량을 더욱 감소시키기 위해 상기 컨텐츠 제작 프로그램은 제조시 또는 사용자의 설정에 의해 마커 물체의 이미지가 미리 인식되어 있고, 강사의 신체에 부착되거나 강사가 파지하고 있는 상기 마커 물체의 위치 변화량에 기초하여 모션 추적을 수행하는 것도 가능하다.In addition, in order to further reduce the amount of image analysis computation, the content production program has an image of a marker object pre-recognized at the time of manufacture or by a user's setting, and is attached to the instructor's body or held by the instructor. It is also possible to perform motion tracking based on.

또한 모션 추적의 정확도를 보다 향상시킬 수 있도록 상기 컨텐츠 제작 프로그램은 제조시 또는 사용자의 설정에 의해 마커 물체의 이미지가 미리 인식되어 있고, 강사의 신체에 부착되거나 강사가 파지하고 있는 상기 마커 물체의 위치 변화량과 강사 신체의 각 부분 중 위치 변화량이 가장 적은 부분의 중심점으로 선택된 상기 강사 윤곽선의 기준점의 변화량을 각각 검출하여 상기 마커 물체의 중심점과 상기 강사 윤곽선의 기준점이 모두 현재 구획을 벗어나는 경우에만 위치 변화량에 대응되는 모션 추적 신호를 생성하는 것도 가능하다.
In addition, in order to further improve the accuracy of motion tracking, the content creation program includes a pre-recognized image of the marker object at the time of manufacture or user's setting, and is attached to the instructor's body or held by the instructor. The amount of change in position and the amount of change in position of the reference point of the instructor contour respectively selected as the center point of the portion of the smallest change in position of the instructor's body are detected only when both the center point of the marker object and the reference point of the instructor outline are out of the current section. It is also possible to generate a motion tracking signal corresponding to.

본 발명에 따르면, 개인 강사들의 손쉬운 컨텐츠 제작을 가능하도록 함으로써 1인 기업 육성 정책에 부합할 수 있고 자격증, 공무원, 직업 교육 등 다양한 교육 컨텐츠의 생산이 가능하여 관련 시장이 활성화될 수 있도록 함과 아울러 교육 컨텐츠의 스마트 TV 시장 진출의 교두보를 마련할 수 있는 효과가 있다.According to the present invention, it is possible to meet the single-person corporate development policy by enabling easy content production of individual instructors, and to produce a variety of educational content, such as certifications, civil servants, vocational education to enable the relevant market It is effective to prepare a bridgehead to enter the smart TV market for educational contents.

또한, 공간적 제약이 없는 학습이 가능하도록 함으로써 학생들이 다양한 교육 컨텐츠를 활용하여 학습효율을 증대시킬 수 있는 효과도 있다.In addition, by enabling learning without spatial constraints, students can increase the learning efficiency by utilizing various educational contents.

또한, 다양한 교육 컨텐츠를 손쉽게 제작할 수 있으므로 교육 컨텐츠의 제작비용을 절감할 수 있고 그에 따라 교육 컨텐츠의 사용료를 인하할 수 있어 학생들의 온라인 교육 비용 절감을 가져올 수 있는 효과도 있다.In addition, it is possible to easily produce a variety of educational content can reduce the production cost of the educational content and accordingly can reduce the cost of using the educational content there is an effect that can bring students online education cost reduction.

도 1은 본 발명에 따른 트래킹 크래들의 외관을 나타낸 사시도이다.
도 2는 도 1에서 거치대가 분리된 분해 사시도이다.
도 3은 트래킹 크래들에 모바일 단말기가 장착된 상태를 나타낸 사시도이다.
도 4는 트래킹 크래들의 내부 회로 구성을 나타낸 블록도이다.
도 5는 본 발명에 따른 모바일 단말기의 내부 구성도이다.
도 6은 컨텐츠 제작 프로그램의 세부 구성도이다.
도 7은 도 6의 모션 추적 모듈에 의해 모션 추적이 수행되는 과정을 도시한 흐름도이다.
도 8은 구획 분할을 통한 모션 추적 및 팬/틸트 제어방법을 설명하기 위한 도면이다.
도 9는 교육 컨텐츠 제작을 위한 모바일 단말기의 화면 구성의 일례를 나타낸 것이다.
도 10은 판서영역과 강사 몸체 영역의 중복부분을 투명처리하는 실시예를 설명하기 위한 도면이다.1 is a perspective view showing the appearance of a tracking cradle according to the present invention.
FIG. 2 is an exploded perspective view of the holder separated from FIG. 1. FIG.
3 is a perspective view illustrating a mobile terminal mounted to a tracking cradle;
4 is a block diagram showing the internal circuit configuration of the tracking cradle.
5 is an internal configuration diagram of a mobile terminal according to the present invention.
6 is a detailed configuration diagram of a content production program.
7 is a flowchart illustrating a process of performing motion tracking by the motion tracking module of FIG. 6.
8 is a view for explaining a motion tracking and pan / tilt control method by partitioning.
9 illustrates an example of a screen configuration of a mobile terminal for producing educational content.
10 is a view for explaining an embodiment of transparent processing of overlapping portions of the writing area and the instructor body area.

이하에서는 첨부된 도면을 참조하여 본 발명의 바람직한 일 실시예를 상세하게 설명하기로 한다.
Hereinafter, with reference to the accompanying drawings will be described in detail a preferred embodiment of the present invention.

도 1은 본 발명에 따른 트래킹 크래들의 외관을 나타낸 사시도, 도 2는 도 1에서 거치대가 분리된 분해 사시도, 도 3은 트래킹 크래들에 모바일 단말기가 장착된 상태를 나타낸 사시도, 도 4는 트래킹 크래들의 내부 회로 구성을 나타낸 블록도이다.Figure 1 is a perspective view showing the appearance of the tracking cradle according to the invention, Figure 2 is an exploded perspective view of the cradle separated from Figure 1, Figure 3 is a perspective view showing a mobile terminal mounted on the tracking cradle, Figure 4 is a tracking cradle A block diagram showing the internal circuit configuration.

도 1 ~ 3을 참조하면, 본 발명에 따른 트래킹 크래들은 크게 몸체부(10)와, 거치부와, 하부 지지부(40)를 포함하여 구성된다.1 to 3, the tracking cradle according to the present invention is largely configured to include a body portion 10, the mounting portion, and the lower support portion (40).

몸체부(10)는 트래킹 크래들의 기본 몸체를 이루는 것으로서, 전체적으로 통형상으로 이루어지고 내부에는 후술하는 회로와 구동기구들을 수용할 수 있는 공간이 형성되어 있고, 하단에는 몸체부(10)를 지지하고 몸체부(10)의 좌우회전시 고정체로서 기능을 제공하는 하부 지지부(40)가 결합되어 있다.   Body portion 10 constitutes the basic body of the tracking cradle, the overall shape is made of a cylindrical shape there is formed a space for accommodating the circuit and the drive mechanisms described later, the lower portion to support the body portion 10 Lower support portion 40 is provided to provide a function as a fixed body when the left and right rotation of the body portion 10.

몸체부(10)의 상면에는 모바일 단말기(50)를 거치하기 위한 거치부가 설치되는데, 거치부는 몸체부(10)의 상부에 고정적으로 설치되는 상하회전 몸체(20)와 상하회전 몸체(20)에 탈착가능하게 설치되는 거치대(30)를 포함하여 구성된다.The upper surface of the body portion 10 is provided with a mounting portion for mounting the mobile terminal 50, the mounting portion in the up and down rotation body 20 and the vertical rotation body 20 is fixedly installed on the upper portion of the body portion (10) It is configured to include a cradle 30 that is detachably installed.

상하회전 몸체(20)는 플레이트 형상으로서 평탄면을 갖는 평면부(21)와 평면부(21) 양단에서 하방으로 절곡연장되는 2개의 절곡부(23)를 갖도록 형성되며, 절곡부(22)는 후술하는 상하회전 구동부(26)에 연결된 회전축(23)에 결합되어 회전축(23)의 회전에 동반하여 상하방향으로 일정각도 회전하게 되어 틸팅 기능을 제공하게 된다.The vertical rotation body 20 is formed as a plate shape having a flat portion 21 having a flat surface and two bent portions 23 extending downward from both ends of the flat portion 21, and the bent portion 22 is formed. It is coupled to the rotary shaft 23 connected to the vertical rotation drive unit 26 to be described later to be rotated by a predetermined angle in the vertical direction accompanying the rotation of the rotary shaft 23 to provide a tilting function.

거치대(30)는 모바일 단말기(50)를 고정설치하기 위한 것으로서, 모바일 단말기(50)를 탈착가능하게 고정하기 위한 결합 구조물이 형성되어 있다. 거치대(30)는 상하회전 몸체(20)에 탈착가능하게 결합되는데, 이는 모바일 단말기(50)의 다양한 형상과 크기에 따라 그에 맞는 형상과 크기를 갖는 다양한 종류의 거치대(30)가 사용될 수 있으므로 사용되는 거치대(30)의 유형에 따라 거치대(30)를 교체할 수 있도록 하기 위한 것이다.Cradle 30 is for fixing the mobile terminal 50, the coupling structure for detachably fixing the mobile terminal 50 is formed. The cradle 30 is detachably coupled to the vertically rotating body 20, which is used because various kinds of cradles 30 having a shape and size suitable for various shapes and sizes of the mobile terminal 50 can be used. It is to be able to replace the cradle 30 according to the type of cradle 30 to be.

도 4에 도시된 바와 같이, 몸체부(10)의 내부에는 블루투스 모듈(24), 프로세서(25), 상하회전 구동부(26) 및 좌우회전 구동부(27)가 설치되어 있다.As shown in FIG. 4, the Bluetooth module 24, the processor 25, the vertical rotation driver 26, and the horizontal rotation driver 27 are installed in the body 10.

블루투스 모듈(24)은 블루투스 통신을 통해 모바일 단말기(50)로부터 모션 추적신호를 수신하기 위한 것이다. 블루투스(Bluetooth)는 휴대폰, 노트북, 이어폰?헤드폰 등의 휴대기기를 서로 연결해 정보를 교환하는 근거리 무선 기술 표준으로서, 주로 10미터 안팎의 초단거리에서 저전력 무선 연결이 필요할 때 사용되는 통신 규격으로서, 본 발명에서는 블루투스 모듈이 장착된 태블릿 PC나 스마트 폰 등의 모바일 기기와 블루투스 기반의 트래킹 크래들 간의 팬/틸트 제어신호 송수신을 위해 사용된다.The Bluetooth module 24 is for receiving a motion tracking signal from the mobile terminal 50 through Bluetooth communication. Bluetooth is a short-range wireless technology standard that exchanges information by connecting mobile devices such as mobile phones, laptops, earphones, and headphones to each other, and is a communication standard mainly used when a low power wireless connection is required at a short distance of about 10 meters. In the present invention, it is used for transmitting / receiving a pan / tilt control signal between a Bluetooth-based tracking cradle and a mobile device such as a tablet PC or a smartphone equipped with a Bluetooth module.

프로세서(25)는 모바일 단말기(50)로부터 수신되는 모션 추적신호를 분석하여 상하 또는 좌우 회전 구동신호를 출력하는 것으로서, 모션 추적신호는 추적 대상체 즉, 강사의 위치 변화량이 3차원 좌표변화량 형태로 제공되므로 프로세서(25)는 수신된 모션 추적신호의 반대방향으로 상하좌우로 모바일 단말기(50)가 향하는 방향을 이동시키는 제어신호를 상하회전 구동부(26) 및 좌우회전 구동부(27)로 출력하여 모바일 단말기(50)의 촬영화면에서 강사가 항상 일정한 지점에 위치하도록 하는 기능을 수행한다.The processor 25 analyzes the motion tracking signal received from the mobile terminal 50 and outputs up and down or left and right rotation driving signals. The motion tracking signal is provided in the form of a three-dimensional coordinate change amount of the position change amount of the tracking object, that is, the instructor. Therefore, the processor 25 outputs a control signal for moving the direction in which the mobile terminal 50 is directed up, down, left, and right in the opposite direction to the received motion tracking signal to the up and down rotation driver 26 and the left and right rotation drive unit 27. In the photographing screen of 50, the instructor performs a function to always be located at a certain point.

상하회전 구동부(26)는 프로세서(25)로부터 상하회전 구동신호를 수신하는 경우 거치부를 상하 방향으로 회전시켜 추적 대상체인 강사의 상하방향 이동에 연동하기 위한 것이다.When the vertical rotation driving unit 26 receives the vertical rotation driving signal from the processor 25, the vertical rotation driving unit 26 rotates the mounting unit in the vertical direction to interlock with the vertical movement of the instructor, which is the tracking object.

좌우회전 구동부(27)는 프로세서(25)로부터 좌우회전 구동신호를 수신하는 경우 거치부를 좌우 방향으로 회전시켜 추적 대상체인 강사의 좌우방향 이동에 연동하기 위한 것이다.
When the left and right rotation drive unit 27 receives the left and right rotation driving signal from the processor 25, the left and right rotation units are rotated in the left and right directions to interlock with the left and right movements of the instructor, which is the tracking object.

도 5는 본 발명에 따른 모바일 단말기의 내부 구성도이고, 도 6은 컨텐츠 제작 프로그램의 세부 구성도, 도 7은 도 6의 모션 추적 모듈에 의해 모션 추적이 수행되는 과정을 도시한 흐름도이다. 5 is an internal configuration diagram of a mobile terminal according to the present invention, FIG. 6 is a detailed configuration diagram of a content creation program, and FIG. 7 is a flowchart illustrating a process of performing motion tracking by the motion tracking module of FIG. 6.

도 5에 도시된 바와 같이, 본 발명에 따른 모바일 단말기(50)는 카메라(51), 마이크(53), 컨텐츠 제작 프로그램(55), 블루투스 모듈(57) 및 통신 모듈(59)을 포함하여 구성되며, 설명을 간단히 하기 위해 본 발명의 핵심과 관련이 없는 구성들은 생략하였음을 밝혀 둔다.As shown in FIG. 5, the mobile terminal 50 according to the present invention includes a camera 51, a microphone 53, a content creation program 55, a Bluetooth module 57, and a communication module 59. It is to be noted that for simplicity of explanation, components not related to the core of the present invention are omitted.

카메라(51)는 강사의 강의 내용을 촬영하기 위한 것이고, 마이크(53)는 강사의 강의 음성을 녹음하기 위한 것으로서 일반적인 동영상 촬영을 위한 기본적인 구성이다. The camera 51 is for recording the lecture contents of the lecturer, the microphone 53 is for recording the lecture voice of the lecturer and is a basic configuration for general video shooting.

컨텐츠 제작 프로그램(55)은 강사의 교육 내용을 동영상으로 촬영하고 촬영된 동영상에서 강사의 움직임을 추적하여 모션 추적 신호를 트래킹 크래들로 전송하는 임베디드 소프트웨어로서, 촬영 영상의 픽셀 변화량을 검출하여 추적 대상 강사의 윤곽선을 추출하고, 상기 윤곽선의 위치 변화량에 기초하여 모션 추적을 수행한다.The content creation program 55 is an embedded software that records the instructor's training as a video and tracks the instructor's movement in the recorded video to transmit a motion tracking signal to the tracking cradle. Extract the contour of and perform motion tracking based on the amount of change in the position of the contour.

블루투스 모듈(57)은 블루투스 통신 규격을 통해 모션 추적 결과에 따른 모션 추적 신호를 트래킹 크래들로 송출하기 위한 것이다.The Bluetooth module 57 transmits a motion tracking signal according to the motion tracking result to the tracking cradle through the Bluetooth communication standard.

통신 모듈(59)은 제작이 완료된 교육 컨텐츠를 이동통신망 또는 무선랜 등의 무선통신을 통해 외부의 동영상 서버로 전송하기 위한 것이다.The communication module 59 is for transmitting the completed educational content to an external video server through wireless communication such as a mobile communication network or a wireless LAN.

도 6을 참조하면, 컨텐츠 제작 프로그램(55)은 강사의 교육 동영상을 촬영하여 교육 컨텐츠를 제작하는 동영상 촬영 모듈(55-1)과, 강사의 모션을 추적하는 모션 추적 모듈(55-2)과, 모션 추적에 따라 상기 트래킹 크래들의 팬과 틸트 동작을 제어하기 위한 팬/틸트 연동모듈(55-3)과, 완성된 교육 컨텐츠를 보안 인코딩하여 동영상 관리서버로 전송하는 보안 전송 모듈(55-4)을 포함한다.Referring to FIG. 6, the content creation program 55 includes a video recording module 55-1 for photographing an instructor's education video to produce educational content, a motion tracking module 55-2 for tracking the instructor's motion, and , A pan / tilt interworking module 55-3 for controlling the pan and tilt motion of the tracking cradle according to motion tracking, and a secure transmission module 55-4 for securely encoding the completed training content and transmitting the encoded training content to the video management server. ).

강사의 모션 추적은 촬영 영상의 픽셀 변화량을 검출하여 추적 대상 강사의 윤곽선을 추출하고, 상기 윤곽선의 위치 변화량에 기초하여 모션 추적이 수행된다.The motion tracking of the instructor detects the pixel change amount of the captured image to extract the contour of the tracking target instructor, and the motion tracking is performed based on the position change amount of the outline.

윤곽선 분석을 통한 모션 추적은, 도 7에 도시된 바와 같이, 촬영 영상으로부터 추적 대상인 강사의 몸체를 기준영상으로 획득하는 기준영상 획득단계(S700), 획득된 기준영상을 이미지화하는 기준영상 이미지화 단계(S710), 이미지화된 기준영상의 윤곽선을 기준패턴으로 생성하는 기준패턴 생성단계(S720), 생성된 기준패턴에 대한 좌표값을 기준좌표로 인식하는 기준좌표 매칭단계(S730), 촬영 영상으로부터 기준영상 이미지의 위치 변화를 추적하는 이미지 위치 추적단계(S740) 및 상기 기준영상 이미지의 위치 변화량을 검출하는 위치 변화량 검출단계(S750)를 통해 수행된다.Motion tracking through the contour analysis, as shown in Figure 7, the reference image acquisition step of obtaining the body of the instructor to be tracked from the captured image as a reference image (S700), the reference image imaging step of imaging the obtained reference image ( S710), a reference pattern generation step of generating an outline of the imaged reference image as a reference pattern (S720), a reference coordinate matching step (S730) of recognizing coordinate values of the generated reference pattern as reference coordinates, and a reference image from the captured image. An image position tracking step (S740) for tracking a change in position of the image and a position change amount detecting step (S750) for detecting a position change amount of the reference video image are performed.

기준영상 획득단계(S700)에서는 전체 촬영영상에서 추적 대상체인 강사의 몸체 부분이 기준영상으로서 추출되고, 기준영상 이미지화 단계(S710)에서는 추출된 기준영상이 정지된 이미지로 변환되고, 기준패턴 생성단계(S720)에서는 기준영상 이미지의 윤곽선이 검출되어 윤곽선의 개별적인 위치좌표들이 기준좌표로 설정된다.In the reference image acquisition step (S700), the body portion of the instructor, which is the tracking object, is extracted from the entire photographed image as the reference image, and in the reference image imaging step (S710), the extracted reference image is converted into a still image, and the reference pattern generation step In S720, the outline of the reference video image is detected, and individual positional coordinates of the outline are set as reference coordinates.

따라서, 팬/틸트 연동모듈(55-3)은 초기에 설정된 기준패턴에 기초하여 촬영 동영상 내에서 해당 기준패턴의 위치변화를 분석하여 위치변화량이 기준값을 벗어나는 경우 팬/틸트 제어를 위한 모션 추적 신호를 생성하여 블루투스 모듈(24)을 통해 출력하게 된다.
Therefore, the pan / tilt interlocking module 55-3 analyzes the positional change of the corresponding reference pattern in the captured video based on the initially set reference pattern, and the motion tracking signal for the pan / tilt control when the position change amount is out of the reference value. It generates and outputs through the Bluetooth module 24.

도 8은 구획 분할을 통한 모션 추적 및 팬/틸트 제어방법을 설명하기 위한 도면이다.8 is a view for explaining a motion tracking and pan / tilt control method by partitioning.

컨텐츠 제작 프로그램은 도 8과 같이, 화면을 미리 설정된 개수의 구획(70)으로 분할하고 강사 윤곽선의 기준점이 현재 구획을 벗어나는 경우 위치 변화량에 대응되는 모션 추적 신호를 생성하여 트래킹 크래들로 전송하고, 트래킹 크래들은 강사 윤곽선의 위치변동량의 반대방향으로 모바일 단말기(50)의 촬영방향이 이동하도록 상하 또는 좌우 방향으로 회전한다. 즉, 강사의 움직임이 있더라도 기준점이 원래의 구획 내에 있는 경우에는 영상 촬영에 문제가 없는 것으로 판단하고 기준점이 원래의 구획을 벗어나는 경우에는 강사의 이동 위치가 큰 것으로 판단하여 이동 위치만큼 촬영방향을 이동시켜 강사가 기준위치에 있도록 하는 것이다. As shown in FIG. 8, the content creation program divides the screen into a predetermined number of sections 70, and generates a motion tracking signal corresponding to the position change amount when the reference point of the instructor outline is out of the current section, and transmits it to the tracking cradle. The cradle rotates in the up and down or left and right directions so that the photographing direction of the mobile terminal 50 moves in the direction opposite to the positional variation of the instructor outline. That is, even if there is movement of the instructor, if the reference point is within the original compartment, it is determined that there is no problem in the image shooting. So that the instructor is in the standard position.

여기서, 강사 윤곽선의 기준점(80)은 강사 신체 윤곽선의 중심점으로 선택하는 방법과 윤곽선을 이루는 모든 점(실제로는 주요 대표점들)의 위치 변화량을 모두 검출하여 모든 점들의 평균 변화량을 강사의 위치 변화량으로 결정하는 방식과, 윤곽선 내부의 중심점을 기준점으로 하여 해당 중심점의 위치 변화량을 강사의 위치 변화량으로 결정하는 방식이 있을 수 있으나, 전자의 경우 연산량이 커 자원이 한정적인 모바일 기기에는 적합하지 않은 방식이다.Here, the reference point 80 of the instructor outline is selected as the center point of the instructor body outline and the position change amount of all points (actually, the main representative points) constituting the outline, and the average change amount of all the points is changed. There may be a method of determining the position change and the position change of the center point as the position change amount of the instructor using the center point inside the contour as a reference point, but the former method is not suitable for a mobile device having a large amount of computation and limited resources. to be.

자원이 한정적인 모바일 기기에서 연산량을 보다 감소시킬 수 있도록 하기 위해 강사 신체의 각 부분 중 위치 변화량이 가장 적은 부분을 검출하여 해당 부분의 중심점을 기준점으로 선택한 후 기준점의 변화량만을 검출하여 모션 추적을 수행하는 방식이 보다 바람직할 것이며, 이러한 예로서 강사의 머리 부분의 중심점을 기준점으로 설정할 수 있다.
In order to reduce the amount of computation in a mobile device with limited resources, the part of the instructor's body that has the smallest position change is detected and the center point of the part is selected as the reference point, and only the change amount of the reference point is detected to perform motion tracking. It would be more desirable to do this, and for this example, the center point of the head of the instructor may be set as the reference point.

도 9는 교육 컨텐츠 제작을 위한 모바일 단말기의 화면 구성의 일례를 나타낸 것이다. 도 9에 도시된 바와 같이, 교육 컨텐츠 제작을 위한 모바일 단말기의 화면은 우측의 촬영 영상 표시부(61)와 좌측의 메뉴버튼들로 이루어질 수 있다.9 illustrates an example of a screen configuration of a mobile terminal for producing educational content. As shown in FIG. 9, the screen of the mobile terminal for producing educational content may include a photographed image display unit 61 on the right side and menu buttons on the left side.

좌측의 메뉴버튼들은 동영상 촬영 개시를 위한 촬영시작 메뉴(62), 동영상 촬영 종료를 위한 촬영종료 메뉴(63), 완성된 교육 컨텐츠를 동영상 서버로 전송하기 위한 동영상 서버 전송 메뉴(64), 모션 트래킹 기능 동작 여부를 표시하는 모션 트래킹 표시메뉴(65) 및 모바일 단말기(50)와 트래킹 크래들의 통신접속 상태를 나타내는 팬/틸트 접속 메뉴(66)를 포함할 수 있다.The menu buttons on the left are the start recording menu 62 for starting the video recording, the end recording menu 63 for ending the video recording, the video server transmission menu 64 for transmitting the completed training content to the video server, and motion tracking. It may include a motion tracking display menu (65) indicating whether the function is operating, and a pan / tilt connection menu (66) indicating a communication connection state of the tracking cradle with the mobile terminal (50).

동영상 서버 전송 메뉴(64)가 선택되는 경우 보안전송 모듈(55-4)에 의해 완성된 교육 컨텐츠가 보안 인코딩되어 동영상 관리서버로 전송된다.
When the video server transmission menu 64 is selected, the training content completed by the secure transmission module 55-4 is securely encoded and transmitted to the video management server.

도 10은 판서영역과 강사 몸체 영역의 중복부분을 투명처리하는 실시예를 설명하기 위한 도면이다.10 is a view for explaining an embodiment of transparent processing of overlapping portions of the writing area and the instructor body area.

본 실시예에서는 컨텐츠 제작 프로그램이 화면에서 판서가 이루어진 판서 영역(81)을 실시간으로 추출하고, 판서영역(81)과 강사 윤곽선(80)을 비교하여 공통 영역(82)이 존재하는 경우, 해당 공통영역(82)의 판서 내용이 드러나도록 윤곽선 내의 영역 중 공통영역(82)에 해당하는 영역을 미리 설정된 투명도로 표시되도록 영상처리하는 것이 특징이다.In the present embodiment, if the content creation program extracts the writing area 81 on which the writing is made on the screen in real time, and compares the writing area 81 with the instructor outline 80, the common area 82 exists. It is characterized in that the image processing is performed such that the region corresponding to the common region 82 among the regions in the outline is displayed with a predetermined transparency so that the writing content of the region 82 is revealed.

이때 투명도는 판서 영역이 명확하게 드러나도록 공통영역(82)에 해당하는 윤곽선 부분이 전혀 표시되지 않도록 하는 것도 가능하나, 이러한 경우 강사 신체의 일부가 잘려나간 형태가 표시되어 부자연스러운 측면이 있을 수 있으므로 판서 영역의 글씨가 명확하게 드러나면서도 강사 신체의 형태를 인식할 수 있도록 하는 정도의 투명도(예를 들면, 30 ~ 50% 정도)로 공통영역 부분의 강사 윤곽선 부분을 표시하도록 하는 것이 바람직하다.
In this case, the transparency may be such that the contour portion corresponding to the common area 82 is not displayed at all so that the writing area is clearly displayed. However, in this case, a shape in which the part of the instructor's body is cut out may be displayed, thereby causing an unnatural side. It is desirable to display the instructor outline part of the common area with a degree of transparency (eg, about 30 to 50%) that allows the writing of the writing area to be clearly revealed and recognize the shape of the instructor body.

본 발명의 또 다른 실시예에 따르면, 자원이 한정적인 모바일 단말기(50)에서의 영상 분석 연산량을 보다 감소시키기 위해 컨텐츠 제작 프로그램이 제조시 또는 사용자의 설정에 의해 마커 물체의 이미지를 미리 인식할 수 있도록 해당 마커 물체의 형태 정보가 저장되어 있고, 동영상 촬영시에는 마커 물체가 강사의 신체에 부착되거나 강사가 이를 파지하고 있는 상태에서 마커 물체의 위치 변화량에 기초하여 모션 추적을 수행하도록 할 수 있다.According to another embodiment of the present invention, in order to further reduce the amount of image analysis computation in the mobile terminal 50 of limited resources, the content creation program may pre-recognize the image of the marker object at the time of manufacture or by user setting. Shape information of the corresponding marker object is stored so that the motion tracking may be performed based on the position change amount of the marker object while the marker object is attached to the instructor's body or held by the instructor.

마커 물체로는 강사가 손으로 용이하게 파지할 수 있는 마이크일 수 있으며, 이러한 경우 강사가 사용하는 마이크의 이미지를 마커 물체로 등록한 후, 강사가 동영상 촬영시 해당 마이크를 손으로 파지한 상태에서 강의를 진행하면 모션 추적 모듈(55-2)이 마이크의 위치 변화량을 분석하여 모션 추적이 이루어지도록 할 수 있다. 마이크는 원통형상으로서 형상이 단순하고 보는 각도가 달라지더라도 그 형상이 일정하므로 강사가 마이크를 파지한 상태에서 몸을 회전하더라도 카메라에서 취득되는 형상의 변화가 거의 없으므로 위치 추적이 매우 용이한 장점이 있다.
The marker object may be a microphone that the instructor can easily grip by hand.In this case, after registering the image of the microphone used by the instructor as the marker object, the lecturer grasps the microphone by hand while shooting the video. In progress, the motion tracking module 55-2 may analyze the amount of change in the position of the microphone so that motion tracking is performed. The microphone is cylindrical in shape and its shape is constant even if the viewing angle is different. Therefore, even if the instructor rotates the body while holding the microphone, the shape obtained from the camera is almost unchanged. have.

그리고, 모션 추적의 정확도를 보다 향상시킬 수 있도록 등록된 마커 물체의 위치 변화량과 강의자 윤곽선의 기준점의 위치 변화량을 각각 검출하여 2가지의 위치 변화량이 기준값을 모두 초과하는 경우에만 모션 추적 신호를 발생시키는 것도 가능하다.In order to further improve the accuracy of motion tracking, the motion tracking signal is generated only when the location change amount of the registered marker object and the location change amount of the reference point of the lecturer outline are respectively exceeded. It is also possible.

즉, 상기 컨텐츠 제작 프로그램은 제조시 또는 사용자의 설정에 의해 마커 물체의 이미지가 미리 인식되어 있고, 강사의 신체에 부착되거나 강사가 파지하고 있는 상기 마커 물체의 위치 변화량과 강사 신체의 각 부분 중 위치 변화량이 가장 적은 부분의 중심점으로 선택된 상기 강사 윤곽선의 기준점의 변화량을 각각 검출하여 상기 마커 물체의 중심점과 상기 강사 윤곽선의 기준점이 모두 현재 구획을 벗어나는 경우에만 위치 변화량에 대응되는 모션 추적 신호를 생성할 수 있다.In other words, the content production program is the image of the marker object is already recognized in advance during manufacturing or by the user's setting, the position change amount of the position of the marker object and the position of each part of the instructor body attached to the instructor's body or held by the instructor The amount of change in the reference point of the instructor contour selected as the center point of the smallest amount of change is respectively detected to generate a motion tracking signal corresponding to the position change amount only when both the center point of the marker object and the reference point of the instructor outline are out of the current section. Can be.

이를 통해 기준점과 마커 물체 이미지만을 추적함으로써 모션 추적에 소요되는 연산량을 최소화하면서도 매우 정확한 모션 추적이 가능하여 모션 검출 오류에 따른 영상 촬영시의 불필요한 흔들림 등을 방지하여 보다 우수한 품질의 교육 컨텐츠를 제작할 수 있는 장점이 있다. Through this, only the reference point and the marker object image can be traced, minimizing the amount of computation required for motion tracking, and highly accurate motion tracking can be prevented, so that unnecessary shake during video shooting due to motion detection errors can be produced, resulting in higher quality educational content. There is an advantage.

10 : 몸체부 20 : 상하회전 몸체
21 : 평면부 22 : 절곡부
23 : 회전축 24 : 블루투스 모듈
25 : 프로세서 26 : 상하회전 구동부
27 : 좌우회전 구동부 30 : 거치대
40 : 하부 지지부 50 : 모바일 단말기
51 : 카메라 53 : 마이크
55 : 컨텐츠 제작 프로그램 57 : 블루투스 모듈
59 : 통신모듈10: body portion 20: vertical rotation body
21: flat part 22: bent part
23: rotating shaft 24: Bluetooth module
25 processor 26 vertical drive unit
27: left and right rotation drive unit 30: cradle
40: lower support 50: mobile terminal
51: camera 53: microphone
55: content creation program 57: Bluetooth module
59: communication module

Claims (10)

모션 추적 프로그램이 내장된 모바일 단말과 이와 연동하는 트래킹 크래들을 이용한 교육 컨텐츠 제작장치에 있어서,
추적 대상 강사의 윤곽선을 추출하고, 상기 윤곽선의 위치 변화량에 기초하여 모션 추적을 수행하는 모션 추적 기능과 동영상 촬영기능을 갖는 컨텐츠 제작 프로그램과, 모션 추적 결과에 따른 모션 추적 신호를 송출하는 블루투스 모듈이 내장된 모바일 단말기와;
몸체부와, 상기 몸체부의 일측에 상하회전 가능하도록 설치되고 상기 모바일 기기를 장착하기 위한 거치부와, 상기 모바일 단말기의 모션 추적신호를 수신하는 블루투스 모듈과, 상기 모션 추적신호를 분석하여 상하 또는 좌우 회전 구동신호를 출력하는 프로세서와, 상기 프로세서로부터 상하회전 구동신호를 수신하는 경우 상기 거치부를 상하 방향으로 회전시키는 상하회전 구동부와, 상기 프로세서로부터 좌우회전 구동신호를 수신하는 경우 상기 몸체부를 좌우방향으로 회전시키는 좌우회전 구동부를 포함하는 트래킹 크래들을 포함하되,
상기 컨텐츠 제작 프로그램은
강사 신체의 각 부분 중 위치 변화량이 가장 적은 부분의 중심점을 기준점으로 설정하고, 제조시 또는 사용자의 설정에 의해 마커 물체의 이미지가 미리 인식되어 있어, 화면을 미리 설정된 개수의 구획으로 분할하여 강사의 신체에 부착되거나 강사가 파지하고 있는 상기 마커 물체의 위치 변화량과 상기 기준점의 변화량을 각각 검출하여 상기 마커 물체의 중심점과 상기 기준점이 모두 현재 구획을 벗어나는 경우에만 위치 변화량에 대응되는 모션 추적 신호를 생성하며,
화면에서 판서가 이루어진 판서 영역을 실시간으로 추출하고, 상기 판서영역과 상기 강사 윤곽선을 비교하여 공통 영역이 존재하는 경우, 해당 공통영역의 판서 내용이 드러나도록 상기 윤곽선 내의 영역 중 상기 공통영역에 해당하는 영역을 미리 설정된 투명도로 표시되도록 영상처리하는 것을 특징으로 하는 하는 교육 컨텐츠 제작장치.In the mobile terminal with a built-in motion tracking program and the educational content production device using the tracking cradle linked thereto,
A content creation program having a motion tracking function and a video recording function for extracting the contour of the instructor to be tracked and performing motion tracking based on the position change amount of the contour, and a Bluetooth module for transmitting a motion tracking signal according to the motion tracking result A built-in mobile terminal;
A body part, installed on one side of the body part so as to be rotated up and down, a mounting part for mounting the mobile device, a Bluetooth module for receiving a motion tracking signal of the mobile terminal, and analyzing the motion tracking signal up and down or left and right A processor for outputting a rotation driving signal, a vertical rotation driving unit for rotating the mounting unit in a vertical direction when receiving a vertical rotation driving signal from the processor, and the body portion in a horizontal direction when receiving a horizontal rotation driving signal from the processor; Including a tracking cradle that includes a left and right rotating drive to rotate,
The content production program
The center point of the part of the instructor's body that has the least amount of change in position is set as the reference point, and the image of the marker object is recognized in advance during manufacturing or by the user's setting, so that the screen is divided into a predetermined number of sections. The position change amount of the marker object attached to the body or held by the instructor and the change amount of the reference point are respectively detected to generate a motion tracking signal corresponding to the position change amount only when both the center point and the reference point of the marker object are out of the current section. ,
When the writing area on which the writing is made is extracted from the screen in real time, and the writing area is compared with the instructor outline, if a common area exists, the writing area of the corresponding common area corresponds to the common area among the areas within the contour to reveal the writing content. Educational content production apparatus characterized in that the image processing so that the area is displayed with a predetermined transparency. 제 1 항에 있어서,
상기 거치부는
상기 몸체의 상단에 설치되고, 평면부와 상기 평면부 양단에 하방으로 절곡연장되어 상기 상하 회전 구동부에 연결되는 절곡부를 포함하는 상하회전 몸체와, 상기 상하회전 몸체에 탈착가능하게 결합되는 거치대를 포함하는 것을 특징으로 하는 교육 컨텐츠 제작장치.The method of claim 1,
The mounting portion
It is installed on the upper end of the body, and the upper and lower rotating body including a bending portion connected to the vertical rotation drive is extended downward bent on both ends of the flat portion and the flat portion, and a cradle detachably coupled to the vertical rotation body Educational content production apparatus, characterized in that. 제 1 항에 있어서,
상기 컨텐츠 제작 프로그램은
강사의 교육 동영상을 촬영하여 교육 컨텐츠를 제작하는 동영상 촬영 모듈과, 강사의 모션을 추적하는 모션 추적 모듈과, 모션 추적에 따라 상기 트래킹 크래들의 팬과 틸트 동작을 제어하기 위한 팬/틸트 연동모듈과, 완성된 교육 컨텐츠를 보안 인코딩하여 동영상 관리서버로 전송하는 보안 전송 모듈을 포함하는 것을 특징으로 하는 교육 컨텐츠 제작장치.The method of claim 1,
The content production program
A video recording module for producing training contents by recording an instructor's training video, a motion tracking module for tracking the instructor's motion, a pan / tilt interworking module for controlling pan and tilt motion of the tracking cradle according to motion tracking; And a secure transmission module for securely encoding the completed educational content and transmitting the same to the video management server. 삭제delete 제 1 항에 있어서,
상기 윤곽선을 통한 모션 추적은
촬영 영상으로부터 추적 대상인 강사의 몸체를 기준영상으로 획득하는 기준영상 획득단계, 상기 획득된 기준영상을 이미지화하는 기준영상 이미지화 단계, 이미지화된 기준영상의 윤곽선을 기준패턴으로 생성하는 기준패턴 생성단계, 생성된 기준패턴에 대한 좌표값을 기준좌표로 인식하는 기준좌표 매칭단계, 촬영 영상으로부터 기준영상 이미지의 위치 변화를 추적하는 이미지 위치 추적단계 및 상기 기준영상 이미지의 위치 변화량을 검출하는 위치 변화량 검출단계를 통해 수행되는 것을 특징으로 하는 교육 컨텐츠 제작장치.The method of claim 1,
Motion tracking through the contour
A reference image acquisition step of acquiring the body of the instructor to be tracked from the captured image as a reference image, a reference image imaging step of imaging the obtained reference image, a reference pattern generation step of generating an outline of the imaged reference image as a reference pattern, generation A reference coordinate matching step of recognizing a coordinate value of the reference pattern as a reference coordinate, an image position tracking step of tracking a position change of a reference image image from a captured image, and a position change amount detecting step of detecting a position change amount of the reference image image; Educational content production apparatus, characterized in that carried out through. 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete
KR1020120008150A 2012-01-27 2012-01-27 An apparatus for producing education contents using mobile terminal imbedded motion tracking program and tracking cradle interconnected to mobile terminal KR101184690B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020120008150A KR101184690B1 (en) 2012-01-27 2012-01-27 An apparatus for producing education contents using mobile terminal imbedded motion tracking program and tracking cradle interconnected to mobile terminal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120008150A KR101184690B1 (en) 2012-01-27 2012-01-27 An apparatus for producing education contents using mobile terminal imbedded motion tracking program and tracking cradle interconnected to mobile terminal

Publications (1)

Publication Number Publication Date
KR101184690B1 true KR101184690B1 (en) 2012-09-26

Family

ID=47113914

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120008150A KR101184690B1 (en) 2012-01-27 2012-01-27 An apparatus for producing education contents using mobile terminal imbedded motion tracking program and tracking cradle interconnected to mobile terminal

Country Status (1)

Country Link
KR (1) KR101184690B1 (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101509012B1 (en) 2013-04-12 2015-04-06 조철연 Lecturer tracing photographing system and method thereof
KR101614617B1 (en) 2014-11-13 2016-04-21 지준거 A mounting apparatus for mobile device
WO2018212375A1 (en) * 2017-05-18 2018-11-22 주식회사 오퍼스원 Method, device and server for providing security service using idle terminal
CN112348926A (en) * 2020-11-23 2021-02-09 杭州美册科技有限公司 Android-based video splicing app processing method and device
WO2022244920A1 (en) * 2021-05-18 2022-11-24 주식회사 쓰리아이 Mobile terminal and control method for terminal holder
KR20230025845A (en) * 2021-05-18 2023-02-23 주식회사 쓰리아이 Mobile terminal cradle providing tracking function in conjuction with mobile terminal

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
정하영. 광류기반 다중 이동 객체의 실시간 인식 및 추적 시스템에 관한 연구. 관동대학교 대학원, 2010.12.

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101509012B1 (en) 2013-04-12 2015-04-06 조철연 Lecturer tracing photographing system and method thereof
KR101614617B1 (en) 2014-11-13 2016-04-21 지준거 A mounting apparatus for mobile device
WO2018212375A1 (en) * 2017-05-18 2018-11-22 주식회사 오퍼스원 Method, device and server for providing security service using idle terminal
CN112348926A (en) * 2020-11-23 2021-02-09 杭州美册科技有限公司 Android-based video splicing app processing method and device
WO2022244920A1 (en) * 2021-05-18 2022-11-24 주식회사 쓰리아이 Mobile terminal and control method for terminal holder
KR20230025845A (en) * 2021-05-18 2023-02-23 주식회사 쓰리아이 Mobile terminal cradle providing tracking function in conjuction with mobile terminal
KR102619302B1 (en) 2021-05-18 2023-12-29 주식회사 쓰리아이 Mobile terminal cradle providing tracking function in conjuction with mobile terminal

Similar Documents

Publication Publication Date Title
KR101184690B1 (en) An apparatus for producing education contents using mobile terminal imbedded motion tracking program and tracking cradle interconnected to mobile terminal
US11381758B2 (en) System and method for acquiring virtual and augmented reality scenes by a user
KR101885777B1 (en) Reconstruction of three-dimensional video
US10482679B2 (en) Capturing and aligning three-dimensional scenes
JP7059937B2 (en) Control device for movable image pickup device, control method and program for movable image pickup device
CN109584295A (en) The method, apparatus and system of automatic marking are carried out to target object in image
WO2021184952A1 (en) Augmented reality processing method and apparatus, storage medium, and electronic device
CN107431803A (en) The seizure of panoramic virtual reality content and render
JP6348741B2 (en) Information processing system, information processing apparatus, information processing program, and information processing method
CN109102727A (en) A kind of virtual reality teaching equipment
CN102959941A (en) Information processing system, information processing device, and information processing method
US20210090211A1 (en) Image processing method, non-transitory recording medium, image processing apparatus, and image processing system
CN108668108B (en) Video monitoring method and device and electronic equipment
CN107708624A (en) Blind person or visually impaired people is allowed to understand the portable system of surrounding environment by sound or tactile
CN108132490A (en) Detection system and detection method based on alignment system and AR/MR
CN208985412U (en) Wisdom education physical environment system
CN106875450B (en) Training set optimization method and device for camera reorientation
CN209928635U (en) Mold design teaching system based on mobile augmented reality
CN117826976A (en) XR-based multi-person collaboration method and system
CN103902182A (en) Shooting device control method, shooting device and terminal
CN114924650A (en) Mixed compiling system for elements of metauniverse and real space-time recombination
CN210295507U (en) Internet of things system for piano
JP2024033277A (en) Communication systems, information processing systems, video playback methods, programs
JP2024033276A (en) Communication systems, information processing systems, video creation methods, programs
CN114141090A (en) Real-operation virtual measurement total station training simulation system

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20150630

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20160919

Year of fee payment: 5