KR102159834B1 - 카메라 이미지 합성 시스템 - Google Patents

카메라 이미지 합성 시스템 Download PDF

Info

Publication number
KR102159834B1
KR102159834B1 KR1020200085888A KR20200085888A KR102159834B1 KR 102159834 B1 KR102159834 B1 KR 102159834B1 KR 1020200085888 A KR1020200085888 A KR 1020200085888A KR 20200085888 A KR20200085888 A KR 20200085888A KR 102159834 B1 KR102159834 B1 KR 102159834B1
Authority
KR
South Korea
Prior art keywords
image
camera
noise
learning
moving
Prior art date
Application number
KR1020200085888A
Other languages
English (en)
Inventor
신관수
Original Assignee
주식회사 제너럴이노베이션즈
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 제너럴이노베이션즈 filed Critical 주식회사 제너럴이노베이션즈
Priority to KR1020200085888A priority Critical patent/KR102159834B1/ko
Application granted granted Critical
Publication of KR102159834B1 publication Critical patent/KR102159834B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00—Details of cameras or camera bodies; Accessories therefor
    • G03B17/56—Accessories
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/20—Education
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N5/23229—

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Tourism & Hospitality (AREA)
  • Health & Medical Sciences (AREA)
  • Primary Health Care (AREA)
  • General Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Strategic Management (AREA)
  • Educational Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Educational Administration (AREA)
  • Theoretical Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Quality & Reliability (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Studio Devices (AREA)

Abstract

본 발명은 카메라 이미지 합성 시스템에 관한 것으로서, 보다 상세하게는 영상을 합성함에 있어서 자연스러운 영상 합성 이미지를 제공하는 카메라 이미지 합성 시스템에 관한 것이다.

Description

카메라 이미지 합성 시스템{CAMERA IMAGE SYNTHESIS SYSTEM}
본 발명은 카메라 이미지 합성 시스템에 관한 것으로서, 보다 상세하게는 영상을 합성함에 있어서 자연스러운 영상 합성 이미지를 제공하는 카메라 이미지 합성 시스템에 관한 것이다.
일반적으로 영상을 편집하는 데 있어서, 영상을 촬영하고 촬영한 영상을 편집자가 영상을 합성하며 영상의 이미지를 생성해야하는 불편함이 따르고 긴 시간을 필요로 해왔다.
영상을 합성함에 있어서 자연스러운 영상 합성 이미지를 제공하는 카메라 이미지 합성 시스템이 제공될 필요가 있다.
한국등록특허 제10-0875942호 한국등록실용신안 제20-0308077호 한국등록특허 제10-1773891호
본 발명의 일측면은 영상을 합성함에 있어서 자연스러운 영상 합성 이미지를 제공하는 카메라 이미지 합성 시스템을 제공한다.
본 발명의 기술적 과제는 이상에서 언급한 기술적 과제로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
본 발명의 일 실시예에 따른 카메라 이미지 합성 시스템은, 피사체를 다양한 각도에서 촬영하는 카메라; 및 상기 카메라에서 촬영한 영상을 실시간으로 수신하여 합성 영상을 제공하는 합성장치;를 포함할 수 있다.
본 발명의 다른 실시예에 따른 카메라 이미지 합성 시스템은, 상기 카메라가 안착하여 상기 피사체의 주위를 이동하는 이동장치;를 더 포함할 수 있다.
일 실시예에 따른 상기 합성장치는, 상기 카메라에서 촬영한 영상을 실시간으로 수신하는 수신부; 상기 수신부에서 수신한 실시간 촬영 영상에 포함된 피사체를 분석하는 영상분석부; 상기 실시간 촬영 영상을 합성하여 원하는 각도의 합성 영상을 생성하는 합성 영상 생성부; 상기 실시간 촬영 영상으로부터 합성된 이미지로 전환되는 시점을 자동으로 검출하는 시점검출부; 상기 시점검출부에서 검출한 시점에 상기 실시간 촬영 영상의 마지막 프레임과 상기 합성 이미지 영상의 첫 프레임 사이를 자연스럽게 연결해주는 연결 영상을 생성하는 연결 영상 생성부; 상기 실시간 촬영 영상, 상기 연결 영상 및 상기 합성 영상을 순서대로 합성하여 제공하는 영상합성부;를 포함할 수 있다.
일 실시예에 따른 상기 이동장치는, 상단에 위치하며 상기 카메라가 안착하는 안착부; 지면에 고정되어 상기 피사체의 주변을 감싸는 형태로 위치되고, H빔 형태로 형성되어 하단은 지면에 고정될 수 있는 홈이 마련되어 있고, 상단은 상기 카메라를 이동하기 위한 이동공간으로 사용되는 고정부; 상기 고정부의 상단 홈과 돌출된 부분에 맞추어 삽입되어 고정되며 상기 고정부가 상기 피사체의 주변은 감싸는 형태로 위치된 길이 방향을 따라 이동이 가능한 이동부; 및 상기 안착부와 상기 이동부 사이를 연결하는 연결부;를 포함할 수 있다.
본 발명의 일 실시예에 따른 화상전화용 마이크는, 객체의 음성과 주변의 소음을 포함하여 감지되는 소리를 분석하여 소음을 최소화하는 소음 방지 장치; 및 상단부의 케이스 내부에 설치되는 흡음장치;를 포함할 수 있다.
일 실시예에 따른 상기 소음 방지 장치는, 상기 객체의 음성과 주변의 소음을 포함하여 감지되는 소리를 분석하여 상기 객체의 음성과 주변의 소음을 구분하는 소음구별부; 상기 주변의 소음의 주파수 및 위상을 분석하는 소음분석부; 상기 주파수 및 위상과 반대되는 주파수 및 위상을 가진 감쇄신호를 생성하는 감쇄신호 생성부; 및 상기 생성한 감쇄신호를 방사하는 감쇄신호 방사부;를 포함할 수 있다.
일 실시예에 따른 상기 흡음장치는, 상기 객체의 음성을 기준으로 하여 소음이 발생하는 소음발생지를 분석하여 상기 소음발생지의 각도 또는 위치에 맞추어 이동할 수 있다.
본 발명의 일 실시예에 따른 온라인 교육 플랫폼은, 휴대가 가능하며 온라인 학습을 위한 학습 단말; 및 상기 학습 단말에 입력되는 학습 수준을 평가하여 상기 학습 수준에 따른 난이도의 문제를 제공하고, 교육 목적에 따라 기출 문제를 스크랩하되 상기 기출 문제의 중요도를 추출하여 상기 학습 단말로 제공하고, 상기 학습 단말로 입력되는 학습 과정 중 발생하는 오답의 패턴을 자동으로 분석하여 취약 영역의 학습 능력을 향상시키고, 상기 학습 단말, 상기 카메라 이미지 합성 시스템 및 상기 화상전화용 마이크와 통신하여 상기 학습 단말로 상기 카메라 이미지 합성 시스템을 이용한 합성 영상과 상기 화상전화용 마이크를 이용한 음성을 제공하는 교육 관리 서버;를 포함할 수 있다.
상술한 본 발명의 일측면에 따르면, 카메라 이미지 합성 시스템을 이용하여 실시간으로 촬영하는 영상을 수신하여 합성 영상 이미지를 생성할 수 있고, 합성 영상 이미지 사이를 자연스럽게 연결해줄 연결 영상을 삽입하여 보다 자연스러운 합성 영상 이미지를 생성할 수 있다.
본 발명의 효과는 이상에서 언급한 효과들로 제한되지 않으며, 이하에서 설명할 내용으로부터 통상의 기술자에게 자명한 범위 내에서 다양한 효과들이 포함될 수 있다.
도 1은 본 발명의 일 실시예에 따른 카메라 이미지 합성 시스템이 개략적으로 도시된 도면이다.
도 2 는 본 발명의 다른 실시예에 따른 카메라 이미지 합성 시스템이 개략적으로 도시된 도면이다.
도 3은 도 1에 개시된 카메라 이미지 합성 시스템의 구성 중 하나인 합성장치가 구체적으로 도시된 도면이다.
도 4 및 도 5는 도 1에 개시된 카메라 이미지 합성 시스템의 구성 중 하나인 이동장치가 구체적으로 도시된 도면이다.
도 6은 도 4 및 도 5에 개시된 이동장치에 포함되는 구성이 구체적으로 도시된 도면이다.
도 7은 본 발명의 다른 실시예에 따른 화상전화용 마이크가 개략적으로 도시된 도면이다.
도 8은 본 발명의 다른 실시예에 따른 화상전화용 마이크에 대한 구성도가 개략적으로 도시된 도면이다.
도 9는 도 7 및 도 8의 화상전화용 마이크의 구성 중 일부인 소음 방지 장치의 구성이 도시된 도면이다.
도 10은 본 발명의 다른 실시예에 따른 화상전화용 마이크의 단면도가 개략적으로 도시된 도면이다.
도 11은 본 발명의 또 다른 실시예에 따른 온라인 교육 플랫폼이 개략적으로 도시된 도면이다.
도 12는 본 발명의 또 다른 실시예에 따른 온라인 교육 플랫폼의 구성이 구체적으로 도시된 도면이다.
도 13은 본 발명의 일 실시예에 따른 카메라 이미지 합성 시스템이 합성 영상을 생성하는 방법을 설명하기 위한 순서도이다.
도 14는 본 발명의 다른 실시예에 따른 화상전화용 마이크가 소음을 제거하는 방법을 설명하기 위한 순서도이다.
도 15 내지 도 18은 본 발명의 또 다른 실시예에 따른 온라인 교육 플랫폼이 학습 단말에 학습 내용을 제공하는 방법을 설명하기 위한 순서도이다
후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이들 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 여기에 기재되어 있는 특정 형상, 구조 및 특성은 일 실시예와 관련하여 본 발명의 정신 및 범위를 벗어나지 않으면서 다른 실시예로 구현될 수 있다. 또한, 각각의 개시된 실시예 내의 개별 구성요소의 위치 또는 배치는 본 발명의 정신 및 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 취하려는 것이 아니며, 본 발명의 범위는, 적절하게 설명된다면, 그 청구항들이 주장하는 것과 균등한 모든 범위와 더불어 첨부된 청구항에 의해서만 한정된다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 기능을 지칭한다.
이하, 도면들을 참조하여 본 발명의 바람직한 실시예들을 보다 상세하게 설명하기로 한다.
본 발명에 따른 온라인 교육 플랫폼은 카메라 이미지 합성 시스템 및 화상전화용 마이크를 포함한다.
도 1은 본 발명의 일 실시예에 따른 카메라 이미지 합성 시스템이 개략적으로 도시된 도면이다.
도 2는 본 발명의 다른 실시예에 따른 카메라 이미지 합성 시스템이 개략적으로 도시된 도면이다.
도 1 및 도 2를 참조하면, 카메라 이미지 합성 시스템(110)은 카메라(113) 및 합성장치(117)를 포함할 수 있고, 카메라(113)를 용이하게 이동시킬 수 있는 이동장치(115)를 더 포함할 수 있다.
카메라(113)는 피사체를 다양한 각도에서 촬영할 수 있고, 실시간으로 촬영한 영상을 저장하여 합성장치(117)로 송신할 수 있다.
합성장치(117)는 카메라(113)에서 촬영한 영상을 실시간으로 수신할 수 있고, 실시간으로 수신한 영상을 합성하여 합성 영상을 생성할 수 있고, 생성한 합성 영상을 제공할 수 있다.
이동장치(115)는 카메라(113)가 안착할 수 있으며 카메라(113)가 촬영하는 피사체의 주위를 감싸는 형태로 지면에 설치되어 있을 수 있고, 카메라(113)가 위치를 이동하며 피사체를 촬영할 수 있도록 이동할 수 있다.
도 3은 도 1에 개시된 카메라 이미지 합성 시스템의 구성 중 하나인 합성장치가 구체적으로 도시된 도면이다.
도 3을 참조하면, 합성장치(117)는 수신부(1171), 영상분석부(1173), 합성 영상 생성부(1174), 시점검출부(1175), 연결 영상 생성부(1176) 및 영상합성부(1177)를 포함할 수 있다.
수신부(1171)는 카메라(113)에서 촬영한 영상을 실시간으로 수신할 수 있고, 수신한 영상을 저장하여 효율적으로 합성 영상을 생성할 수 있다.
영상분석부(1173)는 수신부(1171)에서 수신한 실시간 촬영 영상에 포함된 배경과 피사체 중 피사체를 분석할 수 있어 피사체의 합성 영상을 효율적으로 생성할 수 있다.
합성 영상 생성부(1174)는 수신부(1171)에서 수신하여 영상분석부(1173)에서 분석한 실시간 촬영 영상을 합성하여 사용자가 원하는 각도의 합성 영상을 생성할 수 있다.
시점검출부(1175)는 수신부(1171)에서 수신하여 영상분석부(1173)에서 분석한 실시간 촬영 영상으로부터 합성된 이미지로 전환되는 시점을 자동으로 검출할 수 있다.
연결 영상 생성부(1176)는 시점검출부(1175)에서 검출한 시점에 실시간 촬영 영상의 마지막 프레임과 합성 이미지 영상의 첫 프레임 사이를 자연스럽게 연결해주는 연결 영상을 생성할 수 있다.
영상합성부(1177)는 실시간 촬영 영상, 연결 영상 및 합성 영상을 순서대로 합성할 수 있고, 카메라(113)를 이용하여 촬영한 영상과 합성 영상을 자연스럽게 합성한 영상을 사용자에게 제공할 수 있다.
도 4 및 도 5는 도 1에 개시된 카메라 이미지 합성 시스템의 구성 중 하나인 이동장치가 구체적으로 도시된 도면이다.
도 4를 참조하면, 이동장치(115)는 안착부(1151), 고정부(1157), 이동부(1155) 및 연결부(1153)를 포함할 수 있다.
안착부(1151)는 이동장치(115)의 상단에 위치하며 카메라(113)가 안착할 수 있다. 여기서 카메라(113)가 안착하기 위하여 카메라(113)의 폭 또는 너비에 맞춘 홈이나 나사 등의 고정장치가 형성되어 있을 수 있다.
한편, 카메라(113)를 안착시켜 고정하기 위한 고정장치는 상술한 홈이나 나사로 한정되는 것이 아니라 카메라(113)를 안착시켜 고정시킬 수 있는 장치를 모두 포함할 수 있다.
고정부(1157)는 지면에 고정되어 피사체의 주변을 감싸는 형태로 위치될 수 있고, H빔 형태로 형성되어 하단은 지면에 고정될 수 있는 홈이 마련되어 있을 수 있고, 상단은 카메라(113)를 이동하기 위한 이동공간으로 사용될 수 있다.
이동부(1155)는 고정부의 상단 홈과 돌출된 부분에 맞추어 삽입되어 고정되며 고정부(1157)가 피사체의 주변은 감싸는 형태로 위치된 길이 방향을 따라 이동이 가능할 수 있다.
연결부(1153)는 안착부(1151)와 이동부(1155) 사이를 연결하며 세로 방향으로 길게 뻗어있는 형태로 형성되어 있을 수 있고, 안착부(1151)와 이동부(1155)가 서로 지지하며 지탱하여 줄 수 있다.
도 5를 참조하면, 이동장치(115)는 안착부(1151), 고정부(1157), 이동부(1155), 연장부(115-1.115-2) 및 연결부(1153)를 포함할 수 있다.
여기서 안착부(1151), 고정부(1157), 이동부(1155) 및 연결부(1153)는 도 4를 통하여 상술한 바와 동일한 장치이므로 설명을 생략하기로 한다.
연장부(115-1.115-2)는 연결부(1153)의 사이에 형성되어 상하로 이동할 수 있고, 이에 따라 연결부(1153)의 길이를 줄여주거나 늘여주어 피사체의 높이에 따라 카메라(113)의 높이를 조정할 수 있다.
도 6은 도 4 및 도 5에 개시된 이동장치에 포함되는 구성이 구체적으로 도시된 도면이다.
도 6을 참조하면, 이동장치(115)는 제어부(1159) 및 다수 개의 지지볼(1158)을 포함할 수 있다.
제어부(1159)는 이동장치(115)의 고정부(1157) 상단 홈 내부에 구비되어 있을 수 있으며 사용자의 제어에 따라 구동될 수 있고, 제어부(1159)의 구동에 따라 지지볼(1158)도 구동할 수 있다.
한편, 제어부(1159)는 모터 등의 회전 운동이 가능한 장치를 구비하고 있을 수 있고, 모터 등의 회전 운동이 가능한 장치를 이용하여 지지볼(1158)을 회전시킬 수 있다.
다수 개의 지지볼(1158)은 이동장치(115)는 고정부(1157)의 상단 홈에 구비되어 있을 수 있으며 제어부(1159)의 구동에 의해 구동할 수 있고, 다수 개의 지지볼(1158)이 서로 연결되어 있어 제어부(1159)의 구동에 의해 하나의 지지볼이 회전을 시작하면 고정부(1157)의 상단 홈에 구비되어 있는 다수 개의 지지볼(1158) 전체가 회전하여 이동부(1155)를 이동시킬 수 있다.
도 7은 본 발명의 다른 실시예에 따른 화상전화용 마이크가 개략적으로 도시된 도면이다.
도 8은 본 발명의 다른 실시예에 따른 화상전화용 마이크에 대한 구성도가 개략적으로 도시된 도면이다.
도 7및 도 8을 참조하면, 화상전화용 마이크(170)는 소음 방지 장치(179) 및 흡음장치(175)를 포함할 수 있다.
소음 방지 장치(179)는 화상전화용 마이크(170)의 하단부 또는 중앙부에 위치되어 있을 수 있고, 객체의 음성과 주변의 소음을 포함하여 감지되는 모든 소리를 인식할 수 있으며 모든 소리를 분석하여 소음을 최소화할 수 있다.
흡음장치(175)는 화상전화용 마이크(170)의 상단부의 케이스 내부에 설치되어 있을 수 있다.
도 9는 도 7 및 도 8의 화상전화용 마이크의 구성 중 일부인 소음 방지 장치의 구성이 도시된 도면이다.
소음 방지 장치(179)는 소음구별부(1791), 소음분석부(1793), 감쇄신호 생성부(1795) 및 감쇄신호 방사부(1797)를 포함할 수 있다.
소음구별부(1791)는 객체의 음성과 주변의 소음을 포함하여 감지되는 모든 소리를 분석할 수 있으며 객체의 음성과 주변의 소음을 구분할 수 있고, 소음분석부(1793)는 소음구별부(1791)에서 구분한 주변의 소음의 주파수 및 위상을 분석할 수 있다.
감쇄신호 생성부(1795)는 소음분석부(1793)에서 분석한 주변의 소음의 주파수 및 위상과 반대되는 주파수 및 위상을 가진 감쇄신호를 생성할 수 있고, 감쇄신호 방사부(1797)는 감쇄신호 생성부(1795)가 생성한 감쇄신호를 방사할 수 있다
도 10은 본 발명의 다른 실시예에 따른 화상전화용 마이크의 구성 중 일부인 흡음장치의 이동 방법을 설명하기 위해 화상전화용 마이크의 단면도를 개략적으로 나타낸 도면이다.
화상전화용 마이크(170)의 상단부 케이스 내에는 흡음장치(175)가 이동할 수 있는 레일부(173)가 구비되어 있을 수 있다.
레일부(173)는 화상전화용 마이크(170)의 상단부 케이스 내부 중 돌출되어 있는 부분에 안착되어 있을 수 있고, 흡음장치(175)의 이동을 위하여 상단부 케이스 내부 중 돌출되어 있는 부분의 방향을 따라 회전하는 방향으로 이동할 수 있다.
한편, 흡음장치(175)는 화상전화용 마이크(170)를 휴대한 객체의 음성을 기준으로 하여 소음이 발생하는 소음발생지를 분석할 수 있고, 소음발생지의 각도 또는 위치에 맞추어 레일부(173)를 이동시킬 수 있다.
도 11은 본 발명의 또 다른 실시예에 따른 온라인 교육 플랫폼이 개략적으로 도시된 도면이다.
도 12는 본 발명의 또 다른 실시예에 따른 온라인 교육 플랫폼의 구성이 구체적으로 도시된 도면이다.
도 11 및 도 12를 참조하면, 온라인 교육 플랫폼(100)은 학습 단말(190) 및 교육 관리 서버(150)를 포함할 수 있으며 교육 관리 서버(150)는 카메라 이미지 합성 시스템(110) 및 화상전화용 마이크(170)를 포함할 수 있다.
학습 단말(190)은 학습자에 의해 휴대가 가능할 수도 있고, 특정한 공간에 고정하여 사용할 수도 있는 태블릿 PC 등의 장치를 의미하며 이에 한정되지 않고 교육 관리 서버(150)와 통신하여 학습받을 수 있는 장치를 포함할 수 있다.
교육 관리 서버(150)는 통신이 가능한 학습 단말(190)로 학습자의 학습 수준에 맞춘 학습 문제 또는 기출 문제 등의 학습자에 의해 학습이 가능한 자료를 제공할 수 있다.
즉, 교육 관리 서버(150)는 학습 단말(190)에 입력되는 학습자의 학습 수준을 평가할 수 있고, 이를 이용하여 평가한 학습 수준에 따른 난이도의 문제를 제공할 수 있다.
또한 교육 관리 서버(150)는 학습자의 교육 목적에 따라 기출 문제를 스크랩할 수 있고, 스크랩한 기출 문제의 중요도를 추출하여 학습 단말(190)로 제공할 수 있다.
교육 관리 서버(150)는 학습 단말(190)로 입력되는 학습 과정 중 발생하는 오답의 패턴을 자동으로 분석할 수 있고, 이를 이용하여 학습자의 취약 영역의 학습 능력을 향상시킬 수 있다.
교육 관리 서버(150)는 학습 단말(190), 카메라 이미지 합성 시스템(110) 및 화상전화용 마이크(170)와 통신할 수 있고, 이를 이용하여 학습 단말(190)로 카메라 이미지 합성 시스템(110)을 이용한 합성 영상과 화상전화용 마이크(170)를 이용한 음성을 제공할 수 있다.
도 13은 본 발명의 일 실시예에 따른 카메라 이미지 합성 시스템이 합성 영상을 생성하는 방법을 설명하기 위한 순서도이다.
카메라 이미지 합성 시스템(110)은 카메라(113)를 이용하여 피사체를 다각도에서 실시간으로 촬영할 수 있고(S1000), 다각도에서 실시간으로 촬영한 촬영 영상을 순서대로 합성할 수 있고(S1100), 한 각도의 촬영 영상에 포함된 피사체의 모습을 분석할 수 있다(S1300).
피사체의 모습을 분석한 후 카메라 이미지 합성 시스템(110)은 한 각도의 촬영 영상에서 다른 각도의 이미지로 전환되는 시점을 검출할 수 있고(S1500), 한 각도의 촬영 영상의 마지막 프레임에 합성된 이미지로 이동하기 위한 연결 영상을 생성할 수 있다(S1700).
연결 영상을 생성한 후 카메라 이미지 합성 시스템(110)은 생성한 연결 영상을 한 각도의 촬영 영상의 마지막 프레임과 합성된 이미지 사이에 부가할 수 있다(S1900).
도 14는 본 발명의 다른 실시예에 따른 화상전화용 마이크가 소음을 제거하는 방법을 설명하기 위한 순서도이다.
화상전화용 마이크(170)는 화상전화용 마이크(170)의 상단으로 수집되는 다수 개의 소리를 감지할 수 있고(S2100), 감지되는 소리를 객체(사용자)의 음성과 주변의 소음으로 구분할 수 있다(S2300).
구분된 주변의 소음의 주파수 및 위상을 분석할 수 있고(S2500), 주변 소음과 반대되는 위상을 가진 감쇄신호를 생성하여(S2700) 방사하되 주변 소음이 발생하는 위치에 집중적으로 방사할 수 있다(S2900).
도 15 내지 도 18은 본 발명의 또 다른 실시예에 따른 온라인 교육 플랫폼이 학습 단말에 학습 내용을 제공하는 방법을 설명하기 위한 순서도이다.
온라인 교육 플랫폼(100)은 교육 관리 서버(150)가 학습 단말(190)로 입력되는 학습자의 학습 수준을 평가할 수 있고(S3100), 이를 이용하여 학습자의 학습 수준에 따른 난이도에 해당하는 문제를 제공할 수 있다(S3300).
또한, 온라인 교육 플랫폼(100)은 학습자의 교육 목적에 따른 기출 문제를 스크랩할 수 있고(S4100), 스크랩한 기출 문제를 중요도에 따라 나열하여 추출할 수 있다(S4300).
온라인 교육 플랫폼(100)은 학습자의 학습 단말(190)에 기록된 오답의 패턴을 자동으로 분석할 수 있고(S6100), 이를 이용하여 학습자의 취약 부분을 추정할 수 있고(S6300), 추정된 취약 영역의 맞춤형 문제를 제시할 수 있다(S6500).
한편, 온라인 교육 플랫폼(100)은 학습자의 학습 단말(190)을 이용하여 학습자의 교육 수준별로 그룹화할 수 있고(S5100), 학습자의 학습 단말(190)을 통해 그룹별 순위 및 통계 정보를 제공할 수 있다(S5300).
이와 같은, 카메라 이미지 합성 시스템 및 카메라 이미지 합성 시스템과 화상전화용 마이크를 포함하는 온라인 교육 플랫폼은 애플리케이션으로 구현되거나 다양한 컴퓨터 구성요소를 통하여 수행될 수 있는 프로그램 명령어의 형태로 구현되어 컴퓨터 판독 가능한 기록 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능한 기록 매체는 프로그램 명령어, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다.
상기 컴퓨터 판독 가능한 기록 매체에 기록되는 프로그램 명령어는 본 발명을 위하여 특별히 설계되고 구성된 것들이거니와 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수도 있다.
컴퓨터 판독 가능한 기록 매체의 예에는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM, DVD 와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 ROM, RAM, 플래시 메모리 등과 같은 프로그램 명령어를 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다.
프로그램 명령어의 예에는, 컴파일러에 의해 만들어지는 것과 같은 기계어 코드 뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함된다. 상기 하드웨어 장치는 본 발명에 따른 처리를 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
상술된 실시예들은 예시를 위한 것이며, 상술된 실시예들이 속하는 기술분야의 통상의 지식을 가진 자는 상술된 실시예들이 갖는 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 상술된 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.
본 명세서를 통해 보호받고자 하는 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태를 포함하는 것으로 해석되어야 한다.
100: 온라인 교육 플랫폼
110: 카메라 이미지 합성 시스템
150: 교육 관리 서버
170: 화상전화용 마이크
190: 학습 단말

Claims (1)

  1. 피사체를 다양한 각도에서 촬영하는 카메라;를 및
    상기 카메라에서 촬영한 영상을 실시간으로 수신하여 합성 영상을 제공하는 합성장치;를 포함하고,
    상기 카메라가 안착하여 상기 피사체의 주위를 이동하는 이동장치;를 더 포함하고,
    상기 합성장치는,
    상기 카메라에서 촬영한 영상을 실시간으로 수신하는 수신부;
    상기 수신부에서 수신한 실시간 촬영 영상에 포함된 피사체를 분석하는 영상분석부;
    상기 실시간 촬영 영상을 합성하여 원하는 각도의 합성 영상을 생성하는 합성 영상 생성부;
    상기 실시간 촬영 영상으로부터 합성된 이미지로 전환되는 시점을 자동으로 검출하는 시점검출부;
    상기 시점검출부에서 검출한 시점에 상기 실시간 촬영 영상의 마지막 프레임과 상기 합성 이미지 영상의 첫 프레임 사이를 자연스럽게 연결해주는 연결 영상을 생성하는 연결 영상 생성부; 및
    상기 실시간 촬영 영상, 상기 연결 영상 및 상기 합성 영상을 순서대로 합성하여 제공하는 영상합성부;를 포함하고,
    상기 이동장치는,
    상단에 위치하며 상기 카메라가 안착하는 안착부;
    지면에 고정되어 상기 피사체의 주변을 감싸는 형태로 위치되고, H빔 형태로 형성되어 하단은 지면에 고정될 수 있는 홈이 마련되어 있고, 상단은 상기 카메라를 이동하기 위한 이동공간으로 사용되는 고정부;
    상기 고정부의 상단 홈과 돌출된 부분에 맞추어 삽입되어 고정되며 상기 고정부가 상기 피사체의 주변은 감싸는 형태로 위치된 길이 방향을 따라 이동이 가능한 이동부; 및
    상기 안착부와 상기 이동부 사이를 연결하는 연결부;를 포함하는, 카메라 이미지 합성 시스템을 포함하고,
    객체의 음성과 주변의 소음을 포함하여 감지되는 소리를 분석하여 소음을 최소화하는 소음 방지 장치; 및
    상단부의 케이스 내부에 설치되는 흡음장치;를 포함하는 화상전화용 마이크를 포함하고,
    상기 소음 방지 장치는,
    상기 객체의 음성과 주변의 소음을 포함하여 감지되는 소리를 분석하여 상기 객체의 음성과 주변의 소음을 구분하는 소음구별부;
    상기 주변의 소음의 주파수 및 위상을 분석하는 소음분석부;
    상기 주파수 및 위상과 반대되는 주파수 및 위상을 가진 감쇄신호를 생성하는 감쇄신호 생성부; 및
    상기 생성한 감쇄신호를 방사하는 감쇄신호 방사부;를 포함하고,
    상기 흡음장치는,
    상기 객체의 음성을 기준으로 하여 소음이 발생하는 소음발생지를 분석하여 상기 소음발생지의 각도 또는 위치에 맞추어 이동하고,
    휴대가 가능하며 온라인 학습을 위한 학습 단말; 및
    상기 학습 단말에 입력되는 학습 수준을 평가하여 상기 학습 수준에 따른 난이도의 문제를 제공하고, 교육 목적에 따라 기출 문제를 스크랩하되 상기 기출 문제의 중요도를 추출하여 상기 학습 단말로 제공하고, 상기 학습 단말로 입력되는 학습 과정 중 발생하는 오답의 패턴을 자동으로 분석하여 취약 영역의 학습 능력을 향상시키고, 상기 학습 단말, 상기 카메라 이미지 합성 시스템 및 상기 화상전화용 마이크와 통신하여 상기 학습 단말로 상기 카메라 이미지 합성 시스템을 이용한 합성 영상과 상기 화상전화용 마이크를 이용한 음성을 제공하는 교육 관리 서버;를 포함하는 온라인 교육 플랫폼.
KR1020200085888A 2020-07-13 2020-07-13 카메라 이미지 합성 시스템 KR102159834B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200085888A KR102159834B1 (ko) 2020-07-13 2020-07-13 카메라 이미지 합성 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200085888A KR102159834B1 (ko) 2020-07-13 2020-07-13 카메라 이미지 합성 시스템

Publications (1)

Publication Number Publication Date
KR102159834B1 true KR102159834B1 (ko) 2020-09-24

Family

ID=72706527

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200085888A KR102159834B1 (ko) 2020-07-13 2020-07-13 카메라 이미지 합성 시스템

Country Status (1)

Country Link
KR (1) KR102159834B1 (ko)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001197521A (ja) * 2000-01-06 2001-07-19 Toppan Printing Co Ltd 撮像装置、撮像方法及び撮像条件に係るデータを記録した記録媒体
KR20030016452A (ko) * 2001-08-16 2003-03-03 다본정보기술 주식회사 3차원 촬영장치
KR200308077Y1 (ko) 2002-12-04 2003-03-20 (주)모보텍 유, 무선 핸즈프리용 흡음 마이크
JP2005338977A (ja) * 2004-05-25 2005-12-08 Aichi Gakuin 立体画像処理システム
KR100875942B1 (ko) 2007-04-23 2008-12-26 주식회사 제로스페이스 온라인을 이용한 오픈 플랫폼 형 교육정보 제공 시스템
KR20120039970A (ko) * 2010-10-18 2012-04-26 전조명 입체영상 촬영용 카메라 장착리그
KR20170011190A (ko) * 2015-07-21 2017-02-02 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
KR101773891B1 (ko) 2016-12-16 2017-09-01 (주)잼투고 실시간 환경객체 선택을 통한 합성동영상 재생 시스템 및 컴퓨터 구현 방법

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001197521A (ja) * 2000-01-06 2001-07-19 Toppan Printing Co Ltd 撮像装置、撮像方法及び撮像条件に係るデータを記録した記録媒体
KR20030016452A (ko) * 2001-08-16 2003-03-03 다본정보기술 주식회사 3차원 촬영장치
KR200308077Y1 (ko) 2002-12-04 2003-03-20 (주)모보텍 유, 무선 핸즈프리용 흡음 마이크
JP2005338977A (ja) * 2004-05-25 2005-12-08 Aichi Gakuin 立体画像処理システム
KR100875942B1 (ko) 2007-04-23 2008-12-26 주식회사 제로스페이스 온라인을 이용한 오픈 플랫폼 형 교육정보 제공 시스템
KR20120039970A (ko) * 2010-10-18 2012-04-26 전조명 입체영상 촬영용 카메라 장착리그
KR20170011190A (ko) * 2015-07-21 2017-02-02 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
KR101773891B1 (ko) 2016-12-16 2017-09-01 (주)잼투고 실시간 환경객체 선택을 통한 합성동영상 재생 시스템 및 컴퓨터 구현 방법

Similar Documents

Publication Publication Date Title
US20170364752A1 (en) Sound and video object tracking
US10038892B2 (en) Device and method for augmented reality applications
CN112165590B (zh) 视频的录制实现方法、装置及电子设备
US9591071B2 (en) User location-based management of content presentation
KR20040064297A (ko) 자동 얼굴 블러링을 위한 방법 및 장치
CN111918018B (zh) 视频会议系统、视频会议设备以及视频会议方法
JP5618043B2 (ja) 映像音響処理システム、映像音響処理方法及びプログラム
CN105872442A (zh) 一种基于人脸识别的即时弹幕礼物赠送方法及系统
KR20160119218A (ko) 사운드 이미지 재생 방법 및 디바이스
CN110505498A (zh) 视频的处理、播放方法、装置及计算机可读介质
KR101458521B1 (ko) 증강현실 콘텐츠 재생 시스템
KR102219377B1 (ko) 온라인 교육 플랫폼
KR20210038537A (ko) 정보 처리 장치 및 방법, 그리고 프로그램
WO2022093382A1 (en) Eye gaze adjustment
CN103329145A (zh) 用于视频记录期间的声音的改善音频信号呈现的方法和组件
KR102159834B1 (ko) 카메라 이미지 합성 시스템
JPWO2004081783A1 (ja) ポインタ領域検出装置、方法及びプログラム、画像の対応付け装置、方法及びプログラム、並びにコンテンツ配信サーバ、コンテンツ配信方法
KR102192265B1 (ko) 화상전화용 마이크
US10742882B1 (en) Systems and methods for framing videos
KR101976937B1 (ko) 마이크로폰 어레이를 이용한 회의록 자동작성장치
CN107087208B (zh) 一种全景视频播放方法、系统及存储装置
CN114631309A (zh) 信息处理装置、信息处理方法和程序
EP4136579A1 (en) Systems and methods for detection and display of whiteboard text and/or an active speaker
RU42905U1 (ru) Система для обнаружения эмоций
US20230267942A1 (en) Audio-visual hearing aid

Legal Events

Date Code Title Description
A302 Request for accelerated examination
E902 Notification of reason for refusal
N231 Notification of change of applicant
E701 Decision to grant or registration of patent right
GRNT Written decision to grant