KR102107923B1 - 동영상 하이라이트 부분을 식별하기 위한 머리 회전 추적 기기 - Google Patents

동영상 하이라이트 부분을 식별하기 위한 머리 회전 추적 기기 Download PDF

Info

Publication number
KR102107923B1
KR102107923B1 KR1020187034285A KR20187034285A KR102107923B1 KR 102107923 B1 KR102107923 B1 KR 102107923B1 KR 1020187034285 A KR1020187034285 A KR 1020187034285A KR 20187034285 A KR20187034285 A KR 20187034285A KR 102107923 B1 KR102107923 B1 KR 102107923B1
Authority
KR
South Korea
Prior art keywords
rotation
head
user
data
point
Prior art date
Application number
KR1020187034285A
Other languages
English (en)
Other versions
KR20190008257A (ko
Inventor
정 한
샤오웨이 다이
위성 예
Original Assignee
순위안 카이화 (베이징) 테크놀로지 컴퍼니 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 순위안 카이화 (베이징) 테크놀로지 컴퍼니 리미티드 filed Critical 순위안 카이화 (베이징) 테크놀로지 컴퍼니 리미티드
Publication of KR20190008257A publication Critical patent/KR20190008257A/ko
Application granted granted Critical
Publication of KR102107923B1 publication Critical patent/KR102107923B1/ko

Links

Images

Classifications

    • H04N5/23219—
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00—Details of cameras or camera bodies; Accessories therefor
    • G03B17/56—Accessories
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
    • G06V20/42—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items of sport video content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
    • H04N5/23206—
    • H04N5/23296—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Computational Linguistics (AREA)
  • Software Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • User Interface Of Digital Computer (AREA)
  • Image Analysis (AREA)
  • Accessories Of Cameras (AREA)
  • Studio Devices (AREA)

Abstract

사용자의 머리 회전의 움직임을 추적하는 것을 통해, 회전대에서의 동영상 캡처 기기(예를 들어, 사용자의 핸드폰)의 회전과 사용자의 머리 회전의 움직임을 동기화하여 운동 경기에서의 동영상 하이라이트 부분을 편리하게 캡처하기 위한 방안을 공개한다. 사용자에게 회전 추적 기기를 착용하며, 이는 경기 관람에 관련된 사용자의 머리 회전의 움직임을 추적한다. 사용자의 머리 회전의 움직임으로부터 오는 머리 회전 데이터를 필터링하여 필터링을 거친 머리 회전 데이터를 생성하며, 이는 머리 회전 데이터에서의 소음 운동을 제거하였다. 필터링을 거친 머리 회전 데이터에 기반하여 대응되는 회전 제어 데이터를 생성한다. 회전 제어 데이터는, 회전 시스템에 장착된 동영상 캡처 기기에 의해 캡처된 운동 경기의 동영상이, 사용자의 머리 회전과 동기화하여 회전하도록 회전 시스템을 지시하기 위한 것이다.

Description

동영상 하이라이트 부분을 식별하기 위한 머리 회전 추적 기기
본 발명은 대체로 디지털 콘텐츠 처리에 관한 것으로, 특히 시청자의 머리 회전의 움직임을 추적하여, 회전대에서의 동영상 캡처 기기(예를 들어, 핸드폰)와 시청자의 머리 회전의 움직임을 동기화하는 것을 통해 모션 동영상(motion video)에서의 동영상 하이라이트 부분을 캡처하는 것에 관한 것이다.
예를 들어 스마트 폰 및 태블릿 PC와 같은 모바일 컴퓨팅 기기의 진보에 따라, 점점 더 많은 사람들이 각종 유형 경기의 동영상을 기록할 수 있으며, 예를 들어 모션 동영상을 기록하고 다른 사람과 기록한 모션 동영상에서의 동영상 하이라이트 부분을 공유한다. 모션 동영상의 동영상 하이라이트 부분은 모션 동영상의 일부이며 모션 동영상에서 캡처된 중요한 의미가 경기를 표시한다(예를 들어, 축구 게임 동영상에서의 골을 넣거나 슛을 하는 짧은 동영상 클립을 캡처함).
시청자가 그/그녀의 스마트 폰과 태블릿 PC를 사용하여 안정적으로 긴 운동 경기를 기록하는 것은 도전일 수 있다. 그 중의 하나의 도전은, 대형 운동장 내의 운동 경기에서 빠른 움직임을 캡처하는 것이 어렵다. 축구, 농구, 야구, 필드 하키 및 기타 유사한 운동에 있어서, 운동장이 통상적으로 매우 크고 운동선수들이 당해 대형 운동장에 분산하여 흩어져 있다. 따라서, 운동 경기의 시청자/관객들은 이들의 머리를 빈번히 회전하여 운동 시합/경기 기간에 운동선수들의 움직임을 추적할 필요가 있다. 다른 하나의 도전은, 생방송 경기에서 동영상 하이라이트 부분이 언제 나타날지 예측하는 것이다. 따라서, 운동 시합/경기 또는 생방송 경기에서 예측할 수 없는 동영상 하이라이트 부분을 캡처하기 위해, 시청자는 모든 운동 시합/경기 중에서 경계를 유지할 필요가 있고, 이는 피로 또는 좌절을 초래하며 따라서 운동 시합/경기의 하이라이트 부분을 놓치며 운동 시합/경기를 관람하는 재미를 줄인다.
본 발명의 실시예는 사용자의 머리 회전의 움직임을 추적하는 것을 통해 회전대에서의 동영상 캡처 기기(예를 들어, 핸드폰)의 회전과 사용자의 머리 회전의 움직임을 동기화하여 운동 경기에서의 동영상 하이라이트 부분을 편리하게 캡처하기 위한 방안을 제공한다. 회전대의 제어 모듈은 사용자에 착용된 회전 추적 기기로부터, 경기 관람에 관련된 사용자의 머리 회전 데이터를 수신한다. 제어 모듈은 수신된 머리 회전 데이터에서의 소음 운동을 필터링하고 필터링을 거친 머리 회전 데이터를 생성한다. 제어 모듈은 또한 필터링을 거친 머리 회전 데이터에 기반하여, 대응되는 회전 제어 데이터를 생성한다. 제어 모듈은 회전 제어 데이터에 기반하여, 회전대의 회전 시스템과 사용자의 머리 회전을 동기화하여 회전하도록 지시한다.
명세서에 설명된 특징과 장점은 이에 한정되지 않으며, 특별히, 도면, 명세서 및 청구 범위를 고려하여, 많은 추가적인 특징 및 장점은 본 분야의 당업자에 있어서 명백히 알 수 있는 것이다. 이 외에, 주로 가독성과 지도성을 목적으로 명세서에서 사용되는 언어를 선택하였으며, 공개의 주제를 묘사하거나 제한하기 위해 명세서에서 사용되는 언어를 선택한 것이 아니라는 점에 주의하여야 한다.
도 1은 실시예에 따른 사용자의 머리 회전의 움직임을 추적하고, 회전대에 연결된 동영상 캡처 기기(예를 들어, 핸드폰)와 운동 경기기간의 사용자의 머리 회전의 움직임을 동기화하기 위한 환경의 블록도이다.
도 2는 실시예에 따른 회전대에서의 동영상 캡처 기기(예를 들어, 핸드폰)의 회전과 사용자의 머리 회전을 동기화하기 위한 동영상 하이라이트 부분 추적 시스템의 블록도이다.
도 3은 실시예에 따른 회전대의 제어 모듈의 센서 데이터 분석 모듈의 흐름 개략도이다.
도 4는 실시예에 따른 회전대의 제어 모듈의 회전 제어 모듈의 흐름 개략도이다.
도 5는 실시예에 따른 회전대에 장착된 동영상 캡처 기기(예를 들어, 핸드폰)의 회전과 사용자가 관람하는 운동 경기에 관련된 사용자의 머리 회전을 동기화하기 위한 과정의 흐름도이다.
도면은 단지 예시의 목적으로 본 발명의 각종 실시예를 묘사한다. 하기의 논술로부터, 본 분야의 당업자는 본 명세서에서 설명된 본 발명의 원리를 벗어나지 않은 상황 하에서 본 명세서에서 설명한 구조와 방법의 대체 실시예를 응용할 수 있는 것을 당연히 쉽게 의식할 수 있을 것이다.
I. 환경 개요
사용자의 머리 회전의 움직임을 추적하고, 회전대에서의 동영상 캡처 기기(예를 들어, 핸드폰)의 회전과 사용자의 머리 회전의 움직임을 동기화하는 것을 통해 운동 경기에서의 동영상 하이라이트 부분을 편리하게 캡처하는 방안을 제공한다. 사용자는 운동 경기를 관람하는 동시에 추적 기기(예를 들어, 하나 또는 복수의 모션 센서를 구비한 회전 추적 기기)를 그/그녀의 신체의 부위(예를 들어, 머리, 그/그녀의 머리 위의 모자)에 착용한다. 추적 기기는 사용자의 머리의 움직임(예를 들어, 머리가 수평면에서의 회전)을 추적한다. 사용자의 머리 회전의 움직임을 포시하는 운동 데이터는 회전대에 전송되며, 처리되어 명령을 생성하여 회전대에 장착된 동영상 캡처 기기(예를 들어, 핸드폰)를 구동하며, 따라서 사용자의 머리 회전을 따라 움직인다. 사용자는 원격 제어기를 사용하여 회전대에 장착된 동영상 캡처 기기를 활성화하여 운동 경기의 동영상 클립을 캡처하고, 당해 동영상 클립은 사용자가 관심을 갖고 있는 것이다. 추적 기기가 사용자의 머리 회전의 움직임을 추적함에 따라, 회전대에 장착된 동영상 캡처 기기는 운동 경기기간에 사용자의 시야에 따라 유지된다. 운동 경기에서 캡처된 동영상은 분석되어 운동 경기에서의 하나 또는 복수의 동영상 하이라이트 부분을 식별한다. 사용자는 동영상 캡처 기기가 그/그녀가 원하는 것이 캡처되었는지 여부를 부단히 검사할 필요가 없고, 반대로, 사용자는 운동 경기에 관심을 두어 운동 경기를 즐길 수 있다.
본 발명에서, "디지털 콘텐츠"는 통상적으로 기계가 판독 가능하고 기계가 저장 가능한 제품을 가리킨다. 디지털 콘텐츠는 예를 들어, 동영상과 음성의 조합을 포함할 수 있다. 대신에, 디지털 콘텐츠는 정지 화상일 수 있다. 실시예의 간략화와 설명의 목적을 위해, 디지털 콘텐츠는 "동영상"이라고 지칭하며, 그러나 이 용어는 분석될 수 있는 디지털 콘텐츠의 유형을 제한 하기 위한 것이 아니다.
도 1은 실시예에 따른 사용자의 머리 회전의 움직임을 추적하고, 운동 경기기간 회전대(130)에 연결된 동영상 캡처 기기와 사용자의 머리 회전의 움직임을 동기화하기 위한 환경(100)의 블록도이다. 도 1에 도시된 실시예는 그/그녀의 모자에 머리 회전 추적 기기(104)를 착용한 사용자(102), 동영상 캡처 기기(106)(예를 들어, 사용자(102)의 핸드폰), 사용자(102)에 의해 회전대(130)에 장착된 동영상 캡처 기기(106)를 제어하기 위한 원격 제어기(112)를 포함하고, 회전대(130)는 제어 모듈(108)과 회전 시스템(110)을 포함한다. 사용자(102)는 운동장(120)에서 발생되는 운동 경기를 관람하고 동영상 캡처 기기(106)를 제어하여 운동 경기의 하나 또는 복수의 동영상을 캡처한다. 도 1의 각 실체에 의해 실행되는 기능은 실시예마다 다를 수 있다. 이런 실체중에서의 각각은 물리적으로 서로 멀리 떨어졌지만 컴퓨터 네트워크를 통해 통신하여 연결할 수 있는 컴퓨팅 기기를 포함한다. 컴퓨터 네트워크는 통상적으로 인터넷이지만 기타 네트워크일 수도 있고, LAN, MAN, WAN, 모바일 유선 또는 무선 네트워크, 클라우드 네트워크, 사설 네트워크, 가상 사설 네트워크, 블루투스 또는 저전력 블루투스(BLE)무선 네트워크, 피어 투 피어 네트워크 또는 그의 조합을 포함하지만 이에 한정되지는 않는다. 일부 설치에서, 실체는 자체로 정의한 통신 기술 및/또는 전용 통신 기술을 사용하여 통신한다.
사용자(102)는 운동장(120)에서 발생하는 움직임에 따른다. 예를 들어, 사용자(102)는 운동장(120)에서 또는 운동장(120)의 근처 구역에서(예를 들면 운동장(120)의 구장의 사이드라인에서) 발생하는 공의 움직임, 운동선수의 움직임 및/또는 기타 동작에 따른다. 사용자(102)는 그/그녀의 머리를 왼쪽 또는 오른쪽으로 향하여 수평으로 회전하거나 또는 그/그녀의 머리를 수직으로 향하여 위아래로 움직임(예를 들어, 머리를 끄덕임)하는 것을 통하여 운동장(120)에서 발생하는 움직임을 따른다. 3차원(3D) 네비게이션 시스템에서의 수평축을 따른 사용자(102)의 머리 움직임은 "요 회전"(yaw rotation) 또는 "회전"이라고 지칭한다. 3D 네비게이션 시스템에서의 수직축을 따른 사용자(102)의 머리 움직임은 또한 "틸트"(tilt)라고 지칭한다. 단순화를 위해, 단지 본 명세서에서 각종 실시예로 사용자(102) 머리의 요 회전을 분석하지만, 분석될 수 있는 사용자의 머리 움직임의 유형을 제한하는 것이 아니다.
도 1에 도시된 실시예에서, 사용자(102)는 머리 회전 추적 기기(104)("추적 기기(104)"라고도 지칭함)를 그/그녀의 모자에 착용하고, 추적 기기(104)는 운동장(120)에서의 운동 활동을 관람하는 것과 관련된 사용자(102)의 머리 회전의 움직임을 추적한다. 일 실시예에서, 추적 기기(104)는 사용자의 머리, 야구 모자/모자, 사용자 머리부위의 귀 또는 기타 부위에 착용될 수 있는 하나 또는 복수의 작은 사이즈 센서를 포함한다. 도 2를 참조하여 추적 기기(104)를 더 설명한다. 사용자의 머리 회전 데이터는 회전대(130)의 제어 모듈(108)에 전송되어, 동기화의 방식으로 사용자(102)의 머리 회전을 추적하도록 회전 시스템(110)을 제어한다.
사용자(102)는 예를 들어 동영상 캡처 과정의 기간에 동영상 캡처 기기(106)를 켜고 끄는 것과 같이, 원격 제어기(112)를 사용하여 회전대(130)에 장착된 동영상 캡처 기기(106)를 제어한다. 일 실시예에서, 원격 제어기(112)는, 예를 들어 동영상 캡처 기기(106)를 활성화하여 운동장(120)에서 발생하는 운동 경기의 동영상 클립을 캡처하는 등과 같은 기능을 실행하기 위해 사용자(102)에 의해 사용되는 전자 기기이다. 원격 제어기(112)는 예를 들어 물리적 버튼과 같은 사용자 인터페이스(UI)를 구비할 수 있고, 당해 사용자 인터페이스를 이용하여, 사용자(102)는 원격 제어기(112)와 상호 작용할 수 있다. 원격 제어기(112)의 예시는 예를 들어 스마트 시계와 같은 일반적인 원격 제어 기기와 당대 소비자 전자 기기를 포함한다. 원격 제어기(112)는 유선 또는 무선의 방식을 통해 동영상 캡처 기기(106)에 연결되여 통신한다.
동영상 캡처 기기(106)는 디지털 콘텐츠를 캡처하기 위해(예를 들어 운동장(120)에서 발생하는 운동 경기의 동영상 클립을 기록함) 사용자(102)의 의해 사용되는 전자 기기이다. 일 실시예에서, 동영상 캡처 기기(106)는 사용자(102)의 핸드폰이고, 화상 캡처 기기와 캡처된 디지털 콘텐츠를 전송하기 위한 전송기를 포함한다. 동영상 캡처 기기(106)는 예를 들어, 스마트 폰 (예를 들어, 사용자(102)의 핸드폰), 태블릿 PC, 디지털 일안 반사식 사진기(DSLR), 또는 기타 임의의 적합한 사용자 기기 또는 디지털 콘텐츠를 캡처하기 위한 캡처 기기이다. 단순화를 위해, 디지털 콘텐츠를 캡처할 수 있는 각종 전자 기기는 일반적으로 동영상 캡처 기기(106)로 지칭한다. 동영상 캡처 기기(106)는 원격 제어기(112)에 의해 원격으로 트리거될 수 있어 디지털 콘텐츠를 캡처한다. 일부 구성에서, 동영상 캡처 기기(106)는 기설정된 시간(예를 들어, 30초) 내의 디지털 콘텐츠를 캡처한다. 기타 구성에서, 동영상 캡처 기기(106)는 원격 제어기(112)에 의해 원격으로 트리거될 경우 디지털 콘텐츠를 캡처하기 시작하고 원격 제어기(112)에 의해 재차 원격으로 트리거될 경우 디지털 콘텐츠를 캡처하는 것을 종료한다. 동영상 캡처 기기(106)는 캡처된 디지털 콘텐츠를 클라우드 저장 기기에 전송할 수 있다. 동영상 캡처 기기(106)는 회전대(130)에 장착되거나 그렇지 않으면 회전대(130)에 연결된다. 기타 실시예에서, 동영상 캡처 기기(106)와 사용자(102)의 휴대 기기는 2개의 독립적인 실체일 수 있다.
사용자(102)는 예를 들어 동영상 캡처 기기와 같은 휴대 기기를 사용하여 운동 경기의 동영상 클립을 기록하고 예를 들어 기록된 동영상 클립 또는 그의 하이라이트 부분과 같은 전자 콘텐츠를 소비한다. 예를 들어, 사용자(102)는 휴대 기기를 사용하여 예를 들어 동영상 캡처 기기(106)에 의해 캡처된 동영상 클립 및 캡처된 동영상 클립으로부터 생성된 동영상 하이라이트 부분을 소비하는 기능을 실행한다. 사용자(102)의 휴대 기기는 스마트 폰, 태블릿 PC, 또는 동영상 클립을 소비하기 위한 임의의 기타의 적합한 사용자 기기 또는 컴퓨팅 기기일 수 있다. 이 외에, 사용자(102)의 휴대 기기는 예를 들어 물리적 및/또는 스크린에서의 버튼과 같은 사용자 인터페이스를 제공하고, 당해 사용자 인터페이스를 이용하여, 사용자(102)는 휴대 기기와 상호 작용하여 예를 들어 동영상 클립을 관람, 공유 및/또는 소비하는 것과 같은 기능을 실행할 수 있다.
회전대(130)는 추적 기기(104)에 의해 캡처된 머리 회전 데이터로부터 생성된 명령에 기반하여, 회전대(130)에 장착된 동영상 캡처 기기(106)(예를 들어, 사용자(102)의 디지털 카메라와 같은 핸드폰)를 구동하여 사용자(102)의 머리 회전을 따라 움직이기 위한 것이다. 도 1에 도시된 실시예에서, 회전대(130)는 추적 기기(104)로부터 사용자(102)의 머리 회전 데이터를 수신하고, 머리 회전 데이터를 처리하여 회전 제어 데이터(예를 들어, 회전 이동 명령 또는 명령어)를 생성하고 회전 제어 데이터를 회전 시스템(110)에 전송하기 위한 제어 모듈(108)을 포함한다. 회전 시스템(110)는 회전 제어 데이터를 수신하고, 명령에 기반하여 하나 또는 복수의 명령을 실행하여 사용자(102)의 머리 회전의 움직임과 회전대(130)에 장착된 동영상 캡처 기기(106)를 동기화하여 회전한다. 제어 모듈(108)과 회전 시스템(110)은 서로에 연결되여 통신한다. 도 2를 참조하여 회전대(130)를 더 설명한다.
II. 예시의 컴퓨팅 시스템 아키텍처
도 2는 실시예에 따른 회전대(예를 들어, 도 1에 도시된 회전 시스템(110))에서의 동영상 캡처 기기(예를 들어, 도 1에 도시된 동영상 캡처 기기(106))의 회전과 사용자(예를 들어, 도 1에 도시된 사용자(102))의 머리 회전을 동기화하기 위한 동영상 하이라이트 부분 추적 시스템(200)의 블록도이다. 도 2에 도시된 실시예에서, 동영상 하이라이트 부분 추적 시스템(200)("추적 시스템(200)"이라고도 지칭함)은 회전 추적 기기(210)(예를 들어, 도 1에 도시된 머리 회전 추적 기기(104))와 회전대(220)(예를 들어, 도 1에 도시된 회전대(130))를 포함한다. 회전대(220)는 제어 모듈(222)(예를 들어, 도 1에 도시된 제어 모듈(108))과 회전 시스템(224)(예를 들어, 도 1에 도시된 회전 시스템(110))을 포함한다. 제어 모듈(222)은 센서 데이터 분석 모듈(204)("분석 모듈(204)"이라고도 지칭함)과 회전 제어 모듈(206)을 포함한다. 기타 실시예에서, 추적 시스템(200)은 예를 들어 도 1에 도시된 사용자(102)에 의해 사용되는 원격 제어기(112)와 같은 추가 및/또는 상이한 모듈을 포함할 수 있다.
회전 추적 기기(210)는 사용자가 경기(예를 들어, 운동 시합)를 관람하는 것과 관련된 사용자(예를 들어, 도 1에 도시된 사용자(102))의 머리 움직임을 추적한다. 일 실시예에서, 사용자의 머리 움직임은 사용자의 머리의 요 회전(예를 들어, 사용자가 사용자 눈의 수평 시야를 따라 그/그녀의 머리를 좌우로 회전함)을 포함한다. 기타 실시예는 사용자 머리의 틸트 움직임(예를 들어, 사용자가 위아래로 머리를 끄덕임) 또는 사용자 머리의 요 회전과 틸트 움직임을 포함한다.
일 실시예에서, 회전 추적 기기(210)는 사용자의 머리, 야구 모자/모자, 사용자 머리부위의 귀 또는 기타 부위에 착용될 수 있는 하나 또는 복수의 작은 사이즈 센서를 포함한다. 회전 추적 기기(210)의 센서는 운동 시합을 관람하는 사용자의 머리 회전을 추적하여 전송기를 거쳐 캡처된 머리 회전 데이터를 제어 모듈(222)에 전송한다. 예를 들어, 회전 추적 기기(210)는 관성 자기 유닛(IMU)을 포함할 수 있고, 이는 예를 들어 사용자 머리의 움직임의 운동 데이터를 캡처하여 표시하기 위한 3축 전자 나침반, 자이로 스코프, 3축 가속도계, 기타 기기의 하나 또는 복수의 센서를 포함할 수 있다. 회전 추적 기기(210)는 사용자가 운동 시합을 관람하는 것과 관련된 사용자의 머리 회전을 연속 실시간으로 추적한다. 일부 구성에서, 회전 추적 기기(210)가 머리 회전 데이터를 캡처할 경우 연속으로 블루투스 모듈을 통해 머리 회전 데이터를 회전대(220)의 제어 모듈(222)에 무선으로 전송한다. 기타 구성에서, 회전 추적 기기(210)는 머리 회전 데이터를 제어 모듈(222)에 주기적으로(예를 들어, 매 10초마다) 전송한다.
회전대(220)는 제어 모듈(222)과 회전 시스템(224)을 포함한다. 제어 모듈(222)은 회전 추적 기기(210)로부터 사용자의 머리 회전 데이터를 수신하고, 머리 회전 데이터를 처리하여 회전 제어 데이터를 생성하고, 회전 제어 데이터를 회전 시스템에 전송한다. 도 2에 도시된 실시예에서, 제어 모듈(222)은 센서 데이터 분석 모듈(204)("분석 모듈(204)"이라고도 지칭함) 및 회전 제어 모듈(206)을 포함한다. 분석 모듈(204)은 회전 추적 기기(210)로부터 사용자의 머리 회전 데이터를 수신하고, 수신된 머리 회전 데이터를 처리하여 분석을 거친 머리 회전 데이터를 생성하며, 분석을 거친 머리 회전 데이터를 회전 제어 모듈(206)에 전송한다. 회전 제어 모듈(206)은 분석을 거친 머리 회전 데이터에 기반하여 회전 제어 데이터를 생성하고 회전 제어 데이터를 회전 시스템(224)에 전송한다. 회전 제어 데이터는 회전 시스템(224)과 회전 추적 기기(210)를 교정하기 위한(예를 들어, 회전 시스템(224)의 회전 DC 모터의 회전과 사용자의 머리의 회전을 맞추는 것을 통해) 명령 및 회전 시스템(224)의 모터 기어를 구동하며 회전 시스템(224)에 장착된 동영상 캡처 기기(미도시)를 회전하여 동기화의 방식으로 사용자의 머리를 따라 회전하기 위한 명령을 포함한다. 각각 도 3 및 도 4를 참조하여 분석 모듈(204) 및 회전 제어 모듈(206)을 더 설명한다. 대체 구성에서, 상이하거나 또는 추가적인 부품을 사용할 수 있다. 예를 들어, 대체 실시예에서, 분석 모듈(204)은 회전 추적 기기(210)의 실체로서 포함되고 회전 제어 모듈(206)은 회전 시스템(224)의 실체로서 포함된다.
회전 시스템(224)은 회전 제어 모듈(206)로부터 회전 제어 데이터를 수신하고, 회전 시스템(224)에 장착된 동영상 캡처 기기를 회전하여 동기화의 방식으로 사용자의 머리를 따라 회전한다. 회전 시스템(224)은 피드백 데이터를 회전 제어 모듈(206)에 전송하여, 회전 제어 데이터를 조정하며, 회전 제어 데이터는 회전 시스템(224)에 의해 실행될 후속 회전을 위한 것이다.
일 실시예에서, 회전 시스템(224)은 송수신기(예를 들어, 블루투스 모듈), 모터 기어와 인코더를 구비한 회전 DC 모터, 모터 제어기, 드라이버 및 하나 또는 복수의 기계 부품을 포함한다. 송수신기는 회전 제어 모듈(206)로부터 회전 제어 데이터를 수신하고 피드백 데이터를 회전 제어 모듈(206)에 전송한다. 모터 기어는 회전 DC 모터의 토크를 확대하여 모터가 회전 시스템(224)의 회전을 구동하도록 한다. 인코더는 모터의 회전을 측정하되, 여기서 모터 회전의 측정은 모터의 후속 회전을 제어하기 위한 피드백 데이터로서 사용될 수 있다. 모터 제어기는 수신된 회전 제어 데이터에서의 명령을 해석하고 명령에 포함된 하나 또는 복수의 명령을 실행하여 회전 시스템(224)의 위치 및 속도를 제어한다. 모터 드라이버는 회전 시스템(224)에 사용되는 속도 및 위치를 직접 이용하여 제어 가능한 전압 구동 DC 모터를 제어한다.
회전 시스템(224)의 하나의 기계 부품에는 엔드 이펙터(end effector)를 포함하며 동영상 캡처 기기를 회전 시스템(224)에 장착한다. 회전 시스템(224)은 2개 또는 더 많은 기계식 리미트 스위칭를 더 포함하되, 이는 엔드 이펙터의 회전 구역을 한정한다. 엔드 이펙터의 회전 구역은 엔드 이펙터의 작업 공간으로도 지칭한다. 엔드 이펙터가 엔드 이펙터의 작업 공간의 경계에 도달할 경우, 리미트 스위칭가 트리거되어, 회전 시스템(224)의 모터가 진일보 회전하는 것을 중지하여야 한다.
일 실시예에서, 인코더는 회전 시스템(224)의 엔드 이펙터의 상대 위치를 측정하기 위한 것이다. 2개의 리미트 스위칭은 엔드 이펙터의 위치의 기준선으로 사용될 수 있다. 2개의 리미트 스위칭 [-ψ, ψ]의 중간점 Φ은 엔드 이펙터의 작업 공간의 원점으로 정의되고, 그가 회전 시스템(224)에서 사용되는 회전대 좌표는 Φ = [-ψ, ψ]로 표시된다. 다른 측면에서, 분석 모듈(204)에 의해 분석되는 머리 회전 데이터는 서로 다른 좌표계(예를 들어, 지자기 좌표계)에 있다. 추적 시스템(200)이 그의 배치 단계에 설치될 경우, 교정 과정(예를 들어, 회전 제어 모듈(206)를 통해)을 실행하여 엔드 이펙터의 회전과 사용자의 머리 회전을 맞춘다. 도 4에서의 교정 모듈(402)을 참조하여 교정 과정을 더 해석한다.
III. 예시의 센서 데이터 분석 모듈
도 3은 실시예에 따른 회전대(220)의 제어 모듈(222)의 센서 데이터 분석 모듈(204)의 흐름 개략도이다. 분석 모듈(204)은 회전 추적 기기(210)로부터 사용자의 머리 회전 데이터를 수신하고, 수신된 머리 회전 데이터를 처리하여 분석을 거친 머리 회전 데이터를 생성하며, 분석을 거친 머리 회전 데이터를 제어 모듈(222)의 회전 제어 모듈(206)에 출력한다. 도 3에 도시된 실시예에서, 분석 모듈(204)은 수신기(302), 모션 센서 데이터베이스(304), 필터링 모듈(306) 및 모션 처리 모듈(308)을 포함한다. 대체적인 구성에서, 상이하거나 또는 추가적인 부품을 사용할 수 있다. 예를 들어, 필터링 모듈(306)은 회전 추적 기기(210)에 포함될 수 있어 추적되는 사용자의 머리 회전으로부터 소음 운동을 필터링한다.
수신기(302)는 회전 추적 기기(210)로부터 머리 회전 데이터(310)를 수신하고 수신된 머리 회전 데이터를 모션 센서 데이터베이스(304)에 저장한다. 일부 구성에서, 모션 센서 데이터베이스(304)는 또한 필터링 모듈(306)로부터 출력되는 필터링을 거친 머리 회전 데이터 및/또는 모션 처리 모듈(308)로부터 출력되는 분석을 거친 머리 회전 데이터(320)를 저장한다.
필터링 모듈(306)은 수신된 머리 회전 데이터를 필터링하여 수신된 머리 회전 데이터에서의 소음 운동을 필터링하여 필터링을 거친 머리 회전 데이터를 생성하며, 필터링을 거친 머리 회전 데이터를 모션 센서 데이터베이스(304)에 저장한다. 사용자가 운동 경기를 관람하는 것과 관련되는 수신된 머리 회전 데이터의 소음 운동은, 회전대(220)를 제어하는데 사용되어 운동 경기의 동영상 클립을 캡처할 경우 지터를 발생할 수 있는 운동 데이터를 가리킨다. 사용자가 운동 경기를 관람할 경우, 사용자는 그/그녀의 머리를 무작위로 회전할 수 있다. 예를 들어, 그/그녀가 근처의 친구와 대화하거나 또는 스탠드에서의 기타 관객의 움직임을 볼 경우, 사용자의 눈 시야는 운동장(예를 들어, 도 1에 도시된 운동장(120)) 밖에 있을 수 있다. 사용자가 운동 경기를 관람하는 동시에 그/그녀의 머리를 흔들거나 또는 껌을 씹는것과 관련된 동작은, 회전 시스템(224)의 회전을 동기화하는데 사용됨에 있어서 소음 운동에 속한다. 필터링 모듈(306)은 당업자가 이미 알고 있는 하나 또는 복수의 필터링 기술(예를 들어, 저역 통과 필터, 고역 통과 필터, 상보 필터(Complementary filter) 및 칼만 필터)을 실시하는 것을 통해 수신된 머리 회전 데이터를 필터링한다.
일 실시예에서, 필터링 모듈(306)은 우선 소음 운동을 포함하는 수신된 머리 회전 데이터를 처리하는 샘플링 레이트에 기반하여 적합한 필터(예를 들어, 저역 통과 필터)를 선택한다. 필터링 모듈(306)은 수신된 머리 회전 데이터에서의 소음 운동을 필터링한다(예를 들어, 기설정된 길이인 고정된 길이의 슬라이딩 윈도우 버퍼를 사용하여 수신된 머리 회전 데이터를 저장함). 각 샘플링 포인트에서, 슬라이딩 윈도우 버퍼에 저장된 머리 회전 데이터의 변화 패턴을 검사한다. 만약 수신된 머리 회전 데이터가 선형적으로 변화하면, 샘플링 포인트에서의 필터링을 거친 머리 회전 데이터는 선형 회귀의 회귀 처리를 거쳐 수신된 머리 회전 데이터이다. 만약 수신된 머리 회전 데이터가 비 선형적으로 변화하면, 샘플링 포인트에서의 필터링을 거친 머리 회전 데이터는 고정된 길이의 슬라이딩 윈도우 버퍼에서 수신된 머리 회전 데이터의 중앙값이다. 고정된 길이의 슬라이딩 윈도우 버퍼를 사용하여 각 샘플링 포인트에서 수신된 머리 회전 데이터의 변화 패턴을 검사하는 것을 통해, 필터링 모듈(306)은 수신된 사용자의 머리 회전 데이터를 신속하고 정확하게 필터링할 수 있다. 수신된 머리 회전 데이터를 회전 시스템(224)의 회전을 제어하기에 적합한 범위 내로 제한하기 위해, 필터링 모듈(306)은 필터링을 거친 머리 회전 데이터와 교정 과정의 기간에 디폴트 값으로 설치하거나 설치될 수 있는 기설정된 역치 θ를 비교한다.
모션 처리 모듈(308)은 필터링을 거친 머리 회전 데이터를 처리하여 분석을 거친 머리 회전 데이터를 생성하고, 분석을 거친 머리 회전 데이터를 모션 센서 데이터베이스(304)에 저장한다. 일 실시예에서, 분석을 거친 머리 회전 데이터는, 회전 추적 기기(210)에 의해 추적되는 사용자의 머리 움직임의 데이터 구조를 정확하게 표시하는 것을 포함하되, 회전 시스템(224)의 회전에 관련되는 타이밍 정보와 임의의 기타 정보(예를 들어, 머리 회전 추적 기기(210)의 각종 센서의 정보를 표시함)를 교정하고 제어하는데 사용될 수 있다. 일 실시예에서, 분석을 거친 머리 회전 데이터는, 수평면의 교정 과정에서 회전 추적 기기 방향에 대한 회전 추적 기기 방향을 더 포함한다. 수평면에서의 회전 추적 기기 방향은 요(yaw)라고도 지칭된다.
IV. 예시의 회전 제어 모듈
도 4는 실시예에 따른 회전대(220)의 제어 모듈(222)의 회전 제어 모듈(206)의 흐름 개략도이다. 회전 제어 모듈(206)은 분석 모듈(204)로부터 분석을 거친 머리 회전 데이터(410)를 수신하고, 수신된 분석을 거친 머리 회전 데이터에 기반하여 회전 제어 데이터를 생성하며, 회전 시스템(224)을 제어하여 사용자의 머리 회전과 동기화하여 회전하게 한다. 도 4에 도시된 실시예에서, 회전 제어 모듈(206)은 교정 모듈(402), 변환 모듈(404), 피드백 제어 모듈(406) 및 송수신기(408)를 포함한다. 대체 구성에서, 상이하거나 또는 추가적인 부품을 사용할 수 있다.
교정 모듈(402)은 회전 시스템(224)과 회전 추적 기기(210)를 교정하고, 회전 추적 기기(210)는 회전 추적 기기(210)를 착용한 사용자(예를 들어, 사용자(102))의 머리 회전 데이터를 생성한다. 일 실시예에서, 회전 시스템(224)은, 교정 과정을 시동하고 중지하는 교정 버튼 및 교정 기간에 사용자가 그/그녀의 머리를 어느 방향으로 향해야하는지를 지시하기 위한 태그 라인을 구비한다. 전술한 바와 같이, 회전 추적 기기(210)에 의해 추적되는 머리 회전은 회전 시스템(224)에서 사용되는 좌표계와 서로 다른 좌표계(예를 들어, 지자기 좌표계 대 회전대 좌표계)일 수 있다. 따라서, 추적 시스템(200)이 시동될 경우, 지자기 좌표에서 측정된 머리 회전은 회전 시스템(224)의 엔드 이펙터의 회전과 맞출 필요가 있다.
일 실시예에서, 교정 모듈(402)이 실행하는 교정 과정은 하기와 같다. (1) 교정 모듈(402)은 회전 추적 기기(210)가 회전 추적 센서를 운동장(예를 들어, 도 1에 도시된 운동장(120))의 중간으로 가리키도록 지시하고 그의 기설정된 시간(예를 들어, 10초간) 내에 정지를 유지하며; (2) 교정 모듈(402)은 엔드 이펙터가 고정 회전 속도로 제1 리미트 스위칭을 향해 제1 리미트 스위칭을 트리거할 때까지 회전하도록 지시하고; (3) 교정 모듈(402)은 엔드 이펙터가 고정 회전 속도로 제2 리미트 스위칭을 향해 제2 리미트 스위칭을 트리거할 때까지 회전하도록 지시하며; (4) 교정 모듈(402)은 엔드 이펙터를 지시하여 제1 리미트 스위칭과 제2 리미트 스위칭 사이의 중간점을 향해 회전하여 기설정된 시간 동안 그 위치에 머무른다. 일 실시예에서, 교정 과정은 회전 추적 기기(210)를 착용한 사용자에 의해 수동으로 시작된다. 만약 사용자가 역치 θ를 설치하려면, 사용자는 엔드 이펙터를 역치 θ가 지시하는 위치까지 수동으로 회전할 수 있고; 그렇지 않으면 역치 θ는 디폴트 값(즉, θ = ψ)으로 설치된다.
변환 모듈(404)은 분석 모듈(204)로부터 분석을 거친 머리 회전 데이터(410)를 수신하고 수신된 머리 회전 데이터에 기반하여 회전 제어 데이터를 생성한다. 회전 제어 데이터는, 회전 시스템(224)과 사용자의 머리 회전을 동기화하여 회전하도록 엔드 이펙터를 회전하는 명령어 또는 명령을 포함한다. 다시 말하면, 회전 시스템(224)은 사용자의 머리 회전을 동기화하여 따른다. 예를 들어, 사용자가 좌측으로 그/그녀의 머리를 θ도로 회전할 경우, 회전 시스템(224)도 좌측으로 θ도 회전한다.
일 실시예에서, 변환 모듈(404)은 회전 시스템(224)의 엔드 이펙터의 회전 구역의 경계와 관련되는 회전 제어 데이터를 생성한다. 예를 들어, 변환 모듈(404)은 대응되는 머리 회전을 따라 엔드 이펙터를 회전하는 현재의 각도가, 엔드 이펙터를 통해 회전 시스템(224)에 장착된 동영상 캡처 기기를 엔드 이펙터의 회전 구역의 경계 내에 유지되도록 하는지 여부를 결정한다. 만약 회전 시스템(224)에 의해 수행되는 회전이 회전 구역의 경계를 초과하면, 변환 모듈(404)은 명령을 생성하여 회전 시스템(224)이 회전을 중지하도록 지시하며, 피드백의 목적으로 회전 시스템(224)에 의해 실행된 실제의 회전을 기록한다.
일단 피드백 제어 모듈(406)로부터 피드백 데이터를 수신하면, 변환 모듈(404)은 회전 시스템(224)이 후속 회전을 위한 회전 제어 데이터를 업데이트한다. 예를 들어, 회전 시스템(224)에 의해 실행하기 위한 현재 회전의 회전 명령은 좌측으로 20도 회전하는 것일 수 있으나, 회전 시스템(224)은 단지 좌측으로 15도 회전될 수 있다. 회전 시스템(224)은 피드백 제어 모듈(406)을 통해 변환 모듈(404)에 현재의 회전(즉, 좌측으로 15도)을 제공한다. 변환 모듈(404)은 현재의 포인트에 대해 실행된 실제 회전에 기반하여 다음 회전 포인트에 사용되는 회전 제어 데이터를 조정한다. 예를 들어, 만약 좌측으로 10도인 현재 회전 포인트의 피드백 데이터가 다음 회전 포인트에 사용되는 회전 명령이 없으면, 조절을 거친 다음 회전 포인트에 사용되는 회전 명령은 좌측으로 15도이다(회전 시스템(224)이 다음 회전 포인트에 사용되는 회전 명령을 실행할 경우 여전히 회전 구역 경계 내에 있다고 가정함).
피드백 제어 모듈(404)은 회전 시스템(224)이 각 회전 포인트에 대해 실행 되는 실제의 회전을 측정하고, 변환 모듈(404)에 실제의 회전을 제공하며 각 회전 포인트에 사용되는 피드백 데이터로서 회전 제어 데이터의 조정에 사용한다. 대신에, 피드백 제어 모듈(404)은 각 회전 포인트에 대해 회전 시스템(224)에 의해 실행된 실제의 회전과 기대하는 회전(즉, 대응되는 사용자의 머리 회전)사이의 차이를 계산하고 회전 제어 데이터의 조정을 위한 피드백 데이터로서 변환 모듈(404)에 차이를 제공한다.
송수신기(408)는 변환 모듈(404)에 의해 생성된 회전 제어 데이터(430)를 회전 시스템(224)에 전송한다. 송수신기(408)는 피드백 제어 모듈(406)로부터 피드백 데이터(420)를 수신하고, 회전 제어 데이터를 조정하기 위해 피드백 데이터를 변환 모듈(404)에 전송하여, 후속 회전에 사용한다.
V. 동영상 캡처 기기와 사용자의 머리 회전을 동기화하기 위한 예시 방법
도 5는 실시예에 따른 회전대(예를 들어, 도 1에 도시된 회전대(130))에 장착된 동영상 캡처 기기의 회전과 사용자가 관람하는 운동 경기와 관련된 사용자(예를 들어, 도 1에 도시된 사용자(102))의 머리 회전의 움직임을 동기화하기 위한 과정을 나타내는 흐름도이다. 처음에, 동영상 하이라이트 부분 추적 시스템(200)은 사용자에 착용된 회전 추적 기기(210)와 회전 시스템(224)을 교정(502)한다. 교정 과정에 회전 시스템(224)의 엔드 이펙터의 작업 공간의 2개의 경계를 설치하고 한정한다. 엔드 이펙터는 동영상 캡처 기기(예를 들어, 디지털 카메라)를 회전 시스템(224)에 장착하여 운동 경기의 동영상 클립을 캡처하는데 사용된다. 회전 추적 기기(210)는 사용자가 운동 경기를 관람하는 기간의 머리 움직임(예를 들어, 요 회전)을 추적한다. 동영상 하이라이트 부분 추적 시스템(200)은 회전 추적 기기(210)로부터 머리 회전 데이터를 수신하고(504), 머리 회전 데이터(예를 들어, 고정된 길이의 슬라이딩 윈도우 버퍼를 사용하는 것을 통해)로부터 소음 운동(예를 들어, 사용자가 운동 경기를 관람하는 동시에 껌을 씹거나, 그/그녀의 다리를 흔드는 운동에서 옴)을 필터링한다(506). 동영상 하이라이트 부분 추적 시스템(200)은 분석을 거친 머리 회전 데이터를 생성하며(508), 이는 데이터 구조에서 사용자의 머리 움직임을 정확하게 표시한다. 동영상 하이라이트 부분 추적 시스템(200)은 분석을 거친 머리 회전 데이터에 기반하여 대응되는 회전 제어 데이터를 생성한다(510). 회전 제어 데이터는 명령(510)을 포함하고, 회전 시스템(224)에 이해 실행될 경우, 명령(512)은 회전 시스템(224)이 회전 시스템에 장착된 동영상 캡처 기기를 회전하여 사용자의 머리 회전을 동기화하여 따르도록 한다.
본 발명의 실시예가 제공하는 방안은 사용자가 운동 경기를 즐길 수 있는 동시에 경기의 하나 또는 복수의 동영상 클립을 편리하게 기록할 수 있다. 사용자는 원격 제어기를 사용하여 회전대에 장착된 동영상 캡처 기기를 활성화하여 사용자가 관심을 갖는 운동 경기의 동영상 클립을 캡처한다. 회전 추적 기기가 사용자의 머리 움직임을 추적하는데 따라, 회전대에 장착된 동영상 캡처 기기는 전체 운동 경기 기간에 사용자의 시야를 따라 유지된다. 캡처된 운동 경기의 동영상은 분석되어 운동 경기에서의 하나 또는 복수의 동영상 하이라이트 부분을 식별한다. 사용자는 동영상 캡처 기기가 그/그녀가 원하는 것이 캡처되었는지 여부를 부단히 검사할 필요가 없고, 반대로, 사용자는 운동 경기에 관심을 두어 즐길 수 있다.
VI. 종합
본 발명의 실시예에서 전술한 설명은 예시의 목적으로 나타내고, 이는 본 발명이 공개된 확실하고 적절한 형식을 철저하게 예를 들거나 또는 제한하려는 것이 아니다. 관련 기술 분야의 당업자는 상기의 공개된 내용에 비추어, 많은 변형과 수정이 가능함을 의식할 수 있다.
여기서 설명한 일부분은 정보의 조작에 대한 알고리즘 및 기호 표시의 측면에서 본 발명의 실시예를 설명하였다. 이러한 알고리즘 설명과 표시는 통상적으로 본 분야의 기타 당업자에게 그들의 작업을 실질적이고 효과적으로 전달하기 위해 데이터 처리 기술 분야의 당업자에 의해 사용된다. 이러한 조작을, 계산에서 또는 논리에서 설명할 경우, 컴퓨터 프로그램 또는 등가의 전자 회로, 마이크로 인코더 또는 유사한 실시로 이해될 수 있다. 이 외에, 때로는 편리하다고 증명된 것은, 일반성을 잃지 않은 상황 하에서, 조작의 이런 배치를 모듈이라고 한다. 소프트웨어, 펌웨어, 하드웨어 또는 이들의 임의의 조합으로 설명된 조작 및 이들의 관련된 모듈을 실시할 수 있다.
하나 또는 복수의 하드웨어 또는 소프트웨어 모듈로 단독으로 또는 기타 기기의 조합으로 본 명세서에서 설명된 임의의 단계, 조작 또는 과정을 실행하거나 또는 실시할 수 있다. 일 실시예에서, 컴퓨터 판독 가능 매체를 포함하는 컴퓨터 프로그램 제품 실시 소프트웨어 모듈, 컴퓨터 판독 가능 매체는 컴퓨터 프로그램 코드를 포함하며, 이는 컴퓨터 프로세서에 의해 실행되어 설명된 단계, 조작 또는 과정에서의 임의의 하나 또는 전부를 실행하기 위한 것이다.
공개된 실시예는 또한 본 명세서에서의 조작을 실행하기 위한 장치에 관한 것일 수 있다. 필요한 목적에 맞게 이 장치를 전문적으로 제작할 수 있으며, 및/또는 이 장치는 컴퓨터에 저장된 컴퓨터 프로그램에 의해 선택적으로 활성화하거나 다시 구성되는 통용 컴퓨팅 기기를 포함할 수 있다. 이러한 컴퓨터 프로그램은 비일시적이고, 유형한 컴퓨터 판독 가능 저장 매체 또는 전자 명령을 저장하는데 적합한 임의의 유형의 매체에 저장될 수 있고, 이는 컴퓨터 시스템 버스에 연결될 수 있다. 이 외에, 본 명세서에서 언급된 임의의 컴퓨팅 시스템은 단일 프로세서 또는 인핸스먼트형 컴퓨팅 능력을 갖추기 위한 멀티 프로세서를 응용하여 설계할 수 있는 아키텍처를 포함할 수 있다.
공개된 실시예는 또한 본 명세서에 의해 공개된 계산 과정에 생성된 제품일 수 있다. 이러한 제품은 계산 과정으로부터 얻은 정보를 포함할 수 있으며, 여기서 정보는 비일시적이고, 유형한 컴퓨터 판독 가능 저장 매체에 저장되고, 컴퓨터 프로그램 제품의 임의의 실시예 또는 본 명세서에서 설명된 기타 데이터 조합을 포함할 수 있다.
최후에, 주로 가독성과 지도성을 목적으로 본 명세서에서 사용되는 언어를 선택하며, 본 발명의 주제를 묘사하거나 제한하기 위해, 명세서에서 사용되는 언어를 선택하는 것이 아니다. 따라서, 본 발명의 범위는 상세한 설명에 의해 제한되는 것이 아니라 출원에서 발포된 임의의 청구 범위에 기반하여 제한되는 것이 아니다. 따라서, 본 발명의 실시예의 공개는 단지 예시적인 것이고, 본 발명의 범위를 제한하려는 것이 아니며, 이는 이미 그 다음의 청구 범위에서 자세히 논술한다.

Claims (27)

  1. 컴퓨터가 실시하는 방법에 있어서,
    상기 방법은,
    사용자에 착용된 회전 추적 기기로부터, 경기 관람에 관련된 사용자의 머리 회전 데이터를 수신하는 단계;
    상기 머리 회전 데이터를 필터링하여, 필터링을 거친 머리 회전 데이터를 생성하는 단계;
    상기 필터링을 거친 머리 회전 데이터에 기반하여, 대응되는 회전 제어 데이터를 생성하는 단계; 및
    상기 회전 제어 데이터에 기반하여, 회전 시스템이 사용자의 머리 회전과 동기화하여 회전되도록 지시하는 단계
    를 포함하고,
    상기 머리 회전 데이터를 필터링하는 단계는,
    상기 머리 회전 데이터를 기설정된 길이의 슬라이딩 윈도우 버퍼에 저장하는 단계;
    각 샘플링 포인트에서의 머리 회전 데이터의 적어도 하나의 변화 패턴을 결정하는 단계; 및
    각 샘플링 포인트에 사용되는 필터링을 거친 머리 회전 데이터를 생성하는 단계
    를 포함하는 것을 특징으로 하는 컴퓨터가 실시하는 방법.
  2. 제1항에 있어서,
    상기 회전 시스템 및 상기 사용자에 착용된 회전 추적 기기를 교정하는 단계 - 여기서, 상기 회전 시스템과 상기 회전 추적 기기는 2개의 서로 다른 좌표계에 있음 -
    를 더 포함하는 것을 특징으로 하는 컴퓨터가 실시하는 방법.
  3. 제2항에 있어서,
    상기 교정은,
    상기 회전 시스템의 작업 공간의 복수의 경계를 결정하는 단계 - 상기 회전 시스템의 작업 공간의 경계는 상기 회전 시스템에 의해 실행될 수 있는 회전의 한계를 표시함 - ; 및
    상기 회전 추적 기기에 의해 한정된 교정 포인트에 기반하여, 결정된 회전 시스템의 작업 공간의 경계를 조정하는 단계
    를 포함하는 것을 특징으로 하는 컴퓨터가 실시하는 방법.
  4. 삭제
  5. 제1항에 있어서,
    상기 각 샘플링 포인트에 사용되는 필터링을 거친 머리 회전 데이터를 생성하는 단계는,
    샘플링 포인트에서의 결정된 변화 패턴이 선형적인 것에 응답하여, 상기 머리 회전 데이터에 대해 선형 회귀 과정을 응용하는 단계; 및
    선형 회귀에 기반하여 상기 샘플링 포인트에 사용되는 필터링을 거친 머리 회전 데이터를 생성하는 단계
    를 포함하는 것을 특징으로 하는 컴퓨터가 실시하는 방법.
  6. 제1항에 있어서,
    상기 각 샘플링 포인트에 사용되는 필터링을 거친 머리 회전 데이터를 생성하는 단계는,
    샘플링 포인트에서의 결정된 변화 패턴이 비 선형적인 것에 응답하여, 상기 슬라이딩 윈도우 버퍼에 저장된 머리 회전 데이터의 중앙값을 계산하는 단계; 및
    상기 머리 회전 데이터의 중앙값에 기반하여 상기 샘플링 포인트에 사용되는 필터링을 거친 머리 회전 데이터를 생성하는 단계
    를 포함하는 것을 특징으로 하는 컴퓨터가 실시하는 방법.
  7. 제1항에 있어서,
    대응되는 회전 제어 데이터를 생성하는 단계는,
    각 회전 포인트와 대응되는 머리 회전 데이터에 기반하여, 각 회전 포인트에 사용되는 회전량과 회전 방향을 계산하는 단계; 및
    각 회전 포인트에 사용되는 복수의 전동 회전 명령을 생성하는 단계 - 전동 회전 명령은 상기 회전 시스템에 의해 실행될 회전량과 회전 방향의 정보를 포함함 -
    를 포함하는 것을 특징으로 하는 컴퓨터가 실시하는 방법.
  8. 제1항에 있어서,
    상기 회전 시스템으로부터, 각 회전 포인트에 사용되는 전동 회전 피드백 데이터를 수신하는 단계 - 각 회전 포인트에 사용되는 전동 회전 피드백 데이터는 상기 회전 시스템에 의해 실행되는 실제 회전량과 회전 방향을 표시하는 정보를 포함함 - ; 및
    수신된 현재 회전 포인트에 사용되는 전동 회전 피드백 데이터에 기반하여, 다음 회전 포인트에 사용되는 회전 제어 데이터를 생성하는 단계
    를 더 포함하는 것을 특징으로 하는 컴퓨터가 실시하는 방법.
  9. 제1항에 있어서,
    상기 회전 시스템이 상기 사용자의 머리 회전과 동기화하여 회전하도록 지시하는 단계는,
    상기 회전 시스템이 각각의 대응되는 회전 포인트에서, 상기 회전 시스템의 작업 공간의 경계 내에서, 서로 같은 방향과 서로 같은 회전량으로 상기 사용자의 머리 회전을 따르도록 지시하는 단계
    를 포함하는 것을 특징으로 하는 컴퓨터가 실시하는 방법.
  10. 제1항에 있어서,
    상기 사용자로부터 명령을 수신하여 상기 회전 시스템에 장착된 경기의 동영상 클립을 캡처하기 위한 동영상 캡처 기기를 활성화시키는 단계; 및
    상기 회전 시스템이 상기 동영상 클립을 캡처할 경우 상기 사용자의 머리 회전을 따르도록 지시하는 단계
    를 더 포함하는 것을 특징으로 하는 컴퓨터가 실시하는 방법.
  11. 실행 가능한 컴퓨터 프로그램 명령이 저장되어 있는 비일시적 컴퓨터 판독 가능 저장 매체에 있어서,
    컴퓨터 프로세서에 의해 실행될 경우, 상기 명령은 상기 컴퓨터 프로세서가,
    사용자에 착용된 회전 추적 기기로부터, 경기 관람에 관련된 사용자의 머리 회전 데이터를 수신하고;
    상기 머리 회전 데이터를 필터링하여 필터링을 거친 머리 회전 데이터를 생성하며;
    상기 필터링을 거친 머리 회전 데이터에 기반하여 대응되는 회전 제어 데이터를 생성하고; 및
    상기 회전 제어 데이터에 기반하여 회전 시스템이 사용자의 머리 회전과 동기화하여 회전되도록 지시하고,
    상기 머리 회전 데이터를 필터링하기 위한 명령은, 상기 컴퓨터 프로세서에 의해 실행될 경우, 상기 컴퓨터 프로세서가 하기의 조작을 실행하도록 하는 명령을 포함하되, 상기 조작은,
    상기 머리 회전 데이터를 기설정된 길이의 슬라이딩 윈도우 버퍼에 저장하는 조작;
    각 샘플링 포인트에서의 머리 회전 데이터의 적어도 하나의 변화 패턴을 결정하는 조작; 및
    각 샘플링 포인트에 사용되는 필터링을 거친 머리 회전 데이터를 생성하는 조작
    을 포함하는 것을 특징으로 하는 비일시적 컴퓨터 판독 가능 저장 매체.
  12. 제11항에 있어서,
    상기 컴퓨터 프로세서에 의해 실행될 경우, 상기 컴퓨터 프로세서가 하기의 조작을 실행하도록 하는 컴퓨터 프로그램 명령을 포함하되, 상기 조작은,
    상기 회전 시스템 및 상기 사용자에 착용된 회전 추적 기기를 교정하는 조작-, 여기서, 상기 회전 시스템과 상기 회전 추적 기기는 2개의 서로 다른 좌표계에 있음 -
    을 포함하는 것을 특징으로 하는 비일시적 컴퓨터 판독 가능 저장 매체.
  13. 제12항에 있어서,
    상기 회전 시스템과 상기 회전 추적 기기를 교정하기 위한 명령은, 상기 컴퓨터 프로세서에 의해 실행될 경우, 상기 컴퓨터 프로세서가 하기의 조작을 실행하도록 하는 명령을 포함하되, 상기 조작은,
    상기 회전 시스템의 작업 공간의 복수의 경계를 결정하고, 상기 회전 시스템의 작업 공간의 경계는 상기 회전 시스템에 의해 실행될 수 있는 회전의 한계를 표시하는 조작; 및
    상기 회전 추적 기기에 의해 한정된 교정 포인트에 기반하여, 결정된 회전 시스템의 작업 공간의 경계를 조정하는 조작
    을 포함하는 것을 특징으로 하는 비일시적 컴퓨터 판독 가능 저장 매체.
  14. 삭제
  15. 제11항에 있어서,
    상기 각 샘플링 포인트에 사용되는 필터링을 거친 머리 회전 데이터를 생성하기 위한 명령은, 상기 컴퓨터 프로세서에 의해 실행될 경우, 상기 컴퓨터 프로세서가 하기의 조작을 실행하도록 하는 명령을 포함하되, 상기 조작은,
    샘플링 포인트에서의 결정된 변화 패턴이 선형적인 것에 응답하여, 상기 머리 회전 데이터에 대해 선형 회귀 과정을 응용하는 조작; 및
    선형 회귀에 기반하여 상기 샘플링 포인트에 사용되는 필터링을 거친 머리 회전 데이터를 생성하는 조작
    을 포함하는 것을 특징으로 하는 비일시적 컴퓨터 판독 가능 저장 매체.
  16. 제11항에 있어서,
    상기 각 샘플링 포인트에 사용되는 필터링을 거친 머리 회전 데이터를 생성하기 위한 명령은, 상기 컴퓨터 프로세서에 의해 실행될 경우, 상기 컴퓨터 프로세서가 하기의 조작을 실행하도록 하는 명령을 포함하되, 상기 조작은,
    샘플링 포인트에서의 결정된 변화 패턴이 비 선형적인 것에 응답하여, 상기 슬라이딩 윈도우 버퍼에 저장된 머리 회전 데이터의 중앙값을 계산하는 조작; 및
    상기 머리 회전 데이터의 중앙값에 기반하여 상기 샘플링 포인트에 사용되는 필터링을 거친 머리 회전 데이터를 생성하는 조작
    을 포함하는 것을 특징으로 하는 비일시적 컴퓨터 판독 가능 저장 매체.
  17. 제11항에 있어서,
    대응되는 회전 제어 데이터를 생성하기 위한 명령은, 상기 컴퓨터 프로세서에 의해 실행될 경우, 상기 컴퓨터 프로세서가 하기의 조작을 실행하도록 하는 명령을 포함하되, 상기 조작은,
    각 회전 포인트와 대응되는 머리 회전 데이터에 기반하여, 각 회전 포인트에 사용되는 회전량과 회전 방향을 계산하는 조작; 및
    각 회전 포인트에 사용되는 복수의 전동 회전 명령을 생성하되, 전동 회전 명령은 상기 회전 시스템에 의해 실행될 회전량과 회전 방향의 정보를 포함하는 조작
    을 포함하는 것을 특징으로 하는 비일시적 컴퓨터 판독 가능 저장 매체.
  18. 제11항에 있어서,
    상기 컴퓨터 프로세서에 의해 실행될 경우 상기 컴퓨터 프로세서가 하기의 조작을 실행하도록 하는 컴퓨터 프로그램 명령을 더 포함하되, 상기 조작은,
    상기 회전 시스템으로부터, 각 회전 포인트에 사용되는 전동 회전 피드백 데이터를 수신하고, 각 회전 포인트에 사용되는 전동 회전 피드백 데이터는 상기 회전 시스템에 의해 실행되는 실제 회전량과 회전 방향을 표시하는 정보를 포함하는 조작; 및
    수신된 현재 회전 포인트에 사용되는 전동 회전 피드백 데이터에 기반하여, 다음 회전 포인트에 사용되는 회전 제어 데이터를 생성하는 조작
    을 포함하는 것을 특징으로 하는 비일시적 컴퓨터 판독 가능 저장 매체.
  19. 제11항에 있어서,
    상기 회전 시스템이 상기 사용자의 머리 회전과 동기화하여 회전하도록 지시하는 명령은, 상기 컴퓨터 프로세서에 의해 실행될 경우, 상기 컴퓨터 프로세서가 하기의 조작을 실행하도록 하는 명령을 포함하되, 상기 조작은,
    상기 회전 시스템이 각각의 대응되는 회전 포인트에서, 상기 회전 시스템의 작업 공간의 경계 내에서, 서로 같은 방향과 서로 같은 회전량으로 상기 사용자의 머리 회전을 따르도록 지시하는 조작
    을 포함하는 것을 특징으로 하는 비일시적 컴퓨터 판독 가능 저장 매체.
  20. 제11항에 있어서,
    상기 컴퓨터 프로세서에 의해 실행될 경우 상기 컴퓨터 프로세서가 하기의 조작을 실행하도록 하는 컴퓨터 프로그램 명령을 더 포함하되, 상기 조작은,
    상기 사용자로 부터 명령을 수신하여 상기 회전 시스템에 장착된 경기의 동영상 클립을 캡처하기 위한 동영상 캡처 기기를 활성화시키는 조작; 및
    상기 회전 시스템이 상기 동영상 클립을 캡처할 경우 상기 사용자의 머리 회전을 따르도록 지시하는 조작
    을 포함하는 것을 특징으로 하는 비일시적 컴퓨터 판독 가능 저장 매체.
  21. 컴퓨터 시스템에 있어서,
    회전 추적 기기 및 회전대를 포함하고,
    상기 회전 추적 기기는 사용자의 경기 관람에 관련된 사용자의 머리 회전의 움직임을 추적하기 위한 것이고, 상기 회전 추적 기기는 상기 사용자에 의해 상기 사용자의 머리 부위에 착용되고,
    상기 회전대는 상기 회전 추적 기기와 통신 가능하도록 연결하기 위한 것이며,
    상기 회전대는 제어 모듈 및 회전 시스템을 포함하고,
    상기 제어 모듈은, 추적된 사용자의 머리 회전의 움직임을 분석하고, 분석된 사용자의 머리 회전의 움직임에 기반하여 회전 제어 데이터를 생성하며,
    상기 회전 시스템은, 상기 회전 제어 데이터에 기반하여 사용자의 머리 회전과 동기화하여 동영상 캡처 기기를 회전하고,
    추적된 사용자의 머리 회전의 움직임을 분석하는 것은,
    상기 사용자의 머리 회전의 움직임을 표시하는 머리 회전 데이터를 기설정된 길이의 슬라이딩 윈도우 버퍼에 저장하고;
    각 샘플링 포인트에서의 머리 회전 데이터의 적어도 하나의 변화 패턴을 결정하며; 및
    각 샘플링 포인트에 사용되는 필터링을 거친 머리 회전 데이터를 생성하는 것
    을 포함하는 것을 특징으로 하는 컴퓨터 시스템.
  22. 제21항에 있어서,
    상기 제어 모듈은 또한,
    상기 회전 시스템 및 상기 사용자에 착용된 회전 추적 기기를 교정하기 위한 것이고, 여기서, 상기 회전 시스템과 상기 회전 추적 기기는 2개의 서로 다른 좌표계에 있는 것을 특징으로 하는 컴퓨터 시스템.
  23. 제22항에 있어서,
    상기 회전 시스템을 교정하는 것은,
    상기 회전 시스템의 작업 공간의 복수의 경계를 결정하되, 상기 회전 시스템의 작업 공간의 경계는 상기 회전 시스템에 의해 실행될 수 있는 회전의 한계를 표시하고; 및
    상기 회전 추적 기기에 의해 한정된 교정 포인트에 기반하여, 결정된 회전 시스템의 작업 공간의 경계를 조정하는 것
    을 포함하는 것을 특징으로 하는 컴퓨터 시스템.
  24. 삭제
  25. 제21항에 있어서,
    회전 제어 데이터를 생성하는 것은,
    각 회전 포인트와 대응되는 머리 회전 데이터에 기반하여, 각 회전 포인트에 사용되는 회전량과 회전 방향을 계산하고; 및
    각 회전 포인트에 사용되는 복수의 전동 회전 명령을 생성하는 것
    을 포함하되,
    전동 회전 명령은 상기 회전 시스템에 의해 실행될 회전량과 회전 방향의 정보를 포함하는 것을 특징으로 하는 컴퓨터 시스템.
  26. 제21항에 있어서,
    상기 제어 모듈은 또한,
    상기 회전 시스템으로부터, 각 회전 포인트에 사용되는 전동 회전 피드백 데이터를 수신하되, 각 회전 포인트에 사용되는 전동 회전 피드백 데이터는 상기 회전 시스템에 의해 실행되는 실제 회전량과 회전 방향을 표시하는 정보를 포함하며; 및
    수신된 현재 회전 포인트에 사용되는 전동 회전 피드백 데이터에 기반하여, 다음 회전 포인트에 사용되는 회전 제어 데이터를 생성하기 위한 것을 특징으로 하는 컴퓨터 시스템.
  27. 제21항에 있어서,
    원격 제어기를 더 포함하고,
    상기 원격 제어기는, 상기 사용자에 의해 상기 회전 시스템과 연결된 경기의 하나 또는 복수의 동영상을 캡처하기 위한 동영상 캡처 기기를 제어하기 위한 것을 특징으로 하는 컴퓨터 시스템.
KR1020187034285A 2016-04-27 2016-09-29 동영상 하이라이트 부분을 식별하기 위한 머리 회전 추적 기기 KR102107923B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US15/139,683 2016-04-27
US15/139,683 US10097745B2 (en) 2016-04-27 2016-04-27 Head rotation tracking device for video highlights identification
PCT/US2016/054540 WO2017189036A1 (en) 2016-04-27 2016-09-29 Head rotation tracking device for video highlights identification

Publications (2)

Publication Number Publication Date
KR20190008257A KR20190008257A (ko) 2019-01-23
KR102107923B1 true KR102107923B1 (ko) 2020-05-07

Family

ID=60157047

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020187034285A KR102107923B1 (ko) 2016-04-27 2016-09-29 동영상 하이라이트 부분을 식별하기 위한 머리 회전 추적 기기

Country Status (6)

Country Link
US (1) US10097745B2 (ko)
EP (1) EP3449623A4 (ko)
JP (1) JP7026638B2 (ko)
KR (1) KR102107923B1 (ko)
CN (1) CN109155818B (ko)
WO (1) WO2017189036A1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11166051B1 (en) * 2018-08-31 2021-11-02 Amazon Technologies, Inc. Automatically generating content streams based on subscription criteria
US11095923B1 (en) 2018-08-31 2021-08-17 Amazon Technologies, Inc. Automatically processing inputs to generate content streams

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040105010A1 (en) * 2000-06-30 2004-06-03 Karl Osen Computer aided capturing system
US20080136916A1 (en) * 2005-01-26 2008-06-12 Robin Quincey Wolff Eye tracker/head tracker/camera tracker controlled camera/weapon positioner control system
WO2013158050A1 (en) * 2012-04-16 2013-10-24 Airnamics, Napredni Mehatronski Sistemi D.O.O. Stabilization control system for flying or stationary platforms

Family Cites Families (46)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0486906A (ja) * 1990-07-31 1992-03-19 Suzuki Motor Corp 遠隔操作装置
WO1994017636A1 (en) * 1993-01-29 1994-08-04 Bell Communications Research, Inc. Automatic tracking camera control system
JPH07199281A (ja) * 1993-12-30 1995-08-04 Canon Inc カメラシステム
US5615132A (en) 1994-01-21 1997-03-25 Crossbow Technology, Inc. Method and apparatus for determining position and orientation of a moveable object using accelerometers
WO1996036950A1 (en) 1995-05-18 1996-11-21 Mark Johnson Motion sensor
JPH0937137A (ja) * 1995-07-25 1997-02-07 Minolta Co Ltd 移動型立体カメラ装置
US6133944A (en) 1995-12-18 2000-10-17 Telcordia Technologies, Inc. Head mounted displays linked to networked electronic panning cameras
US6224493B1 (en) 1999-05-12 2001-05-01 Callaway Golf Company Instrumented golf club system and method of use
JP2002135641A (ja) * 2000-10-27 2002-05-10 Nippon Telegr & Teleph Corp <Ntt> 視点・視線自由移動カメラシステム
US8409024B2 (en) 2001-09-12 2013-04-02 Pillar Vision, Inc. Trajectory detection and feedback system for golf
AU2003297389A1 (en) 2002-12-19 2004-07-14 Fortescue Corporation Method and apparatus for determining orientation and position of a moveable object
US7391888B2 (en) * 2003-05-30 2008-06-24 Microsoft Corporation Head pose assessment methods and systems
JP4320572B2 (ja) 2003-07-11 2009-08-26 ソニー株式会社 信号処理装置および方法、記録媒体、並びにプログラム
US20060166738A1 (en) 2003-09-08 2006-07-27 Smartswing, Inc. Method and system for golf swing analysis and training for putters
US20060025229A1 (en) 2003-12-19 2006-02-02 Satayan Mahajan Motion tracking and analysis apparatus and method and system implementations thereof
US7736242B2 (en) 2004-03-23 2010-06-15 Nike, Inc. System for determining performance characteristics of a golf swing
US8556267B2 (en) 2004-06-07 2013-10-15 Acushnet Company Launch monitor
US8179366B2 (en) * 2004-12-06 2012-05-15 Naturalpoint, Inc. Systems and methods for using a movable object to control a computer
US20100201512A1 (en) 2006-01-09 2010-08-12 Harold Dan Stirling Apparatus, systems, and methods for evaluating body movements
US8337335B2 (en) 2006-10-07 2012-12-25 Dugan Brian M Systems and methods for measuring and/or analyzing swing information
US8109816B1 (en) 2007-05-31 2012-02-07 Yale University Method and apparatus for measurement and analysis of a golf swing
US8360904B2 (en) 2007-08-17 2013-01-29 Adidas International Marketing Bv Sports electronic training system with sport ball, and applications thereof
KR20100136977A (ko) 2008-03-22 2010-12-29 리차드 재켈 골프 클럽의 타격 정확성과 스윙 동작을 모니터하는 장치와 방법
US8589114B2 (en) 2008-08-19 2013-11-19 Angelo Gregory Papadourakis Motion capture and analysis
US20100105479A1 (en) 2008-10-23 2010-04-29 Microsoft Corporation Determining orientation in an external reference frame
US8622795B2 (en) 2008-12-04 2014-01-07 Home Box Office, Inc. System and method for gathering and analyzing objective motion data
US8668595B2 (en) 2011-04-28 2014-03-11 Nike, Inc. Golf clubs and golf club heads
JP5182708B2 (ja) 2009-06-17 2013-04-17 ダンロップスポーツ株式会社 ゴルフスイングの分析方法
US20100323794A1 (en) 2009-06-18 2010-12-23 Yui-Zhang Su Sensor based human motion detection gaming with false positive detection
KR101082798B1 (ko) 2010-03-11 2011-11-11 이열 셀프 카메라 촬영 시스템
US8941723B2 (en) 2010-08-26 2015-01-27 Blast Motion Inc. Portable wireless mobile device motion capture and analysis system and method
US8903521B2 (en) 2010-08-26 2014-12-02 Blast Motion Inc. Motion capture element
US8944928B2 (en) 2010-08-26 2015-02-03 Blast Motion Inc. Virtual reality system for viewing current and previously stored or calculated motion data
US9039527B2 (en) 2010-08-26 2015-05-26 Blast Motion Inc. Broadcasting method for broadcasting images with augmented motion data
US8905855B2 (en) 2010-08-26 2014-12-09 Blast Motion Inc. System and method for utilizing motion capture data
US8593286B2 (en) 2010-12-01 2013-11-26 At&T Intellectual Property I, L.P. System and method for wireless monitoring of sports activities
US8754786B2 (en) * 2011-06-30 2014-06-17 General Electric Company Method of operating a synthetic vision system in an aircraft
CN104380749A (zh) * 2012-04-16 2015-02-25 诺基亚公司 用于视频编码的方法和装置
KR20130124422A (ko) * 2012-05-04 2013-11-13 (주)컨벡스 팬틸트 장치 및 이를 포함하는 촬영용 무선 제어 시스템
US9380295B2 (en) * 2013-04-21 2016-06-28 Zspace, Inc. Non-linear navigation of a three dimensional stereoscopic display
US9609290B2 (en) 2013-07-10 2017-03-28 Subc Control Limited Telepresence method and system for supporting out of range motion by aligning remote camera with user's head
US9336440B2 (en) 2013-11-25 2016-05-10 Qualcomm Incorporated Power efficient use of a depth sensor on a mobile device
WO2015143067A1 (en) 2014-03-19 2015-09-24 Intuitive Surgical Operations, Inc. Medical devices, systems, and methods using eye gaze tracking
EP3218844A4 (en) * 2014-11-13 2018-07-04 Intel Corporation Spoofing detection in image biometrics
KR20160133328A (ko) * 2015-05-12 2016-11-22 삼성전자주식회사 웨어러블 디바이스를 이용한 원격 제어 방법 및 장치
CN205123878U (zh) * 2015-11-30 2016-03-30 吕衍荣 便携式手机自动跟踪自摄器

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040105010A1 (en) * 2000-06-30 2004-06-03 Karl Osen Computer aided capturing system
US20080136916A1 (en) * 2005-01-26 2008-06-12 Robin Quincey Wolff Eye tracker/head tracker/camera tracker controlled camera/weapon positioner control system
WO2013158050A1 (en) * 2012-04-16 2013-10-24 Airnamics, Napredni Mehatronski Sistemi D.O.O. Stabilization control system for flying or stationary platforms

Also Published As

Publication number Publication date
JP2019515341A (ja) 2019-06-06
CN109155818A (zh) 2019-01-04
US10097745B2 (en) 2018-10-09
EP3449623A1 (en) 2019-03-06
JP7026638B2 (ja) 2022-02-28
KR20190008257A (ko) 2019-01-23
WO2017189036A1 (en) 2017-11-02
EP3449623A4 (en) 2019-05-01
US20170318214A1 (en) 2017-11-02
CN109155818B (zh) 2020-09-08

Similar Documents

Publication Publication Date Title
US10043281B2 (en) Apparatus and method for estimating eye gaze location
CN108139204B (zh) 信息处理装置、位置和/或姿态的估计方法及记录介质
US10063776B2 (en) Camera mode control
US20160150196A1 (en) Movement and distance triggered image recording system
EP4198626A1 (en) Camera system using stabilizing gimbal
US20170322017A1 (en) Information processing device, information processing method, and program
US10881937B2 (en) Image processing apparatus, analysis system, and method for processing images
JPWO2013069049A1 (ja) 画像生成装置および画像生成方法
CN107111371B (zh) 一种展示全景视觉内容的方法、装置及终端
JP6380787B2 (ja) 撮像装置、カメラ、表示装置、撮像方法、表示方法、及びプログラム
US20190156579A1 (en) Mixed reality video production with detached camera
US11064118B1 (en) Systems and methods for dynamic stabilization adjustment
WO2019195991A1 (zh) 运动轨迹确定、延时摄影方法、设备及机器可读存储介质
WO2015154359A1 (zh) 拍摄的实现方法及装置
KR20170044451A (ko) 헤드 마운트 디스플레이를 이용한 원격지 카메라 제어 시스템 및 방법
CN105721739B (zh) 屏幕影像画面防抖系统及方法
CN105939497A (zh) 媒体串流系统及媒体串流方法
KR102107923B1 (ko) 동영상 하이라이트 부분을 식별하기 위한 머리 회전 추적 기기
CN113645410B (zh) 图像采集方法、设备及机器可读存储介质
US11477433B2 (en) Information processor, information processing method, and program
WO2020071029A1 (ja) 情報処理装置、情報処理方法、及び記録媒体
CN106293046B (zh) 信息处理方法、信息处理装置及用户设备
WO2019095139A1 (zh) 数据处理方法和设备
JP7247371B2 (ja) 画像処理装置、システム、画像処理方法、および画像処理プログラム
US20170195543A1 (en) Remote control between mobile communication devices for capturing images

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant