KR102126370B1 - Apparatus and method for analyzing motion - Google Patents

Apparatus and method for analyzing motion Download PDF

Info

Publication number
KR102126370B1
KR102126370B1 KR1020150093754A KR20150093754A KR102126370B1 KR 102126370 B1 KR102126370 B1 KR 102126370B1 KR 1020150093754 A KR1020150093754 A KR 1020150093754A KR 20150093754 A KR20150093754 A KR 20150093754A KR 102126370 B1 KR102126370 B1 KR 102126370B1
Authority
KR
South Korea
Prior art keywords
image
analysis
analysis data
mode
motion
Prior art date
Application number
KR1020150093754A
Other languages
Korean (ko)
Other versions
KR20160062665A (en
Inventor
박순찬
김진서
김희권
박지영
심광현
유문욱
장주용
장호욱
정혁
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to CN201510977030.2A priority Critical patent/CN105654506A/en
Publication of KR20160062665A publication Critical patent/KR20160062665A/en
Application granted granted Critical
Publication of KR102126370B1 publication Critical patent/KR102126370B1/en

Links

Images

Classifications

    • G06K9/00342—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B69/00—Training appliances or apparatus for special sports
    • A63B69/36—Training appliances or apparatus for special sports for golf
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)

Abstract

본 발명의 일 실시예에 따른 동작 분석 장치는 카메라, 카메라가 객체에 대한 일반 촬영을 수행하여 제1 영상을 생성하도록 제어하는 카메라 제어부, 제1 영상 상의 객체의 동작이 고속 동작 모드에 대응하는 경우, 고속 동작 모드를 나타내는 모드 설정 신호를 카메라 제어부로 전송하는 동작 분석부를 포함하되, 카메라 제어부는 고속 동작 모드를 나타내는 모드 설정 신호를 수신하는 경우, 카메라가 고속 촬영을 수행하여 제2 영상을 생성하도록 제어하고, 동작 분석부는 상기 제2 영상 상의 객체의 동작이 분석 모드에 대응하는 경우, 제2 영상에 대한 분석 데이터를 생성하는 것을 특징으로 한다.The motion analysis apparatus according to an embodiment of the present invention includes a camera, a camera controller that controls the camera to generate a first image by performing general shooting on an object, and when the operation of the object on the first image corresponds to a high-speed operation mode , A motion analysis unit for transmitting a mode setting signal indicating a high-speed operation mode to the camera control unit, the camera control unit, when receiving a mode setting signal indicating a high-speed operation mode, the camera to perform a high-speed shooting to generate a second image The control and motion analysis unit is characterized in that when the operation of the object on the second image corresponds to the analysis mode, generates analysis data for the second image.

Description

동작 인식 장치 및 방법{APPARATUS AND METHOD FOR ANALYZING MOTION}Motion recognition device and method{APPARATUS AND METHOD FOR ANALYZING MOTION}

본 발명은 객체의 동작을 분석하는 기술에 관한 것으로, 보다 상세하게는 객체의 고속 동작을 분석하는 기술에 관한 것이다.
The present invention relates to a technique for analyzing the motion of an object, and more particularly, to a technique for analyzing the high-speed motion of an object.

카메라를 포함하는 동작 분석 장치는 사용자 등의 특정 객체가 카메라 앞에서 동작을 취하는 경우, 카메라가 해당 동작을 촬영하여 영상을 생성하고, 영상을 분석하여 객체가 지정된 동작을 시작, 진행 또는 종료하였는지 파악할 수 있다. 동작 분석 장치는 스포츠 등의 분야에서 동작 정확도 등을 분석하여, 다양한 동작의 분석이 필요한 분야에 이용될 수 있다.When a specific object such as a user takes a motion in front of the camera, the motion analysis device including the camera may capture the motion to generate an image, and analyze the image to determine whether the object has started, progressed, or ended. have. The motion analysis device may be used in fields requiring analysis of various motions by analyzing motion accuracy and the like in sports.

객체의 동작 중에는 빠른 속도로 움직이는 동작이 존재하기 때문에, 정확한 동작의 분석을 위해서는 초고속 카메라(예를 들어, 120Hz 이상으로 촬영 가능한 카메라)가 요구된다.Since there is a motion that moves at a high speed during the motion of the object, an ultra-high-speed camera (for example, a camera capable of shooting at 120 Hz or higher) is required for accurate motion analysis.

하지만, 초고속 카메라가 생성하는 영상의 프레임 수가 크기 때문에 동작 분석 장치는 초고속 카메라에서 생성한 영상을 통해 동작 분석을 실시간으로 제공하기는 어려운 점이 존재한다.
However, since the number of frames of the image generated by the ultra-high-speed camera is large, it is difficult for the motion analysis device to provide motion analysis in real time through the image generated by the ultra-high-speed camera.

본 발명이 해결하고자 하는 과제는 고속 동작에 대한 분석을 안정적으로 수행하는 동작 인식 장치 및 방법을 제공하는 것이다.
The problem to be solved by the present invention is to provide a motion recognition apparatus and method for stably performing analysis on high-speed motion.

본 발명의 일 측면에 따르면, 카메라; 상기 카메라가 객체에 대한 일반 촬영을 수행하여 제1 영상을 생성하도록 제어하는 카메라 제어부; 및 상기 제1 영상 상의 상기 객체의 동작이 고속 동작 모드에 대응하는 경우, 상기 고속 동작 모드를 나타내는 모드 설정 신호를 상기 카메라 제어부로 전송하는 동작 분석부;를 포함하되, 상기 카메라 제어부는 상기 고속 동작 모드를 나타내는 모드 설정 신호를 수신하는 경우, 상기 카메라가 고속 촬영을 수행하여 제2 영상을 생성하도록 제어하고, 상기 동작 분석부는 상기 제2 영상 상의 상기 객체의 동작이 분석 모드에 대응하는 경우, 상기 제2 영상에 대한 분석 데이터를 생성하는 것을 특징으로 하는 동작 분석 장치가 제공된다.According to an aspect of the invention, the camera; A camera control unit controlling the camera to generate a first image by performing general shooting on an object; And a motion analysis unit transmitting a mode setting signal indicating the high speed operation mode to the camera control unit when the operation of the object on the first image corresponds to the high speed operation mode. When receiving a mode setting signal indicating a mode, the camera controls to generate a second image by performing high-speed shooting, and the motion analysis unit is configured when the motion of the object on the second image corresponds to the analysis mode. Provided is a motion analysis device characterized in that it generates analysis data for a second image.

상기 동작 분석 장치는 상기 제2 영상을 저장하는 영상 저장 메모리를 더 포함하되, 상기 카메라 제어부는 상기 모드 설정 신호가 고속 동작 모드를 나타내는 경우, 상기 제2 영상을 상기 영상 저장 메모리로 전송할 수 있다.The motion analysis device further includes an image storage memory for storing the second image, and the camera controller may transmit the second image to the image storage memory when the mode setting signal indicates a high-speed operation mode.

상기 동작 분석 장치는 상기 제2 영상을 미리 지정된 수의 프레임을 포함하는 프레임 구간으로 분할하고, 각 상기 프레임 구간의 대표 프레임에 대한 영상 정보를 생성하는 영상 처리부를 더 포함하되, 상기 동작 분석부는 상기 대표 프레임에 대한 영상 정보를 참조하여 상기 대표 프레임에 상응하는 분석 데이터를 생성하고, 상기 분석 데이터를 참조하여 상기 객체의 동작이 분석 모드에 대응하는 것인지 판단할 수 있다.The motion analysis apparatus further includes an image processing unit for dividing the second image into frame sections including a predetermined number of frames, and generating image information for a representative frame of each frame section. Analysis data corresponding to the representative frame may be generated by referring to image information on the representative frame, and it may be determined whether the operation of the object corresponds to the analysis mode by referring to the analysis data.

상기 영상 처리부는 상기 모드 설정 신호가 분석 모드를 나타내는 경우, 상기 제2 영상의 프레임 중 대표 프레임을 제외한 나머지 프레임에 대해 영상 정보를 생성하고, 상기 동작 분석부는 상기 나머지 프레임에 대한 영상 정보를 참조하여 분석 데이터를 생성할 수 있다.When the mode setting signal indicates the analysis mode, the image processing unit generates image information for the remaining frames excluding the representative frame among the frames of the second image, and the motion analysis unit refers to the image information for the remaining frames Analysis data can be generated.

상기 카메라 제어부는 상기 제1 영상을 상기 영상 처리부로 전송하고, 상기 영상 처리부는 상기 제1 영상의 전체 프레임에 대한 영상 정보를 생성하여 상기 동작 분석부로 전송하고, 상기 동작 분석부는 상기 제1 영상의 전체 프레임에 대한 영상 정보를 참조하여 상기 제1 영상 상의 상기 객체의 동작이 고속 동작 모드에 대응하는 것인지 판단할 수 있다.The camera control unit transmits the first image to the image processing unit, and the image processing unit generates image information for the entire frame of the first image and transmits the image information to the motion analysis unit, and the motion analysis unit It may be determined whether the operation of the object on the first image corresponds to a high-speed operation mode by referring to the image information for the entire frame.

상기 동작 분석 장치는 상기 제2 영상에 대한 분석 데이터를 저장하는 분석 데이터 저장 메모리를 더 포함하되, 상기 동작 분석부는 상기 제2 영상의 상기 대표 프레임에 대한 분석 데이터 및 상기 제2 영상의 상기 나머지 프레임에 대한 분석 데이터를 상기 분석 데이터 저장 메모리로 전송할 수 있다.
The motion analysis device further includes an analysis data storage memory for storing analysis data for the second image, wherein the motion analysis unit analyzes data for the representative frame of the second image and the rest of the frames of the second image. Analysis data for can be transmitted to the analysis data storage memory.

본 발명의 다른 측면에 따르면, 동작 분석 장치가 객체에 대한 동작을 분석하는 방법에 있어서, 상기 객체에 대한 일반 촬영을 수행하여 제1 영상을 생성하는 단계; 상기 제1 영상에 나타난 상기 객체의 동작이 고속 동작 모드에 상응하는 동작인 경우, 상기 객체에 대한 고속 촬영을 수행하여 제2 영상을 생성하는 단계; 및 상기 제2 영상에 나타난 상기 객체의 동작이 분석 모드에 상응하는 동작인 경우, 상기 제2 영상의 영상 정보를 분석하여 분석 데이터를 생성하는 단계;를 포함하는 동작 분석 방법이 제공된다.According to another aspect of the present invention, a method of analyzing a motion of an object by a motion analysis apparatus, comprising: generating a first image by performing general shooting on the object; If the operation of the object shown in the first image corresponds to a high-speed operation mode, generating a second image by performing high-speed shooting on the object; And generating analysis data by analyzing image information of the second image when the operation of the object shown in the second image is an operation corresponding to the analysis mode.

상기 동작 분석 방법은 상기 제1 영상에 나타난 상기 객체의 동작이 고속 동작 모드에 상응하는 동작인 경우, 상기 제2 영상을 영상 저장 메모리에 저장하는 단계;를 더 포함할 수 있다.The motion analysis method may further include storing the second image in an image storage memory when the operation of the object shown in the first image is an operation corresponding to a high-speed operation mode.

상기 동작 분석 방법은 상기 제2 영상을 미리 지정된 수의 프레임을 포함하는 프레임 구간으로 분할하고, 각 상기 프레임 구간의 대표 프레임에 대한 영상 정보를 생성하는 단계; 상기 대표 프레임에 대한 영상 정보를 참조하여 상기 대표 프레임에 상응하는 분석 데이터를 생성하는 단계; 및 상기 분석 데이터를 참조하여 상기 객체의 동작이 분석 모드에 대응하는 것인지 판단하는 단계를 더 포함할 수 있다.The motion analysis method includes: dividing the second image into frame sections including a predetermined number of frames, and generating image information on a representative frame of each frame section; Generating analysis data corresponding to the representative frame with reference to image information on the representative frame; And determining whether an operation of the object corresponds to an analysis mode by referring to the analysis data.

상기 제2 영상에 나타난 상기 객체의 동작이 분석 모드에 상응하는 동작인 경우, 상기 제2 영상의 영상 정보를 분석하여 분석 데이터를 생성하는 단계는, 상기 제2 영상 중 상기 대표 프레임을 제외한 나머지 프레임에 대해 영상 정보를 생성하는 단계; 및 상기 제2 영상의 상기 나머지 프레임에 대한 영상 정보를 참조하여 상기 분석 데이터를 생성하는 단계를 포함할 수 있다.When the operation of the object shown in the second image is an operation corresponding to the analysis mode, analyzing the image information of the second image and generating analysis data may include remaining frames other than the representative frame among the second images. Generating image information for; And generating the analysis data by referring to image information on the remaining frames of the second image.

상기 동작 분석 방법은 상기 제2 영상의 상기 대표 프레임에 상응하는 분석 데이터를 분석 데이터 저장 메모리에 저장하는 단계; 상기 제2 영상의 상기 나머지 프레임에 상응하는 분석 데이터를 상기 분석 데이터 저장 메모리에 저장하는 단계; 및 상기 제2 영상의 상기 대표 프레임에 상응하는 분석 데이터 및 상기 제2 영상의 상기 나머지 프레임에 상응하는 분석 데이터를 출력하는 단계;를 더 포함할 수 있다.The motion analysis method includes storing analysis data corresponding to the representative frame of the second image in an analysis data storage memory; Storing analysis data corresponding to the remaining frames of the second image in the analysis data storage memory; And outputting analysis data corresponding to the representative frame of the second image and analysis data corresponding to the remaining frames of the second image.

상기 동작 분석 방법은 상기 제1 영상의 전체 프레임에 대한 영상 정보를 생성하는 단계; 및 상기 제1 영상의 전체 프레임에 대한 영상 정보를 참조하여 상기 제1 영상 상의 상기 객체의 동작이 고속 동작 모드에 대응하는지 판단하는 단계;를 더 포함할 수 있다.
The motion analysis method includes generating image information for all frames of the first image; And determining whether an operation of the object on the first image corresponds to a high-speed operation mode by referring to image information on the entire frame of the first image.

상술한 바와 같이 본 발명의 일 실시예에 따르면, 고속 동작에 대한 분석을 큰 부하 없이 수행할 수 있다.As described above, according to an embodiment of the present invention, analysis for high-speed operation can be performed without a large load.

또한, 본 발명의 일 실시예에 따르면, 고속 동작을 포함하는 전체 동작에 대한 분석을 낮은 스펙의 하드웨어를 통해 수행할 수 있다.In addition, according to an embodiment of the present invention, analysis of the entire operation including the high-speed operation may be performed through hardware of a low specification.


도 1은 본 발명의 일 실시예에 따른 동작 분석 장치를 예시한 블록도.
도 2는 본 발명의 일 실시예에 따른 동작 분석 장치에 지정된 고속 동작 모드에 대응하는 객체의 지정 동작을 예시한 도면.
도 3은 본 발명의 일 실시예에 따른 동작 분석 장치에 지정된 분석 모드에 대응하는 지정 동작을 예시한 도면.
도 4는 본 발명의 일 실시예에 따른 동작 분석 장치가 객체의 동작을 분석하는 과정을 예시한 순서도.
도 5는 발명의 일 실시예에 따른 동작 분석 장치가 구현된 컴퓨터 시스템을 예시한 도면.1 is a block diagram illustrating a motion analysis apparatus according to an embodiment of the present invention.
2 is a diagram illustrating a designated operation of an object corresponding to a high-speed operation mode specified in the motion analysis apparatus according to an embodiment of the present invention.
3 is a diagram illustrating a designated operation corresponding to an analysis mode specified in the motion analysis apparatus according to an embodiment of the present invention.
4 is a flow chart illustrating a process of analyzing the motion of the object by the motion analysis apparatus according to an embodiment of the present invention.
5 is a diagram illustrating a computer system in which a motion analysis apparatus according to an embodiment of the present invention is implemented.

본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 이를 상세한 설명을 통해 상세히 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.The present invention can be applied to various changes and can have various embodiments, and specific embodiments will be illustrated in the drawings and described in detail through detailed description. However, this is not intended to limit the present invention to specific embodiments, and should be understood to include all modifications, equivalents, and substitutes included in the spirit and scope of the present invention.

또한, 본 명세서에서, 일 구성요소가 다른 구성요소로 신호를 “전송한다”로 언급된 때에는, 상기 일 구성요소가 상기 다른 구성요소와 직접 연결되어 신호를 전송할 수 있지만, 특별히 반대되는 기재가 존재하지 않는 이상, 중간에 또 다른 구성요소를 매개하여 신호를 전송할 수도 있다고 이해되어야 할 것이다.
In addition, in this specification, when one component is referred to as “transmitting” a signal to another component, the one component may be directly connected to the other component to transmit a signal, but there is a particularly opposite description. It should be understood that unless otherwise, it may be possible to transmit a signal through another component in the middle.

도 1은 본 발명의 일 실시예에 따른 동작 분석 장치를 예시한 블록도이고, 도 2는 본 발명의 일 실시예에 따른 동작 분석 장치에 지정된 고속 동작 모드에 대응하는 객체의 지정 동작을 예시한 도면이고, 도 3은 본 발명의 일 실시예에 따른 동작 분석 장치에 지정된 분석 모드에 대응하는 지정 동작을 예시한 도면이다.1 is a block diagram illustrating a motion analysis apparatus according to an embodiment of the present invention, and FIG. 2 illustrates a designated operation of an object corresponding to a high-speed operation mode specified in the motion analysis apparatus according to an embodiment of the present invention 3 is a diagram illustrating a designated operation corresponding to an analysis mode specified in the motion analysis apparatus according to an embodiment of the present invention.

도 1을 참조하면, 동작 분석 장치는 카메라(110), 카메라 제어부(120), 영상 처리부(130), 영상 저장 메모리(140), 동작 분석부(150), 분석 데이터 저장 메모리(160) 및 출력부(170)를 포함한다.Referring to FIG. 1, the motion analysis device includes a camera 110, a camera control unit 120, an image processing unit 130, an image storage memory 140, a motion analysis unit 150, an analysis data storage memory 160 and outputs Includes part 170.

카메라(110)는 움직이는 객체를 촬영하여 영상을 생성하고, 생성된 영상을 카메라 제어부(120)로 전송한다. 이 때, 카메라(110)는 카메라 제어부(120)로부터 촬영 속도를 제어하는 제어 신호를 수신하고, 제어 신호에 따라 촬영 속도를 조정하여 촬영을 수행할 수 있다. 이하, 카메라(110)가 객체의 일반적인 동작을 촬영하기 위해 미리 지정된 촬영 속도로 촬영하는 것을 일반 촬영이라 지칭하고, 객체의 고속 동작을 촬영하기 위해 일반 촬영에 비해 높은 촬영 속도로 촬영하는 것을 고속 촬영이라 지칭하도록 한다. 즉, 고속 촬영을 통해 생성된 영상은 일반 촬영을 통해 생성된 영상에 비해 초당 프레임 수가 높다.The camera 110 photographs a moving object to generate an image, and transmits the generated image to the camera controller 120. At this time, the camera 110 may receive a control signal for controlling the shooting speed from the camera controller 120 and adjust the shooting speed according to the control signal to perform shooting. Hereinafter, when the camera 110 shoots at a predetermined shooting speed to photograph the general operation of the object, it is referred to as normal shooting, and to shoot the high-speed operation of the object, shooting at a higher shooting speed than the normal shooting is high-speed shooting. Refer to this. That is, an image generated through high-speed shooting has a higher number of frames per second than an image generated through normal shooting.

카메라 제어부(120)는 동작 분석부(150)로부터 객체의 현재 동작에 따른 모드 설정 신호를 수신하고, 모드 설정 신호에 따른 제어 신호를 생성하여 카메라(110)로 전송한다. 모드 설정 신호는 객체가 고속 동작이 아닌 일반 동작을 취할 때 설정되는 모드인 일반 동작 모드, 객체가 고속 동작을 취할 때 설정되는 모드인 고속 동작 모드 및 고속 동작이 종료되는 시점에 설정되는 모드인 분석 모드 중 어느 하나를 나타내는 신호일 수 있다. 카메라 제어부(120)는 모드 설정 신호가 일반 동작 모드 또는 분석 모드를 나타내는 경우, 촬영 속도를 미리 지정된 수치로 낮추도록 요청하는 제어 신호를 카메라(110)로 전송할 수 있다. 또는, 카메라 제어부(120)는 모드 설정 신호가 고속 동작 모드를 나타내는 경우, 일반 동작 모드 또는 분석 모드 시의 촬영 속도에 비해 높도록 미리 지정된 수치로 촬영 속도를 높이도록 요청하는 제어 신호를 카메라(110)로 전송할 수 있다. 따라서, 카메라(110)는 제어 신호에 따라 일반 촬영 또는 고속 촬영을 수행할 수 있다.The camera control unit 120 receives a mode setting signal according to the current operation of the object from the motion analysis unit 150, generates a control signal according to the mode setting signal, and transmits it to the camera 110. The mode setting signal is an analysis that is a general operation mode, which is a mode set when an object takes a normal operation, not a high-speed operation, a high-speed operation mode, which is a mode set when an object takes a high-speed operation, and a mode that is set when the high-speed operation ends. It may be a signal indicating any one of the modes. When the mode setting signal indicates a normal operation mode or an analysis mode, the camera controller 120 may transmit a control signal requesting the shooting speed to be reduced to a predetermined value to the camera 110. Alternatively, when the mode setting signal indicates a high-speed operation mode, the camera controller 120 may transmit a control signal requesting the camera 110 to increase the shooting speed to a predetermined value so as to be higher than the shooting speed in the normal operation mode or the analysis mode. ). Therefore, the camera 110 may perform normal shooting or high-speed shooting according to the control signal.

또한, 카메라 제어부(120)는 모드 설정 신호에 따라 영상을 영상 처리부(130) 또는 영상 저장 메모리(140)로 전송한다. 즉, 카메라 제어부(120)는 모드 설정 신호가 일반 동작 모드를 나타내는 경우, 카메라(110)로부터 수신한 영상을 영상 처리부(130)로 전송한다. 카메라 제어부(120)는 모드 설정 신호가 고속 동작 모드를 나타내는 경우, 카메라(110)로부터 수신한 영상을 영상 저장 메모리(140)로 전송한다.In addition, the camera control unit 120 transmits the image to the image processing unit 130 or the image storage memory 140 according to the mode setting signal. That is, when the mode setting signal indicates the normal operation mode, the camera controller 120 transmits the image received from the camera 110 to the image processor 130. When the mode setting signal indicates a high-speed operation mode, the camera controller 120 transmits the image received from the camera 110 to the image storage memory 140.

영상 처리부(130)는 카메라 제어부(120)로부터 수신한 영상 또는 영상 저장 메모리(140)에 저장된 영상을 분석하여 미리 지정된 정보(이하, 영상 정보라 지칭)를 생성한다. 예를 들어, 영상 정보는 객체가 사람인 경우, 사람의 지정된 신체 부위(머리, 팔꿈치, 손 등)의 위치, 관절의 굽힘 정도(관절의 각도)를 포함할 수 있다. 이 때, 영상 처리부(130)는 컴퓨터 비전 기반 알고리즘 등의 공지된 방법을 통해 영상 정보를 생성할 수 있다. 이 때, 컴퓨터 비전 기반 알고리즘은 에지(edge) 및 특징점(feature point)를 검출하고, 에지 및 특징점을 통해 영상 정보를 검출하는 공지된 기술일 수 있다. 또한, 영상 처리부(130)는 동작 분석부(150)로부터 모드 설정 신호를 수신하고, 모드 설정 신호에 따라 카메라 제어부(120)로부터 수신한 영상 또는 영상 저장 메모리(140)에 저장된 영상을 분석하여 영상 정보를 생성할 수 있다. 예를 들어, 영상 처리부(130)는 모드 설정 신호가 일반 동작 모드를 나타내는 경우, 카메라 제어부(120)로부터 직접 수신한 영상을 분석하여 영상 정보를 생성할 수 있다. 또는 영상 처리부(130)는 모드 설정 신호가 고속 동작 모드를 나타내는 경우, 영상 저장 메모리(140)에 저장된 영상을 분석하여 영상 정보를 생성할 수 있다. 이 때, 영상 처리부(130)는 영상 저장 메모리(140)에 저장된 영상의 각 프레임을 미리 지정된 수의 연속된 프레임을 포함하는 프레임 구간으로 분할하고, 각 프레임 구간에 포함된 프레임 중 어느 하나인 대표 프레임을 추출하고, 각 대표 프레임에 대한 영상 정보를 생성할 수 있다. 예를 들어, 영상 처리부(130)는 영상 저장 메모리(140)에 저장된 영상을 2개의 프레임으로 구성되는 프레임 구간으로 분할하고, 각 프레임 구간의 포함된 프레임 중 첫 번째 프레임을 대표 프레임으로 추출할 수 있다. 따라서, 영상 처리부(130)는 각 프레임 구간 중 대표 프레임에 대한 영상 정보만을 생성하여, 고속 동작 모드에서 생성된 영상의 프레임 수가 크다고 하더라도 영상 정보를 실시간으로 생성할 수 있다. 영상 처리부(130)는 모드 설정 신호가 분석 모드를 나타내는 경우, 영상 저장 메모리(140)에 저장된 영상의 프레임 중 대표 프레임을 제외한 나머지 프레임에 대한 영상 정보를 생성할 수 있다. 영상 처리부(130)는 생성된 영상 정보를 동작 분석부(150)로 전송한다.The image processing unit 130 analyzes an image received from the camera control unit 120 or an image stored in the image storage memory 140 to generate predetermined information (hereinafter referred to as image information). For example, the image information may include a position of a designated body part (head, elbow, hand, etc.) of a person, and a degree of bending of the joint (angle of joint) when the object is a person. At this time, the image processing unit 130 may generate image information through a known method such as a computer vision-based algorithm. At this time, the computer vision-based algorithm may be a known technique for detecting edges and feature points and detecting image information through the edges and feature points. In addition, the image processing unit 130 receives the mode setting signal from the motion analysis unit 150, and analyzes the image received from the camera control unit 120 or the image stored in the image storage memory 140 according to the mode setting signal to generate an image. Information can be generated. For example, when the mode setting signal indicates a normal operation mode, the image processing unit 130 may generate image information by analyzing an image directly received from the camera controller 120. Alternatively, when the mode setting signal indicates a high-speed operation mode, the image processing unit 130 may analyze the image stored in the image storage memory 140 to generate image information. In this case, the image processing unit 130 divides each frame of the image stored in the image storage memory 140 into a frame section including a predetermined number of consecutive frames, and represents one of the frames included in each frame section. Frames can be extracted and image information for each representative frame can be generated. For example, the image processing unit 130 may divide the image stored in the image storage memory 140 into frame sections composed of two frames, and extract the first frame among the frames included in each frame section as a representative frame. have. Therefore, the image processing unit 130 may generate image information in real time even if the number of frames of the image generated in the high-speed operation mode is large by generating only image information for a representative frame among each frame section. When the mode setting signal indicates the analysis mode, the image processing unit 130 may generate image information for the remaining frames except for the representative frame among frames of the image stored in the image storage memory 140. The image processing unit 130 transmits the generated image information to the motion analysis unit 150.

동작 분석부(150)는 영상 정보를 분석하여 해당 영상 정보에 상응하는 영상의 객체가 미리 지정된 복수의 동작 중 어느 하나에 대응하는 동작을 취하고 있는지 판단한다. 동작 분석부(150)는 영상의 객체가 미리 지정된 복수의 동작(이하 지정 동작이라 지칭) 중 어느 하나에 대응하는 동작을 취하고 있는 경우, 영상의 객체의 동작에 대응하는 지정 동작에 대해 미리 지정된 모드를 나타내는 모드 설정 신호를 생성하여 카메라 제어부(120), 영상 처리부(130) 및 출력부(170)로 전송한다. 이 때, 동작 분석부(150)는 각 지정 동작에 대해 상술한 고속 동작 모드 또는 분석 모드를 미리 지정할 수 있다. 예를 들어, 동작 분석부(150)는 도 2와 같이 골프의 어드레스 동작에 대해 고속 동작 모드를 지정하고, 도 3과 같이 골프의 피니쉬 동작에 대해 분석 모드를 미리 지정할 수 있다. 도 2 및 도 3을 참조하여 골프 동작이 각 모드에 지정된 것으로 설명하였으나, 본 발명의 구현 방식에 따라 골프 이외의 스포츠의 동작이나 사람이 아닌 객체의 동작으로 각 모드에 지정되는 동작이 설정될 수 있다.The motion analysis unit 150 analyzes the image information and determines whether an object of the image corresponding to the image information is performing an operation corresponding to one of a plurality of predefined operations. When the object of the image is taking an action corresponding to any one of a plurality of predefined actions (hereinafter referred to as a designated action), the motion analysis unit 150 is a predetermined mode for a designated action corresponding to the action of the object of the video Generates a mode setting signal indicating a and transmits it to the camera control unit 120, the image processing unit 130 and the output unit 170. At this time, the motion analysis unit 150 may designate the above-described high-speed operation mode or analysis mode for each designated operation in advance. For example, the motion analysis unit 150 may designate a high-speed operation mode for an address operation of golf as shown in FIG. 2, and an analysis mode for a finish operation of golf as shown in FIG. 3 in advance. Although it has been described with reference to FIGS. 2 and 3 that the golf operation is designated for each mode, according to the implementation method of the present invention, a motion specified for each mode may be set as a motion of a sport other than golf or an object, not a person. have.

또한, 동작 분석부(150)는 영상의 객체가 취하는 지정 동작이 고속 동작 모드 또는 분석 모드와 대응하는 경우, 영상 처리부(130)로부터 수신한 영상 정보를 미리 지정된 과정을 통해 분석하여 분석 데이터를 생성하고, 분석 데이터를 분석 데이터 저장 메모리(160)로 전송한다. 이 때, 분석 데이터는 카메라의 위치를 기준으로 한 객체의 특정 부위에 대한 3차원 좌표 데이터, 객체의 동작이 어떤 동작인지 나타내는 정보를 포함할 수 있다. 또한, 동작 분석부(150)는 분석 데이터를 생성 및 전송을 완료한 이후 일반 동작 모드를 나타내는 모드 설정 신호를 생성하여 카메라 제어부(120), 영상 처리부(130) 및 출력부(170)로 전송한다. 동작 분석부(150)는 일반 동작 모드를 나타내는 모드 설정 신호를 전송한 이후, 영상 정보를 영상 처리부(130)로부터 수신하고, 영상 정보를 분석하여 분석 데이터를 생성하고, 분석 데이터를 출력부(170)로 전송한다.In addition, when the designated operation taken by the object of the image corresponds to the high-speed operation mode or the analysis mode, the motion analysis unit 150 analyzes the image information received from the image processing unit 130 through a predetermined process to generate analysis data. Then, the analysis data is transmitted to the analysis data storage memory 160. At this time, the analysis data may include 3D coordinate data for a specific part of the object based on the position of the camera, and information indicating the motion of the object. In addition, after completing the generation and transmission of analysis data, the motion analysis unit 150 generates a mode setting signal indicating a general operation mode and transmits it to the camera control unit 120, the image processing unit 130, and the output unit 170. . After transmitting the mode setting signal indicating the normal operation mode, the motion analysis unit 150 receives the image information from the image processing unit 130, analyzes the image information, generates analysis data, and outputs the analysis data 170 ).

분석 데이터 저장 메모리(160)는 동작 분석부(150)로부터 수신한 분석 데이터를 저장하고, 출력부(170)로 분석 데이터를 전송한다.The analysis data storage memory 160 stores analysis data received from the operation analysis unit 150 and transmits the analysis data to the output unit 170.

출력부(170)는 동작 분석부(150)로부터 모드 설정 신호를 수신하고, 모드 설정 신호에 따라 분석 데이터 저장 메모리(160)에 저장된 분석 데이터를 외부 장치(예를 들어, 단말, 모니터 등의 데이터를 표시할 수 있는 장치)로 전송한다. 예를 들어, 출력부(170)는 동작 분석부(150)로부터 수신한 모드 설정 신호가 일반 동작 모드를 나타내는 경우(즉, 분석 모드가 종료된 경우), 분석 데이터 저장 메모리(160)에 저장된 분석 데이터를 외부 장치로 전송할 수 있다. 또한, 출력부(170)는 동작 분석부(150)로부터 분석 데이터를 수신하는 경우, 분석 데이터를 외부 장치로 전송할 수 있다.
The output unit 170 receives the mode setting signal from the operation analysis unit 150, and stores the analysis data stored in the analysis data storage memory 160 according to the mode setting signal from an external device (for example, a terminal, a monitor, etc.) Device). For example, when the mode setting signal received from the motion analysis unit 150 indicates a general operation mode (that is, when the analysis mode is terminated), the output unit 170 analyzes the data stored in the analysis data storage memory 160 Data can be transferred to an external device. In addition, when receiving the analysis data from the operation analysis unit 150, the output unit 170 may transmit the analysis data to an external device.

도 4는 본 발명의 일 실시예에 따른 동작 분석 장치가 객체의 동작을 분석하는 과정을 예시한 순서도이다.4 is a flowchart illustrating a process of analyzing a motion of an object by a motion analysis apparatus according to an embodiment of the present invention.

도 4를 참조하면, 단계 405에서 동작 분석 장치는 일반 촬영을 통해 영상을 생성한다. 이 때, 동작 분석 장치는 일반 촬영 또는 고속 촬영을 통해 영상을 생성할 수 있다.Referring to FIG. 4, in operation 405, the motion analysis apparatus generates an image through general photography. At this time, the motion analysis device may generate an image through normal shooting or high-speed shooting.

단계 410에서 동작 분석 장치는 단계 405에서 생성한 영상에 대한 영상 정보를 생성한다. 이 때, 동작 분석 장치는 컴퓨터 비전 기반 알고리즘 등의 공지된 방법을 통해 영상 정보를 생성할 수 있다In operation 410, the motion analysis apparatus generates image information for the image generated in operation 405. At this time, the motion analysis device may generate image information through a known method such as a computer vision-based algorithm.

단계 415에서 동작 분석 장치는 영상 정보에 대응하는 지정 동작이 고속 동작 모드에 대응하는지 판단한다. 고속 동작 모드는 객체가 고속 동작을 취할 때 설정되는 모드로써, 고속 촬영을 통해 정확한 사용자의 동작을 촬영한 영상을 획득하기 위한 모드이다.In step 415, the motion analysis apparatus determines whether the designated operation corresponding to the image information corresponds to the high-speed operation mode. The high-speed operation mode is a mode set when an object takes a high-speed operation, and is a mode for acquiring an image of an accurate user's motion through high-speed shooting.

단계 415에서 영상 정보에 대응하는 지정 동작이 고속 동작 모드에 대응하지 않는 경우, 단계 420에서 동작 분석 장치는 단계 405에서 생성한 영상에 대해 분석 데이터를 생성 및 출력한다.If the designated operation corresponding to the image information in step 415 does not correspond to the high-speed operation mode, in step 420, the motion analysis apparatus generates and outputs analysis data for the image generated in step 405.

단계 415에서 영상 정보에 대응하는 지정 동작이 고속 동작 모드에 대응하는 경우, 단계 425에서 동작 분석 장치는 고속 촬영을 통해 영상을 생성하고, 영상 저장 메모리(140)에 고속 촬영을 통해 생성한 영상을 저장한다.If the designated operation corresponding to the image information in step 415 corresponds to the high-speed operation mode, in step 425, the motion analysis apparatus generates an image through high-speed shooting, and the image generated through high-speed shooting in the image storage memory 140. To save.

단계 430에서 동작 분석 장치는 영상을 지정된 복수의 프레임 구간으로 분할하고, 각 프레임 구간의 대표 프레임에 대한 영상 정보를 생성하고, 대표 프레임에 대한 영상 정보를 참조하여 대표 프레임에 대한 분석 데이터를 생성한다. 이 때, 각 프레임 구간은 미리 지정된 수의 연속된 프레임을 포함하는 구간이고, 각 프레임 구간 내에서 미리 지정된 순서에 해당하는 프레임이 해당 프레임 구간의 대표 프레임일 수 있다. 이 때, 동작 분석 장치는 대표 프레임에 대한 분석 데이터를 출력하되, 분석 데이터를 분석 데이터 저장 메모리(160)에 저장할 수 있다.In operation 430, the motion analysis apparatus divides the image into a plurality of designated frame sections, generates image information on a representative frame of each frame section, and generates analysis data on a representative frame by referring to the image information on the representative frame. . At this time, each frame section is a section including a predetermined number of consecutive frames, and a frame corresponding to a predetermined order within each frame section may be a representative frame of the corresponding frame section. At this time, the motion analysis device outputs analysis data for the representative frame, but may store the analysis data in the analysis data storage memory 160.

단계 435에서 동작 분석 장치는 대표 프레임에 대한 분석 데이터에 대응하는 지정 동작이 분석 모드에 대응하는지 판단한다.In step 435, the motion analysis apparatus determines whether the designated operation corresponding to the analysis data for the representative frame corresponds to the analysis mode.

단계 435에서 대표 프레임에 대한 분석 데이터에 대응하는 지정 동작이 분석 모드에 대응하지 않는 경우, 동작 분석 장치는 단계 425부터의 과정을 반복 수행한다.In step 435, if the designated operation corresponding to the analysis data for the representative frame does not correspond to the analysis mode, the motion analysis apparatus repeats the process from step 425.

단계 435에서 대표 프레임에 대한 분석 데이터에 대응하는 지정 동작이 분석 모드에 대응하는 경우, 단계 440에서 동작 분석 장치는 영상 저장 메모리(140)에 저장된 영상의 대표 프레임 이외 나머지 프레임에 대한 분석 데이터를 생성 및 저장한다. 이 때, 동작 분석 장치는 분석 데이터를 분석 데이터 저장 메모리(160)에 저장할 수 있다. 또한, 동작 분석 장치는 전체 영상에 대한 분석 데이터를 생성 및 저장하는 동안 외부 장치로 영상 저장 메모리(140)에 저장된 영상을 느리게 재생하는 장면을 출력하거나, 미리 저장된 별도의 영상(예를 들어, 모범이 되는 골프 스윙 영상) 또는 데이터(예를 들어, 골프에 관련된 팁)를 출력할 수 있다.If the designated operation corresponding to the analysis data for the representative frame in step 435 corresponds to the analysis mode, in step 440, the motion analysis device generates analysis data for the remaining frames other than the representative frame of the image stored in the image storage memory 140. And save. At this time, the motion analysis device may store the analysis data in the analysis data storage memory 160. In addition, the motion analysis device outputs a scene in which an image stored in the image storage memory 140 is slowly played back to an external device while generating and storing analysis data for the entire image, or a separate image (for example, a model stored in advance) This can output golf swing images) or data (eg, tips related to golf).

단계 445에서 동작 분석 장치는 분석 데이터 저장 메모리(160)에 저장된 분석 데이터를 출력한다.In operation 445, the motion analysis device outputs analysis data stored in the analysis data storage memory 160.

도 4에 예시되지 않았지만, 동작 분석 장치는 상술한 단계 445를 수행한 이후, 단계 405 부터의 과정을 다시 수행할 수 있다.
Although not illustrated in FIG. 4, the apparatus for analyzing motion may perform the process from step 405 again after performing step 445 described above.

따라서, 본 발명의 일 실시예에 따른 동작 분석 장치는 객체가 고속의 동작을 수행하는 경우에만 고속 촬영을 통한 영상을 생성하여 분석함으로써, 객체의 모든 동작을 고속 촬영을 통한 영상을 생성하여 분석하는 것에 비해 영상의 생성 및 분석에 발생되는 부하를 줄일 수 있다. 또한, 본 발명의 일 실시예에 따른 동작 분석 장치는 촬영된 영상을 저장하는 영상 저장 메모리와 분석 데이터를 저장하는 분석 데이터 저장 메모리에 고속 촬영에 따른 영상과 분석 데이터만 저장하도록 하여 메모리를 효율적으로 이용하도록 할 수 있다.
Accordingly, the motion analysis apparatus according to an embodiment of the present invention generates and analyzes an image through high-speed shooting only when the object performs a high-speed operation, thereby generating and analyzing all motions of the object through high-speed shooting Compared to this, the load generated in the generation and analysis of the image can be reduced. In addition, the motion analysis apparatus according to an embodiment of the present invention efficiently stores memory by storing only images and analysis data according to high-speed shooting in an image storage memory for storing captured images and an analysis data storage memory for storing analysis data. You can use it.

상술한 본 발명의 일 실시예에 따른 동작 분석 장치는 컴퓨터 시스템으로 구현될 수 있다.The motion analysis apparatus according to the embodiment of the present invention described above may be implemented as a computer system.

도 5는 발명의 일 실시예에 따른 동작 분석 장치가 구현된 컴퓨터 시스템을 예시한 도면이다.5 is a diagram illustrating a computer system in which a motion analysis apparatus according to an embodiment of the present invention is implemented.

본 발명에 따른 실시예는 컴퓨터 시스템 내에, 예를 들어, 컴퓨터 판독가능 기록매체로 구현될 수 있다. 도 5에 도시된 바와 같이, 컴퓨터 시스템(500)은 하나 이상의 프로세서(510), 메모리(520), 저장부(530), 사용자 인터페이스 입력부(540) 및 사용자 인터페이스 출력부(550) 중 적어도 하나 이상의 요소를 포함할 수 있으며, 이들은 버스(560)를 통해 서로 통신할 수 있다. 또한, 컴퓨터 시스템(500)은 네트워크에 접속하기 위한 네트워크 인터페이스(570)를 또한 포함할 수 있다. 프로세서(510)는 메모리(520) 및/또는 저장소(530)에 저장된 처리 명령어를 실행시키는 CPU 또는 반도체 소자일 수 있다. 메모리(520) 및 저장부(530)는 다양한 유형의 휘발성/비휘발성 기억 매체를 포함할 수 있다. 예를 들어, 메모리는 ROM(524) 및 RAM(525)를 포함할 수 있다.
Embodiments according to the present invention may be implemented in a computer system, for example, as a computer-readable recording medium. As shown in FIG. 5, the computer system 500 may include at least one of one or more processors 510, a memory 520, a storage unit 530, a user interface input unit 540, and a user interface output unit 550. Elements, which can communicate with each other via bus 560. In addition, computer system 500 may also include a network interface 570 for accessing a network. The processor 510 may be a CPU or semiconductor device that executes processing instructions stored in the memory 520 and/or storage 530. The memory 520 and the storage unit 530 may include various types of volatile/nonvolatile storage media. For example, the memory may include ROM 524 and RAM 525.

이제까지 본 발명에 대하여 그 실시 예를 중심으로 살펴보았다. 전술한 실시 예 외의 많은 실시 예들이 본 발명의 특허청구범위 내에 존재한다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시 예는 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.
So far, the present invention has been focused on the embodiments. Many embodiments other than the above-described embodiments exist within the claims of the present invention. Those skilled in the art to which the present invention pertains will understand that the present invention may be implemented in a modified form without departing from the essential characteristics of the present invention. Therefore, the disclosed embodiments should be considered in terms of explanation, not limitation. The scope of the present invention is shown in the claims rather than the foregoing description, and all differences within the equivalent range should be interpreted as being included in the present invention.

Claims (12)

카메라;
상기 카메라가 객체에 대한 일반 촬영을 수행하여 제1 영상을 생성하도록 제어하는 카메라 제어부; 및
상기 제1 영상 상의 상기 객체의 동작이 고속 동작 모드에 대응하는 경우, 상기 고속 동작 모드를 나타내는 모드 설정 신호를 상기 카메라 제어부로 전송하는 동작 분석부;를 포함하되,
상기 카메라 제어부는 상기 고속 동작 모드를 나타내는 모드 설정 신호를 수신하는 경우, 상기 카메라가 고속 촬영을 수행하여 제2 영상을 생성하도록 제어하고,
상기 동작 분석부는 상기 제2 영상 상의 상기 객체의 동작이 분석 모드에 대응하는 경우, 상기 제2 영상에 대한 분석 데이터를 생성하며,
상기 제2 영상을 저장하는 영상 저장 메모리를 더 포함하되,
상기 카메라 제어부는 상기 모드 설정 신호가 고속 동작 모드를 나타내는 경우, 상기 제2 영상을 상기 영상 저장 메모리로 전송하고,
상기 제2 영상을 미리 지정된 수의 프레임을 포함하는 프레임 구간으로 분할하고, 각 상기 프레임 구간의 대표 프레임에 대한 영상 정보를 생성하는 영상 처리부를 더 포함하되,
상기 동작 분석부는 상기 대표 프레임에 대한 영상 정보를 참조하여 상기 대표 프레임에 상응하는 분석 데이터를 생성하고, 상기 분석 데이터를 참조하여 상기 객체의 동작이 분석 모드에 대응하는 것인지 판단하는 것을 특징으로 하는 동작 분석 장치.
camera;
A camera control unit controlling the camera to generate a first image by performing general shooting on an object; And
Includes; when the operation of the object on the first image corresponds to the high-speed operation mode, a motion analysis unit for transmitting a mode setting signal indicating the high-speed operation mode to the camera control unit;
When receiving a mode setting signal indicating the high-speed operation mode, the camera control unit controls the camera to perform high-speed shooting to generate a second image,
When the motion of the object on the second image corresponds to the analysis mode, the motion analysis unit generates analysis data for the second image,
Further comprising an image storage memory for storing the second image,
When the mode setting signal indicates a high-speed operation mode, the camera controller transmits the second image to the image storage memory,
Further comprising an image processing unit for dividing the second image into a frame section including a predetermined number of frames, and generating image information for a representative frame of each frame section,
The motion analysis unit generates analysis data corresponding to the representative frame by referring to image information on the representative frame, and determines whether the operation of the object corresponds to the analysis mode by referring to the analysis data Analytical device.
삭제delete 삭제delete 제1 항에 있어서,
상기 영상 처리부는 상기 모드 설정 신호가 분석 모드를 나타내는 경우, 상기 제2 영상의 프레임 중 대표 프레임을 제외한 나머지 프레임에 대해 영상 정보를 생성하고,
상기 동작 분석부는 상기 나머지 프레임에 대한 영상 정보를 참조하여 분석 데이터를 생성하는 것을 특징으로 하는 동작 분석 장치.
According to claim 1,
When the mode setting signal indicates the analysis mode, the image processing unit generates image information for the remaining frames excluding the representative frame among the frames of the second image,
The motion analysis unit generates motion data by referring to image information on the remaining frames.
제1 항에 있어서,
상기 카메라 제어부는 상기 제1 영상을 상기 영상 처리부로 전송하고,
상기 영상 처리부는 상기 제1 영상의 전체 프레임에 대한 영상 정보를 생성하여 상기 동작 분석부로 전송하고,
상기 동작 분석부는 상기 제1 영상의 전체 프레임에 대한 영상 정보를 참조하여 상기 제1 영상 상의 상기 객체의 동작이 고속 동작 모드에 대응하는 것인지 판단하는 것을 특징으로 하는 동작 분석 장치.
According to claim 1,
The camera control unit transmits the first image to the image processing unit,
The image processing unit generates image information for all frames of the first image and transmits it to the motion analysis unit,
The motion analysis unit may determine whether an operation of the object on the first image corresponds to a high-speed operation mode by referring to image information on all frames of the first image.
제1 항에 있어서,
상기 제2 영상에 대한 분석 데이터를 저장하는 분석 데이터 저장 메모리
를 더 포함하되,
상기 동작 분석부는 상기 제2 영상의 상기 대표 프레임에 대한 분석 데이터 및 상기 제2 영상의 나머지 프레임에 대한 분석 데이터를 상기 분석 데이터 저장 메모리로 전송하는 것을 특징으로 하는 동작 분석 장치.
According to claim 1,
Analysis data storage memory for storing analysis data for the second image
Including more,
The motion analysis unit transmits analysis data for the representative frame of the second image and analysis data for the remaining frames of the second image to the analysis data storage memory.
동작 분석 장치가 객체에 대한 동작을 분석하는 방법에 있어서,
상기 객체에 대한 일반 촬영을 수행하여 제1 영상을 생성하는 단계;
상기 제1 영상에 나타난 상기 객체의 동작이 고속 동작 모드에 상응하는 동작인 경우, 상기 객체에 대한 고속 촬영을 수행하여 제2 영상을 생성하는 단계; 및
상기 제2 영상에 나타난 상기 객체의 동작이 분석 모드에 상응하는 동작인 경우, 상기 제2 영상의 영상 정보를 분석하여 분석 데이터를 생성하는 단계;를 포함하되,
상기 제1 영상에 나타난 상기 객체의 동작이 고속 동작 모드에 상응하는 동작인 경우, 상기 제2 영상을 영상 저장 메모리에 저장하는 단계;를 포함하고,
상기 제2 영상을 미리 지정된 수의 프레임을 포함하는 프레임 구간으로 분할하고, 각 상기 프레임 구간의 대표 프레임에 대한 영상 정보를 생성하는 단계;
상기 대표 프레임에 대한 영상 정보를 참조하여 상기 대표 프레임에 상응하는 분석 데이터를 생성하는 단계; 및
상기 분석 데이터를 참조하여 상기 객체의 동작이 분석 모드에 대응하는 것인지 판단하는 단계를 포함하는 동작 분석 방법.
In the method for the motion analysis device to analyze the motion on the object,
Generating a first image by performing general photography on the object;
If the operation of the object shown in the first image corresponds to a high-speed operation mode, generating a second image by performing high-speed shooting on the object; And
Including, if the operation of the object shown in the second image is an operation corresponding to the analysis mode, generating analysis data by analyzing the image information of the second image;
Includes; when the operation of the object shown in the first image is an operation corresponding to the high-speed operation mode, storing the second image in the image storage memory;
Dividing the second image into a frame section including a predetermined number of frames, and generating image information for a representative frame of each frame section;
Generating analysis data corresponding to the representative frame with reference to image information on the representative frame; And
And determining whether an operation of the object corresponds to an analysis mode by referring to the analysis data.
삭제delete 삭제delete 제7 항에 있어서,
상기 제2 영상에 나타난 상기 객체의 동작이 분석 모드에 상응하는 동작인 경우, 상기 제2 영상의 영상 정보를 분석하여 분석 데이터를 생성하는 단계는,
상기 제2 영상 중 상기 대표 프레임을 제외한 나머지 프레임에 대해 영상 정보를 생성하는 단계; 및
상기 제2 영상의 상기 나머지 프레임에 대한 영상 정보를 참조하여 상기 분석 데이터를 생성하는 단계
를 포함하는 것을 특징으로 하는 동작 분석 방법.
The method of claim 7,
When the operation of the object shown in the second image corresponds to an analysis mode, analyzing the image information of the second image to generate analysis data may include:
Generating image information for frames other than the representative frame among the second images; And
Generating the analysis data by referring to image information on the remaining frames of the second image
Motion analysis method comprising a.
제10 항에 있어서,
상기 제2 영상의 상기 대표 프레임에 상응하는 분석 데이터를 분석 데이터 저장 메모리에 저장하는 단계;
상기 제2 영상의 상기 나머지 프레임에 상응하는 분석 데이터를 상기 분석 데이터 저장 메모리에 저장하는 단계; 및
상기 제2 영상의 상기 대표 프레임에 상응하는 분석 데이터 및 상기 제2 영상의 상기 나머지 프레임에 상응하는 분석 데이터를 출력하는 단계;
를 더 포함하는 것을 특징으로 하는 동작 분석 방법.
The method of claim 10,
Storing analysis data corresponding to the representative frame of the second image in an analysis data storage memory;
Storing analysis data corresponding to the remaining frames of the second image in the analysis data storage memory; And
Outputting analysis data corresponding to the representative frame of the second image and analysis data corresponding to the remaining frames of the second image;
Motion analysis method further comprising a.
제7 항에 있어서,
상기 제1 영상의 전체 프레임에 대한 영상 정보를 생성하는 단계; 및
상기 제1 영상의 전체 프레임에 대한 영상 정보를 참조하여 상기 제1 영상 상의 상기 객체의 동작이 고속 동작 모드에 대응하는지 판단하는 단계;
를 더 포함하는 것을 특징으로 하는 동작 분석 방법.The method of claim 7,
Generating image information for all frames of the first image; And
Determining whether an operation of the object on the first image corresponds to a fast operation mode by referring to image information on all frames of the first image;
Motion analysis method further comprising a.
KR1020150093754A 2014-11-24 2015-06-30 Apparatus and method for analyzing motion KR102126370B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510977030.2A CN105654506A (en) 2014-11-24 2015-11-24 Apparatus and method for analyzing motion

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020140164767 2014-11-24
KR20140164767 2014-11-24

Publications (2)

Publication Number Publication Date
KR20160062665A KR20160062665A (en) 2016-06-02
KR102126370B1 true KR102126370B1 (en) 2020-07-09

Family

ID=56135770

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150093754A KR102126370B1 (en) 2014-11-24 2015-06-30 Apparatus and method for analyzing motion

Country Status (2)

Country Link
KR (1) KR102126370B1 (en)
CN (1) CN105654506A (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107864334A (en) * 2017-11-09 2018-03-30 睿魔智能科技（东莞）有限公司 A kind of intelligent camera lens image pickup method and system using deep learning
KR102042397B1 (en) * 2018-07-30 2019-11-08 이노뎁 주식회사 syntax-based method of producing heat-map for compressed video
KR102341950B1 (en) * 2020-04-13 2021-12-24 주식회사 삼육오엠씨네트웍스 Apparatus and method for evaluating aseptic technique based on artificial intelligence using motion analysis

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011205282A (en) * 2010-03-25 2011-10-13 Fujifilm Corp Imaging apparatus and image processing method

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100399530B1 (en) * 2000-09-15 2003-09-26 학교법인 두원학원 method for recognition an object in video image
US7801427B2 (en) * 2005-09-12 2010-09-21 Nokia Corporation Adjustment of shooting parameters in dependence of motion in a scene
US8150440B2 (en) * 2005-09-23 2012-04-03 Research In Motion Limited System and method for reducing power consumed by a wireless communication device
JP2009268584A (en) * 2008-05-01 2009-11-19 Hiroshima Univ Motion analyzer, motion analysis method, program and recording medium
CN101299812B (en) * 2008-06-25 2012-12-05 北京中星微电子有限公司 Method, system for analyzing, storing video as well as method, system for searching video
CN101860731B (en) * 2010-05-20 2012-05-30 杭州普维光电技术有限公司 Video information processing method, system and server
GB2485969A (en) * 2010-11-12 2012-06-06 Sony Corp Video surveillance with anticipated arrival time of object in another camera view
KR101822655B1 (en) * 2011-06-21 2018-01-29 삼성전자주식회사 Object recognition method using camera and camera system for the same

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011205282A (en) * 2010-03-25 2011-10-13 Fujifilm Corp Imaging apparatus and image processing method

Also Published As

Publication number Publication date
KR20160062665A (en) 2016-06-02
CN105654506A (en) 2016-06-08

Similar Documents

Publication Publication Date Title
US10297076B2 (en) Apparatus and method for generating 3D face model using mobile device
US10559062B2 (en) Method for automatic facial impression transformation, recording medium and device for performing the method
CN107251096B (en) Image capturing apparatus and method
JP6961797B2 (en) Methods and devices for blurring preview photos and storage media
US20140254891A1 (en) Method and apparatus for registering face images, and apparatus for inducing pose change, and apparatus for recognizing faces
CN111163267B (en) Panoramic video editing method, device, equipment and storage medium
CN113973190A (en) Video virtual background image processing method and device and computer equipment
WO2018102880A1 (en) Systems and methods for replacing faces in videos
US20150339523A1 (en) Image processing apparatus, image processing method, and storage medium
US10078918B2 (en) Information processing apparatus, information processing method, and storage medium
KR102126370B1 (en) Apparatus and method for analyzing motion
US20180005069A1 (en) Information Processing Apparatus and Information Processing Method
JP2018081402A (en) Image processing system, image processing method, and program
CN113115106A (en) Automatic clipping method, device, terminal and storage medium of panoramic video
CN110519526B (en) Exposure time control method and device, storage medium and electronic equipment
JP7047848B2 (en) Face 3D shape estimation device, face 3D shape estimation method, and face 3D shape estimation program
WO2017096859A1 (en) Photo processing method and apparatus
KR101610496B1 (en) Method and apparatus for gaze tracking
US10346680B2 (en) Imaging apparatus and control method for determining a posture of an object
US10853952B2 (en) Image processing apparatus, image processing method, and non-transitory computer-readable storage medium
JP2020043516A (en) Skin moving image correction system, skin moving image correction program, and skin moving image correction method
JP7183005B2 (en) Skin analysis method and skin analysis system
JP7323234B2 (en) Guide method
KR102203884B1 (en) Imaging apparatus and controlling method thereof
WO2021168668A1 (en) Image processing method and apparatus, and storage medium

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right