KR102158751B1 - User equipment, control method thereof and computer readable medium having computer program recorded therefor - Google Patents

User equipment, control method thereof and computer readable medium having computer program recorded therefor Download PDF

Info

Publication number
KR102158751B1
KR102158751B1 KR1020140031493A KR20140031493A KR102158751B1 KR 102158751 B1 KR102158751 B1 KR 102158751B1 KR 1020140031493 A KR1020140031493 A KR 1020140031493A KR 20140031493 A KR20140031493 A KR 20140031493A KR 102158751 B1 KR102158751 B1 KR 102158751B1
Authority
KR
South Korea
Prior art keywords
information
image
pose
images
unit
Prior art date
Application number
KR1020140031493A
Other languages
Korean (ko)
Other versions
KR20150108559A (en
Inventor
장언동
신형철
전혁준
전병기
Original Assignee
에스케이플래닛 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이플래닛 주식회사 filed Critical 에스케이플래닛 주식회사
Priority to KR1020140031493A priority Critical patent/KR102158751B1/en
Publication of KR20150108559A publication Critical patent/KR20150108559A/en
Application granted granted Critical
Publication of KR102158751B1 publication Critical patent/KR102158751B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/5866Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, manually generated location and time information

Abstract

본 발명은 사용자 장치, 그 제어 방법 및 컴퓨터 프로그램이 기록된 기록매체를 개시한다. 즉, 본 발명은 영상 획득부를 통해 객체의 움직임을 관찰하다가 해당 객체의 움직임이 미리 설정된 시간 이상 유지될 때 해당 객체를 촬영하고 촬영된 객체를 포함하는 영상을 저장하고, 미리 설정된 시간 이상 유지될 때마다 촬영된 영상을 표시함으로써 사용자가 최적의 포즈를 확인하거나 복수 의상 착용 모습을 비교할 수 있다.The present invention discloses a user device, a method for controlling the same, and a recording medium on which a computer program is recorded. That is, the present invention captures the object when the movement of the object is maintained for more than a preset time while observing the movement of the object through the image acquisition unit, and stores an image including the captured object, and when the movement of the object is maintained for more than a preset time. By displaying the images taken every time, the user can check the optimal pose or compare the appearances of wearing multiple clothes.

Description

사용자 장치, 그 제어 방법 및 컴퓨터 프로그램이 기록된 기록매체{User equipment, control method thereof and computer readable medium having computer program recorded therefor}User equipment, control method thereof and computer readable medium having computer program recorded therefor

본 발명은 사용자 장치, 그 제어 방법 및 컴퓨터 프로그램이 기록된 기록매체에 관한 것으로, 특히 객체의 움직임이 미리 설정된 시간 이상 유지될 때, 영상 획득부를 통해 해당 객체를 촬영 및 저장하고, 사용자가 최적의 포즈를 확인하거나 복수 의상 착용 모습을 비교할 수 있도록 촬영된 복수의 영상을 표시하는 사용자 장치, 그 제어 방법 및 컴퓨터 프로그램이 기록된 기록매체에 관한 것이다.The present invention relates to a user device, a control method thereof, and a recording medium in which a computer program is recorded. In particular, when the movement of an object is maintained for a predetermined time or longer, the object is photographed and stored through an image acquisition unit, and the user The present invention relates to a user device for displaying a plurality of images photographed so as to check a pose or to compare wearing of a plurality of clothes, a control method thereof, and a recording medium in which a computer program is recorded.

사용자 장치는 GPS(Global Positioning System) 기능, 통화 기능(또는 호(call) 기능) 및 콘텐츠(메시지, 파일 등 포함) 송수신 기능을 수행하여, 그 수행 결과를 사용자에게 제공하는 장치이다.The user device is a device that performs a Global Positioning System (GPS) function, a call function (or a call function), and a content (including a message, file, etc.) transmission and reception function, and provides the result of the execution to the user.

이러한 사용자 장치는 해당 사용자 장치에 구비된 카메라를 통해 객체를 촬영하고 촬영된 영상을 표시하고 있어, 객체 촬영 및 표시 기능 수행에 따른 객체 촬영과 관련한 부가 서비스 기능의 제공 및 활용도를 저하한다.Since such a user device captures an object and displays the captured image through a camera provided in the user device, provision and utilization of an additional service function related to object shooting according to object shooting and display function performance is degraded.

한국공개특허 제10-2012-0126070호 [명칭: 모션 캡처 시스템에서 사용자 의도 인식]Korean Patent Laid-Open Patent No. 10-2012-0126070 [Name: Recognition of User Intention in Motion Capture System]

본 발명의 목적은 영상 획득부를 통해 객체의 움직임을 관찰하다가 해당 객체의 움직임이 미리 설정된 시간 이상 유지될 때 해당 객체를 촬영하고 촬영된 객체를 포함하는 영상을 저장하는 사용자 장치, 그 제어 방법 및 컴퓨터 프로그램이 기록된 기록매체를 제공하는 데 있다.An object of the present invention is a user apparatus for photographing a corresponding object and storing an image including the photographed object when the movement of the object is maintained for more than a preset time while observing the movement of an object through an image acquisition unit, a method of controlling the same, and a computer It is to provide a recording medium on which the program is recorded.

본 발명의 다른 목적은 미리 설정된 시간 이상 유지될 때마다 촬영된 영상을 표시하는 사용자 장치, 그 제어 방법 및 컴퓨터 프로그램이 기록된 기록매체를 제공하는 데 있다.Another object of the present invention is to provide a user device that displays a captured image every time it is maintained for a predetermined time or longer, a control method thereof, and a recording medium in which a computer program is recorded.

본 발명의 또 다른 목적은 촬영된 영상을 분석하여 영상 내에 포함된 객체의 자세와 객체 크기 비율을 고려하여 촬영 위치나 포즈에 대한 제안 정보를 제공하는 사용자 장치, 그 제어 방법 및 컴퓨터 프로그램이 기록된 기록매체를 제공하는 데 있다.Another object of the present invention is a user device that analyzes a captured image and provides proposal information on a shooting position or pose in consideration of the posture and object size ratio of an object included in the image, a control method thereof, and a computer program. It is to provide a recording medium.

본 발명의 실시예에 따른 사용자 장치는 영상을 제공하는 영상 획득부; 영상 내에 포함된 객체의 움직임을 식별하고, 식별된 객체의 움직임이 미리 설정된 시간 이상 유지될 때 영상 획득부를 제어하여 객체를 포함하는 영상을 촬영하도록 제어하는 제어부; 촬영된 영상을 포함하는 영상 정보를 저장하는 저장부; 및 미리 설정된 버튼이 선택될 때, 제어부의 제어에 의해 저장부에 저장된 복수의 영상을 표시하는 표시부를 포함할 수 있다.A user device according to an embodiment of the present invention includes an image acquisition unit that provides an image; A control unit for identifying a motion of an object included in the image, and controlling an image acquisition unit to capture an image including the object when the motion of the identified object is maintained for a predetermined time or longer; A storage unit for storing image information including a captured image; And a display unit that displays a plurality of images stored in the storage unit under control of a control unit when a preset button is selected.

본 발명과 관련된 일 예로서 영상 정보는 촬영된 영상, 촬영 일자, 촬영 위치 정보, 영상 획득부의 자세 정보 및 영상에 포함된 객체의 자세 정보를 포함할 수 있다.As an example related to the present invention, the image information may include a photographed image, a photographing date, photographing location information, posture information of an image acquisition unit, and posture information of an object included in the image.

본 발명과 관련된 일 예로서 제어부는 영상 정보에 포함된 촬영 일자, 촬영 위치 정보, 영상 획득부의 자세 정보 및 영상에 포함된 객체의 자세 정보 중 적어도 하나를 근거로 저장부에 저장된 복수의 영상을 정렬하고, 정렬된 복수의 영상을 표시부에 표시할 수 있다.As an example related to the present invention, the controller arranges a plurality of images stored in the storage unit based on at least one of a photographing date included in the image information, photographing location information, posture information of an image acquisition unit, and posture information of an object included in the image. And, a plurality of aligned images may be displayed on the display unit.

본 발명과 관련된 일 예로서 제어부는 저장부에 미리 저장된 복수의 객체의 자세 정보에 대응하는 촬영 위치 정보 또는 포즈 정보 중에서 복수의 영상에 각각 포함된 객체의 자세 정보에 대응하는 촬영 위치나 포즈에 대한 정보를 각각 확인하고, 표시부의 일부 영역에 복수의 영상을 표시하고, 표시부의 다른 일부 영역에 복수의 영상에 대응하여 확인된 촬영 위치 정보 또는 포즈 정보를 표시할 수 있다.As an example related to the present invention, the control unit is provided with respect to a photographing position or pose corresponding to the pose information of an object included in each of the plurality of images from among the photographing position information or pose information corresponding to the pose information of a plurality of objects previously stored in the storage unit. Each of the information may be checked, a plurality of images may be displayed in a partial region of the display unit, and the captured location information or pose information identified in correspondence with the plurality of images may be displayed in another partial region of the display unit.

본 발명과 관련된 일 예로서 제어부는 영상에 포함된 객체가 사람일 때 사람의 신체 비율을 분석하고, 영상 정보에 포함된 촬영 일자, 촬영 위치 정보, 영상 획득부의 자세 정보 및 영상에 포함된 객체의 자세 정보 중 적어도 하나를 근거로 저장부에 저장된 복수의 영상을 정렬하고, 저장부에 미리 저장된 복수의 객체의 자세 정보 및 신체 비율에 대응하는 촬영 위치 정보 또는 포즈 정보 중에서 복수의 영상에 각각 포함된 객체의 자세 정보 및 분석된 신체 비율에 대응하는 촬영 위치나 포즈에 대한 정보를 각각 확인하고, 표시부의 일부 영역에 정렬된 복수의 영상을 표시하고, 표시부의 다른 일부 영역에 복수의 영상에 대응하여 확인된 촬영 위치 정보 또는 포즈 정보를 표시할 수 있다.As an example related to the present invention, when the object included in the image is a person, the control unit analyzes the body ratio of the person, and includes the photographing date, photographing location information, posture information of the image acquisition unit, and the object included in the image. A plurality of images stored in the storage unit are aligned based on at least one of the posture information, and each of the plurality of images included in the plurality of images from among the posture information and the photographing position information corresponding to the body ratio and the body ratio stored in the storage unit It checks the posture information of the object and information on the shooting position or pose corresponding to the analyzed body ratio, displays a plurality of images arranged in a partial area of the display, and responds to the plurality of images in another partial area of the display. Confirmed shooting location information or pose information can be displayed.

본 발명의 실시예에 따른 사용자 장치의 제어 방법은 영상 획득부를 통해 영상을 제공하는 단계; 제어부를 통해 영상 내에 포함된 객체의 움직임을 식별하는 단계; 제어부를 통해 식별된 객체의 움직임이 미리 설정된 시간 이상 유지되는지 여부를 판단하는 단계; 판단 결과, 식별된 객체의 움직임이 미리 설정된 시간 이상 유지될 때, 제어부를 통해 영상 획득부를 제어하여 객체를 포함하는 영상을 촬영하도록 제어하는 단계; 및 제어부를 통해 촬영된 영상을 포함하는 영상 정보를 저장부에 저장하도록 제어하는 단계를 포함할 수 있다.A method for controlling a user device according to an embodiment of the present invention includes providing an image through an image acquisition unit; Identifying a motion of an object included in the image through a control unit; Determining whether the motion of the object identified by the control unit is maintained for a predetermined time or longer; As a result of the determination, when the movement of the identified object is maintained for more than a preset time, controlling an image acquisition unit through a control unit to capture an image including the object; And controlling the storage unit to store image information including an image captured by the control unit.

본 발명과 관련된 일 예로서 미리 설정된 버튼이 선택될 때, 표시부를 통해 저장부에 저장된 복수의 영상을 표시하는 단계를 더 포함할 수 있다.As an example related to the present invention, when a preset button is selected, the step of displaying a plurality of images stored in the storage unit through the display unit may further be included.

본 발명과 관련된 일 예로서 복수의 영상을 표시하는 단계는, 제어부를 통해 영상 정보에 포함된 촬영 일자, 촬영 위치 정보, 영상 획득부의 자세 정보 및 영상에 포함된 객체의 자세 정보 중 적어도 하나를 근거로 저장부에 저장된 복수의 영상을 정렬하는 과정; 및 제어부를 통해 정렬된 복수의 영상을 표시부에 표시하도록 제어하는 과정을 포함할 수 있다.As an example related to the present invention, the displaying of a plurality of images is based on at least one of a photographing date, photographing location information, posture information of the image acquisition unit, and posture information of an object included in the image through the control unit. Arranging a plurality of images stored in the storage unit; And controlling the display unit to display a plurality of images arranged through the control unit.

본 발명과 관련된 일 예로서 복수의 영상을 표시하는 단계는, 제어부를 통해 저장부에 미리 저장된 복수의 객체의 자세 정보에 대응하는 촬영 위치 정보 또는 포즈 정보 중에서 복수의 영상에 각각 포함된 객체의 자세 정보에 대응하는 촬영 위치나 포즈에 대한 정보를 각각 확인하는 과정; 제어부를 통해 표시부의 일부 영역에 복수의 영상을 표시하도록 제어하는 과정; 및 제어부를 통해 표시부의 다른 일부 영역에 복수의 영상에 대응하여 확인된 촬영 위치 정보 또는 포즈 정보를 표시하도록 제어하는 과정을 포함할 수 있다.As an example related to the present invention, the displaying of a plurality of images may include a pose of an object included in each of the plurality of images among photographing position information or pose information corresponding to the pose information of a plurality of objects previously stored in the storage unit through the control unit. A process of respectively checking information on a photographing position or a pose corresponding to the information; Controlling to display a plurality of images on a partial area of the display unit through a control unit; And a process of controlling to display, through a control unit, information on a photographing location or pose information, which is checked in correspondence with a plurality of images, on another partial area of the display unit.

본 발명의 실시예에 따른 컴퓨터 프로그램이 기록된 기록매체에는 상술한 실시예에 따른 방법을 수행하는 컴퓨터 프로그램이 저장될 수 있다.A computer program for performing the method according to the above-described embodiment may be stored in the recording medium on which the computer program according to the embodiment of the present invention is recorded.

본 발명은 영상 획득부를 통해 객체의 움직임을 관찰하다가 해당 객체의 움직임이 미리 설정된 시간 이상 유지될 때 해당 객체를 촬영하고 촬영된 객체를 포함하는 영상을 저장함으로써, 자동으로 영상을 획득하고 사용상의 편의성을 향상시키는 효과가 있다.The present invention captures the object while observing the movement of the object through the image acquisition unit and stores the image including the captured object when the movement of the object is maintained for more than a preset time, thereby automatically obtaining an image and convenience in use. It has the effect of improving.

또한, 본 발명은 미리 설정된 시간 이상 유지될 때마다 촬영된 영상을 표시함으로써, 촬영된 영상을 비교할 수 있으며, 사용자가 최적의 포즈를 확인하거나 복수 의상 착용 모습을 비교하는 효과가 있다.In addition, according to the present invention, the captured image is displayed whenever it is maintained for longer than a preset time, so that the captured image can be compared, and the user can check the optimal pose or compare the appearance of wearing a plurality of clothes.

또한, 본 발명은 촬영된 영상을 분석하여 영상 내에 포함된 객체의 자세와 객체 크기 비율을 고려하여 촬영 위치나 포즈에 대한 제안 정보를 제공함으로써, 객체 촬영 및 표시 기능 수행에 따른 객체 촬영과 관련한 부가 서비스 기능의 제공 및 활용도를 향상시키는 효과가 있다.In addition, the present invention analyzes the photographed image and provides suggestions on the photographing position or pose in consideration of the posture and object size ratio of the object included in the image, thereby providing additional information related to object photographing according to the object photographing and display function performance. It has the effect of improving the provision and utilization of service functions.

도 1은 본 발명의 실시예에 따른 사용자 장치의 구성을 나타낸 블록도이다.
도 2는 본 발명의 실시예에 따른 사용자 장치의 제어 방법을 나타낸 흐름도이다.
도 3 및 도 4는 본 발명의 실시예에 따른 사용자 장치의 화면을 나타낸 도이다.
1 is a block diagram showing the configuration of a user device according to an embodiment of the present invention.
Figure 2 A flowchart showing a method of controlling a user device according to an embodiment of the present invention.
3 and 4 are diagrams showing a screen of a user device according to an embodiment of the present invention.

본 발명에서 사용되는 기술적 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아님을 유의해야 한다. 또한, 본 발명에서 사용되는 기술적 용어는 본 발명에서 특별히 다른 의미로 정의되지 않는 한, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 의미로 해석되어야 하며, 과도하게 포괄적인 의미로 해석되거나, 과도하게 축소된 의미로 해석되지 않아야 한다. 또한, 본 발명에서 사용되는 기술적인 용어가 본 발명의 사상을 정확하게 표현하지 못하는 잘못된 기술적 용어일 때에는 당업자가 올바르게 이해할 수 있는 기술적 용어로 대체되어 이해되어야 할 것이다. 또한, 본 발명에서 사용되는 일반적인 용어는 사전에 정의되어 있는 바에 따라, 또는 전후 문맥상에 따라 해석되어야 하며, 과도하게 축소된 의미로 해석되지 않아야 한다.It should be noted that the technical terms used in the present invention are used only to describe specific embodiments, and are not intended to limit the present invention. In addition, the technical terms used in the present invention should be interpreted as generally understood by those of ordinary skill in the technical field to which the present invention belongs, unless otherwise defined in the present invention, and is excessively comprehensive. It should not be construed as a human meaning or an excessively reduced meaning. In addition, when a technical term used in the present invention is an incorrect technical term that does not accurately express the spirit of the present invention, it should be replaced with a technical term that can be correctly understood by those skilled in the art. In addition, general terms used in the present invention should be interpreted as defined in the dictionary or according to the context before and after, and should not be interpreted as an excessively reduced meaning.

또한, 본 발명에서 사용되는 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한 복수의 표현을 포함한다. 본 발명에서 "구성된다" 또는 "포함한다" 등의 용어는 발명에 기재된 여러 구성 요소들 또는 여러 단계를 반드시 모두 포함하는 것으로 해석되지 않아야 하며, 그 중 일부 구성 요소들 또는 일부 단계들은 포함되지 않을 수도 있고, 또는 추가적인 구성 요소 또는 단계들을 더 포함할 수 있는 것으로 해석되어야 한다.In addition, the singular expression used in the present invention includes a plurality of expressions unless the context clearly indicates otherwise. In the present invention, terms such as “consisting of” or “comprising” should not be construed as necessarily including all of the various components or steps described in the invention, and some components or some steps may not be included. It should be construed that it may or may further include additional components or steps.

또한, 본 발명에서 사용되는 제 1, 제 2 등과 같이 서수를 포함하는 용어는 구성 요소들을 설명하는데 사용될 수 있지만, 구성 요소들은 용어들에 의해 한정되어서는 안 된다. 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제 1 구성 요소는 제 2 구성 요소로 명명될 수 있고, 유사하게 제 2 구성 요소도 제 1 구성 요소로 명명될 수 있다.In addition, terms including ordinal numbers such as first and second used in the present invention may be used to describe the constituent elements, but the constituent elements should not be limited by the terms. The terms are used only for the purpose of distinguishing one component from another. For example, without departing from the scope of the present invention, a first component may be referred to as a second component, and similarly, a second component may be referred to as a first component.

이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성 요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings, but the same or similar components are assigned the same reference numerals regardless of the reference numerals, and redundant descriptions thereof will be omitted.

또한, 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 발명의 사상을 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 발명의 사상이 제한되는 것으로 해석되어서는 아니 됨을 유의해야 한다.In addition, in describing the present invention, when it is determined that a detailed description of a related known technology may obscure the subject matter of the present invention, a detailed description thereof will be omitted. In addition, it should be noted that the accompanying drawings are only for easily understanding the spirit of the present invention and should not be construed as limiting the spirit of the present invention by the accompanying drawings.

도 1은 본 발명의 실시예에 따른 사용자 장치(10)의 구성을 나타낸 블록도이다.1 is a block diagram showing the configuration of a user device 10 according to an embodiment of the present invention.

도 1에 도시된 바와 같이, 사용자 장치(10)는 영상 획득부(100), 저장부(200), 제어부(300) 및 표시부(400)로 구성된다. 도 1에 도시된 사용자 장치(10)의 구성 요소 모두가 필수 구성 요소인 것은 아니며, 도 1에 도시된 구성 요소보다 많은 구성 요소에 의해 사용자 장치(10)가 구현될 수도 있고, 그보다 적은 구성 요소에 의해서도 사용자 장치(10)가 구현될 수도 있다.As shown in FIG. 1, the user device 10 includes an image acquisition unit 100, a storage unit 200, a control unit 300, and a display unit 400. Not all of the components of the user device 10 shown in FIG. 1 are essential components, and the user device 10 may be implemented by more components than the components shown in FIG. 1, or fewer components. The user device 10 may also be implemented by.

영상 획득부(100)로부터 확인되는 영상 내의 객체의 움직임이 미리 설정된 시간 동안 유지될 때, 제어부(300)는 영상 획득부(100)를 제어하여 해당 객체를 포함하는 영상을 촬영하고, 촬영된 영상을 저장부(200)에 저장한다. 이후, 미리 설정된 버튼이 선택되는 경우, 제어부(300)는 저장부(200)에 저장된 복수의 영상을 해당 영상에 대응하는 영상 정보를 근거로 정렬한 후, 정렬된 복수의 영상을 표시부(400)에 표시한다. 이때, 해당 복수의 영상을 표시할 때, 제어부(300)는 영상 내에 포함된 객체의 자세 정보를 근거로 촬영 위치나 포즈에 대한 정보를 제공(또는 추천)할 수도 있다.When the motion of the object in the image identified by the image acquisition unit 100 is maintained for a preset time, the controller 300 controls the image acquisition unit 100 to capture an image including the object, and the captured image Is stored in the storage unit 200. Thereafter, when a preset button is selected, the controller 300 arranges a plurality of images stored in the storage 200 based on image information corresponding to the corresponding image, and then displays the aligned plurality of images on the display unit 400. Mark on. In this case, when displaying the plurality of images, the controller 300 may provide (or recommend) information on a photographing position or a pose based on posture information of an object included in the image.

영상 획득부(100)는 카메라 모듈(예를 들어 CCD 모듈 등 포함)을 포함한다.The image acquisition unit 100 includes a camera module (eg, including a CCD module).

또한, 사용자의 조작(또는 제어)에 의해 동작 상태가 온(on) 상태인 경우, 영상 획득부(100)는 카메라 모듈을 통해 영상(또는 이미지)을 확인(또는 획득/촬영)한다. 이때, 해당 영상 획득부(100)에 의해 확인되는 영상은 제어부(300)에 의해 해당 영상 내의 객체의 움직임을 식별(또는 추적)하기 위해서 저장부(200)에 임시 저장되며, 영구 저장되지는 않는다.In addition, when the operation state is turned on by a user's manipulation (or control), the image acquisition unit 100 checks (or acquires/takes) an image (or image) through a camera module. At this time, the image checked by the image acquisition unit 100 is temporarily stored in the storage unit 200 in order to identify (or track) the movement of the object in the image by the controller 300, and is not permanently stored. .

또한, 영상 획득부(100)는 확인되는 영상을 제어부(300)에 제공한다.In addition, the image acquisition unit 100 provides the confirmed image to the control unit 300.

또한, 영상 획득부(100)는 제어부(300)의 제어에 의해 영상을 촬영하고, 촬영된 영상을 저장부(200)에 저장한다.Also, the image acquisition unit 100 captures an image under the control of the controller 300 and stores the captured image in the storage unit 200.

저장부(200)는 사용자 인터페이스(UI), 그래픽 사용자 인터페이스(GUI) 등을 저장한다.The storage unit 200 stores a user interface (UI), a graphic user interface (GUI), and the like.

또한, 저장부(200)는 사용자 장치(10)가 동작하는데 필요한 데이터와 프로그램 등을 저장한다.In addition, the storage unit 200 stores data and programs necessary for the user device 10 to operate.

또한, 저장부(200)는 객체의 자세 정보(또는 객체 자세 정보 및 객체 크기 비율)에 대응하는 촬영 위치 정보, 포즈 정보 등을 저장한다.In addition, the storage unit 200 stores photographing position information, pose information, and the like corresponding to the attitude information of the object (or object attitude information and object size ratio).

또한, 저장부(200)는 제어부(300)의 제어에 의해 영상 획득부(100)를 통해 촬영되는 영상을 포함하는 영상 정보를 저장한다. 여기서, 영상 정보는 해당 영상과 함께 촬영 일자, 촬영 위치 정보(예를 들어 사용자 장치(10)에 구비된 GPS 수신기를 통해 확인되는 사용자 장치(10)의 위치 정보), 영상 획득부(100)(또는 사용자 장치(10))의 자세 정보, 영상에 포함된 객체의 자세 정보 등을 포함한다.Further, the storage unit 200 stores image information including an image captured by the image acquisition unit 100 under the control of the controller 300. Here, the image information includes a photographing date, photographing location information (for example, location information of the user device 10 checked through a GPS receiver provided in the user device 10), and the image acquisition unit 100 ( Or, it includes posture information of the user device 10) and posture information of an object included in the image.

제어부(300)는 사용자 장치(10)의 전반적인 제어 기능을 실행한다.The controller 300 executes an overall control function of the user device 10.

또한, 제어부(300)는 영상 획득부(100)로부터 제공되는(또는 촬영되는/확인되는) 영상 내에서 객체의 움직임을 식별(또는 판별/확인)한다. 여기서, 영상 획득부(100)로부터 제공되는 영상은 별로도 저장부(200)에 저장되지 않는 상태일 수 있다.In addition, the control unit 300 identifies (or discriminates/confirms) the motion of the object in the image provided (or photographed/confirmed) from the image acquisition unit 100. Here, the image provided from the image acquisition unit 100 may be in a state that is not separately stored in the storage unit 200.

또한, 제어부(300)는 식별된 객체의 움직임이 미리 설정된 시간 이상 유지되는지 여부를 판단(또는 확인)한다.In addition, the controller 300 determines (or confirms) whether the movement of the identified object is maintained for a predetermined time or longer.

즉, 제어부(300)는 식별된 객체의 움직임이 미리 설정된 시간 이상 멈춘 상태를 유지하는지 여부를 판단한다.That is, the controller 300 determines whether the motion of the identified object maintains a stopped state for more than a preset time.

판단 결과, 식별된 객체의 움직임이 미리 설정된 시간 이상 유지되지 않는 경우, 제어부(300)는 영상 획득부(100)로부터 제공되는 영상 내에서 식별되는 객체의 움직임을 감지하는 과정(또는 영상 획득부(100)로부터 제공되는 영상 내에서 식별되는 객체의 움직임이 미리 설정된 시간 이상 유지되는지 여부를 판단하는 과정)을 수행한다.As a result of the determination, when the motion of the identified object is not maintained for more than a preset time, the controller 300 detects the motion of the object identified in the image provided from the image acquisition unit 100 (or the image acquisition unit ( A process of determining whether the motion of the object identified in the image provided from 100) is maintained for a predetermined time or longer) is performed.

또한, 판단 결과, 식별된 객체의 움직임이 미리 설정된 시간 이상 유지되는 경우, 제어부(300)는 영상 획득부(100)를 제어하여 영상 획득부(100)를 통해 해당 객체를 포함하는 영상을 촬영(또는 획득)한다.In addition, as a result of the determination, when the movement of the identified object is maintained for more than a preset time, the controller 300 controls the image acquisition unit 100 to capture an image including the object through the image acquisition unit 100 ( Or obtain).

또한, 제어부(300)(또는 영상 획득부(100))는 영상 획득부(100)를 통해 촬영된 영상을 포함하는 영상 정보를 저장부(200)에 저장한다. 여기서, 영상 정보는 해당 영상과 함께 촬영 일자, 촬영 위치 정보(예를 들어 사용자 장치(10)에 구비된 GPS 수신기(미도시)를 통해 확인되는 사용자 장치(10)의 위치 정보), 영상 획득부(100)(또는 사용자 장치(10))의 자세 정보, 영상에 포함된 객체의 자세 정보 등을 포함한다.In addition, the control unit 300 (or the image acquisition unit 100) stores image information including an image captured through the image acquisition unit 100 in the storage unit 200. Here, the image information includes a photographing date along with the image, photographing location information (for example, location information of the user device 10 checked through a GPS receiver (not shown) provided in the user device 10), and an image acquisition unit. It includes posture information of 100 (or user device 10), posture information of an object included in the image, and the like.

이때, 해당 영상 획득부(100)(또는 사용자 장치(10))의 자세 정보는 해당 사용자 장치(10)에 구비된 지자기 센서(미도시)에 의해 검출될 수 있다. 여기서, 지자기 센서는 지구에서 발생하는 자기장의 흐름을 파악해 나침반처럼 방위를 탐지하여 해당 영상 획득부(100) 또는 사용자 장치(10)의 자세 정보를 검출한다. 또한, 영상 획득부(100)(또는 사용자 장치(10))의 자세 정보는 지자기 센서뿐만 아니라 다른 종류의 센서를 통해서도 획득(또는 검출)될 수도 있다.At this time, the posture information of the image acquisition unit 100 (or the user device 10) may be detected by a geomagnetic sensor (not shown) provided in the user device 10. Here, the geomagnetic sensor detects the flow of a magnetic field generated from the earth and detects the orientation like a compass to detect the posture information of the image acquisition unit 100 or the user device 10. Further, the posture information of the image acquisition unit 100 (or the user device 10) may be acquired (or detected) not only through a geomagnetic sensor but also through other types of sensors.

또한, 제어부(300)는 영상에 포함된 객체에 대한 분석을 수행하여, 해당 객체의 스케일, 배치 방향 등을 분석하고, 해당 분석 결과를 근거로 객체의 자세 정보를 산출한다. 이때, 해당 객체의 배치 방향은 2D 또는 3D 형태로 설정하며, 사용자 장치(10)(또는 해당 사용자 장치(10)의 사용자/운영자)에서 해당 객체를 바라보는 관찰 시점으로 산출될 수도 있다.In addition, the controller 300 analyzes an object included in the image, analyzes a scale and an arrangement direction of the object, and calculates posture information of the object based on the analysis result. In this case, the arrangement direction of the object is set in a 2D or 3D form, and may be calculated as an observation point of view of the object from the user device 10 (or the user/operator of the user device 10).

미리 설정된 버튼이 선택(또는 클릭)되는 경우, 제어부(300)는 저장부(200)에 저장된 영상 획득부(100)를 통해 촬영된 복수의 영상을 표시부(400)에 표시한다. 해당 복수의 영상을 표시부(400)에 표시할 때, 제어부(300)는 영상 정보(또는 촬영 일자, 촬영 위치 정보, 영상 획득부(100)의 자세 정보, 영상에 포함된 객체의 자세 정보 중 적어도 하나)를 근거로 해당 복수의 영상을 정렬하고, 정렬된 복수의 영상을 표시부(400)에 분류하여 표시한다.When a preset button is selected (or clicked), the control unit 300 displays a plurality of images captured by the image acquisition unit 100 stored in the storage unit 200 on the display unit 400. When displaying the plurality of images on the display unit 400, the controller 300 includes at least one of image information (or photographing date, photographing location information, posture information of the image acquisition unit 100, and posture information of an object included in the image). The plurality of images are sorted based on one), and the sorted images are classified and displayed on the display unit 400.

즉, 제어부(300)는 촬영 일자, 촬영 위치 정보, 영상 획득부(100)의 자세 정보, 영상에 포함된 객체의 자세 정보 중 적어도 하나의 구성 요소를 근거로 해당 복수의 영상을 정렬하고, 정렬된 복수의 영상(예를 들어 촬영 일자별, 촬영 위치 정보별, 영상 획득부(100)의 자세 정보별, 객체의 자세 정보별, 이들 간의 조합에 의해 정렬된 복수의(또는 하나 이상의) 영상)을 표시부(400)에 표시한다.That is, the control unit 300 arranges and aligns the plurality of images based on at least one component of a photographing date, photographing location information, posture information of the image acquisition unit 100, and posture information of an object included in the image. A plurality of images (for example, by shooting date, by shooting location information, by posture information of the image acquisition unit 100, by posture information of an object, and by a combination thereof) It is displayed on the display unit 400.

또한, 해당 복수의 영상을 표시부(400)에 표시할 때, 제어부(300)는 해당 복수의 영상이 표시되는 표시부(400)의 일부 영역에 해당 영상에 포함된 객체의 자세 정보를 근거로 촬영 위치나 포즈에 대한 제안 정보를 추가로 표시할 수도 있다. 이때, 제어부(300)는 객체의 자세 정보뿐만 아니라 객체 크기 비율을 고려할 수도 있다. 여기서, 객체 크기 비율은 제어부(300)의 제어에 의해 해당 영상에서 식별된 객체를 분석하여 획득된 정보일 수 있다. 특히, 해당 객체가 사람인 경우, 객체 크기 비율은 사람의 신체 비율일 수 있다.In addition, when displaying the plurality of images on the display unit 400, the control unit 300 displays a photographing position based on the posture information of the object included in the image in a partial area of the display unit 400 where the plurality of images are displayed. You can also display additional information about the pose or pose. In this case, the controller 300 may consider the object size ratio as well as the attitude information of the object. Here, the object size ratio may be information obtained by analyzing an object identified in a corresponding image under the control of the controller 300. In particular, when the object is a human, the object size ratio may be a human body ratio.

즉, 제어부(300)는 미리 설정된(또는 등록된/저장된) 복수의 객체 자세 정보(또는 객체 자세 정보 및 객체 크기 비율)에 따른 촬영 위치나 포즈에 대한 정보 중에서, 저장부(200)에 저장된 영상 내의 객체의 자세 정보(또는 객체 자세 정보 및 객체 크기 비율)에 대응하는 촬영 위치나 포즈에 대한 정보를 확인하고, 표시부(400)의 일부 영역에 저장부(200)에 저장된 영상 획득부(100)를 통해 촬영된 복수의 영상을 표시하고, 표시부(400)의 다른 일부 영역에 해당 영상에 대응하여 확인된 촬영 위치나 포즈에 대한 정보를 표시한다.That is, the control unit 300 is an image stored in the storage unit 200 from among information on a shooting position or a pose according to a plurality of preset (or registered/stored) object pose information (or object pose information and object size ratio). The image acquisition unit 100 that checks the information on the shooting position or pose corresponding to the posture information (or the object posture information and the object size ratio) of the inside object, and is stored in the storage unit 200 in a partial area of the display unit 400 A plurality of images captured through are displayed, and information on a photographing position or a pose identified in correspondence with the corresponding image is displayed on another partial area of the display unit 400.

또한, 정렬된 복수의 영상을 표시부(400)에 표시할 때, 제어부(300)는 각 영상별로 제안 촬영 위치 정보, 제안 포즈 정보 등을 추가로 표시부(400)에 표시할 수도 있다.In addition, when displaying a plurality of aligned images on the display unit 400, the control unit 300 may additionally display information on a suggested photographing location and information on a pose pose for each image on the display unit 400.

이와 같이, 영상 획득부를 통해 객체의 움직임을 관찰하다가 해당 객체의 움직임이 미리 설정된 시간 이상 유지될 때 해당 객체를 촬영하고 촬영된 객체를 포함하는 영상을 저장할 수 있다.In this way, while observing the motion of the object through the image acquisition unit, when the motion of the object is maintained for a predetermined time or longer, the object may be photographed and an image including the captured object may be stored.

또한, 이와 같이, 미리 설정된 시간 이상 유지될 때마다 촬영된 영상을 표시할 수 있다.In addition, as described above, the captured image can be displayed whenever it is maintained for more than a preset time.

또한, 이와 같이, 촬영된 영상을 분석하여 영상 내에 포함된 객체의 자세와 객체 크기 비율을 고려하여 촬영 위치나 포즈에 대한 제안 정보를 제공할 수 있다.In addition, by analyzing the captured image as described above, it is possible to provide proposal information on a photographing position or a pose in consideration of a posture and object size ratio of an object included in the image.

이하에서는, 본 발명에 따른 사용자 장치의 제어 방법을 도 1 내지 도 4를 참조하여 상세히 설명한다.Hereinafter, a method of controlling a user device according to the present invention will be described in detail with reference to FIGS. 1 to 4.

도 2는 본 발명의 실시예에 따른 사용자 장치의 제어 방법을 나타낸 흐름도이다.Figure 2 A flowchart showing a method of controlling a user device according to an embodiment of the present invention.

먼저, 제어부(300)는 영상 획득부(100)로부터 제공되는(또는 촬영되는/확인되는) 영상 내에서 객체의 움직임을 식별(또는 판별/확인)한다. 여기서, 영상 획득부(100)로부터 제공되는 영상은 별로도 저장부(200)에 저장되지 않는 상태일 수 있다.First, the controller 300 identifies (or discriminates/confirms) the motion of an object in an image provided (or photographed/verified) from the image acquisition unit 100. Here, the image provided from the image acquisition unit 100 may be in a state that is not separately stored in the storage unit 200.

일 예로, 제어부(300)는 영상 획득부(100)로부터 제공되는 영상 내에서 사람의 움직임을 식별한다(S210).For example, the control unit 300 identifies a movement of a person in an image provided from the image acquisition unit 100 (S210).

이후, 제어부(300)는 식별된 객체의 움직임이 미리 설정된 시간 이상 유지되는지 여부를 판단(또는 확인)한다.Thereafter, the controller 300 determines (or confirms) whether the motion of the identified object is maintained for a predetermined time or longer.

즉, 제어부(300)는 식별된 객체의 움직임이 미리 설정된 시간 이상 멈춘 상태를 유지하는지 여부를 판단한다.That is, the controller 300 determines whether the motion of the identified object maintains a stopped state for more than a preset time.

일 예로, 제어부(300)는 식별된 사람의 움직임이 미리 설정된 시간인 ○○초 동안(또는 ○○초 이상) 유지된 채로 멈춘 상태를 유지하는지 여부를 판단한다(S220).For example, the control unit 300 determines whether or not the identified person's movement is maintained for a preset time of ○○ seconds (or ○○ seconds or more) and maintains a stopped state (S220).

판단 결과, 식별된 객체의 움직임이 미리 설정된 시간 이상 유지되지 않는 경우, 제어부(300)는 식별된 객체의 움직임이 미리 설정된 시간 이상 유지되는지 여부를 판단하는 상태로 복귀한다(S230).As a result of the determination, when the movement of the identified object is not maintained for more than a preset time, the controller 300 returns to a state to determine whether the movement of the identified object is maintained for more than a preset time (S230).

또한, 판단 결과, 식별된 객체의 움직임이 미리 설정된 시간 이상 유지되는 경우, 영상 획득부(100)는 제어부(300)의 제어에 의해 해당 객체를 포함하는 영상을 촬영(또는 획득)한다.In addition, as a result of the determination, when the movement of the identified object is maintained for more than a preset time, the image acquisition unit 100 captures (or acquires) an image including the object under the control of the controller 300.

또한, 영상 획득부(100)는 제어부(300)의 제어에 의해 촬영된 영상을 포함하는 영상 정보를 저장부(200)에 저장한다. 여기서, 영상 정보는 해당 영상과 함께 촬영 일자, 촬영 위치 정보(예를 들어 사용자 장치(10)에 구비된 GPS 수신기를 통해 확인되는 사용자 장치(10)의 위치 정보), 영상 획득부(100)(또는 사용자 장치(10))의 자세 정보, 영상에 포함된 객체의 자세 정보 등을 포함한다. 이때, 해당 영상 획득부(100)(또는 사용자 장치(10))의 자세 정보는 해당 사용자 장치(10)에 구비된 지자기 센서(미도시)에 의해 검출될 수 있다.In addition, the image acquisition unit 100 stores image information including an image captured under the control of the controller 300 in the storage unit 200. Here, the image information includes a photographing date, photographing location information (for example, location information of the user device 10 checked through a GPS receiver provided in the user device 10), and the image acquisition unit 100 ( Or, it includes posture information of the user device 10) and posture information of an object included in the image. At this time, the posture information of the image acquisition unit 100 (or the user device 10) may be detected by a geomagnetic sensor (not shown) provided in the user device 10.

일 예로, 식별된 사람의 움직임이 미리 설정된 시간인 ○○초 동안(또는 ○○초 이상) 유지된 채로 멈춘 상태를 유지할 때, 영상 획득부(100)는 제어부(300)의 제어에 의해 해당 사람을 포함하는 영상을 촬영한다.For example, when the movement of the identified person is maintained for ○○ seconds (or ○○ seconds or more), which is a preset time, and maintains a stopped state, the image acquisition unit 100 is controlled by the control unit 300 Takes an image including.

또한, 영상 획득부(100)는 사람을 포함하는 영상, 촬영 일자, 촬영 위치 정보, 지자기 센서를 통해 검출되는 영상 획득부(100)의 자세 정보, 제어부(300)의 객체 분석에 의해 확인되는 영상에 포함된 객체의 자세 정보 등을 포함한다(S240).In addition, the image acquisition unit 100 includes an image including a person, a photographing date, information on a photographing location, posture information of the image acquisition unit 100 detected through a geomagnetic sensor, and an image identified by object analysis by the controller 300. The posture information of the object included in is included (S240).

이후, 미리 설정된 버튼이 선택(또는 클릭)되는 경우, 제어부(300)는 저장부(200)에 저장된 영상 획득부(100)를 통해 촬영된 복수의 영상을 표시부(400)에 표시한다.Thereafter, when a preset button is selected (or clicked), the control unit 300 displays a plurality of images captured by the image acquisition unit 100 stored in the storage unit 200 on the display unit 400.

이때, 해당 복수의 영상을 표시부(400)에 표시할 때, 제어부(300)는 영상 정보(또는 촬영 일자, 촬영 위치 정보, 영상 획득부(100)의 자세 정보, 영상에 포함된 객체의 자세 정보 중 적어도 하나)를 근거로 해당 복수의 영상을 정렬하고, 정렬된 복수의 영상을 표시부(400)에 분류하여 표시한다.At this time, when displaying the plurality of images on the display unit 400, the controller 300 provides image information (or photographing date, photographing location information, posture information of the image acquisition unit 100, posture information of an object included in the image). The plurality of images are aligned based on at least one of), and the plurality of aligned images are classified and displayed on the display unit 400.

일 예로, 미리 설정된 버튼이 선택될 때, 제어부(300)는 저장부(200)에 저장된 복수의 영상에 대해서 해당 영상에 대응하는 영상 정보에 포함된 촬영 일자를 근거로 해당 복수의 영상을 정렬(또는 그룹화)한다. 이후, 도 3에 도시된 바와 같이, 제어부(300)는 촬영 일자별로 정렬된 제 1 그룹의 하나 이상의 영상(310), 제 2 그룹의 하나 이상의 영상(320)을 표시부(400)에 각각 표시한다.As an example, when a preset button is selected, the controller 300 sorts the plurality of images with respect to the plurality of images stored in the storage 200 based on the shooting date included in the image information corresponding to the corresponding image ( Or grouped). Thereafter, as shown in FIG. 3, the controller 300 displays one or more images 310 of the first group and one or more images 320 of the second group arranged by shooting date on the display unit 400, respectively. .

또한, 해당 복수의 영상을 표시부(400)에 표시할 때, 제어부(300)는 해당 복수의 영상이 표시되는 표시부(400)의 일부 영역에 해당 영상에 포함된 객체의 자세 정보를 근거로 촬영 위치나 포즈에 대한 제안 정보를 추가로 표시할 수도 있다. 이때, 제어부(300)는 객체의 자세 정보뿐만 아니라 객체 크기 비율을 고려할 수도 있다. 여기서, 객체 크기 비율은 제어부(300)의 제어에 의해 해당 영상에서 식별된 객체를 분석하여 획득된 정보일 수 있다. 특히, 해당 객체가 사람인 경우, 객체 크기 비율은 사람의 신체 비율일 수 있다.In addition, when displaying the plurality of images on the display unit 400, the control unit 300 displays a photographing position based on the posture information of the object included in the image in a partial area of the display unit 400 where the plurality of images are displayed. You can also display additional information about the pose or pose. In this case, the controller 300 may consider the object size ratio as well as the attitude information of the object. Here, the object size ratio may be information obtained by analyzing an object identified in a corresponding image under the control of the controller 300. In particular, when the object is a human, the object size ratio may be a human body ratio.

즉, 제어부(300)는 미리 설정된(또는 등록된/저장된) 복수의 객체 자세 정보(또는 객체 자세 정보 및 객체 크기 비율)에 따른 촬영 위치나 포즈에 대한 정보 중에서, 저장부(200)에 저장된 영상 내의 객체의 자세 정보(또는 객체 자세 정보 및 객체 크기 비율)에 대응하는 촬영 위치나 포즈에 대한 정보를 확인하고, 표시부(400)의 일부 영역에 저장부(200)에 저장된 영상 획득부(100)를 통해 촬영된 복수의 영상을 표시하고, 표시부(400)의 다른 일부 영역에 복수의 영상에 대응하여 각각 확인된 촬영 위치나 포즈에 대한 정보를 표시한다.That is, the control unit 300 is an image stored in the storage unit 200 from among information on a shooting position or a pose according to a plurality of preset (or registered/stored) object pose information (or object pose information and object size ratio). The image acquisition unit 100 that checks the information on the shooting position or pose corresponding to the posture information (or the object posture information and the object size ratio) of the inside object, and is stored in the storage unit 200 in a partial area of the display unit 400 A plurality of images photographed through are displayed, and information on the respective identified shooting positions or poses is displayed corresponding to the plurality of images in another partial area of the display unit 400.

일 예로, 미리 설정된 버튼이 선택될 때, 제어부(300)는 저장부(200)에 미리 등록된 복수의 객체 자세 정보에 따른 촬영 위치나 포즈에 대한 정보 중에서, 저장부(200)에 저장된 제 21 이미지 내의 사람의 자세 정보에 대응하는 제안 촬영 위치 정보와 제안 포즈 정보를 확인한다. 이후, 도 4에 도시된 바와 같이, 제어부(300)는 표시부(400)의 일부 영역에 영상 획득부(100)를 통해 촬영된 후 저장부(200)에 저장된 제 21 이미지, 제 22 이미지 및 제 23 이미지(410)를 표시하고, 표시부(400)의 다른 일부 영역에 각 이미지에 대응하여 확인된 제안 촬영 위치 정보(420)를 표시하고, 표시부(400)의 또 다른 일부 영역에 각 이미지에 대응하여 확인된 제안 포즈 정보(430)를 각각 표시한다.As an example, when a preset button is selected, the control unit 300 selects the 21st stored in the storage unit 200 from among information on a photographing position or pose according to a plurality of object posture information registered in the storage unit 200 in advance. Proposed photographing location information and suggested pose information corresponding to the person's posture information in the image are checked. Thereafter, as shown in FIG. 4, the control unit 300 captures a picture on a partial area of the display unit 400 through the image acquisition unit 100 and then stores the 21st image, the 22nd image, and the second image. 23 Display the image 410, display the suggested shooting location information 420 confirmed corresponding to each image in another partial area of the display unit 400, and correspond to each image in another partial area of the display unit 400 Each of the identified suggested pose information 430 is displayed.

또한, 제어부(300)는 도 3에 도시된 복수의 이미지(예를 들어 제 1 내지 제 4 이미지, 제 11 내지 제 13 이미지)에 대해서 각 이미지별로 제안 촬영 위치 정보, 제안 포즈 정보 등을 제공할 수도 있다(S250).In addition, the control unit 300 may provide suggested shooting location information and suggested pose information for each image for a plurality of images (eg, first to fourth images and 11th to 13th images) shown in FIG. 3. It may be possible (S250).

본 발명의 실시예에 따른 사용자 장치 및 그의 제어 방법은 컴퓨터 프로그램으로 작성 가능하며, 컴퓨터 프로그램을 구성하는 코드들 및 코드 세그먼트들은 당해 분야의 컴퓨터 프로그래머에 의하여 용이하게 추론될 수 있다. 또한, 해당 컴퓨터 프로그램은 컴퓨터가 읽을 수 있는 정보저장매체(computer readable media)에 저장되고, 컴퓨터나 본 발명의 실시예에 따른 사용자 장치(또는 단말) 등에 의하여 읽혀지고 실행됨으로써 사용자 장치 및 그의 제어 방법을 구현할 수 있다.The user device and its control method according to an embodiment of the present invention can be written as a computer program, and codes and code segments constituting the computer program can be easily inferred by a computer programmer in the art. In addition, the computer program is stored in a computer readable media, and is read and executed by a computer or a user device (or terminal) according to an embodiment of the present invention. Can be implemented.

정보저장매체는 자기 기록매체, 광 기록매체 및 캐리어 웨이브 매체를 포함한다. 본 발명의 실시예에 따른 사용자 장치 및 그의 제어 방법을 구현하는 컴퓨터 프로그램은 사용자 장치 등의 내장 메모리에 저장 및 설치될 수 있다. 또는, 본 발명의 실시예에 따른 사용자 장치 및 그의 제어 방법을 구현하는 컴퓨터 프로그램을 저장 및 설치한 스마트 카드 등의 외장 메모리가 인터페이스를 통해 사용자 장치 등에 장착될 수도 있다.Information storage media include magnetic recording media, optical recording media, and carrier wave media. A user device according to an embodiment of the present invention and a computer program for implementing the control method thereof may be stored and installed in an internal memory such as a user device. Alternatively, an external memory such as a smart card storing and installing a user device and a computer program for implementing the control method thereof according to an embodiment of the present invention may be mounted on the user device or the like through an interface.

본 발명의 실시예는 앞서 설명된 바와 같이, 영상 획득부를 통해 객체의 움직임을 관찰하다가 해당 객체의 움직임이 미리 설정된 시간 이상 유지될 때 해당 객체를 촬영하고 촬영된 객체를 포함하는 영상을 저장하여, 자동으로 영상을 획득하고 사용상의 편의성을 향상시킬 수 있다.As described above, an embodiment of the present invention photographs the object when the motion of the object is maintained for more than a preset time while observing the motion of the object through the image acquisition unit and stores an image including the photographed object, It can automatically acquire images and improve convenience in use.

또한, 본 발명의 실시예는 앞서 설명된 바와 같이, 미리 설정된 시간 이상 유지될 때마다 촬영된 영상을 표시하여, 촬영된 영상을 비교할 수 있으며, 사용자가 최적의 포즈를 확인하거나 복수 의상 착용 모습을 비교할 수 있다.In addition, as described above, the embodiment of the present invention displays a captured image every time it is maintained for a preset time or longer, so that the captured image can be compared, and the user can check the optimal pose or wear multiple clothes. Can be compared.

또한, 본 발명의 실시예는 앞서 설명된 바와 같이, 촬영된 영상을 분석하여 영상 내에 포함된 객체의 자세와 객체 크기 비율을 고려하여 촬영 위치나 포즈에 대한 제안 정보를 제공하여, 객체 촬영 및 표시 기능 수행에 따른 객체 촬영과 관련한 부가 서비스 기능의 제공 및 활용도를 향상시킬 수 있다.In addition, as described above, the embodiment of the present invention analyzes the captured image and provides the proposed information on the shooting position or pose in consideration of the posture and object size ratio of the object included in the image, so that the object is captured and displayed. It is possible to improve the provision and utilization of additional service functions related to object shooting according to function execution.

전술된 내용은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.The above contents may be modified and modified without departing from the essential characteristics of the present invention by those of ordinary skill in the technical field to which the present invention belongs. Accordingly, the embodiments disclosed in the present invention are not intended to limit the technical idea of the present invention, but to explain the technical idea, and the scope of the technical idea of the present invention is not limited by these embodiments. The scope of protection of the present invention should be interpreted by the following claims, and all technical ideas within the scope equivalent thereto should be interpreted as being included in the scope of the present invention.

본 발명은 영상 획득부를 통해 객체의 움직임을 관찰하다가 해당 객체의 움직임이 미리 설정된 시간 이상 유지될 때 해당 객체를 촬영하고 촬영된 객체를 포함하는 영상을 저장하고, 미리 설정된 시간 이상 유지될 때마다 촬영된 영상을 표시함으로써 사용자가 최적의 포즈를 확인하거나 복수 의상 착용 모습을 비교하는 것으로, 영상 처리 분야, 객체 식별/인식 분야 등에서 광범위하게 이용될 수 있다.In the present invention, while observing the movement of an object through an image acquisition unit, when the movement of the object is maintained for more than a preset time, the object is photographed, and an image including the photographed object is stored, and each time it is maintained for more than a preset time By displaying the created image, a user checks an optimal pose or compares wearing patterns of multiple clothes, and can be widely used in the field of image processing and object identification/recognition.

10: 사용자 장치 100: 영상 획득부
200: 저장부 300: 제어부
400: 표시부
10: user device 100: image acquisition unit
200: storage unit 300: control unit
400: display

Claims (10)

영상을 제공하는 영상 획득부;
상기 영상 내에 포함된 객체의 움직임을 식별하고, 상기 식별된 객체의 움직임이 미리 설정된 시간 이상 유지될 때 상기 영상 획득부를 제어하여 상기 객체를 포함하는 영상을 촬영하도록 제어하는 제어부;
상기 촬영된 영상을 포함하는 영상 정보를 저장하는 저장부; 및
미리 설정된 버튼이 선택될 때, 상기 제어부의 제어에 의해 상기 저장부에 저장된 복수의 영상을 표시하는 표시부
를 포함하며,
상기 저장부에는 복수의 객체 자세 정보에 따른 촬영 위치나 포즈에 대한 정보가 미리 등록되어 저장되고,
상기 제어부는 상기 저장부에 저장된 정보를 근거로 상기 복수의 영상에 각각 포함된 객체의 자세 정보에 대응하는 제안 촬영 위치나 제안 포즈에 대한 정보를 각각 확인하고, 상기 표시부의 일부 영역에 상기 복수의 영상을 표시하면서 상기 표시부의 다른 일부 영역에 상기 복수의 영상별로 상기 확인된 제안 촬영 위치에 대한 제안 촬영 위치 정보 또는 상기 확인된 제안 포즈에 대한 제안 포즈 정보를 표시하는 것을 특징으로 하는 사용자 장치.
An image acquisition unit that provides an image;
A control unit for identifying a movement of an object included in the image, and controlling the image acquisition unit to capture an image including the object when the movement of the identified object is maintained for a predetermined time or longer;
A storage unit for storing image information including the captured image; And
A display unit that displays a plurality of images stored in the storage unit under the control of the control unit when a preset button is selected
Including,
In the storage unit, information on a photographing position or pose according to a plurality of object attitude information is registered and stored in advance,
Based on the information stored in the storage unit, the control unit checks each information on the proposed shooting position or the proposed pose corresponding to the pose information of the object included in each of the plurality of images, and the plurality of A user device, characterized in that, while displaying an image, the proposed photographing position information for the confirmed proposed photographing position or the proposed pose information for the confirmed proposed pose is displayed on another partial region of the display unit for each of the plurality of images.
삭제delete 제1항에 있어서,
상기 제어부는 상기 영상 정보에 포함된 촬영 일자, 촬영 위치 정보, 상기 영상 획득부의 자세 정보 및 상기 영상에 포함된 객체의 자세 정보 중 적어도 하나를 근거로 상기 저장부에 저장된 복수의 영상을 정렬하고, 상기 정렬된 복수의 영상을 상기 표시부에 표시하는 것을 특징으로 하는 사용자 장치.
The method of claim 1,
The control unit arranges a plurality of images stored in the storage unit based on at least one of a photographing date included in the image information, photographing location information, posture information of the image acquisition unit, and posture information of an object included in the image, And displaying the plurality of aligned images on the display unit.
삭제delete 제1항에 있어서,
상기 제어부는 상기 영상에 포함된 객체가 사람일 때 상기 사람의 신체 비율을 분석하고, 상기 영상 정보에 포함된 촬영 일자, 촬영 위치 정보, 상기 영상 획득부의 자세 정보 및 상기 영상에 포함된 객체의 자세 정보 중 적어도 하나를 근거로 상기 저장부에 저장된 복수의 영상을 정렬하고, 상기 저장부에 미리 저장된 복수의 객체의 자세 정보 및 신체 비율에 대응하는 촬영 위치 정보 또는 포즈 정보 중에서 상기 복수의 영상에 각각 포함된 객체의 자세 정보 및 상기 분석된 신체 비율에 대응하는 촬영 위치나 포즈에 대한 정보를 각각 확인하고, 상기 표시부의 일부 영역에 상기 정렬된 복수의 영상을 표시하고, 상기 표시부의 다른 일부 영역에 상기 복수의 영상에 대응하여 확인된 촬영 위치 정보 또는 포즈 정보를 표시하는 것을 특징으로 하는 사용자 장치.
The method of claim 1,
When the object included in the image is a person, the control unit analyzes the body proportion of the person, and includes a photographing date, photographing location information, posture information of the image acquisition unit, and posture of the object included in the image. Alignment of a plurality of images stored in the storage unit based on at least one of the information, and each of the plurality of images among posture information of a plurality of objects stored in advance in the storage unit and photographing position information or pose information corresponding to a body ratio Check the posture information of the included object and information on the shooting position or pose corresponding to the analyzed body ratio, display the aligned plurality of images on a partial area of the display unit, and display the aligned plurality of images on a partial area of the display unit. The user device, characterized in that to display photographing location information or pose information confirmed in correspondence with the plurality of images.
영상 획득부를 통해 영상을 제공하는 단계;
제어부를 통해 상기 영상 내에 포함된 객체의 움직임을 식별하는 단계;
상기 제어부를 통해 상기 식별된 객체의 움직임이 미리 설정된 시간 이상 유지되는지 여부를 판단하는 단계;
상기 판단 결과, 상기 식별된 객체의 움직임이 미리 설정된 시간 이상 유지될 때, 상기 제어부를 통해 상기 영상 획득부를 제어하여 상기 객체를 포함하는 영상을 촬영하도록 제어하는 단계; 및
상기 제어부를 통해 상기 촬영된 영상을 포함하는 영상 정보를 저장부에 저장하도록 제어하는 단계
를 포함하며,
상기 저장부에는 복수의 객체 자세 정보에 따른 촬영 위치나 포즈에 대한 정보가 미리 등록되어 저장되고,
상기 영상 정보를 저장부에 저장하도록 제어하는 단계 이후,
상기 제어부를 통해, 상기 저장부에 저장된 정보를 근거로 상기 영상 정보에 포함된 객체의 자세 정보에 대응하는 제안 촬영 위치나 제안 포즈에 대한 정보를 확인하고, 표시부의 일부 영역에 상기 영상 정보에 따른 영상을 표시하면서 상기 표시부의 다른 일부 영역에 상기 확인된 제안 촬영 위치에 대한 제안 촬영 위치 정보 또는 상기 확인된 제안 포즈에 대한 제안 포즈 정보를 표시하는 단계를 더 포함하는 것을 특징으로 하는 사용자 장치의 제어 방법.
Providing an image through an image acquisition unit;
Identifying a motion of an object included in the image through a control unit;
Determining whether the movement of the identified object is maintained for a predetermined time or longer through the control unit;
As a result of the determination, when the movement of the identified object is maintained for longer than a preset time, controlling the image acquisition unit to capture an image including the object by controlling the image acquisition unit through the control unit; And
Controlling to store image information including the photographed image in a storage unit through the control unit
Including,
In the storage unit, information on a photographing position or pose according to a plurality of object attitude information is registered and stored in advance,
After controlling to store the image information in a storage unit,
Through the control unit, based on the information stored in the storage unit, the information on the proposed shooting position or the proposed pose corresponding to the pose information of the object included in the image information is checked, and according to the image information in a partial area of the display unit Control of a user device, characterized in that it further comprises the step of displaying suggested photographing location information for the confirmed proposed photographing position or suggested pose information for the confirmed proposed pose in another partial area of the display unit while displaying an image. Way.
삭제delete 삭제delete 삭제delete 삭제delete
KR1020140031493A 2014-03-18 2014-03-18 User equipment, control method thereof and computer readable medium having computer program recorded therefor KR102158751B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140031493A KR102158751B1 (en) 2014-03-18 2014-03-18 User equipment, control method thereof and computer readable medium having computer program recorded therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140031493A KR102158751B1 (en) 2014-03-18 2014-03-18 User equipment, control method thereof and computer readable medium having computer program recorded therefor

Publications (2)

Publication Number Publication Date
KR20150108559A KR20150108559A (en) 2015-09-30
KR102158751B1 true KR102158751B1 (en) 2020-09-22

Family

ID=54246490

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140031493A KR102158751B1 (en) 2014-03-18 2014-03-18 User equipment, control method thereof and computer readable medium having computer program recorded therefor

Country Status (1)

Country Link
KR (1) KR102158751B1 (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005148900A (en) * 2003-11-12 2005-06-09 Nippon Telegr & Teleph Corp <Ntt> Image classification device, image classification method, and program
JP2007043247A (en) * 2005-07-29 2007-02-15 Canon Inc Image processing apparatus and image processing method
KR100960034B1 (en) * 2007-02-05 2010-05-28 후지필름 가부시키가이샤 Image pickup apparatus, and device and method for control of image pickup

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050089410A (en) * 2004-03-05 2005-09-08 구경훈 Cellular phone with camera which shows location where photographs are taken
KR20060091975A (en) * 2005-02-16 2006-08-22 엘지전자 주식회사 Method for displaying thumbnail images
US8334842B2 (en) 2010-01-15 2012-12-18 Microsoft Corporation Recognizing user intent in motion capture system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005148900A (en) * 2003-11-12 2005-06-09 Nippon Telegr & Teleph Corp <Ntt> Image classification device, image classification method, and program
JP2007043247A (en) * 2005-07-29 2007-02-15 Canon Inc Image processing apparatus and image processing method
KR100960034B1 (en) * 2007-02-05 2010-05-28 후지필름 가부시키가이샤 Image pickup apparatus, and device and method for control of image pickup

Also Published As

Publication number Publication date
KR20150108559A (en) 2015-09-30

Similar Documents

Publication Publication Date Title
KR101603017B1 (en) Gesture recognition device and gesture recognition device control method
CN108182396B (en) Method and device for automatically identifying photographing behavior
JP2017200208A5 (en) Imaging apparatus, information acquisition system, information search server, and program
US9912853B2 (en) Switching between cameras of an electronic device
CN108200334B (en) Image shooting method and device, storage medium and electronic equipment
CN106774936B (en) Man-machine interaction method and system
US20160086322A1 (en) Image measurement device
CN106031154B (en) Handle the method for image and the electronic device for it
US10347000B2 (en) Entity visualization method
CN105027553B (en) Image processing apparatus, image processing method and the storage medium for storing image processing program
CN110209273A (en) Gesture identification method, interaction control method, device, medium and electronic equipment
KR101631011B1 (en) Gesture recognition apparatus and control method of gesture recognition apparatus
KR101455200B1 (en) Learning monitering device and method for monitering of learning
CN107395957B (en) Photographing method and device, storage medium and electronic equipment
KR20150039252A (en) Apparatus and method for providing application service by using action recognition
TW201727537A (en) Face recognition system and face recognition method
KR102337209B1 (en) Method for notifying environmental context information, electronic apparatus and storage medium
CN112434546A (en) Face living body detection method and device, equipment and storage medium
CN113255516A (en) Living body detection method and device and electronic equipment
CN104063041A (en) Information processing method and electronic equipment
US9294664B2 (en) Image display apparatus that displays a menu corresponding to an object, image display method that displays a menu corresponding to an object, and storage medium thereof
CN112073640A (en) Panoramic information acquisition pose acquisition method, device and system
KR102158751B1 (en) User equipment, control method thereof and computer readable medium having computer program recorded therefor
US9805245B2 (en) Image resolution recognition device, method for recognizing image resolution and image resolution recognition program
US9842402B1 (en) Detecting foreground regions in panoramic video frames

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant