KR20190063130A - 스마트 미러 - Google Patents

스마트 미러 Download PDF

Info

Publication number
KR20190063130A
KR20190063130A KR1020170161993A KR20170161993A KR20190063130A KR 20190063130 A KR20190063130 A KR 20190063130A KR 1020170161993 A KR1020170161993 A KR 1020170161993A KR 20170161993 A KR20170161993 A KR 20170161993A KR 20190063130 A KR20190063130 A KR 20190063130A
Authority
KR
South Korea
Prior art keywords
user
image
information
module
display
Prior art date
Application number
KR1020170161993A
Other languages
English (en)
Other versions
KR102071410B1 (ko
Inventor
박창혁
박지현
Original Assignee
박창혁
박지현
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 박창혁, 박지현 filed Critical 박창혁
Priority to KR1020170161993A priority Critical patent/KR102071410B1/ko
Publication of KR20190063130A publication Critical patent/KR20190063130A/ko
Application granted granted Critical
Publication of KR102071410B1 publication Critical patent/KR102071410B1/ko

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/107Measuring physical dimensions, e.g. size of the entire body or parts thereof
    • A61B5/1079Measuring physical dimensions, e.g. size of the entire body or parts thereof using optical or photographic means
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0075Means for generating exercise programs or schemes, e.g. computerized virtual trainer, e.g. using expert databases
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/80Special sensors, transducers or devices therefor
    • A63B2220/806Video cameras

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Human Computer Interaction (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Databases & Information Systems (AREA)
  • Pathology (AREA)
  • Multimedia (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • User Interface Of Digital Computer (AREA)
  • Image Analysis (AREA)

Abstract

본 발명은 스마트 미러에 관한 것으로서, 더욱 상세하게는 거울에 비치는 피사체의 영상을 촬영하고, 촬영된 영상을 분석 및 데이터베이스화함으로써 사용자에 적합한 다양한 서비스를 제공할 수 있는 스마트 미러에 관한 것이다.
본 발명에 따른 스마트 미러는 거울에 비치지는 사용자의 영상을 촬영하고, 촬영된 영상을 데이터베이스화하고 분석하여 이전에 촬영된 영상과 함께 현재 촬영된 영상을 비교 및 디스플레이함으로써 사용자가 자신의 체형 변화를 쉽게 인지할 수 있고, 체형 변화를 유도하기 위한 운동정보 및 영상을 제공함으로써 사용자에게 적합한 다양한 서비스를 제공할 수 있다.

Description

스마트 미러{Smart mirror}
본 발명은 스마트 미러에 관한 것으로서, 더욱 상세하게는 거울에 비치는 피사체의 영상을 촬영하고, 촬영된 영상을 분석 및 데이터베이스화함으로써 사용자에 적합한 다양한 서비스를 제공할 수 있는 스마트 미러에 관한 것이다.
거울은 인류가 오래전부터 사용해 온 매우 친근한 물건으로서, 자기 모습을 확인하기 위한 수단으로서 주로 이용되고 있다. 즉, 사람들은 하루에도 몇 번씩 거울을 통해 자신의 모습을 비춰보게 되는데 이는 실시간 확인만 가능할 뿐 그 모습을 저장해 둘 수가 없다.
최근에는 카메라 기능의 발달로 인해 셀프 사진 촬영을 하여 자신의 모습을 실시간으로 확인할 뿐 아니라 하거나 기록해 두어 차후에도 확인할 수 있게 되었다.
그러나, 자신의 모습을 기록해 두고자 하는 의지를 가지고 매번 휴대한 카메라를 이용하여 셀프 사진을 촬영하기란 번거로운 일이다. 이에 따라 거울에 카메라를 장착하여 사용자가 거울에 자신의 모습을 비춰볼 때 사진을 촬영하는 방식이 있으나, 단순 촬영된 사진을 활용하는 방식은 아직 미흡한 실정이다.
대한민국 공개특허 제10-2017-0034086호 대한민국 공개특허 제10-2004-0055762호
본 발명은 상기와 같은 종래의 문제를 해결하기 위한 것으로서, 거울에 비치는 피사체의 영상을 촬영하고, 촬영된 영상을 데이터베이스화하고 분석함으로써 사용자에 적합한 다양한 서비스를 제공할 수 있는 스마트 미러를 제공하는데 그 목적이 있다.
상기와 같은 목적을 달성하기 위한 본 발명에 따른 스마트 미러는 거울본체와; 상기 거울본체의 일 측에 구비되어 사용자를 촬영하는 카메라모듈과; 상기 카메라모듈에서 촬영된 영상을 저장하는 저장모듈과; 상기 카메라 모듈에 의해 촬영된 영상을 이용하여 사용자를 식별하고, 현재 촬영된 사용자의 현재 체형정보를 추출하며, 현재 추출된 체형정보와 상기 저장모듈에 기저장된 사용자의 이전 체형정보를 비교하여 사용자의 체형변화정보를 분석하는 분석처리모듈과; 상기 거울본체에 구비되어 사용자의 현재 체형정보, 이전 체형정보, 체형변화정보를 출력하는 디스플레이와; 상기 카메라모듈 및 상기 디스플레이를 각각 제어하며, 상기 분석처리모듈에서 분석된 사용자의 현재 체형정보에 따른 현재 체형라인과 이전 체형정보에 따른 이전 체형라인을 상기 디스플레이에 각각 표시되게 제어하며, 사용자의 체형변화정보에 따라 사용자의 체형변화를 유도하도록 상기 저장모듈에 저장된 트레이닝 영상들 중 적어도 하나를 추출하여 상기 디스플레이에 표시되게 제어하는 제어모듈과; 상기 제어모듈의 제어에 따라 사용자의 스마트단말기와 통신 가능하도록 지원하는 통신모듈;을 구비하는 것을 특징으로 한다.
상기 제어모듈은 사용자의 신체들 중 적어도 하나 이상의 특정 부위가 상기 디스플레이상의 미리 설정된 적어도 하나 이상의 특정 영역에 위치되도록 안내하는 촬영가이드라인을 상기 디스플레이에 표시되게 제어하고, 상기 분석처리모듈을 통해 상기 디스플레이상의 특정 영역에 사용자의 특정 부위가 위치한 것으로 분석되면, 상기 카메라모듈을 통해 사용자를 촬영 및 촬영된 영상을 상기 저장모듈에 저장되게 제어하는 것을 특징으로 한다.
상기 저장모듈에는 상기 카메라모듈에 촬영되는 사용자의 동작들 중 상기 디스플레이의 동작을 제어하기 위한 동작제어정보가 미리 저장되고, 상기 제어모듈은 상기 카메라모듈에 상기 동작제어정보에 대응되는 사용자의 동작이 촬영되면, 상기 동작제어정보에 따라 상기 디스플레이를 제어하는 것을 특징으로 한다.
상기 분석처리모듈은 상기 카메라모듈에서 촬영된 사용자의 전체 영상과, 상기 카메라모듈에서 촬영된 사용자의 전체 영상 중에서 사용자의 팔에 해당하는 상지부 영상과, 상기 카메라모듈에서 촬영된 사용자의 전체 영상 중에서 사용자의 다리에 해당하는 하지부 영상을 각각 추출하는 이미지처리부와, 상기 이미지처리부에서 추출된 상기 전체 영상과 상기 상지부 영상의 길이 비율정보와, 상기 전체 영상과 상기 하지부 영상의 길이 비율정보와, 상기 상지부 영상과 상기 하지부 영상의 길이 비율정보 및 상기 전체 영상과 상기 하지부 영상 또는 상기 상지부 영상의 면적 비율정보를 각각 계산하는 계산부와, 상기 계산부에서 계산된 비율정보들과 상기 저장모듈에 저장된 사용자별 표본정보와의 상호 유사도를 분석 및 분석 결과에 따라 사용자를 식별하는 식별부를 포함하는 것을 특징으로 한다.
본 발명에 따른 스마트 미러는 거울에 비치지는 사용자의 영상을 촬영하고, 촬영된 영상을 데이터베이스화하고 분석하여 이전에 촬영된 영상과 함께 현재 촬영된 영상을 비교 및 디스플레이함으로써 사용자가 자신의 체형 변화를 쉽게 인지할 수 있고, 체형 변화를 유도하기 위한 운동정보 및 영상을 제공함으로써 사용자에게 적합한 다양한 서비스를 제공할 수 있다.
도 1은 본 발명에 따른 스마트 미러를 나타낸 도면.
도 2는 사용자의 스마트단말기에 표시되는 정보를 나타낸 도면.
도 3은 본 발명에 따른 스마트 미러의 구성을 나타낸 블럭도.
도 4는 본 발명에 따른 스마트 미러의 동작을 나타낸 정면도.
이하, 첨부된 도면을 참조하면서 본 발명의 바람직한 실시 예에 따른 스마트 미러에 대하여 상세하게 설명한다.
도 1 내지 도 4에는 본 발명에 따른 스마트 미러(1)가 도시되어 있다. 도 1 내지 도 4를 참조하면, 본 발명에 따른 스마트 미러(1)는 거울본체(110)와, 카메라모듈(120)과, 저장모듈(130)과, 분석처리모듈(140)과, 디스플레이(150)와, 제어모듈(160)과, 통신모듈(170) 및 조작모듈을 구비한다.
본 발명에 따른 스마트 미러(1)는 디스플레이(150)가 거울 후방 배치되어 평상시에는 거울로 보이지만, 디스플레이(150)에 영상이 출력되는 경우에만 영상이 거울을 통과하여 그 영상을 사용자(5)가 확인할 수 있도록 구현된 것을 적용하였다.
거울본체(110)는 디스플레이(150)의 전면에 위치하는 것으로서, 디스플레이(150)와 밀착되어 배치될 수도 있으나, 디스플레이(150)의 사이에 투사공간이 형성되도록 일정 간격 이격되어 배치될 수도 있다.
거울본체(110)의 경우 일반적인 거울과 유사하게 소정의 위치에 위치한 사용자(5)를 비춰 표시할 수 있음은 물론이고 동시에 후면에 위치한 디스플레이(150)에서 표시중인 영상이 거울본체(110)를 투과하여 표시됨으로써, 사용자(5)는 자신의 모습과 영상을 동시에 확인할 수 있다.
이러한 거울본체(110)와 디스플레이(150)는 베젤 등의 하우징(111)에 의해 둘러싸여 고정되며, 이때 하우징은 금속이나 합성수지, 목재 등 충분한 내구성 및 지지력을 갖는 소재로 형성되는 것이 바람직하다.
카메라모듈(120)은 거울본체(110)의 일 측 또는 하우징에 구비되어 후술하는 제어모듈(160)의 제어에 따라 사용자(5)를 촬영한다. 본 실시 예에서 카메라모듈(120)은 하우징의 상측에 1개가 구비된 것을 적용하였으나, 이와 다르게 하우징의 상측뿐만 아니라 하측, 좌우측에 각각 설치하여 3D 형태의 영상을 촬영할 수 있음은 물론이다. 이 경우, 후술하는 분석처리모듈(140)에서는 복수의 카메라모듈(120)에서 촬영된 영상을 처리 및 종합하여 사용자(5)의 영상을 3D 형태로 생성할 수 있다.
저장모듈(130)은 제어모듈(160)의 제어에 의해 카메라모듈(120)에서 촬영된 영상을 저장한다. 그리고, 저장모듈(130)에는 카메라모듈(120)에 촬영되는 사용자(5)의 동작들 중 후술하는 제어모듈(160)의 제어에 따라 디스플레이(150)의 동작을 제어하기 위한 동작제어정보 및 사용자(5)의 체형을 관리할 수 있도록 안내하는 트레이닝 영상이 미리 저장된다.
분석처리모듈(140)은 카메라모듈(120)에 의해 촬영된 영상을 이용하여 사용자(5)를 식별하고, 현재 촬영된 사용자(5)의 현재 체형정보를 추출하며, 현재 추출된 체형정보와 저장모듈(130)에 기저장된 사용자(5)의 이전 체형정보를 비교하여 사용자(5)의 체형변화정보를 분석한다.
또한, 분석처리모듈(140)은 체형정보를 추출하기 이전에 카메라모듈(120)을 통해 획득되는 사용자(5)의 영상을 지속적으로 수신하는 상태로 사용자(5)의 특정 신체 일부분이 디스플레이(150)의 특정 영역에 위치하는지 여부를 판정한다.
일 예로, 분석처리모듈(140)은 도 3에 도시된 바와 같이 사용자(5)의 머리(B1), 양쪽 어깨(B2, B3), 양쪽 손(B4, B5), 양쪽 발(B6, B7)이 각각 디스플레이(150)상의 특정한 제1영역(A1), 제2영역(A2) 및 제3영역(A3), 제4영역(A4) 및 제5영역(A5), 제6영역(A6) 및 제7영역(A7)에 각각 위치하는 지를 판정한다.
제어모듈(160)은 분석처리모듈(140)에서 판정된 결과가 어느 한 부위라도 해당 영역에 위치하지 않은 것으로 판정되면, 사용자(5)의 특정 부위를 해당 영역에 위치시키도록 안내하는 안내메시지나 신호를 송출할 수 있다. 이는 사용자(5)의 촬영 영상이 사용자(5)의 자세에 따라 바뀌는 것을 방지하는 것으로 사용자(5)가 일정 자세를 취한 상태로 촬영함으로써 분석처리모듈(140)의 이전 영상과 현재 영상을 비교시 오류를 최소화하기 위한 것이다.
또한, 분석처리모듈(140)은 사용자(5)의 식별을 위한 이미지처리부와, 계산부와, 식별부를 구비한다.
이미지처리부는 카메라모듈(120)에서 촬영된 사용자(5)의 전체 영상과, 카메라모듈(120)에서 촬영된 사용자(5)의 전체 영상 중에서 사용자(5)의 팔에 해당하는 상지부 영상과, 카메라모듈(120)에서 촬영된 사용자(5)의 전체 영상 중에서 사용자(5)의 다리에 해당하는 하지부 영상을 각각 추출한다.
이미지처리부는 카메라모듈(120)에서 촬영된 사용자(5)의 영상 즉, 원본 영상의 각 픽셀에 대한 RGB 타입의 색정보를 YCbCr 타입의 색정보로 변환하고, 변환된 YCbCr 방식의 색정보에서 색차정보를 제거하여 단순 휘도 성분만을 갖는 이미지로 변환처리하며, 변환된 이미지로부터 엣지(Edge)를 검출하여 엣지이미지를 생성한다.
상술한 RGB 타입은 픽셀에 대한 색정보를 적색 성분과, 녹색 성분과 청색 성분으로 나타내고, YCbCr 타입은 픽셀에 대한 색정보를 휘도 성분과, 색차 성분 상세하게는 휘도 성분과 청색 성분의 차이, 휘도 성분과 적색 성분의 차이로 나타낸다. 이미지처리부의 변환처리 과정에서는 색차 정보뿐만 아니라, 설정된 휘도 값 이하의 휘도 값을 갖는 픽셀의 휘도 정보를 제거함으로써 원본 영상을 흑색과 백색으로 표현되는 이진 색정보를 갖는 이미지로 변환처리할 수도 있다.
그리고, 이미지처리부에서 생성되는 엣지이미지는 원본 영상로부터 서로 다른 명암을 지닌 두 영역 사이의 경계를 검출하는 엣지 검출 알고리즘을 통해 검출할 수 있다. 본 실시 예에서 이미지처리부의 엣지 검출을 위한 알고리즘은 크게 입력된 이미지를 가우시안필터(Gaussian filter)를 이용하여 평활화(Smoothing) 처리하는 단계와, 소벨 마스크(Sobel Mask)를 이용하여 그레디언트(gradients)를 검출(픽셀의 명암 값이 급격하게 변하는 부분을 검출)하는 단계와, 더블 스레스홀딩(Double thresholding)하는 단계 및 엣지 트래킹(Edge tracking)단계를 포함하는 캐니 엣지 검출(Canny Edge Detection) 알고리즘을 적용한다. 더블 스레스홀딩 단계에서는 두 개의 임계값을 기준으로 약 엣지와 강 엣지를 판단하고, 엣지 트래킹단계에서는 끊어진 엣지를 연결한다.
이미지처리부는 엣지이미지에서 밝은 부분은 확장시키면서 어두운 부분은 약화시키는 팽창(Dilation) 연산 즉, 밝게 표시되는 엣지 영역을 그 주변으로 확장(dilation of canny image)시키는 연산을 통해 제1보정이미지를 생성하고, 제1보정이미지 중에서 국소적으로 위치하는 흑색 영역을 백색으로 채워 제2보정이미지를 생성(Filling)한다. 이는 엣지이미지에서 어두운 영역 즉 줄기부 부분에 대한 영역을 명확하게 구분하기 위한 것이다.
그리고, 이미지처리부는 제2보정이미지 중에서 원하는 영역 즉, 관심 영역만을 선택적으로 필터링 하기 위한 마스크(ROI MASK ; Region of interest)에 대하여 제2보정이미지를 컨벌루션(convolution) 적분하여 제3보정이미지를 생성하고, 제3보정이미지 중에서 외곽의 엣지에 대응되는 각각의 픽셀에 라벨을 부여한다(labelling). 이는 제3보정이미지에서 판별대상배추의 잎에 대한 아웃라인을 설정하기 위한 것이다.
또한, 이미지처리부는 제3보정이미지에서 밝은 영역은 약화시키면서 어두운 영역은 강화시키기 위한 침식(Erosion) 연산을 수행하여 제4보정이미지를 생성하고, 생성된 제4보정이미지의 경계를 검출하여 제5보정이미지를 생성하며, 생성된 제5보정이미지를 재차 침식 연산을 수행하여 제6보정이미지를 생성한다.
그리고, 이미지처리부는 제6보정이미지에 대하여 관심 영역 스레스홀딩(ROI Threshold) 연산을 통해 제7보정이미지 생성한다. 또한, 이미지처리부는 제6보정이미지를 이용하여 상지 또는 하지 마스크(Cabbage Mask)를 생성하고, 생성된 상지 또는 하지 마스크(Cabbage Mask)에 대하여 Filling, Erosion, Labelling 처리를 통해 사용자(5) 대한 전체보정이미지를 생성한다.
한편, 이미지처리부는 전체보정이미지의 추출이 완료된 후 또는 전체보정이미지의 추출 과정이 진행되는 도중에 상지부 이미지 또는 하지부 이미지의 추출을 위한 과정이 수행될 수 있다. 이는 상술한 바와 같은 전체보정이미지 추출 과정에서 생성된 제7보정이미지로부터 상지부 또는 하지부에 해당하는 제8보정이미지를 생성하고, 원본이미지로부터 제8보정이미지가 해당하는 영역과 매칭되는 영역을 추출하여 상지부 이미지 또는 하지부 이미지를 생성한다.
계산부는 이미지처리부에서 추출된 사용자(5)의 전체 영상과 상지부 영상의 길이 비율정보와, 전체 영상과 하지부 영상의 길이 비율정보와, 상지부 영상과 하지부 영상의 길이 비율정보 및 전체 영상과 하지부 영상 또는 상지부 영상의 면적 비율정보를 각각 계산한다. 그리고, 계산된 비율정보들을 식별부로 송출한다. 계산부에서 계산된 비율정보들은 저장모듈(130)에 별도로 저장된다.
식별부는 계산부에서 계산된 비율정보들과 저장모듈(130)에 저장된 사용자(5)별 표본정보와의 상호 유사도를 분석 및 분석 결과에 따라 사용자(5)를 식별한다.
식별부는 계산부에서 계산된 정보들과 저장모듈(130)에 저장된 품종별 및 원산지별 표본배추 각각에 대한 표본정보와의 상호 유사도를 분석 및 분석 결과에 따라 판별대상배추에 대한 품종과 원산지를 각각 판별한다.
식별부는 상술한 바와 같이 저장부에 기저장되어 있는 표본정보 즉, 사용자(5)별 전체 이미지 길이 인 키와, 팔 길이와, 다리 길이와, 키 대비 팔 길이 비율, 키 대비 다리 길이 비율, 팔 길이 대비 다리 길이 비율 정보와, 전체 이미지 면적, 상지부 면적, 하지부 면적, 전체 이미지 면적 대비 상지부 면적 비율, 전체 이미지 면적 대비 하지부 면적 비율, 상지부 면적 대비 하지부 면적 비율정보들을 각각 개별적으로 로딩하고 분석된 길이정보, 비율정보, 면적정보, 면적비율정보 각각에 대하여 로딩된 표본정보와 유사도를 비교하며, 유사도가 가장 큰 표본정보가 나타날 시 사용자(5)를 유사도가 가장 큰 표본정보에 대응하는 사용자(5)로 판별한다. 이때, 후술하는 제어모듈(160)은 판별된 사용자(5)의 이전 촬영 영상 및 체형정보를 로딩하여 디스플레이(150)에 표시하도록 제어한다.
디스플레이(150)는 거울본체(110)에 구비되어 카메라모듈(120)에서 촬영 및 분석처리모듈(140)에서 분석된 사용자(5)의 현재 체형정보, 이전 체형정보, 체형변화정보를 출력한다.
제어모듈(160)은 카메라모듈(120) 및 상기 디스플레이(150)를 각각 제어한다.
제어모듈(160)은 분석처리모듈(140)에서 분석된 사용자(5)의 현재 체형정보에 따른 현재 체형라인과 이전 체형정보에 따른 이전 체형라인을 상기 디스플레이(150)에 각각 표시되게 제어한다.
또한, 제어모듈(160)은 사용자(5)의 체형변화정보에 따라 사용자(5)의 체형변화를 유도하도록 저장모듈(130)에 저장된 트레이닝 영상들 중 적어도 하나를 추출하여 디스플레이(150)에 표시되게 제어한다.
또한, 제어모듈(160)은 사용자(5)의 신체들 중 적어도 하나 이상의 특정 부위가 디스플레이(150)상의 미리 설정된 적어도 하나 이상의 특정 영역에 위치되도록 안내하는 촬영가이드라인을 디스플레이(150)에 표시되게 제어하고, 분석처리모듈(140)을 통해 디스플레이(150)상의 특정 영역에 사용자(5)의 특정 부위가 위치한 것으로 분석되면, 카메라모듈(120)을 통해 사용자(5)를 촬영 및 촬영된 영상을 저장모듈(130)에 저장되게 제어 및 분석처리모듈(140)을 통해 사용자(5)를 식별하도록 제어한다.
또한, 제어모듈(160)은 카메라모듈(120)에 동작제어정보에 대응되는 사용자(5)의 동작이 촬영되면, 동작제어정보에 따라 디스플레이(150)를 제어한다.
일 예로, 제어모듈(160)은 사용자(5)가 손을 우에서 좌로 이동시킬 때, 현재 재생되고 있는 영상 이전의 영상이 재생되도록 제어하고, 사용자(5)가 손을 좌에서 우로 이동시킬 때, 현재 재생되고 있는 영상 다음의 영상이 재생되도록 제어하며, 사용자(5)가 손을 위에서 아래로 이동시킬 때, 현재 재생되고 있는 영상이 정지되도록 제어하고, 사용자(5)가 손을 아래서 위로 이동시킬 때, 현재 정지된 영상이 다시 재생되도록 제어할 수 있다.
제어모듈(160)은 설명한 바와 같이 사용자(5)의 동작을 인식 및 감지하여 영상의 재생 및 정지와 관련된 컨트롤을 수행할 수 있으나, 이와 다르게 디스플레이(150)에 재생되는 콘텐츠에 따라 다양한 컨트롤을 수행할 수 있음은 물론이다.
또한, 제어모듈(160)은 저장모듈(130)에 저장된 트레이닝 영상들 중에서 분석처리모듈(140)에서 분석된 사용자(5)의 체형변화정보에 따라 사용자(5)의 체형을 변화시키기 적합한 트레이닝 영상을 추출하여 디스플레이(150)에 표시함으로써 사용자(5)가 트레이닝 영상을 따라 할 수 있도록 한다. 이 경우, 분석처리모듈(140)은 카메라모듈(120)에서 촬영된 사용자(5)의 트레이닝 동작을 촬영한 뒤 사용자(5)의 동작이 트레이닝 영상에 표시되는 동작과 동일 여부를 판별하고, 제어모듈(160)은 판별 결과가 동일하면 디스플레이(150)에 표시되는 트레이닝 영상을 다음 영상으로 스킵하고, 동일하지 않으면 해당 영상을 지속적으로 나타나도록 제어한다.
통신모듈(170)은 제어모듈(160)의 제어에 따라 사용자(5)의 스마트단말기(200)와 통신 가능하도록 지원한다. 통신모듈(170)은 제어모듈(160)의 제어에 따라 블루투스나 와이파이를 통해 카메라모듈(120)에서 촬영된 영상 및 저장모듈(130)에 저장된 영상 콘텐츠 및 분석처리모듈(140)에서 분석된 분석정보를 스마트단말기(200)로 무선 송출한다.
통신모듈(170)을 통해 스마트 미러(1)와 연결된 사용자(5)의 스마트단말기(200)에는 사용자(5)의 체형관련 정보를 모니터링 및 관리하기 위한 애플리케이션이 설치되고, 이 애플리케이션을 통해 사용자(5)는 언제 어디서든 자신의 체형 관련 정보를 확인할 수 있다.
스마트단말기(200)는 스마트 미러(1)와 연동하여 사용자(5) 체형 관리 서비스를 처리한다. 즉, 스마트 미러(1)와 연동하여 사용자(5) 체형 관리 및 그와 관련된 서비스 정보를 공유 처리하고, 체형을 관리하는 영업점이나 상품 정보를 디스플레이(150)에 표시 또는 스마트 미러(1)에 표시되게 처리한다.
스마트단말기(200)는 스마트 미러(1)와 통신하는 통신부, 스마트 미러(1)로부터 제공받은 사용자(5) 관련 정보를 표시하는 표시부 및 스마트 미러(1)로부터 제공받은 사용자(5) 관련 정보 서비스를 처리하는 제어부를 포함하고, 제어부는 스마트 미러(1)와 연동하여 서비스 정보를 공유 처리한다.
상술한 바와 같은 본 발명에 따른 스마트 미러(1)는 카메라모듈(120)에 의해 촬영된 현재 영상을 분석하여 사용자(5)를 식별하고, 식별된 사용자(5) 정보에 따른 이전 영상을 저장모듈(130)에서 추출한다.
그리고, 영상을 분석하여 사용자(5)의 특정 부위에 따른 특징점을 추출하고, 해당 특징점을 이용하여 사용자(5)를 식별하는 기능을 통해 사용자(5)를 식별한다. 다시 말해, 실시간 촬영되는 영상을 분석하여, 사용자(5)를 식별하고, 해당 사용자(5)에 대응되도록 상술한 바와 같이 자체에 구비되거나 외부 장치에 구비된 저장매체에 데이터베이스화된 이전의 영상들을 추출한다.
그리고, 카메라모듈(120)에서 촬영되는 현재 영상과 저장모듈(130)에서 추출된 해당 사용자(5)의 이전 영상에 따른 화면을 생성하여 디스플레이(150)에 표시한다.
스마트 미러(1)는 현재 영상과 이전 영상을 비교함으로써, 비교결과를 도출하여 표시할 수 있는데, 예를 들어 현재 영상에 오버랩되도록 비교 결과를 표시할 수 있다.
또한, 본 발명에 따른 스마트 미러(1)는 스마트 체중계(300)와 통신 및 연동하여 스마트 체중계에서 측정된 사용자의 체중, 체지방정보 등을 수신하여 해당 정보를 디스플레이에 표시할 수도 있다.
이상에서 설명한 본 발명에 따른 는 첨부된 도면을 참조로 설명하였으나 이는 예시적인 것에 불과하며, 당해 기술분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시 예가 가능하다는 점을 이해할 것이다.
따라서, 본 발명의 진정한 기술적 보호의 범위는 첨부된 청구범위의 기술적 사상에 의해서만 정해져야 할 것이다.
1 : 스마트 미러
110 : 거울본체
120 : 카메라모듈
130 : 저장모듈
140 : 분석처리모듈
150 : 디스플레이
160 : 제어모듈
170 : 통신모듈
200 : 스마트단말기

Claims (4)

  1. 거울본체와;
    상기 거울본체의 일 측에 구비되어 사용자를 촬영하는 카메라모듈과;
    상기 카메라모듈에서 촬영된 영상을 저장하는 저장모듈과;
    상기 카메라 모듈에 의해 촬영된 영상을 이용하여 사용자를 식별하고, 현재 촬영된 사용자의 현재 체형정보를 추출하며, 현재 추출된 체형정보와 상기 저장모듈에 기저장된 사용자의 이전 체형정보를 비교하여 사용자의 체형변화정보를 분석하는 분석처리모듈과;
    상기 거울본체에 구비되어 사용자의 현재 체형정보, 이전 체형정보, 체형변화정보를 출력하는 디스플레이와;
    상기 카메라모듈 및 상기 디스플레이를 각각 제어하며, 상기 분석처리모듈에서 분석된 사용자의 현재 체형정보에 따른 현재 체형라인과 이전 체형정보에 따른 이전 체형라인을 상기 디스플레이에 각각 표시되게 제어하며, 사용자의 체형변화정보에 따라 사용자의 체형변화를 유도하도록 상기 저장모듈에 저장된 트레이닝 영상들 중 적어도 하나를 추출하여 상기 디스플레이에 표시되게 제어하는 제어모듈과;
    상기 제어모듈의 제어에 따라 사용자의 스마트단말기와 통신 가능하도록 지원하는 통신모듈;을 구비하는 것을 특징으로 하는 스마트 미러.
  2. 제1항에 있어서,
    상기 제어모듈은 사용자의 신체들 중 적어도 하나 이상의 특정 부위가 상기 디스플레이상의 미리 설정된 적어도 하나 이상의 특정 영역에 위치되도록 안내하는 촬영가이드라인을 상기 디스플레이에 표시되게 제어하고,
    상기 분석처리모듈을 통해 상기 디스플레이상의 특정 영역에 사용자의 특정 부위가 위치한 것으로 분석되면, 상기 카메라모듈을 통해 사용자를 촬영 및 촬영된 영상을 상기 저장모듈에 저장되게 제어하는 것을 특징으로 하는 스마트 미러.
  3. 제1항에 있어서,
    상기 저장모듈에는 상기 카메라모듈에 촬영되는 사용자의 동작들 중 상기 디스플레이의 동작을 제어하기 위한 동작제어정보가 미리 저장되고,
    상기 제어모듈은 상기 카메라모듈에 상기 동작제어정보에 대응되는 사용자의 동작이 촬영되면, 상기 동작제어정보에 따라 상기 디스플레이를 제어하는 것을 특징으로 하는 스마트 미러.
  4. 제1항에 있어서,
    상기 분석처리모듈은
    상기 카메라모듈에서 촬영된 사용자의 전체 영상과, 상기 카메라모듈에서 촬영된 사용자의 전체 영상 중에서 사용자의 팔에 해당하는 상지부 영상과, 상기 카메라모듈에서 촬영된 사용자의 전체 영상 중에서 사용자의 다리에 해당하는 하지부 영상을 각각 추출하는 이미지처리부와,
    상기 이미지처리부에서 추출된 상기 전체 영상과 상기 상지부 영상의 길이 비율정보와, 상기 전체 영상과 상기 하지부 영상의 길이 비율정보와, 상기 상지부 영상과 상기 하지부 영상의 길이 비율정보 및 상기 전체 영상과 상기 하지부 영상 또는 상기 상지부 영상의 면적 비율정보를 각각 계산하는 계산부와,
    상기 계산부에서 계산된 비율정보들과 상기 저장모듈에 저장된 사용자별 표본정보와의 상호 유사도를 분석 및 분석 결과에 따라 사용자를 식별하는 식별부를 포함하는 것을 특징으로 하는 스마트 미러.
KR1020170161993A 2017-11-29 2017-11-29 스마트 미러 KR102071410B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170161993A KR102071410B1 (ko) 2017-11-29 2017-11-29 스마트 미러

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170161993A KR102071410B1 (ko) 2017-11-29 2017-11-29 스마트 미러

Publications (2)

Publication Number Publication Date
KR20190063130A true KR20190063130A (ko) 2019-06-07
KR102071410B1 KR102071410B1 (ko) 2020-01-30

Family

ID=66850077

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170161993A KR102071410B1 (ko) 2017-11-29 2017-11-29 스마트 미러

Country Status (1)

Country Link
KR (1) KR102071410B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220082126A (ko) * 2020-12-09 2022-06-17 문명일 스마트 미러를 이용하는 피부 진단장치 및 그 구동 방법
KR20220119557A (ko) * 2019-11-25 2022-08-30 뉴턴1665 주식회사 신체상태 모니터링 서비스 제공방법

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040055762A (ko) 2004-06-08 2004-06-26 학교법인 한국정보통신학원 사진 찍는 거울 장치 및 그 촬영 방법
JP2006302122A (ja) * 2005-04-22 2006-11-02 Nippon Telegr & Teleph Corp <Ntt> 運動支援システムとその利用者端末装置及び運動支援プログラム
KR101679417B1 (ko) * 2015-09-21 2016-11-25 국민대학교산학협력단 스마트거울장치 및 그 제어방법
KR20170034086A (ko) 2015-09-18 2017-03-28 주식회사 퓨처리스트 스마트 미러와 그를 이용한 사용자 스타일 관리 서비스 시스템과 단말기 및, 정보처리장치

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040055762A (ko) 2004-06-08 2004-06-26 학교법인 한국정보통신학원 사진 찍는 거울 장치 및 그 촬영 방법
JP2006302122A (ja) * 2005-04-22 2006-11-02 Nippon Telegr & Teleph Corp <Ntt> 運動支援システムとその利用者端末装置及び運動支援プログラム
KR20170034086A (ko) 2015-09-18 2017-03-28 주식회사 퓨처리스트 스마트 미러와 그를 이용한 사용자 스타일 관리 서비스 시스템과 단말기 및, 정보처리장치
KR101679417B1 (ko) * 2015-09-21 2016-11-25 국민대학교산학협력단 스마트거울장치 및 그 제어방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220119557A (ko) * 2019-11-25 2022-08-30 뉴턴1665 주식회사 신체상태 모니터링 서비스 제공방법
KR20220082126A (ko) * 2020-12-09 2022-06-17 문명일 스마트 미러를 이용하는 피부 진단장치 및 그 구동 방법

Also Published As

Publication number Publication date
KR102071410B1 (ko) 2020-01-30

Similar Documents

Publication Publication Date Title
EP0932114B1 (en) A method of and apparatus for detecting a face-like region
US8416987B2 (en) Subject tracking apparatus and control method therefor, image capturing apparatus, and display apparatus
US8170350B2 (en) Foreground/background segmentation in digital images
US8432357B2 (en) Tracking object selection apparatus, method, program and circuit
KR100556856B1 (ko) 이동통신 단말기에서 화면 제어 방법 및 장치
EP1800259B1 (en) Image segmentation method and system
KR101494301B1 (ko) 스마트 미러 장치
US20080181507A1 (en) Image manipulation for videos and still images
US20110274314A1 (en) Real-time clothing recognition in surveillance videos
JP4888217B2 (ja) 人物属性推定装置
US20100302595A1 (en) Image Reproducing Apparatus And Imaging Apparatus
KR101923177B1 (ko) 사용자 기반의 증강 현실 정보를 제공하기 위한 장치 및 방법
US20080013837A1 (en) Image Comparison
JP2000082147A (ja) ヒトの顔を検出する方法および装置、ならびに観察者トラッキングディスプレイ
US11036966B2 (en) Subject area detection apparatus that extracts subject area from image, control method therefor, and storage medium, as well as image pickup apparatus and display apparatus
EP3490252A1 (en) Method and device for image white balance, storage medium and electronic equipment
US11315360B2 (en) Live facial recognition system and method
CN105611373A (zh) 视频图像处理方法及装置
JP2019048026A (ja) 生体情報解析装置及び手肌解析方法
JP2001067459A (ja) 顔画像処理方法および顔画像処理装置
KR101329138B1 (ko) 이미지 형성 시스템, 그의 강한 식별력을 가지는 색 특징추출 장치 및 그 방법
CN106682652A (zh) 基于增强现实的结构表面病害巡检和分析方法
CN107301390A (zh) 拍摄提示方法、装置及终端设备
US9412008B2 (en) Tracking apparatus and tracking method
KR20190063130A (ko) 스마트 미러

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant