KR20150066244A - 냉장고에 의해 헬스 서비스를 제공하는 방법 및 이를 위한 냉장고 - Google Patents

냉장고에 의해 헬스 서비스를 제공하는 방법 및 이를 위한 냉장고 Download PDF

Info

Publication number
KR20150066244A
KR20150066244A KR1020130151562A KR20130151562A KR20150066244A KR 20150066244 A KR20150066244 A KR 20150066244A KR 1020130151562 A KR1020130151562 A KR 1020130151562A KR 20130151562 A KR20130151562 A KR 20130151562A KR 20150066244 A KR20150066244 A KR 20150066244A
Authority
KR
South Korea
Prior art keywords
user
refrigerator
information
user profile
body resistance
Prior art date
Application number
KR1020130151562A
Other languages
English (en)
Other versions
KR102212064B1 (ko
Inventor
김영현
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020130151562A priority Critical patent/KR102212064B1/ko
Priority to US14/563,612 priority patent/US10115286B2/en
Publication of KR20150066244A publication Critical patent/KR20150066244A/ko
Application granted granted Critical
Publication of KR102212064B1 publication Critical patent/KR102212064B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/18Status alarms
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/30ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to physical therapies or activities, e.g. physiotherapy, acupressure or exercising
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024Detecting, measuring or recording pulse rate or heart rate
    • A61B5/02405Determining heart rate variability
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/117Identification of persons
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/117Identification of persons
    • A61B5/1171Identification of persons based on the shapes or appearances of their bodies or parts thereof
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/24Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316Modalities, i.e. specific diagnostic methods
    • A61B5/318Heart-related electrical modalities, e.g. electrocardiography [ECG]
    • A61B5/346Analysis of electrocardiograms
    • A61B5/349Detecting specific parameters of the electrocardiograph cycle
    • A61B5/35Detecting specific parameters of the electrocardiograph cycle by template matching
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/45For evaluating or diagnosing the musculoskeletal system or teeth
    • A61B5/4538Evaluating a particular part of the muscoloskeletal system or a particular medical condition
    • A61B5/4561Evaluating static posture, e.g. undesirable back curvature
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/48Other medical applications
    • A61B5/4869Determining body composition
    • A61B5/4872Body fat
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/7475User input or interface means, e.g. keyboard, pointing device, joystick
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25DREFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D23/00General constructional features
    • F25D23/12Arrangements of compartments additional to cooling compartments; Combinations of refrigerators with other equipment, e.g. stove
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25DREFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D29/00Arrangement or mounting of control or safety devices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/22Social work
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00Teaching not covered by other main groups of this subclass
    • G09B19/0092Nutrition
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/63ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16ZINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS, NOT OTHERWISE PROVIDED FOR
    • G16Z99/00Subject matter not provided for in other main groups of this subclass
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25BREFRIGERATION MACHINES, PLANTS OR SYSTEMS; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS
    • F25B2700/00Sensing or detecting of parameters; Sensors therefor
    • F25B2700/02Humidity
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25DREFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D2400/00General features of, or devices for refrigerators, cold rooms, ice-boxes, or for cooling or freezing apparatus not covered by any other subclass
    • F25D2400/36Visual displays
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25DREFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D2700/00Means for sensing or measuring; Sensors therefor
    • F25D2700/04Sensors detecting the presence of a person
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25DREFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D2700/00Means for sensing or measuring; Sensors therefor
    • F25D2700/08Sensors using Radio Frequency Identification [RFID]

Abstract

본 발명의 일 예에 따른 냉장고에 의해 헬스 서비스를 제공하는 방법은, 상기 냉장고에 의해 사용자의 생체 정보를 측정하는 과정과; 상기 냉장고에 저장된 적어도 하나의 사용자 프로파일에서 상기 측정된 생체 정보와 대응되는 생체 정보가 포함된 사용자 프로파일을 검색하는 과정과; 상기 검색된 사용자 프로파일에 근거하여 상기 사용자에게 헬스 서비스를 제공하는 과정을 포함할 수 있다.

Description

냉장고에 의해 헬스 서비스를 제공하는 방법 및 이를 위한 냉장고{METHOD FOR PROVIDING HEALTH SERVICE AND REFRIGERATOR THEREFOR}
본 발명은 냉장고에 관한 것이다.
냉장고는 음식이 상하지 않도록 저온으로 신선하게 보관하는 장치이다. 냉장고는 그 형태 및 기능에 따라 매우 다양화되어 있다.
예를 들어, 냉장고는, 냉장실과 냉동실을 구비한 일반 다용도 냉장고, 김치 냉장고, 와인 냉장고, 화장품 냉장고, 휴대용 냉장고, 차량용 냉장고, 생맥주 냉장고, 쌀 냉장고, 반찬 냉장고 등이 있고, 일반 단일 도어 냉장고, 양문형 냉장고, 4도어 냉장고 등이 있다. 냉장고는 집에서 가족 구성원이 공동으로 사용하고, 필수 가전이기는 하나, 그 기능이 단순하다.
최근에, 소득의 증가와 삶의 질 전반에 대한 향상에 관심을 가지게 되는, 스스로 생활 케어를 원하는 일반인들이 개인화된 맞춤형 건강 정보 및 이를 포함한 웰빙 서비스를 받고자 하나 비용적인 면이나 시간 소비적인 면에서 문제가 있다.
체지방 측정은 몸의 구성분 중에서 지방은 전류를 거의 통하지 않기 때문에, 몸에 전류를 흐르게 하면서 단자에 걸리는 전압을 측정하여 체저항을 측정하면 지방 구성 비율을 예상할 수 있다. 사용자의 키 몸무게 성별 나이를 알면 미리 만들어진 식에 이 변수들과 측정된 저항 값을 입력하여 체지방 비율을 계산한다.
 그러나, 체지방 측정 과정 중 몸에 500uA, 50kHz 의 전류를 흐르게 하는데, 심박동기(Pacemaker)의 동작을 교란할 수 있기 때문에 이런 시술을 받은 사람을 사용할 수가 없다. 이런 사용 불가능한 사람의 경우를 미리 발견하지 못하여, 체지방 측정 중에 심각한 건강상의 문제를 발생시킬 수 있다.
체저항 측정은 몸의 길이와 연관이 있고, 몸을 굽히거나 펴는 상태에 따라 길이와 단면적이 변하기 때문에 저항의 변화가 발생한다. 이런 변화는 체지방 감소에 의한 저항 변화보다 클 수 있기 때문에, 몸의 자세를 고려하지 않는 경우, 체지방 측정을 정확하게 할 수 없다.
 본 발명의 실시 예들의 목적은 종래기술과 관련된 문제점들 및/또는 단점들 중의 적어도 하나를 적어도 부분적으로 해결, 경감 또는 제거하는 것이다.
본 발명의 적어도 일 실시 예는 사용자가 냉장고를 사용하면서 식습관에 대한 피드백을 주어 사용자의 식습관을 조절하도록 한다.
본 발명의 적어도 일 실시 예는 냉장고를 사용시, 심전도 식별 정보 등의 기능을 사용하여, 사용자를 구별하여 사용자에 적합한 키, 몸무게, 나이, 성별의 프로파일을 자동으로 적용하여 별도의 과정 없이 체지방률을 측정하게 한다.
본 발명의 적어도 일 실시 예는 사용자의 키에 따른 자세의 변화를 예측하여 이를 보상하는 알고리즘을 사용하여 보다 정확한 체 지방 측정을 가능하게 한다.
본 발명의 일 예에 따른 냉장고에 의해 헬스 서비스를 제공하는 방법은, 상기 냉장고에 의해 사용자의 생체 정보를 측정하는 과정과; 상기 냉장고에 저장된 적어도 하나의 사용자 프로파일에서 상기 측정된 생체 정보와 대응되는 생체 정보가 포함된 사용자 프로파일을 검색하는 과정과; 상기 검색된 사용자 프로파일에 근거하여 상기 사용자에게 헬스 서비스를 제공하는 과정을 포함할 수 있다.
상기 측정된 생체 정보는 상기 사용자의 심전도일 수 있다.
상기 사용자의 심전도는 미리 설정된 공통 성분이 제거된 식별 정보일 수 있다.
상기 방법은, 상기 검색된 사용자 프로파일에 포함된 정보의 등록 시점에 근거하여 상기 검색된 사용자 프로파일의 업데이트 여부를 결정하는 과정을 더 포함할 수 있다.
상기 방법은, 상기 검색된 사용자 프로파일의 업데이트를 위한 상기 사용자의 생체 정보를 획득하는 과정을 더 포함할 수 있다.
상기 획득한 생체 정보를 상기 검색된 사용자 프로파일에 포함시킬 수 있다.
상기 방법은, 상기 검색된 사용자 프로파일에 근거하여 상기 사용자의 체저항 측정이 적합한지의 여부를 결정하는 과정과; 상기 사용자의 체지방 측정이 적합한 경우, 상기 사용자의 체저항을 측정하는 과정과; 상기 체저항에 근거하여 상기 사용자의 체지방을 산출하는 과정을 더 포함할 수 있다.
상기 방법은, 상기 사용자를 촬영한 이미지에 근거하여 상기 체저항 측정을 위한 상기 사용자의 자세가 적합한지의 여부를 결정하는 과정과; 상기 사용자의 자세가 적합하지 않은 경우, 상기 사용자에게 미리 설정된 자세 안내를 수행하는 과정을 더 포함할 수 있다.
상기 검색된 사용자 프로파일에 심박동기(Pacemaker)의 사용 정보가 포함된 경우, 상기 사용자의 체저항 측정이 부적합한 것으로 결정할 수 있다.
상기 측정된 생체 정보는 상기 사용자의 얼굴 인식 정보, 홍채 인식 정보, 또는 지문 인식 정보를 포함할 수 있다.
상기 방법은, 상기 냉장고 주변의 전자 장치로부터 상기 전자 장치의 기기 정보를 수신하는 과정을 더 포함하고, 상기 사용자 프로파일의 검색에 상기 수신한 기기 정보를 이용할 수 있다.
냉장고에 의해 헬스 서비스를 제공하는 방법을 실행하기 위한 프로그램을 기록한 기계로 읽을 수 있는 저장 매체가 제공될 수 있다.
본 발명의 다른 예에 따른 헬스 서비스를 제공하는 냉장고는, 적어도 하나의 사용자 프로파일을 저장하는 저장부와; 사용자의 생체 정보를 측정하는 센서부와; 상기 적어도 하나의 사용자 프로파일에서 상기 측정된 생체 정보와 대응되는 생체 정보가 포함된 사용자 프로파일을 검색하고, 상기 검색된 사용자 프로파일에 근거하여 상기 사용자에게 헬스 서비스를 제공하는 제어부를 포함할 수 있다.
상기 센서부는 복수의 전극을 이용하여 상기 사용자의 심전도를 측정하는 심전도 센서부를 포함하고, 상기 측정된 생체 정보는 상기 사용자의 심전도일 수 있다.
상기 제어부는 상기 사용자의 심전도에서 미리 설정된 공통 성분이 제거된 식별 정보를 이용하여 상기 사용자 프로파일을 검색할 수 있다.
상기 제어부는, 상기 검색된 사용자 프로파일에 포함된 정보의 등록 시점에 근거하여 상기 검색된 사용자 프로파일의 업데이트 여부를 결정할 수 있다.
상기 냉장고는, 상기 사용자의 체저항을 측정하는 체저항 센서부를 더 포함하고, 상기 제어부는, 상기 검색된 사용자 프로파일에 근거하여 상기 사용자의 체저항 측정이 적합한지의 여부를 결정하고, 상기 사용자의 체지방 측정이 적합한 경우, 상기 체저항 센서부를 이용하여 상기 사용자의 체저항을 측정하고, 상기 체저항에 근거하여 상기 사용자의 체지방을 산출할 수 있다.
상기 제어부는, 상기 사용자를 촬영한 이미지에 근거하여 상기 체저항 측정을 위한 상기 사용자의 자세가 적합한지의 여부를 결정하고, 상기 사용자의 자세가 적합하지 않은 경우, 상기 사용자에게 미리 설정된 자세 안내를 수행할 수 있다.
상기 제어부는, 상기 검색된 사용자 프로파일에 심박동기(Pacemaker)의 사용 정보가 포함된 경우, 상기 사용자의 체저항 측정이 부적합한 것으로 결정할 수 있다.
상기 센서부는 상기 사용자의 얼굴 인식을 위한 카메라, 상기 사용자의 홍채 인식을 위한 홍채 센서, 상기 사용자의 지문 인식을 위한 지문 센서, 또는 상기 냉장고 주변의 전자 장치로부터 상기 전자 장치의 기기 정보를 수신하는 통신부를 포함할 수 있다.
본 발명의 적어도 일 실시 예는, 심박동기(Pacemaker) 부착으로 체지방 측정 시 위험이 있을 수 있는 사람을 심전도 식별 기능으로 미리 판별하여 측정을 피하도록 할 수 있고, 이를 통하여 사용자의 안정성을 확보할 수 있다.
본 발명의 적어도 일 실시 예는, 가족 구성원들의 키가 같지 않기 때문에, 공동으로 사용하는 냉장고의 측정 부분을 잡을 경우 팔과 어깨의 각도가 변하게 되어 체저항 값이 정확하게 측정되지 않는 문제에 대하여, 이를 표준 체형과 사용자의 키를 비교하여, 표준 측정 자세에 해당하는 저항 값으로 변경해주어, 정확한 체지방 측정을 가능하게 한다.
본 발명의 적어도 일 실시 예는, 냉장고에 접촉 시 측정되는 심전도 정보를 활용하여 자동으로 사용자의 프로필을 소환하며, 측정된 체저항 값과 같이 계산하여, 체지방 값을 자동으로 계산하는 편리함을 제공한다.
본 발명의 적어도 일 실시 예는, 체저항은 가족 구성원들이 동일 하지 않을 가능성이 크기 때문에, 이를 사용자 구분의 수단으로 활용할 수 있다. 또한 심전도 식별 정보와 체저항 식별 정보를 결합하여 더욱 정확한 사용자 구분이 가능하다. 또한 추가의 사용자 구분 센서(지문, 성문(聲紋), 장문(掌紋), 홍채 인식 등)을 복합 이용하여 구분의 정밀도를 높이며, 사용자의 범위를 확대할 수 있다.
본 발명의 적어도 일 실시 예는, 사용자의 자동적인 구분을 바탕으로 하여 사용자에게 적합한 음식을 추천할 수 있다. 기본적인 건강 정보 제공 (체지방률, 심박, 스트레스 등), 현재 건강상태에 따른 추천 식단/식생활 추천 서비스 (칼로리 조절 식단뿐만 아니라 심박수 및 HRV(Heart Rate Variability) 분석을 통해 카페인 함유 음식/음료 섭취 제한 경고 안내 등), 맥박수는 체저항 변화를 측정하여 얻을 수 있으므로 이를 이용하여 심박수 변화률(HRV)을 구하고 스트레스를 구할 수 있다.
 본 발명의 적어도 일 실시 예는, 사용자의 구분을 바탕으로, 사용자가 냉장고를 사용하는 패턴(시간, 기간, 빈도 등)을 측정하여 식이요법(다이어트)에 필요한 음식 섭취 정보를 제공할 수 있다. 또한 사용자에게 적합한 음식을 추천할 수 있다. 자녀들의 경우 냉동 식품 등 인스턴트 식품의 무분별한 섭취를 제한할 수도 있다(문 잠금 기능, 부모에게 알림 등). 인스턴트 식품의 보관이 빈번하게 이루어지는 냉동실 같은 경우 사용자의 제한이 이루어지도록 하는 수단을 제공할 수도 있다(문 잠금 등). 사용자가 냉장고를 여는 행위를 시간대로 구별하여, 정상적인 식사 행위 인지 간식을 먹기 위한 행동인지 구별하여 지나친 간식의 섭취를 제한하도록 안내할 수 있다.
본 발명의 적어도 일 실시 예는, 여러 명이 공동으로 사용하는 냉장고의 경우, 냉장실을 구분하여, 등록된 사용자만 열 수 있도록 할 수도 있다.
본 발명의 적어도 일 실시 예는, 냉장고뿐 아니라, 다른 가전기기에 포함되어 있는 심전도 식별 기능을 이용하여 복합적인 관리를 할 수 있다. 운동 기구에 포함된 심전도 식별 기능으로 어느 정도 운동을 하는지의 정보 또한 같이 관리될 수 있다. 또한 냉장고에서 보관되는 인스턴트 식품을 데워 먹기 위해 전자레인지를 사용할 때 심전도 식별 기능을 사용하여 식습관 관리를 가능하게 할 수 있다.
도 1은 본 발명의 일 실시 예에 따른 냉장고의 구성을 나타낸다.
도 2는 본 발명의 일 실시 예에 따른 냉장고의 전면을 나타낸다.
도 3은 냉장고의 상부를 위에서 내려다 본 도면이다.
도 4는 냉장고에 설치된 체중계를 나타낸다.
도 5는 체중계를 냉장고로부터 분리하여 나타낸 평면도이다.
도 6은 본 발명의 일 실시 예에 따른 헬스 서비스 제공 방법을 나타내는 흐름도이다.
도 7은 음성 인식을 통한 사용자 인식의 예를 나타낸다.
도 8은 지문 인식을 통한 사용자 인식의 예를 나타낸다.
도 9는 홍채 인식을 통한 사용자 인식의 예를 나타낸다.
도 10은 얼굴 인식을 통한 사용자 인식의 예를 나타낸다.
도 11은 기기 인식을 통한 사용자 인식의 예를 나타낸다.
도 12는 심전도 측정 또는 인식을 통한 사용자 인식의 예를 나타낸다.
도 13은 심전도 신호를 나타낸다.
도 14는 심전도 신호를 나타낸다.
도 15는 사용자 프로파일들의 예를 나타낸다.
도 16은 체지방 측정 방법을 나타낸다.
도 17은 체형 및 팔의 각도의 관계를 설명하기 위한 도면이다.
도 18은 냉장고의 내부에 설치된 센서들을 설명하기 위한 도면이다.
도 19는 본 발명의 일 예에 따른 헬스 서비스 제공 방법을 나타내는 흐름도이다.
도 20은 사용자의 전자 장치에 저장된 음식물 식별 정보를 수신하는 과정을 설명하기 위한 도면이다.
도 21 및 도 22는 음식물 정보를 표시하는 과정을 설명하기 위한 도면들이다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시 예를 가질 수 있는 바, 특정 실시 예들을 도면에 예시하여 상세하게 설명한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지는 않는다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.
본 출원에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 과정, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 과정, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
본 개시에 따른 냉장고는 냉장실과 냉동실을 구비한 일반 다용도 냉장고, 김치 냉장고, 와인 냉장고, 냉동고, 화장품 냉장고, 휴대용 냉장고, 차량용 냉장고, 생맥주 냉장고, 쌀 냉장고, 반찬 냉장고 등의 음식물을 저장하는 전자 장치일 수 있고, 일반 단일 도어 냉장고, 양문형 냉장고, 4도어 냉장고 등일 수 있다.
본 개시에 따른 냉장고는 유선 또는 무선으로 다른 전자 장치와 통신할 수 있으며, 본 개시에 따른 냉장고는 다른 전자 장치로부터 사용자의 건강 또는 생활 관련 정보를 수신할 수 있다.
본 개시에 따른 전자 장치는, 통신 기능이 포함된 장치일 수 있다. 예를 들면, 전자 장치는 휴대폰, 스마트 폰(smartphone), 태블릿 PC(tablet personal computer), 이동전화기(mobile phone), 화상전화기, 전자북 리더기(e-book reader), 데스크탑 PC(desktop personal computer), 랩탑 PC(laptop personal computer), 넷북 컴퓨터(netbook computer), PDA(personal digital assistant), PMP(portable multimedia player), MP3 플레이어, 모바일 의료기기, 카메라(camera), 웨어러블 장치(wearable device)(예: 전자 안경과 같은 head-mounted-device(HMD), 전자 의복, 전자 팔찌, 전자 목걸이, 전자 앱세서리(appcessory), 또는 스마트 와치(smartwatch) 중의 적어도 하나를) 포함할 수 있다.
또한, 전자 장치는 통신 기능을 갖춘 스마트 가전 제품(smart home appliance)일 수 있다. 스마트 가전 제품은, 예를 들자면, 텔레비전, DVD(digital video disk) 플레이어, 오디오, 에어컨, 청소기, 오븐, 전자레인지, 세탁기, 공기 청정기, 셋톱 박스(set-top box), TV 박스(예를 들면, 삼성 HomeSyncTM, 애플TVTM, 또는 구글 TVTM), 게임 콘솔(game consoles), 전자 사전, 전자 키, 캠코더(camcorder), 또는 전자 액자 중의 적어도 하나를 포함할 수 있다.
또한, 전자 장치는 각종 의료기기, 예를 들어, 체중계, 혈압계, 체지방계, MRA(magnetic resonance angiography), MRI(magnetic resonance imaging), CT(computed tomography), 촬영기, 초음파기 중의 적어도 하나를 포함할 수 있다.
또한, 전자 장치는, 통신 기능을 포함한 가구(furniture) 또는 건물/구조물의 일부, 전자 보드(electronic board), 전자 사인 입력장치(electronic signature receiving device), 프로젝터(projector), 또는 각종 계측기기(예: 수도, 전기, 가스, 또는 전파 등) 중의 적어도 하나를 포함할 수 있다. 본 개시에 따른 전자 장치는 전술한 다양한 장치들 중 하나 또는 그 이상의 조합일 수 있다. 또한, 본 개시에 따른 전자 장치는 전술한 기기들에 한정되지 않음은 당업자에게 자명하다.
도 1은 본 발명의 일 실시 예에 따른 냉장고의 구성을 나타낸다.
냉장고(100)는 통신부(110), 저장부(120), 표시부(130), 입출력 모듈(140), 센서부(150) 및 제어부(160)를 포함한다.
통신부(110)는 서버(190) 또는 전자 장치(181, 182)와의 직접 연결 또는 네트워크를 통한 연결을 위해 제공되며, 유선 또는 무선 통신부일 수 있으며, 제어부(160), 저장부(120), 카메라부(151) 등으로부터의 데이터를 유선 또는 무선으로 전송하거나, 외부 통신선 또는 대기로부터 데이터를 유선 또는 무선 수신하여 제어부(160)로 전달하거나 저장부(120)에 저장한다.
통신부(110)는 이동통신 모듈, 무선랜 모듈, 또는 근거리 통신 모듈 등을 포함할 수 있다. 통신부(110)는 통신 카드, 통신 인터페이스, 통신 모뎀 등을 포함할 수 있으며, 예를 들어, 종합 정보 통신망(integrated services digital network: ISDN) 카드, 모뎀, 근거리 통신망(LAN) 카드, 적외선 포트, 블루투스 포트(Bluetooth port), 지그비(zigbee) 포트, 또는 무선 포트 등을 포함할 수 있다.
통신부(110)는 소정의 근거리 유무선 통신(예: Wifi(wireless fidelity), 블루투스(Bluetooth: BT), RFID(radio frequency identification), NFC(near field communication), 소정의 네트워크 통신(예: 인터넷(Internet), LAN(local area network), WAN(wire area network), 텔레커뮤니케이션 네트워크(telecommunication network), 셀룰러 네트워크(cellular network), 위성 네트워크(satellite network), USB(universal serial bus), RS-232(recommended standard 232) 또는 POTS(plain old telephone service) 등) 등의 유무선 통신(170)을 지원할 수 있다.
이동통신 모듈은 제어부(160)의 제어에 따라 하나 또는 복수의 안테나를 이용하여 이동 통신을 통해 냉장고(100)가 서버(190) 또는 전자 장치(182)와 연결되도록 한다. 이동통신 모듈은 냉장고(100)에 입력되는 전화번호, 또는 네트워크 주소를 가지는 휴대폰, 스마트폰, 컴퓨터 또는 다른 장치와 음성 통화, 화상 통화, 문자메시지(SMS), 멀티미디어 메시지(MMS) 등을 위한 데이터를 교환하거나 일방향 전송 또는 수신을 위한 무선 신호(Radio frequency signal: RF signal)를 송신 또는 수신한다.
무선랜 모듈은 제어부(160)의 제어에 따라 무선 AP(access point)(도시되지 아니함)가 설치된 장소에서 인터넷에 연결될 수 있다. 무선랜 모듈은 미국전기전자학회(IEEE)의 무선랜 규격을 지원한다.
근거리통신 모듈은 제어부(160)의 제어에 따라 냉장고(100)와 전자 장치(181) 사이의 무선 근거리 통신을 지원할 수 있다.
저장부(120)는 하나 또는 복수의 어플리케이션의 구동을 위한 데이터를 저장할 수 있다. 저장부(120)는 하나 또는 복수의 어플리케이션과 관련된 그래픽 사용자 인터페이스(graphical user interface: GUI)를 제공하기 위한 이미지들, 사용자 정보, 문서 등의 데이터 또는 데이터베이스, 상기 냉장고(100)를 구동하는데 필요한 배경 이미지들(메뉴 화면, 대기 화면 등) 또는 운영 프로그램들, 카메라에 의해 촬영된 이미지들 등을 저장할 수 있다. 상기 저장부(120)는 기계(예를 들어, 컴퓨터)로 읽을 수 있는 매체이며, 기계로 읽을 수 있는 매체라는 용어는 기계가 특정 기능을 수행할 수 있도록 상기 기계에게 데이터를 제공하는 매체로 정의될 수 있다. 기계로 읽을 수 있는 매체는 저장 매체일 수 있다. 상기 저장부(120)는 비휘발성 매체(non-volatile media), 또는 휘발성 매체 등을 포함할 수 있다. 이러한 모든 매체는 상기 매체에 의해 전달되는 명령들이 상기 명령들을 상기 기계로 읽어 들이는 물리적 기구에 의해 검출될 수 있도록 유형의 것이어야 한다.
상기 저장부(120)는 내장 메모리 또는 외장 메모리를 포함할 수 있다. 내장 메모리는, 예를 들면, 휘발성 메모리(예를 들면, DRAM(dynamic RAM), SRAM(static RAM), SDRAM(synchronous dynamic RAM) 등) 또는 비휘발성 메모리(non-volatile Memory, 예를 들면, OTPROM(one time programmable ROM), PROM(programmable ROM), EPROM(erasable and programmable ROM), EEPROM(electrically erasable and programmable ROM), 마스크 롬(mask ROM), 플래시 롬(flash ROM), 낸드 플래시 메모리(NAND flash memory), NOR 플래시 메모리(NOR flash memory) 등) 중 적어도 하나를 포함할 수 있다. 내장 메모리는 SSD(Solid State Drive)일 수 있다. 외장 메모리는 플래시 드라이브(flash drive), 예를 들면, CF(compact flash), SD(secure digital), 마이크로 SD(micro secure digital), 미니 SD(mini secure digital), xD(extreme digital) 또는 메모리 스틱(Memory Stick) 등을 포함할 수 있다. 냉장고(100)는 하드 드라이브와 같은 저장 장치(또는 저장 매체)를 더 포함할 수 있다.
표시부(130)는 사용자에게 다양한 서비스(예, 통화, 데이터 전송, 방송, 사진/동영상 촬영)에 대응되는 그래픽 사용자 인터페이스를 제공할 수 있다. 표시부(130)는 그래픽 사용자 인터페이스에 입력되는 하나 또는 복수의 입력을 검출하고, 검출 결과인 사용자 입력 정보를 제어부(160)로 전송할 수 있다. 표시부(130)는 사용자의 신체(예, 엄지를 포함하는 손가락) 또는 터치 가능한 입력 수단(예, 스타일러스 펜)을 통해 하나 또는 복수의 터치를 입력받을 수 있다. 또한, 표시부(130)는 하나 또는 복수의 터치 중에서, 하나의 터치의 연속적인 움직임(즉, 드래그)을 입력받을 수 있다. 표시부(130)는 입력되는 터치의 연속적인 움직임에 대응되는 사용자 입력 정보를 제어부(160)로 전송할 수 있다.
사용자 입력은 표시부(130)와 사용자의 신체 또는 터치 가능한 입력 수단과의 접촉에 한정되지 않고, 비접촉인 호버링(예를 들어, 표시부(130)와 사용자의 신체 또는 터치 가능한 입력 수단과 검출 가능한 간격이 0보다 크고 5 cm 이하)을 포함할 수 있다. 이러한 검출 가능한 간격은 표시부(130)의 호버링 검출 능력에 따라 더 커질 수 있다.
표시부(130)는 표시 패널 및 터치 패널을 포함하는 터치스크린일 수 있으며, 예를 들어, 저항막(resistive) 방식, 정전용량(capacitive) 방식, 적외선(infrared) 방식, 초음파(acoustic wave) 방식, 전자기(ElectroMagnetic: EM) 방식, 전자기 공명 (ElectroMagnetic Resonance, EMR) 등의 터치스크린일 수 있다. 표시 패널은, 예를 들면, LCD(liquid-crystal display) 또는 AM-OLED(active-matrix organic light-emitting diode) 등일 수 있다.
입출력 모듈(140)은 사용자 입력을 수신하거나 사용자에게 정보를 알리기 위한 수단으로서, 버튼, 키패드(141), 마이크(142), 스피커(143), 커넥터, 커서 방향 키들, 또는 커서 컨트롤(cursor control) 등을 포함할 수 있다.
버튼은 냉장고(100)의 전면에 형성될 수 있으며, 전원/잠금 버튼, 볼륨 버튼, 메뉴 버튼, 홈 버튼, 돌아가기 버튼(back button), 또는 검색 버튼 등을 포함할 수 있다.
키패드(141)는 냉장고(100)의 제어를 위해 사용자로부터 키 입력을 수신할 수 있다. 키패드(141)는 냉장고(100)에 형성되는 물리적인 키패드, 또는 표시부(130)에 표시되는 가상의 키패드 등을 포함할 수 있다.
마이크(142)는 제어부(160)의 제어에 따라 음성(voice) 또는 사운드(sound)를 입력받아 전기적인 신호를 생성한다.
스피커(143)는 제어부(160)의 제어에 따라 다양한 신호(예, 무선신호, 디지털 오디오 파일, 디지털 동영상 파일 또는 사진 촬영 등)에 대응되는 사운드를 냉장고(100)의 외부로 출력할 수 있다. 스피커(143)는 냉장고(100)가 수행하는 기능에 대응되는 사운드를 출력할 수 있다. 스피커(143)는 냉장고(100)의 적절한 위치 또는 위치들에 하나 또는 복수로 형성될 수 있다.
커넥터는 냉장고(100)와 전자 장치를 연결하기 위한 인터페이스로 이용될 수 있다. 제어부(160)의 제어에 따라 커넥터에 연결된 유선 케이블을 통해 냉장고(100)의 저장부(120)에 저장된 데이터를 전자 장치로 전송하거나 또는 전자 장치로부터 데이터를 수신할 수 있다.
센서부(150)는 카메라부(151), 생체 센서부(152), 심전도 센서부(153), 체저항 센서부(155), 체중계(156), 스캐너(157), 온도 센서부(158), 습도 센서부(159)를 포함한다.
카메라부(151)는 적어도 하나의 카메라를 포함하며, 각 카메라는 외부로부터 입사된 광을 수렴시킴으로써 피사체의 광학적 이미지를 형성하는 렌즈계, 광학적 이미지를 전기적인 이미지 신호 또는 데이터로 변환하여 출력하는 이미지 센서를 포함할 수 있으며, 플래쉬 등을 더 포함할 수 있다.
또한, 적어도 하나의 카메라는 적외선 카메라를 포함할 수 있으며, 적외선 카메라는 적외선을 출력하는 적외선 광원과, 피사체로부터 반사된 적외선을 검출하여 전기적인 이미지 신호 또는 데이터로 변환하여 출력하는 이미지 센서를 포함할 수 있다.
카메라부(151)는 사용자의 상체 및/또는 하체를 촬영하고, 촬영된 신체 이미지를 제어부(160)로 출력한다.
생체 센서부(152)는 지문 센서, 홍채 센서 등을 포함할 수 있다. 생체 센서부(152)는 사용자의 인식된 생체 정보를 제어부(160)로 출력한다.
심전도 센서부(153)는 전극부(154)를 이용하여 사용자의 심전도를 측정한다. 전극부(154)는 제1 내지 제4 전극을 포함하며, 제1 및 제2 전극은 사용자의 신체 중 왼쪽 손과 접촉하며, 제3 및 제4 전극은 사용자의 신체 중 오른쪽 손과 접촉한다. 심전도 센서부(153)는 제1 및 제3 전극이나, 제2 및 제4 전극만을 이용하여 심전도를 측정할 수 있고, 추가로 하나의 전극(예를 들어, 제2 또는 제1 전극)을 더 사용하여 사용자를 접지시킴으로써 측정 정확도를 높일 수 있다. 예를 들어, 심전도 센서부(153)는 제1 및 제3 전극 간의 전압을 측정하고, 시간에 따라 변화하는 전압 파형은 심전도 신호를 나타낸다. 심전도 센서부(153)는 측정된 심전도 정보(즉, 심전도 신호)를 제어부(160)로 출력한다.
체저항 센서부(155)는 전극부(154)를 이용하여 사용자의 체저항을 측정한다. 제1 및 제2 전극은 사용자의 신체 중 왼쪽 손과 접촉하며, 제3 및 제4 전극은 사용자의 신체 중 왼쪽 손과 접촉한다. 체저항 센서부(155)는 제1 및 제4 전극을 통해 사용자에게 미리 설정된 세기의 전류를 인가하고, 제2 및 제3 전극 간의 전압 값을 측정하고, 전압(V), 전류(I) 및 저항(R)의 관계(V=IR)를 이용하여 저항 값을 산출한다. 체저항 센서부(155)는 측정된 체저항 정보(전압 값 또는 산출된 체저항 값)를 제어부(160)로 출력한다.
체중계(156)는 사용자의 체중을 측정하며, 측정된 체중 값을 제어부(160)로 출력한다. 체중계(156)는 제2의 심전도 센서부 및/또는 제2의 체저항 센서부를 포함할 수 있으며, 사용자의 심전도 정보 및/또는 체저항 정보를 제어부(160)로 출력한다.
스캐너(157)는 냉장고(100)에 저장될 음식물에 부착된 음식물 식별 정보를 인식하고, 인식된 음식물 식별 정보를 제어부(160)로 출력한다. 예를 들어, 음식물 식별 정보는 바코드(Barcode), QR 코드(Quick Response Code), NFC 태그(Near Field Communication Tag), RFID(radio frequency identification) 등일 수 있다.
온도 센서부(158)는 냉장고(100)의 내부 및/또는 외부 온도를 측정하고, 측정된 온도 값을 제어부(160)로 출력한다.
습도 센서부(159)는 냉장고(100)의 내부 및/또는 외부 온도를 측정하고, 측정된 온도 값을 제어부(160)로 출력한다.
제어부(160)는 미리 설정된 프로그램 동작을 수행하거나, 사용자 입력 정보에 따른 프로그램 동작을 수행한다. 이때, 사용자 입력은 입출력 모듈(140), 표시부(130), 센서부(150), 통신부(110) 등을 통한 입력을 포함한다.  제어부(160)는 정보 통신을 위한 버스(bus) 및 정보 처리를 위해 상기 버스와 연결된 프로세서(processor)를 포함할 수 있다. 제어부(160)는 중앙 처리 장치(Central Processing Unit: CPU), 또는 어플리케이션 프로세서(Application Processor: AP) 등을 포함할 수 있다.
제어부(160)는 또한 프로세서에 의해 요구되는 정보를 임시로 저장하기 위해 상기 버스와 연결된 램(random access memory: RAM), 상기 프로세서에 의해 요구되는 정적 정보(static information)를 저장하기 위해 상기 버스와 연결되는 롬(read only memory: ROM) 등을 더 포함할 수 있다.
제어부(160)는 냉장고(100)의 전반적인 동작을 제어하고, 본 발명의 다양한 실시 예에 따른 헬스 서비스 제공 방법을 수행하는 역할을 한다.
도 2는 본 발명의 일 실시 예에 따른 냉장고(100)의 전면을 나타내고, 도 3은 냉장고(100)의 상부를 위에서 내려다 본 도면이다.
냉장고(100)는 본체(200) 및 적어도 하나의 도어를 포함한다. 본 예에서, 냉장고(100)는 제1 내지 제4 도어(210, 220, 230, 240)를 포함하고, 제1 내지 제4 도어(210, 220, 230, 240)는 제1 내지 제4 손잡이(212, 222, 232, 242)를 각각 포함한다.
제1 도어(210)의 전면에는 표시부(130)와, 입출력 모듈(140)의 일부 요소들과, 생체 센서부(152)와, 스캐너(157)가 배치된다. 입출력 모듈(140)의 일부 요소들은 키패드(141), 마이크(142) 및 스피커(143) 를 포함한다.
제1 도어(210)의 제1 손잡이(212)의 전면에는 제1 전극(251)이 배치되고, 제1 손잡이(212)의 후면에는 제2 전극(252)이 배치된다. 제2 도어(220)의 제2 손잡이(222)의 전면에는 제3 전극(253)이 배치되고, 제2 손잡이(222)의 후면에는 제4 전극(254)이 배치된다.
제1 도어(210)의 제1 손잡이(212)의 전면에는 제1 전극(251)의 상측에 제1 카메라(261)가 배치되고, 제3 도어(230)의 제3 손잡이(232)의 전면에는 제2 카메라(262)가 배치된다. 제1 카메라(261)는 사용자의 상체를 촬영하고, 제2 카메라(262)는 사용자의 하체를 촬영한다.
도 4는 냉장고(100)에 설치된 체중계(156)를 나타내고, 도 5는 체중계(156)를 냉장고(100)로부터 분리하여 나타낸 평면도이다.
냉장고(100)의 본체(200)는 전면 개방된 박스 구조를 가지며, 좌측면부, 우측면부, 상면부, 하면부, 후면부와, 제1 및 제2 도어와 제3 및 제4 도어의 사이에 배치된 중간부를 포함한다. 체중계(156)는 냉장고(100) 본체(200)의 하면부 또는 그 아래로부터 슬라이딩 방식으로 인입 또는 인출될 수 있다.
체중계(156)는 제2의 전극부(350)를 포함하며, 제2의 전극부(350)는 제1 내지 제4 전극(351, 352, 353, 354)을 포함하며, 제1 및 제2 전극(351, 352)은 사용자의 신체 중 왼쪽 발과 접촉하며, 제3 및 제4 전극(353, 354)은 사용자의 신체 중 오른쪽 발과 접촉한다. 체중계(156)는 제2의 심전도 센서부(미도시) 및/또는 제2의 체저항 센서부(미도시)를 포함할 수 있으며, 제2의 심전도 센서부는 제1 및 제3 전극(351, 353)이나, 제2 및 제4 전극(352, 354)만을 이용하여 심전도를 측정하거나, 추가로 하나의 전극(예를 들어, 제2 또는 제1 전극(352, 351))을 더 사용하여 심전도를 측정할 수 있다. 제2의 체저항 센서부는 제1 및 제4 전극(351, 354)을 통해 사용자에게 미리 설정된 세기의 전류를 인가하고, 제2 및 제3 전극(352, 353) 간의 전압 값을 측정하고, 측정된 체저항 정보(전압 값 또는 산출된 체저항 값)를 제어부(160)로 출력할 수 있다. 또한, 체중계(156)는 사용자의 체중을 측정하며, 측정된 체중 값을 제어부(160)로 출력한다.
도 6은 본 발명의 일 실시 예에 따른 헬스 서비스 제공 방법을 나타내는 흐름도이다.
S10 단계는 사용자 인식 단계로서, 생체 정보를 측정하고(S110), 측정된 생체 정보를 저장부(120)에 저장된 생체 정보와 비교하고(S120), 비교 결과에 따라 사용자를 결정한다(S130).
제어부(160)는 표시부(130), 입출력 모듈(140) 또는 센서부(150)를 통해 사용자를 인식한다.
사용자 인식의 일 예로서, 제어부(160)는 표시부(130)에 사용자 인증 화면을 제공하고, 사용자는 표시부(130) 또는 입출력 모듈(140)을 통해 사용자 인증 화면에서 요구하는 비밀 정보를 입력하고, 제어부(160)는 사용자가 입력한 비밀 정보와 저장부에 저장된 사용자 프로파일에 등록된 비밀 정보를 비교할 수 있다. 제어부(160)는 사용자가 입력한 비밀 정보와 사용자 프로파일의 비밀 정보가 일치하는 경우에, 사용자 프로파일의 사용자가 인식된 것으로 결정한다. 이때, 비밀 정보의 입력은 가상 또는 물리적 키패드를 통한 입력, 음성 입력, 카메라를 통한 제스쳐 입력, 생체 센서부(152)를 통한 홍채, 지문 등의 생체 정보 입력 등을 포함할 수 있고, 제어부(160)는 이러한 다양한 입력에 대응하여 사용자 인증 화면을 제공할 수도 있다.
도 7은 음성 인식을 통한 사용자 인식의 예를 나타낸다.
제어부(160)는 “귀하의 이름을 말해 주세요.”라는 안내 문구를 표시부(130)에 표시한다. 표시부(130)의 하단에는 음성 인식 버튼이 제공되며, 사용자는 음성 인식 버튼(410)을 선택하여 음성 인식 모드를 실행할 수 있고, 음성 인식 모드는 제어부(160)에 의해 자동으로 실행될 수도 있다.
사용자가 "홍길동"이라고 말하면, 제어부(160)는 마이크(142)를 통해 입력된 사용자의 음성을 인식하고, 인식된 내용을 표시부(130)에 표시한다. 또한, 제어부(160)는 홍길동이라는 사용자 이름을 갖는 사용자 프로파일을 저장부(120)에서 검색한다.
이후, 제어부(160)는 "홍길동님. 비밀 번호를 말해 주세요."라는 안내 문구를 표시부(130)에 표시한다. 사용자가 "*******"이라고 말하면, 제어부(160)는 검색된 사용자 프로파일의 비밀 번호와 사용자가 입력한 비밀 번호를 비교하고, 비교 결과를 표시부(130)에 표시한다. 예를 들어, 비교가 성공한 경우에, 제어부(160)는 "홍길동님이 인식되었습니다."라는 문구를 표시부(130)에 표시할 수 있다. 비교가 실패한 경우에, 제어부(160)는 "다시 비밀 번호를 말해 주세요."라는 문구, 또는 "홍길동님의 인식이 실패하였습니다."라는 문구 등을 표시부(130)에 표시할 수 있다.
본 예와 다르게, 제어부(160)는 사용자의 음성(및 사용자 이름 정보)을 서버(190)로 전송하고, 서버(190)로부터 수신한 음성 인식 결과에 근거한 동작을 수행할 수도 있다.
또한, 본 예와 다르게, 사용자가 "홍길동"이라고 말하면, 제어부(160)는 마이크(142)를 통해 입력된 사용자의 음성을 인식하고, 홍길동이라는 사용자 이름을 갖는 사용자 프로파일을 저장부(120)에서 검색하고, 검색된 사용자 프로파일의 성문 정보와 입력된 사용자 음성의 성문 정보를 비교하고, 비교가 성공한 경우에, "홍길동님이 인식되었습니다."라는 문구를 표시부(130)에 표시할 수도 있다.
도 8은 지문 인식을 통한 사용자 인식의 예를 나타낸다.
도 8의 (a)를 참고하면, 제어부(160)는 “귀하의 이름을 말해 주세요.”라는 안내 문구를 표시부(130)에 표시한다. 표시부(130)의 하단에는 음성 인식 버튼(410)이 제공되며, 사용자는 음성 인식 버튼을 선택하여 음성 인식 모드를 실행할 수 있고, 음성 인식 모드는 제어부(160)에 의해 자동으로 실행될 수도 있다.
도 8의 (b)를 참고하면, 생체 센서부(152)는 지문 센서(410)를 포함할 수 있고, 지문 센서(410)는 사용자의 손가락이 그 표면에 접촉하면 상기 손가락의 지문 패턴에 대응하는 지문 데이터를 생성한다. 지문 센서(410)는 생성된 지문 데이터를 제어부(160)로 출력한다. 제어부(160)는 지문 센서(410)로부터 수신한 지문 데이터로부터 사용자의 지문 패턴 정보를 인식할 수 있다.
제어부(160)는 입력된 지문 패턴 정보와 일치하는 지문 패턴 정보를 갖는 사용자 프로파일을 저장부(120)에서 검색하고, 검색 결과를 표시부(130)에 표시할 수도 있다.
도 8의 (c)를 참고하면, 검색이 성공한 경우에, 제어부(160)는 검색된 사용자 프로파일의 사용자 이름을 참조하여 "홍길동님이 인식되었습니다."라는 문구를 표시부(130)에 표시할 수 있다.
도 9는 홍채 인식을 통한 사용자 인식의 예를 나타낸다.
도 9의 (a)를 참고하면, 제어부(160)는 제3 카메라(263)의 적외선 광원(601)이 저주파수로 변조되거나 일정한 세기를 갖는 적외선을 출력하도록 제어한다.
제3 카메라(263)의 이미지 센서(602)는 피사체로부터 반사된 적외선에 의해 형성된 광학 이미지를 전기적인 이미지로 변환하여 출력하고, 제어부(160)는 이러한 전기적인 이미지에서 홍채를 인식할 수 있다.
본 예와 다르게, 제어부(160)는 제3 카메라를 통해 눈, 지문, 얼굴, 손, 손목, 혈관(정맥 등) 등의 생체 정보를 측정할 수도 있다.
사용자의 눈(630)은 동공(631), 홍채(632) 및 공막(633)을 가지며, 적외선 광원(601)은 사용자의 눈(630)에 적외선을 조사하고, 이미지 센서(602)는 사용자의 눈(630)을 촬영하여 눈 이미지를 출력한다. 제어부(160)는 저장부(120)에 저장된 사용자의 홍채 데이터(홍채 이미지, 특징점 정보 등)와 촬영된 눈 이미지를 비교함으로써, 사용자의 홍채를 인식할 수 있다. 사용자의 홍채 데이터는 사용자 프로파일에 포함된다.
사용자 인식의 다른 예로서, 제어부(160)는 사용자의 제스쳐 또는 동작에 따라 사용자를 인식할 수 있다. 제어부(160)는 사용자가 냉장고(100)에 매우 근접한 경우, 사용자가 냉장고(100)와 접촉하려는 제스쳐를 취한 경우, 사용자가 냉장고(100)와 접촉한 경우, 사용자의 시선이 일정 시간 동안 냉장고(100)에 고정된 경우, 사용자가 체중계(156)를 인출한 경우 등에 있어서, 사용자 인식을 수행할 수 있다. 또는, 사용자가 이러한 제스쳐 또는 동작을 취한 경우, 제어부(160)는 사용자 인증 화면을 제공할 수도 있다.
이러한 사용자의 제스쳐 또는 동작의 검출은 센서부(150)를 통해 수행될 수 있다.
도 10은 얼굴 인식을 통한 사용자 인식의 예를 나타낸다.
도 10의 (a)를 참고하면, 제어부(160)는 제1 카메라(261)에 의해 촬영된 이미지에 얼굴이 포함되어 있는지 여부를 판단하고, 얼굴이 포함되어 있으면 해당 얼굴을 추출한다. 여기서, 얼굴 검출은 통상의 얼굴 검출 방법을 이용하여 수행되는데, 얼굴의 윤곽선, 얼굴 피부의 색상 및/또는 질감, 템플리트 등을 이용한 얼굴 추출 기술이 이용될 수 있다. 예를 들어, 제어부(160)는 다수의 얼굴 이미지를 통해 얼굴 학습을 수행하고, 축적된 얼굴 학습 데이터를 이용하여 입력된 이미지로부터 얼굴을 검출할 수 있다.
도 10의 (b)를 참고하면, 제어부(160)는 검출된 얼굴의 특징점들(710)과 저장부(120)에 저장된 각 사용자 프로파일의 얼굴 특징점들을 비교하고, 완전히 일치하거나 가장 많이 일치하는 얼굴 특징점들을 갖는 사용자 프로파일을 검색하고, 검색된 사용자 프로파일의 사용자가 인식된 것으로 결정한다.
즉, 제어부(160)는 특징점 비교를 통해 입력된 이미지로부터 검출된 얼굴과 매칭되는 얼굴을 사용자 프로파일들에서 검색하고, 매칭되는 얼굴에 대응하는 사용자 프로파일의 사용자가 인식된 것으로 결정한다.
도 11은 기기 인식을 통한 사용자 인식의 예를 나타낸다.
제어부(160)는 통신부(110)를 통해 그 주변의 전자 장치와 근거리 통신을 수행함으로써, Peer to Peer(P2P) 서비스를 제공할 수 있다. 본 예에서, 냉장고(100)는 스마트 글래스(810), 스마트 와치(820) 등의 웨어러블 전자 장치 또는 근거리 통신 모듈을 포함한 휴대폰(830)과 통신할 수 있다. 근거리 통신은 NFC(near field communication), RFID(radio frequency identification), 블루투스(Bluetooth), 저전력 블루투스(Bluetooth Low Energy: BLE), 지그비(Jigbee), 적외선 통신, 와이파이 다이렉트(Wi-Fi Direct), 홈 RF(Radio Frequency), DLNA(Digital Living Network Alliance) 등일 수 있다. 이러한 근거리 통신에서 제어부(160)는 통신부(110)를 통해 그 주변의 근거리 통신을 지원하는 전자 장치를 검색하고, 이러한 전자 장치로부터 기기 정보를 수신한다. 이러한 기기 정보는 제조사가 설정한 SHV-E21OS, Android-99 등과 같은 전자 장치의 모델명이거나, 해당 사용자가 임의로 설정한 단말의 이름이 될 수 있다. 제어부(160)는 수신한 기기 정보와 일치하는 기기 정보를 갖는 사용자 프로파일을 저장부(120)에서 검색하고, 검색된 사용자 프로파일의 사용자가 인식된 것으로 결정한다.
도 12는 심전도 측정 또는 인식을 통한 사용자 인식의 예를 나타낸다.
제어부(160)는 사용자가 체중계(156)를 냉장고(100) 본체로부터 인출하거나 냉장고(100)의 도어를 잡은 경우에 심전도 센서부(153)를 제어하여 심전도 측정을 수행할 수 있다.
본 예에서, 사용자 왼손의 엄지는 제1 전극(251)과 접촉하고 있고, 사용자 왼손의 검지는 제2 전극(252)과 접촉하고 있고, 사용자 오른손의 엄지는 제3 전극(253)과 접촉하고 있고, 사용자 오른손의 검지는 제4 전극(254)과 접촉하고 있다.
예를 들어, 심전도 센서부(153)는 사용자 접지를 위해 제2 전극(252)을 사용하고, 제1 및 제3 전극(251, 253) 간의 전압을 측정한다. 구체적으로, 심전도 센서부(153)는 제1 및 제3 전극(251, 253)의 공통 성분 전압을 제2 전극(252)에 인가하여 사용자를 접지시키고, 제1 및 제3 전극(251, 253) 간의 전압을 증폭하여 출력한다. 심전도 센서부(153)로부터 출력되는 시간에 따라 변화하는 전압 파형은 심전도 신호를 나타낸다. 이러한 심전도 신호는 사용자의 심장 박동에 따라 발생되는 심근 세포의 활동 전위의 시간적 변동을 나타낸다. 또한, 심전도 센서부(153)는 아날로그/디지털 컨버터를 구비하여 제1 및 제3 전극(251, 253)을 통해 출력되는 아날로그 심전도 신호를 디지털 심전도 신호를 변환하여 제어부(160)로 출력한다.
제어부(160)에 측정된 심전도 신호 또는 측정된 심전도 신호의 식별 정보와 일치하는 심전도 신호 또는 심전도 식별 정보를 갖는 사용자 프로파일을 저장부(120)에서 검색하고, 검색된 사용자 프로파일의 사용자가 인식된 것으로 결정한다.
도 13은 심전도 신호를 나타낸다. 도시된 심전도 신호에서 가로축은 시간을 나타내고, 세로축은 전압을 나타낸다. 심전도 신호는 Q, R 및 S 포인트들로 특징지을 수 있다.
도 14는 심전도 신호를 나타낸다. 심전도 신호에서 심전도 식별 정보를 추출하는 것을 나타낸다.
도 14의 (a)는 4인의 심전도 신호들을 나타내고, 도 14의 (b)는 4인의 심전도 신호들에서 이들의 공통 성분을 제거하여 남은 4인의 심전도 식별 정보들을 나타낸다. 각각의 심전도 식별 정보는 측정 시간 및 날짜에 거의 무관한 특성을 보이므로, 이러한 심전도 식별 정보는 사용자 인식 정보로서 사용될 수 있다.
도 15는 사용자 프로파일들의 예를 나타낸다.
사용자 프로파일은 사용자 식별자(1, 2, 3), 사용자 이름(A1, A2, A3), 심전도 정보(B1, B2, B3), 체지방 정보(C1, C2, C3), 체성분 정보(D1, D2, D3), 근육량 정보(E1, E2, E3), 심박동기(Pacemaker) 사용 유무 정보(F1, F2, F3), 홍채 정보(G1, G2, G3), 지문 정보(H1, H2, H3), 성문 정보(I1, I2, I3), 나이 정보(J1, J2, J3), 성별 정보(K1, K2, K3), 키 정보(L1, L2, L3), 몸무게 정보(M1, M2, M3), 피부색 정보(N1, N2, N3), 식습관 정보(O1, O2, O3) 등을 포함할 수 있다.
식습관 정보는 사용자가 냉장고(100)를 사용하는 패턴(시간, 기간, 빈도 등), 냉동 식품 등 인스턴트 식품의 섭취 패턴(시간, 기간, 빈도 등), 카페인 함유 음식, 음료의 섭취 패턴, 고칼로리 음식, 음료의 섭취 패턴 등을 포함할 수 있다.
제어부(160)는 사용자 프로파일의 복수 생체 정보를 조합하여 사용자 인식을 수행할 수도 있다. 예를 들어, 제어부(160)는 심전도 정보와 체지방 정보를 결합하여 보다 정확하게 사용자를 구분할 수도 있고, 다른 추가의 생체 정보(지문, 성문, 장문(즉, 손바닥 주름), 홍채 등)를 복합적으로 이용하여 사용자 구분의 정밀도를 높이며, 이용 가능한 사용자의 범위를 확대할 수 있다.
다시 도 6을 참조하면, S20 단계는 사용자 프로파일의 업데이트 여부를 판단하는 단계이다. 제어부(160)는 사용자 프로파일을 구성하는 각 정보의 업데이트 필요 주기를 설정하고, 이러한 각 주기의 도래 여부를 판단할 수 있다.
S30 단계는 사용자 프로파일의 업데이트가 필요한 경우, 해당 생체 정보를 획득하는 단계이다. 제어부(160)는 냉장고(100)의 센서부(150)를 이용하여 필요한 생체 정보를 측정하거나, 주변 전자 장치로부터 필요한 생체 정보를 수신할 수 있다.
S40 단계는 사용자 프로파일의 업데이트 단계이다. 제어부(160)는 획득한 생체 정보를 이용하여 해당 사용자의 사용자 프로파일을 업데이트한다.
도 16은 체지방 측정 방법을 나타낸다.
S210 단계는 체저항 측정의 적합 여부를 판단하는 단계이다. 제어부(160)는 사용자 프로파일의 심박동기(Pacemaker) 유무 정보를 확인하고, 사용자가 심박동기를 사용하는 경우에 체지방 측정을 중단한다. 체저항 측정 과정에서 사용자에게 500uA, 50kHz의 전류를 흐르게 하는데, 이는 심박동기(Pacemaker)의 동작을 교란할 수 있기 때문에 이런 시술을 받은 사용자에게는 이러한 측정을 할 수가 없다.
S220 단계는 자세의 적합 여부를 판단하는 단계이다. 제어부(160)는 사용자의 상체를 촬영하는 제1 카메라(261)를 이용하여 사용자의 팔 관절의 굽힘 여부를 파악하고, 사용자의 하체를 촬영하는 제2 카메라(262)를 이용하여 사용자의 다리 관절의 굽힘 여부를 파악한다.
S230 단계는 자세 안내 단계로서, 제어부(160)는 사용자의 자세가 부적합한 경우, 사용자의 팔 또는 다리가 일직선을 이루도록 스피커(143) 및/또는 표시부(130)를 통해 안내한다.
S240 단계는 체저항을 측정하는 단계로서, 체저항 센서부(155)는 전극부(154)를 이용하여 사용자의 체저항을 측정한다. 체저항 센서부(155)는 제1 및 제4 전극(251, 254)을 통해 사용자에게 미리 설정된 세기의 전류를 인가하고, 제2 및 제3 전극(252, 253) 간의 전압 값을 측정하고, 전압(V), 전류(I) 및 저항(R)의 관계(V=IR)를 이용하여 저항 값을 산출한다. 체저항 센서부(155)는 측정된 체저항 정보(전압 값 또는 산출된 체저항 값)를 제어부(160)로 출력한다.
체지방 값은 측정된 체저항 값을 키, 몸무게, 나이, 성별의 파라미터를 사용하여 계산식을 통하여 얻을 수 있다. 이러한 계산식은 여러 사람을 대상으로 하여 표준 체지방 측정법(수중비중법, DEXA)으로 측정된 체지방과 상기의 파라미터를 비교하여 회귀식을 통하여 얻게 된다.
또는, 예를 들어, 제어부(160)는, 체수분량을 산출하고(사용자의 키의 제곱을 체저항 값으로 나눈 값에 상수를 곱해서 얻음), 일반적인 사람 몸의 구성비(수분: 단백질: 무기질: 지방 = 55: 20: 20: 5)를 통해 단백질과 무기질의 양을 구한 후, 체지방량 = 체중 - (수분 + 단백질 + 무기질)의 식을 적용하여 체지방 값을 산출할 수도 있다. 체지방 측정과 더불어 체성분, 근육량 등을 추가로 산출할 수도 있다. 세부적으로 인체 구성 중 수분이 풍부한 부분은 전류가 잘 통하기에 저항 값이 낮고 수분이 풍부하지 않은 부분은 전류가 잘 흐르지 못하기에 저항 값이 높게 된다. 단백질은 체내 저장 시 수분을 포함하여 저장되는 반면 지방은 수분 없이 저장되며 근육도 70% 이상이 수분으로 구성되어 있으므로 전류 흐름의 정도 또는 신체 저항 값의 차이를 이용하여 체내 근육량과 체성분 분석이 가능하다.
또한, 본 발명에서 설명하는 냉장고에서 측정 가능한 사용자의 건강 정보와 관련된 측정 값들이 이전에 측정하여 저장된 측정 값들과 일정 수준 이상 편차가 발생할 경우 사용자에게 음성 또는 영상으로 안내 정보를 제공할 수 있다.
도 17은 체형 및 팔의 각도의 관계를 설명하기 위한 도면이다. 도 17은 표준 체형의 사용자를 기준으로 냉장고(100)에 전극부(154)를 설치한 경우를 예시하고, 점선은 전극부(154)의 위치를 나타낸다.
도 17의 (a)를 참고하면, 표준 체형의 사용자는 팔과 몸체가 90도를 이루게 되며, 측정된 체저항 값을 그대로 체지방 계산에 사용할 수 있다.
도 17의 (b)를 참고하면, 표준보다 큰 키의 사용자는 냉장고(100)를 열기 위해서 도어(전극부(154)가 위치한 부분)를 잡을 때 팔을 아래로 향하게 된다. 이 경우는 체저항 값이 낮게 측정이 되기 때문에, 측정된 체저항 값을 그대로 사용하는 경우 정확한 체지방 값을 얻을 수가 없다.
도 17의 (c)를 참고하면, 표준보다 작은 키의 사용자는 냉장고(100)를 열기 위해서 도어(전극부(154)가 위치한 부분)를 잡을 때 팔을 위로 향하게 된다. 이 경우는 체저항 값이 크게 측정이 되기 때문에, 측정된 체저항 값을 그대로 사용하는 경우 정확한 체지방 값을 얻을 수가 없다.
제어부(160)는 사용자 프로파일을 확인하고, 사용자의 키와 표준 체형의 키 차이에 의한 사용자의 어깨 관절의 각도(팔과 몸체의 각도)를 계산하고, 미리 설정된 체저항 보정 알고리즘을 사용하여 측정된 체저항 값을 보정할 수 있다.
다시 도 6을 참조하면, S50 단계는 사용자 맞춤형 헬스 서비스를 제공하는 단계로서, 제어부(160)는 업데이트된 사용자 프로파일을 이용하여 사용자에게 헬스 서비스를 제공한다.
제어부(160)는 측정된 생체 정보 값과 측정 이전에 저장된 생체 정보 값을 비교하고, 생체 정보 값들의 차이가 미리 설정된 임계 값 이상인 경우에, 스피커(143) 또는 표시부(130)를 통해 건강 정보를 안내할 수 있다. 예를 들어, 제어부(160)는 측정된 체내 근육량과 측정 이전에 저장된 체내 근육량을 비교하고, 체내 근육량들의 차이가 미리 설정된 임계 값 이상인 경우에, 스피커(143) 또는 표시부(130)를 통해, 체내 근육량의 변화/변화량을 알려 주거나, 건강의 악화/호전을 알려줄 수 있다.
제어부(160)는 사용자의 식습관을 파악하고, 사용자의 식습관은 냉장고(100)를 여는 시기, 연 시간, 하루 중 사용 빈도 등을 포함한다. 제어부(160)는 이러한 식습관 정보를 이용하여 사용자의 식습관을 인터넷 등을 통해 분석하고 적절한 습관이 되도록 추천, 안내할 수 있다. 예를 들어, 제어부(160)는 표시부(130)에 식습관 안내 정보를 표시할 수 있다.
제어부(160)는 사용자가 자주 냉장고(100)를 연 경우, 외부에 나가 있을 때 연동된 전자 장치를 사용하여 적절한 양의 운동을 하도록 유도할 수 있다. 예를 들어, 제어부(160)는 사용자의 휴대폰에 운동 안내 메시지를 전송할 수 있다.
제어부(160)는 사용자가 냉장고(100)를 여는 행위를 시간대로 구별하여, 정상적인 식사 행위인지 간식을 먹기 위한 행동인지 구별하고, 사용자가 간식을 먹기 위해 냉장고(100)를 연 경우 이를 방지하는 안내를 할 수 있다. 예를 들어, 제어부(160)는 표시부(130)에 안내 메시지를 표시하거나, 스피커(143)로 음성 안내를 할 수 있다.
제어부(160)는, 아이들이 지나치게 인스턴트 식품을 먹는 것을 방지하기 위해 냉장고(100)의 도어를 잠글 수 있다. 예를 들어, 제어부(160)는 미리 설정된 연락처(예를 들어, 부모의 휴대폰 번호)에 메시지를 전송하거나, 부모가 직접 또는 통신부(110)를 통해 도어 잠금을 해제할 때까지 도어 잠금을 유지할 수 있다.
제어부(160)는, 냉장고(100)가 구비한 복수의 도어들마다 허용 가능한 사용자를 설정하고, 허용된 사용자만이 각 도어를 열 수 있도록 도어 잠금 장치를 제어할 수 있다.
제어부(160)는, 심전도 정보에 근거하여 HRV(심박변동)를 구할 수 있고 이를 이용하여 사용자의 스트레스를 분석하고, 이를 바탕으로 사용자에게 지나친 스트레스를 유발할 수 있는 카페인 과다 음식, 음료의 섭취를 자제하도록 안내할 수 있다.
제어부(160)는, 체저항 측정시 맥박을 측정함으로 HRV(심박변동)를 구할 수 있고, 이를 이용하여 사용자의 스트레스를 분석하고, 이를 바탕으로 사용자에게 지나친 스트레스를 유발할 수 있는 카페인 과다 음식, 음료의 섭취를 자제하도록 안내할 수 있다.
제어부(160)는, 사용자의 생활 습관을 인터넷 등을 활용하여 사용자의 주변 사람과 공유시킬 수 있으며, 사용자에게 적합한 음식과 생활 패턴을 추천할 수 있다.
제어부(160)는, 생체 센서(예: 심전도 센서)를 구비한 전자레인지와의 데이터 통신을 통해 사용자가 냉장고(100)에서 꺼낸 인스턴트 식품을 얼마나 자주 사용하는지 판별할 수 있다. 예를 들어, 제어부(160)는 전자레인지로부터 사용자를 식별할 수 있는 생체 정보를 포함하는 메시지를 수신할 수 있고, 메시지는 전자레인지의 사용 기능 정보, 사용 시간 정보 등을 포함할 수 있다.
제어부(160)는, 생체 센서(예: 심전도 센서)를 구비한 운동 기구와의 데이터 통신을 통해 사용자의 운동 종류 및 운동량, 그리고 냉장고(100) 사용에 따른 식습관을 비교하고, 건강한 생활 습관을 가질 수 있도록 유도할 수 있다.
제어부(160)는, 생체 센서(예: 심전도 센서)를 구비한 화장실 비데와의 데이터 통신을 통해 사용자의 배변 습관에 따른 적절한 식습관을 비교하고, 건강한 생활 습관을 가질 수 있도록 유도할 수 있다.
제어부(160)는, 생체 센서(예: 심전도 센서)를 구비한 체중계(156)와의 데이터 통신을 통해, 저장부(120)에 저장된 사용자 프로파일 중 몸무게를 자동으로 업데이트할 수 있다.
도 18은 냉장고(100)의 내부에 설치된 센서들을 설명하기 위한 도면이다.
냉장고(100) 본체의 상면부 전면에는 제1 도어(210)의 개폐를 검출하기 위한 제1 문 센서(911)와 제2 도어(220)의 개폐를 검출하기 위한 제2 문 센서(912)가 배치된다.
냉장고(100) 본체의 중간부 전면에는 제3 도어(230)의 개폐를 검출하기 위한 제3 문 센서(913)와 제4 도어(240)의 개폐를 검출하기 위한 제4 문 센서(914)가 배치된다.
제1 도어(210)의 상부에는 외부 온도 센서(921)와 외부 습도 센서(922)가 배치된다.
냉장고(100) 본체의 후면부의 내면에는 내부 온도 센서(931)와 내부 습도 센서(932)가 배치된다.
제1 내지 제4 문 센서(911~914)는 각각 해당 도어의 개폐를 검출하고, 검출한 해당 도어의 개폐 정보를 제어부(160)로 출력한다.
외부 온도 센서(921)는 냉장고(100) 외부의 온도를 측정하고, 측정된 외부 온도 정보를 제어부(160)로 출력한다. 외부 습도 센서(922)는 냉장고(100) 외부의 습도를 측정하고, 측정된 외부 습도 정보를 제어부(160)로 출력한다.
내부 온도 센서(931)는 냉장고(100) 내부의 온도를 측정하고, 측정된 내부 온도 정보를 제어부(160)로 출력한다. 내부 습도 센서(932)는 냉장고(100) 내부의 습도를 측정하고, 측정된 내부 습도 정보를 제어부(160)로 출력한다.
냉장고(100) 본체의 상면부의 내면에는 제4 및 제5 카메라(264, 265)가 배치된다. 제4 및 제5 카메라(264, 265)는 냉장고(100) 내부를 촬영하고, 촬영된 이미지를 제어부(160)로 출력하거나 저장부(120)에 저장한다. 예시적으로, 냉장고(100) 내부에 음식물 배치를 촬영하기 위한 2개의 카메라들(264, 265)을 배치한 것을 나타내었으나, 냉장고(100) 내부 곳곳을 촬영하기 위해 3개 이상의 카메라들이 복수 위치들에 배치될 수 있다.
도 19는 본 발명의 일 예에 따른 헬스 서비스 제공 방법을 나타내는 흐름도이다.
S310 단계는 음식물 식별 정보를 획득하는 단계이다. 사용자가 냉장고(100)에 저장될 음식물에 부착된 음식물 식별 정보를 스캐너(157)에 근접시킨 경우에, 제어부(160)는 음식물 식별 정보를 인식하도록 스캐너(157)를 제어한다. 제어부(160)는 통신부(110)를 통해 사용자의 전자 장치에 저장된 음식물 식별 정보를 수신할 수도 있다. 제어부(160)는 서버(190)로부터 음식물 식별 정보를 수신할 수도 있다.
도 20은 사용자의 전자 장치에 저장된 음식물 식별 정보를 수신하는 과정을 설명하기 위한 도면이다.
도 20의 (a)를 참조하면, 전자 장치(181)는 그 표시부의 제1 화면(1011)에 사용자가 구매한 음식물 아이템들(1020)을 표시할 수 있다.
도 20의 (b)를 참조하면, 전자 장치(181)는 사용자의 선택에 따라 사용자가 구매한 음식물 아이템들(1020)의 바코드들(1030)을 표시할 수 있다.
사용자는 전자 장치에 표시된 바코드들(1030)을 냉장고(100)의 스캐너(157)가 스캔하도록 하거나, 바코드들을 냉장고(100)로 무선 또는 유선으로 전송할 수 있다.
S320 단계는 음식물 정보를 획득하는 단계이다. 제어부(160)는 음식물 식별 정보를 서버(190)로 전송하고, 서버(190)로부터 음식물 정보(이름, 종류, 외관 이미지, 중량 등)를 수신할 수 있다. 또는, 제어부(160)는 인터넷 등을 이용하여 음식물 식별 정보에 대응하는 음식물 정보를 획득할 수 있다. 또는, 제어부(160)는 사용자의 전자 장치로부터 음식물 정보를 수신할 수 있다.
S330 단계는 음식물 정보를 표시하는 단계이다. 제어부(160)는 표시부(130)에 냉장고(100)의 내부 이미지와 음식물 객체를 표시할 수 있다.
도 21 및 도 22는 음식물 정보를 표시하는 과정을 설명하기 위한 도면들이다. 도 21의 (a)를 참고하면, 제어부(160)는 표시부(130)에 냉장고(100)의 내부 공간(1110)과 음식물 객체(1120)를 표시한다. 도 21에는 냉장고(100)의 내부가 4등분되어 간략하게 도시되어 있으나, 냉장고(100)의 실제 내부 구조와 동일한 이미지 등이 표시될 수도 있다. 도 21의 (b)를 참고하면, 사용자는 드래그 제스쳐 등을 통해 음식물 객체(1120)를 냉장고(100) 내부 공간(1110)의 원하는 위치로 이동시킬 수 있다.
도 21의 (c)를 참고하면, 사용자가 음식물 객체를 선택한 경우, 제어부(160)는 음식물 객체(1120)의 세부 정보(1130)(저장 일자, 잔여량, 섭취 일자, 섭취한 사용자 정보 등)를 표시부(130)에 표시할 수 있다.
도 22의 (a)를 참고하면, 제어부(160)는 표시부(130)에 냉장고(100)의 내부 공간(1110)을 표시한다. 본 예에서는, 냉장고(100) 내부의 다용도 서랍을 냉장고(100) 내부의 카메라(예: 제4 또는 제5 카메라)를 이용하여 촬영한 이미지(1210)가 표시되어 있다. 사용자가 냉장고(100) 내부에 위치한 음식물의 정보(위치, 음식물 식별 정보 등)를 입력하지 않더라도, 제어부(160)는 저장부(120)에 저장된 음식물 정보를 이용하여 카메라에 의해 촬영된 냉장고(100)의 내부 이미지(1210)에서 음식물을 자동으로 인식할 수도 있다.
제어부(160)는, SIFT(Scale Invariant Feature Transform), SURF(Speeded Up Robust Features) 등과 같은 알고리즘을 통해 냉장고(100)의 내부 이미지에서 저장부(120)에 저장된 음식물 정보와 일치하는 음식물을 인식할 수 있다.
도 22의 (b)를 참고하면, 사용자가 냉장고(100)의 내부 이미지(1210)에서 인식된 음식물에 대응하는 피사체를 선택한 경우, 제어부(160)는 음식물의 세부 정보(1220)(표지 이미지(1230), 저장 일자, 잔여량, 섭취 일자, 섭취한 사용자 정보 등)를 표시부(130)에 표시할 수 있다. 또는, 제어부(160)는 냉장고(100) 내부 이미지(1210)에서 인식된 음식물들에 대응하는 정보들을 표시부(130)에 자동으로 표시할 수도 있다.
S340 단계는 음식물 정보를 업데이트하는 단계이다. 제어부(160)는 사용자 입력(잔여량 등 수정)에 따라 저장부(120)에 저장된 음식물 정보를 업데이트할 수 있다.
본 발명의 실시 예들은 하드웨어, 소프트웨어 또는 하드웨어 및 소프트웨어의 조합의 형태로 실현 가능하다는 것을 알 수 있을 것이다. 예를 들어, 도 1에 도시된 냉장고에서 저장부, 통신부, 제어부 등의 각 구성 소자는 장치로 구성될 수 있다. 이러한 임의의 소프트웨어는 예를 들어, 삭제 가능 또는 재기록 가능 여부와 상관없이, ROM 등의 저장 장치와 같은 휘발성 또는 비휘발성 저장 장치, 또는 예를 들어, RAM, 메모리 칩, 장치 또는 집적 회로와 같은 메모리, 또는 예를 들어 CD, DVD, 자기 디스크 또는 자기 테이프 등과 같은 광학 또는 자기적으로 기록 가능함과 동시에 기계(예를 들어, 컴퓨터)로 읽을 수 있는 저장 매체에 저장될 수 있다. 냉장고 내에 포함될 수 있는 저장부는 본 발명의 실시 예들을 구현하는 지시들을 포함하는 프로그램 또는 프로그램들을 저장하기에 적합한 기계로 읽을 수 있는 저장 매체의 한 예임을 알 수 있을 것이다. 따라서, 본 발명은 본 명세서의 임의의 청구항에 기재된 장치 또는 방법을 구현하기 위한 코드를 포함하는 프로그램 및 이러한 프로그램을 저장하는 기계로 읽을 수 있는 저장 매체를 포함한다. 또한, 이러한 프로그램은 유선 또는 무선 연결을 통해 전달되는 통신 신호와 같은 임의의 매체를 통해 전자적으로 이송될 수 있고, 본 발명은 이와 균등한 것을 적절하게 포함한다.
또한, 상기 냉장고는 유선 또는 무선으로 연결되는 프로그램 제공 장치로부터 상기 프로그램을 수신하여 저장할 수 있다. 상기 프로그램 제공 장치는 상기 냉장고가 헬스 서비스를 제공하는 방법을 수행하도록 하는 지시들을 포함하는 프로그램, 냉장고에 의해 헬스 서비스를 제공하는 방법에 필요한 정보 등을 저장하기 위한 메모리와, 상기 냉장고와의 유선 또는 무선 통신을 수행하기 위한 통신부와, 상기 냉장고의 요청 또는 자동으로 해당 프로그램을 상기 냉장고로 전송하는 제어부를 포함할 수 있다.
상술한 본 발명의 설명에서는 구체적인 실시 예에 관해 설명하였으나, 여러 가지 변형이 본 발명의 범위에서 벗어나지 않고 실시할 수 있다. 따라서 본 발명의 범위는 설명된 실시 예에 의하여 정할 것이 아니고 특허청구범위와 특허청구범위의 균등한 것에 의해 정해져야 한다.
100: 냉장고, 110: 통신부, 120: 저장부, 130: 표시부, 140: 입출력 모듈, 150: 센서부, 160: 제어부

Claims (20)

  1. 냉장고에 의해 헬스 서비스를 제공하는 방법에 있어서,
    상기 냉장고에 의해 사용자의 생체 정보를 측정하는 과정과;
    상기 냉장고에 저장된 적어도 하나의 사용자 프로파일에서 상기 측정된 생체 정보와 대응되는 생체 정보가 포함된 사용자 프로파일을 검색하는 과정과;
    상기 검색된 사용자 프로파일에 근거하여 상기 사용자에게 헬스 서비스를 제공하는 과정을 포함하는, 냉장고에 의해 헬스 서비스를 제공하는 방법.
  2. 제1항에 있어서,
    상기 측정된 생체 정보는 상기 사용자의 심전도인, 냉장고에 의해 헬스 서비스를 제공하는 방법.
  3. 제2항에 있어서,
    상기 사용자의 심전도는 미리 설정된 공통 성분이 제거된 식별 정보인, 냉장고에 의해 헬스 서비스를 제공하는 방법.
  4. 제1항에 있어서,
    상기 검색된 사용자 프로파일에 포함된 정보의 등록 시점에 근거하여 상기 검색된 사용자 프로파일의 업데이트 여부를 결정하는 과정을 더 포함하는, 냉장고에 의해 헬스 서비스를 제공하는 방법.
  5. 제4항에 있어서,
    상기 검색된 사용자 프로파일의 업데이트를 위한 상기 사용자의 생체 정보를 획득하는 과정을 더 포함하는, 냉장고에 의해 헬스 서비스를 제공하는 방법.
  6. 제5항에 있어서,
    상기 획득한 생체 정보를 상기 검색된 사용자 프로파일에 포함시키는, 냉장고에 의해 헬스 서비스를 제공하는 방법.
  7. 제4항에 있어서,
    상기 검색된 사용자 프로파일에 근거하여 상기 사용자의 체저항 측정이 적합한지의 여부를 결정하는 과정과;
    상기 사용자의 체지방 측정이 적합한 경우, 상기 사용자의 체저항을 측정하는 과정과;
    상기 체저항에 근거하여 상기 사용자의 체지방을 산출하는 과정을 더 포함하는, 냉장고에 의해 헬스 서비스를 제공하는 방법.
  8. 제7항에 있어서,
    상기 사용자를 촬영한 이미지에 근거하여 상기 체저항 측정을 위한 상기 사용자의 자세가 적합한지의 여부를 결정하는 과정과;
    상기 사용자의 자세가 적합하지 않은 경우, 상기 사용자에게 미리 설정된 자세 안내를 수행하는 과정을 더 포함하는, 냉장고에 의해 헬스 서비스를 제공하는 방법.
  9. 제7항에 있어서,
    상기 검색된 사용자 프로파일에 심박동기(Pacemaker)의 사용 정보가 포함된 경우, 상기 사용자의 체저항 측정이 부적합한 것으로 결정하는, 냉장고에 의해 헬스 서비스를 제공하는 방법.
  10. 제1항에 있어서,
    상기 측정된 생체 정보는 상기 사용자의 얼굴 인식 정보, 홍채 인식 정보, 또는 지문 인식 정보를 포함하는, 냉장고에 의해 헬스 서비스를 제공하는 방법.
  11. 제1항에 있어서,
    상기 냉장고 주변의 전자 장치로부터 상기 전자 장치의 기기 정보를 수신하는 과정을 더 포함하고,
    상기 사용자 프로파일의 검색에 상기 수신한 기기 정보를 이용하는, 냉장고에 의해 헬스 서비스를 제공하는 방법.
  12. 제1항 내지 제11항 중 어느 한 항에 따른 냉장고에 의해 헬스 서비스를 제공하는 방법을 실행하기 위한 프로그램을 기록한 기계로 읽을 수 있는 저장 매체.
  13. 헬스 서비스를 제공하는 냉장고에 있어서,
    적어도 하나의 사용자 프로파일을 저장하는 저장부와;
    사용자의 생체 정보를 측정하는 센서부와;
    상기 적어도 하나의 사용자 프로파일에서 상기 측정된 생체 정보와 대응되는 생체 정보가 포함된 사용자 프로파일을 검색하고,
    상기 검색된 사용자 프로파일에 근거하여 상기 사용자에게 헬스 서비스를 제공하는 제어부를 포함하는, 헬스 서비스를 제공하는 냉장고.
  14. 제13항에 있어서,
    상기 센서부는 복수의 전극을 이용하여 상기 사용자의 심전도를 측정하는 심전도 센서부를 포함하고,
    상기 측정된 생체 정보는 상기 사용자의 심전도인, 헬스 서비스를 제공하는 냉장고.
  15. 제14항에 있어서,
    상기 제어부는 상기 사용자의 심전도에서 미리 설정된 공통 성분이 제거된 식별 정보를 이용하여 상기 사용자 프로파일을 검색하는, 헬스 서비스를 제공하는 냉장고.
  16. 제13항에 있어서,
    상기 제어부는, 상기 검색된 사용자 프로파일에 포함된 정보의 등록 시점에 근거하여 상기 검색된 사용자 프로파일의 업데이트 여부를 결정하는, 헬스 서비스를 제공하는 냉장고.
  17. 제16항에 있어서,
    상기 사용자의 체저항을 측정하는 체저항 센서부를 더 포함하고,
    상기 제어부는,
    상기 검색된 사용자 프로파일에 근거하여 상기 사용자의 체저항 측정이 적합한지의 여부를 결정하고,
    상기 사용자의 체지방 측정이 적합한 경우, 상기 체저항 센서부를 이용하여 상기 사용자의 체저항을 측정하고,
    상기 체저항에 근거하여 상기 사용자의 체지방을 산출하는, 헬스 서비스를 제공하는 냉장고.
  18. 제17항에 있어서, 상기 제어부는,
    상기 사용자를 촬영한 이미지에 근거하여 상기 체저항 측정을 위한 상기 사용자의 자세가 적합한지의 여부를 결정하고,
    상기 사용자의 자세가 적합하지 않은 경우, 상기 사용자에게 미리 설정된 자세 안내를 수행하는, 헬스 서비스를 제공하는 냉장고.
  19. 제17항에 있어서, 상기 제어부는,
    상기 검색된 사용자 프로파일에 심박동기(Pacemaker)의 사용 정보가 포함된 경우, 상기 사용자의 체저항 측정이 부적합한 것으로 결정하는, 헬스 서비스를 제공하는 냉장고.
  20. 제13항에 있어서,
    상기 센서부는 상기 사용자의 얼굴 인식을 위한 카메라, 상기 사용자의 홍채 인식을 위한 홍채 센서, 상기 사용자의 지문 인식을 위한 지문 센서, 또는 상기 냉장고 주변의 전자 장치로부터 상기 전자 장치의 기기 정보를 수신하는 통신부를 포함하는, 헬스 서비스를 제공하는 냉장고.
KR1020130151562A 2013-12-06 2013-12-06 냉장고에 의해 헬스 서비스를 제공하는 방법 및 이를 위한 냉장고 KR102212064B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020130151562A KR102212064B1 (ko) 2013-12-06 2013-12-06 냉장고에 의해 헬스 서비스를 제공하는 방법 및 이를 위한 냉장고
US14/563,612 US10115286B2 (en) 2013-12-06 2014-12-08 Method for providing health service and refrigerator therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130151562A KR102212064B1 (ko) 2013-12-06 2013-12-06 냉장고에 의해 헬스 서비스를 제공하는 방법 및 이를 위한 냉장고

Publications (2)

Publication Number Publication Date
KR20150066244A true KR20150066244A (ko) 2015-06-16
KR102212064B1 KR102212064B1 (ko) 2021-02-05

Family

ID=53271733

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130151562A KR102212064B1 (ko) 2013-12-06 2013-12-06 냉장고에 의해 헬스 서비스를 제공하는 방법 및 이를 위한 냉장고

Country Status (2)

Country Link
US (1) US10115286B2 (ko)
KR (1) KR102212064B1 (ko)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170208652A1 (en) * 2014-09-03 2017-07-20 Electrolux Appliances Aktiebolag Domestic Appliance, In Particular Cooking Oven, With A Camera
KR20180017741A (ko) * 2016-08-10 2018-02-21 엘지전자 주식회사 냉장고 및 냉장고의 제어방법
KR20180025039A (ko) * 2016-08-31 2018-03-08 엘지전자 주식회사 냉장고
KR20180119999A (ko) * 2017-04-26 2018-11-05 (주)도넛시스템엘에스아이 체성분측정 기능을 가진 가전장치
KR20180126859A (ko) * 2017-05-18 2018-11-28 삼성전자주식회사 냉장고 및 냉장고의 음식 관리방법
KR20190038669A (ko) * 2016-09-01 2019-04-08 삼성전자주식회사 디스플레이를 가진 냉장 저장 시스템
WO2020032440A1 (ko) * 2018-08-07 2020-02-13 엘지전자 주식회사 인공지능을 이용하여 헬스 케어 기능을 수행하는 홈어플라이언스 및 클라우드 서버
KR20200025376A (ko) 2018-08-30 2020-03-10 단국대학교 산학협력단 스마트 냉장고 및 그 동작 방법
WO2020145471A1 (ko) * 2019-01-08 2020-07-16 삼성전자 주식회사 외부 전자 장치의 내부 공간을 관리하는 전자 장치 및 방법
USD956774S1 (en) 2019-04-25 2022-07-05 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface

Families Citing this family (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11678760B2 (en) 2011-03-03 2023-06-20 PB Funding Group, LLC Multifunctional brewing system for coffee, beer, and other beverages
US10035979B2 (en) 2015-07-23 2018-07-31 Picobrew, Inc. Beer making machine with direct steam injection
US11753610B2 (en) 2011-03-03 2023-09-12 PB Funding Group, LLC Self healing controller for beer brewing system
JP6550696B2 (ja) * 2014-07-18 2019-07-31 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 判定装置、および、判定方法
US10308903B2 (en) 2014-09-17 2019-06-04 Picobrew, Inc. Foam reducing device
CN105654270A (zh) * 2014-11-18 2016-06-08 博西华家用电器有限公司 冰箱、终端、冰箱内食材的管理系统及管理方法
US10377981B2 (en) 2015-03-17 2019-08-13 Picobrew, Inc. Software tuning of recipes for beer brewing system
US9932547B2 (en) * 2015-07-31 2018-04-03 Picobrew, Inc. Fermentation monitoring and management
CN104990331B (zh) * 2015-08-10 2018-05-08 广州旺东大菜园冷链有限公司 智能化自提式冷柜
CN105180590B (zh) * 2015-10-28 2017-11-17 合肥美的电冰箱有限公司 一种基于指纹识别的冰箱管理方法、管理系统和冰箱
US20170134652A1 (en) * 2015-11-06 2017-05-11 L-3 Communications Corporation Viewport for imaging in an rf/microwave environment
CN105469075A (zh) * 2015-12-24 2016-04-06 青岛海尔股份有限公司 冰箱及其控制方法
WO2017193237A1 (zh) * 2016-05-08 2017-11-16 康丰生 一种具有监控和报警功能的冰箱
US10161533B2 (en) 2016-05-09 2018-12-25 Picobrew, Inc. Bi-stable electrically actuated valve
KR102236614B1 (ko) * 2016-05-11 2021-04-09 주식회사 칼라세븐 스마트통신기기 기반의 저출력 광선치료 서비스 제공 시스템 및 방법
CN107719907B (zh) * 2016-08-11 2020-01-10 京东方科技集团股份有限公司 智能密封夹、密封袋以及物品存储管理方法
KR101984515B1 (ko) * 2016-09-28 2019-05-31 엘지전자 주식회사 냉장고 및 이를 포함하는 홈 오토메이션 시스템
KR20180048089A (ko) * 2016-11-02 2018-05-10 엘지전자 주식회사 냉장고
WO2018096328A2 (en) * 2016-11-22 2018-05-31 Sandeep Kumar Chintala Portable container with temperature regulator
US10463983B2 (en) 2017-03-31 2019-11-05 Picobrew, Inc. Distillation and essence extractor insert for beer brewing machine
JP2018194193A (ja) * 2017-05-12 2018-12-06 シャープ株式会社 制御装置、冷蔵庫、冷蔵システム、制御方法、および制御プログラム
CN107270654A (zh) * 2017-07-31 2017-10-20 绵阳美菱软件技术有限公司 一种消息提醒方法及智能冰箱
KR20190024784A (ko) * 2017-08-30 2019-03-08 삼성전자주식회사 냉장고
CN107767932A (zh) * 2017-10-19 2018-03-06 上海斐讯数据通信技术有限公司 一种体重检测装置和冰箱绑定使用的方法及系统
JP2019121292A (ja) * 2018-01-10 2019-07-22 トヨタ自動車株式会社 音声出力装置、音声出力方法、及び音声出力プログラム
CN110148444A (zh) * 2018-02-14 2019-08-20 北京京东尚科信息技术有限公司 智能冰箱的健康数据监控方法及智能冰箱
CN112136012A (zh) * 2018-04-19 2020-12-25 恩伯技术公司 具有主动温度控制的便携式冷却器
KR20190140509A (ko) * 2018-05-25 2019-12-20 삼성전자주식회사 재고 추적 방법 및 장치
CN108826824B (zh) * 2018-08-01 2020-09-15 珠海格力电器股份有限公司 一种冰箱的控制方法、装置、存储介质及冰箱
KR20200032625A (ko) 2018-09-18 2020-03-26 삼성전자주식회사 냉장고 및 그의 제어방법
US11353259B2 (en) 2018-09-18 2022-06-07 Samsung Electronics Co., Ltd. Augmented-reality refrigerator and method of controlling thereof
US11650628B1 (en) 2018-10-03 2023-05-16 Anthony, Inc. Display case door with touch screen
US11419434B1 (en) * 2018-10-03 2022-08-23 Anthony, Inc. Display case door with door handle camera
KR102637119B1 (ko) 2018-10-25 2024-02-15 삼성전자주식회사 냉장고 안의 객체에 관한 정보를 제공하는 방법 및 시스템
US11506448B2 (en) * 2018-11-14 2022-11-22 Samsung Electronics Co.. Ltd. Method and device for managing food in refrigerator
CN109714472B (zh) * 2018-12-06 2021-12-07 珠海格力电器股份有限公司 一种铃声控制方法、装置、存储介质及空调
KR20200105290A (ko) 2019-02-28 2020-09-07 삼성전자주식회사 전자 장치 및 전자 장치의 정보 제공 방법
US20220197895A1 (en) * 2019-06-27 2022-06-23 Panasonic Intellectual Property Management Co., Ltd. Information management system, information management device, and information management method
US11374976B2 (en) * 2019-10-15 2022-06-28 Bank Of America Corporation System for authentication of resource actions based on multi-channel input
CN115200310B (zh) * 2021-04-13 2023-10-24 青岛海尔电冰箱有限公司 冰箱的控制方法及冰箱
US20230049570A1 (en) * 2021-08-11 2023-02-16 Scott C Harris Smart Sound Appliance
CN114353418B (zh) * 2021-12-08 2022-08-19 珠海格力电器股份有限公司 储藏设备的控制方法、装置、设备联动系统和存储介质
WO2024045750A1 (zh) * 2022-08-31 2024-03-07 海信冰箱有限公司 冰箱及其食材重量信息管理方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040017978A (ko) * 2002-08-23 2004-03-02 삼성전자주식회사 냉장고 및 그 제어방법
KR20060038049A (ko) * 2004-10-29 2006-05-03 에스케이 텔레콤주식회사 통신망을 이용한 건강 관리 장치 및 방법
KR20060082677A (ko) * 2005-01-13 2006-07-19 인하대학교 산학협력단 심전도를 이용한 생체인식 시스템 및 방법

Family Cites Families (92)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3144030B2 (ja) 1992-02-24 2001-03-07 東陶機器株式会社 健康管理ネットワークシステム
US5544649A (en) * 1992-03-25 1996-08-13 Cardiomedix, Inc. Ambulatory patient health monitoring techniques utilizing interactive visual communication
JPH0712635A (ja) 1993-06-25 1995-01-17 Ya Man Ltd 体脂肪測定装置
JPH09119859A (ja) 1995-10-26 1997-05-06 Matsushita Electric Ind Co Ltd 体重計
JP3838777B2 (ja) 1998-03-12 2006-10-25 松下電器産業株式会社 トイレ装置
JP3860657B2 (ja) 1998-03-12 2006-12-20 松下電器産業株式会社 トイレ装置
JP3451615B2 (ja) 1998-06-04 2003-09-29 東陶機器株式会社 便座装置
JP3939443B2 (ja) 1998-07-23 2007-07-04 大和製衡株式会社 体脂肪計
JP2000083865A (ja) 1998-09-11 2000-03-28 Matsushita Electric Ind Co Ltd 体脂肪測定器付き便座
JP3494032B2 (ja) 1998-10-06 2004-02-03 松下電器産業株式会社 体脂肪計
JP2000107149A (ja) 1998-10-06 2000-04-18 Matsushita Electric Ind Co Ltd 体脂肪計
JP2000126088A (ja) 1998-10-23 2000-05-09 Aisin Seiki Co Ltd 体脂肪測定便座
JP2000126331A (ja) 1998-10-28 2000-05-09 Ya Man Ltd 体脂肪測定とパルストリートメントを行う固定式自転車
JP3449932B2 (ja) 1998-11-24 2003-09-22 ヤーマン株式会社 腹部体脂肪計
JP2000225101A (ja) 1999-02-04 2000-08-15 Matsushita Electric Ind Co Ltd 体重体脂肪計付き便座
JP4051796B2 (ja) 1999-02-09 2008-02-27 松下電器産業株式会社 便座
JP2000229131A (ja) 1999-02-09 2000-08-22 Ya Man Ltd 定置式自転車
JP2000287890A (ja) 1999-04-08 2000-10-17 Matsushita Electric Ind Co Ltd 便座装置
JP2000316757A (ja) 1999-05-10 2000-11-21 Matsushita Electric Ind Co Ltd 便器装置
JP2000333927A (ja) 1999-05-28 2000-12-05 Matsushita Electric Ind Co Ltd 体脂肪率計
JP2001000411A (ja) 1999-06-23 2001-01-09 Matsushita Electric Ind Co Ltd 体脂肪測定機能付き便座装置
JP2001037681A (ja) 1999-07-29 2001-02-13 Matsushita Electric Ind Co Ltd 電極付便座
JP2001054509A (ja) 1999-08-18 2001-02-27 Matsushita Electric Ind Co Ltd 体脂肪計
JP4357049B2 (ja) 1999-10-07 2009-11-04 大和製衡株式会社 体内脂肪測定装置
JP2001029348A (ja) 2000-01-01 2001-02-06 Toto Ltd 体脂肪計付便座装置
JP2001321297A (ja) 2000-05-16 2001-11-20 Matsushita Electric Ind Co Ltd 電極付き便座ユニットおよびその製造方法
US20020183882A1 (en) * 2000-10-20 2002-12-05 Michael Dearing RF point of sale and delivery method and system using communication with remote computer and having features to read a large number of RF tags
JP2002224075A (ja) 2001-02-07 2002-08-13 Matsushita Electric Ind Co Ltd 体脂肪率計付温水洗浄便座
JP2002224074A (ja) 2001-02-07 2002-08-13 Matsushita Electric Ind Co Ltd 健康情報表示温水洗浄便座
JP2002224077A (ja) 2001-02-07 2002-08-13 Matsushita Electric Ind Co Ltd 体脂肪率測定装置
JP2002224076A (ja) 2001-02-07 2002-08-13 Matsushita Electric Ind Co Ltd 体脂肪率計付温水洗浄便座
JP2002242259A (ja) 2001-02-15 2002-08-28 Matsushita Electric Ind Co Ltd トイレ装置
ITPN20010017A1 (it) * 2001-02-23 2002-08-23 Electrolux Professional Spa Apparecchio da cucina e/o domestico
JP4529303B2 (ja) 2001-03-09 2010-08-25 パナソニック株式会社 体脂肪測定トイレ装置
JP2002330939A (ja) 2001-05-10 2002-11-19 Inax Corp 体脂肪計付便座装置
JP2002330938A (ja) 2001-05-10 2002-11-19 Inax Corp 体脂肪計付便座装置
JP3966001B2 (ja) 2002-01-31 2007-08-29 松下電器産業株式会社 電極付き便座
JP3089347U (ja) * 2002-04-17 2002-10-25 船井電機株式会社 体脂肪測定機能付きテレビ用リモコン
DE10237132A1 (de) * 2002-08-13 2004-02-26 BSH Bosch und Siemens Hausgeräte GmbH Haushaltsgerät mit biometrischer Personenidentifikationseinrichtung
JP2004254794A (ja) 2003-02-25 2004-09-16 Noritz Corp 体脂肪率計測システム
KR20040094941A (ko) 2003-05-06 2004-11-12 엘지전자 주식회사 냉장고 일체형 체지방 측정장치
JP2004344518A (ja) 2003-05-23 2004-12-09 Tanita Corp 筋肉測定装置
JP2005102910A (ja) 2003-09-30 2005-04-21 Daiwa House Ind Co Ltd 体脂肪測定トイレ
KR20050033776A (ko) * 2003-10-07 2005-04-13 삼성전자주식회사 체지방 측정 전자기기, 그 방법 및 이를 이용한 건강관리시스템
JP2005218832A (ja) 2004-02-07 2005-08-18 Joji Ishikawa 体脂肪及び体重測定便座
JP2005291754A (ja) 2004-03-31 2005-10-20 Osaka Gas Co Ltd 重量計量装置、体脂肪率計測装置、および健康管理システム
JP2005291755A (ja) 2004-03-31 2005-10-20 Osaka Gas Co Ltd 健康管理システム
JP2006017560A (ja) 2004-06-30 2006-01-19 Toto Ltd 健康管理システム
KR20060018408A (ko) 2004-08-24 2006-03-02 엘지전자 주식회사 냉장고
KR20060032440A (ko) 2004-10-12 2006-04-17 전자부품연구원 스마트홈 제어를 위한 센서 네트워크 시스템
KR20060053812A (ko) 2004-11-17 2006-05-22 삼성전자주식회사 생체신호를 이용한 생체 인식 장치 및 방법
TWM276188U (en) 2004-12-08 2005-09-21 Tatung Co Refrigerator with the function of measuring body fat
KR100608447B1 (ko) 2004-12-15 2006-08-02 엘지전자 주식회사 냉장고 도어의 체지방량 측정장치
KR100681593B1 (ko) 2005-01-14 2007-02-09 주식회사 대우일렉트로닉스 체지방 측정기능을 가지는 냉장고
KR100645125B1 (ko) 2005-01-18 2006-11-10 주식회사 대우일렉트로닉스 체지방 측정기능을 가지는 냉장고
KR100681595B1 (ko) 2005-01-18 2007-02-09 주식회사 대우일렉트로닉스 인체진단 기능을 구비하는 양문형 냉장고
US20060183980A1 (en) * 2005-02-14 2006-08-17 Chang-Ming Yang Mental and physical health status monitoring, analyze and automatic follow up methods and its application on clothing
KR20060096734A (ko) 2005-03-02 2006-09-13 엘지전자 주식회사 냉장고 및 냉장고의 도어손잡이
DE102006012959A1 (de) 2005-03-22 2006-09-28 Lg Electronics Inc. Kühlschrank für die Gesundheitsfürsorge
KR100714565B1 (ko) 2005-09-08 2007-05-07 엘지전자 주식회사 비만관리형 냉장고
DE102006014637B4 (de) 2005-03-30 2019-10-31 Lg Electronics Inc. Kühlschrank für die Gesundheitsfürsorge
KR100629568B1 (ko) 2005-05-23 2006-09-27 엘지전자 주식회사 건강 관리형 냉장고
KR100645571B1 (ko) 2005-04-19 2006-11-14 주식회사 현원 냉장고 도어록 제어장치
KR100827894B1 (ko) 2005-05-13 2008-05-07 엘지전자 주식회사 체지방 측정형 냉장고
KR100681622B1 (ko) 2005-07-01 2007-02-09 주식회사 대우일렉트로닉스 체지방 측정기능을 가지는 냉장고의 도어핸들 이동장치
KR100645134B1 (ko) 2005-07-01 2006-11-10 주식회사 대우일렉트로닉스 체지방 측정기능을 가지는 냉장고의 도어핸들 이동장치
US20070081696A1 (en) * 2005-09-22 2007-04-12 Technology Licensing Corporation Biometric control for kitchen appliance
KR100894632B1 (ko) 2006-10-25 2009-04-24 연세대학교 산학협력단 원격 건강관리를 위한 변좌 일체형 생체신호 획득 장치
KR101317600B1 (ko) * 2006-12-15 2013-10-18 엘지전자 주식회사 냉장고
JP4909143B2 (ja) 2007-03-21 2012-04-04 トヨタホーム株式会社 ホームネットワークシステム
JP2008083070A (ja) 2007-11-22 2008-04-10 Shinichi Koyano 毎日の健康状態がわかる便器
JP5131646B2 (ja) 2009-03-26 2013-01-30 Toto株式会社 生体情報測定装置
US20100311482A1 (en) * 2009-05-30 2010-12-09 Lange Daniel H Electro-Biometric Methods and Apparatus
CN102404510B (zh) * 2009-06-16 2015-07-01 英特尔公司 手持装置中的摄像机应用
JP5503725B2 (ja) * 2010-02-24 2014-05-28 富士通フロンテック株式会社 認証装置、認証プログラム、および認証方法
US20110224505A1 (en) 2010-03-12 2011-09-15 Rajendra Padma Sadhu User wearable portable communicative device
DE102010016098A1 (de) * 2010-03-23 2011-09-29 Kaba Gallenschütz GmbH Zugangskontrollvorrichtung
KR20120020873A (ko) 2010-08-31 2012-03-08 신연철 스마트 헬스케어용 변기 시스템
KR101872975B1 (ko) * 2011-01-20 2018-07-02 삼성전자주식회사 서버 및 사용자 디바이스 간에 사용자의 개인 약품 정보 관리 서비스를 제공하는 방법, 그리고 사용자 개인 약품 정보 관리 서비스를 제공하는 서버 및 사용자 디바이스
KR101270954B1 (ko) 2011-05-24 2013-06-11 가톨릭대학교 산학협력단 심전도 신호 및 지문인식을 이용한 생체인식 시스템
US9526455B2 (en) * 2011-07-05 2016-12-27 Saudi Arabian Oil Company Systems, computer medium and computer-implemented methods for monitoring and improving health and productivity of employees
KR101903407B1 (ko) * 2011-09-08 2018-10-02 엘지전자 주식회사 원격 건강 관리 솔루션에서 비디오를 기반으로 한 헬스 케어 시스템 및 헬스 케어 서비스 제공방법
US9323912B2 (en) * 2012-02-28 2016-04-26 Verizon Patent And Licensing Inc. Method and system for multi-factor biometric authentication
US11006874B2 (en) * 2012-08-13 2021-05-18 Tata Consultancy Services Limited Real-time stress determination of an individual
JP6139837B2 (ja) * 2012-09-25 2017-05-31 東芝ライフスタイル株式会社 冷蔵庫
US20140211929A1 (en) * 2013-01-29 2014-07-31 Avaya Inc. Method and apparatus for identifying and managing participants in a conference room
US20140281568A1 (en) * 2013-03-15 2014-09-18 Google Inc. Using Biometrics to Generate Encryption Keys
US9574817B2 (en) * 2013-03-15 2017-02-21 Helmer, Inc. Medical products storage device with viewing window having variable opacity
US9721175B2 (en) * 2013-05-08 2017-08-01 Jpmorgan Chase Bank, N.A. Systems and methods for high fidelity multi-modal out-of-band biometric authentication through vector-based multi-profile storage
US9294475B2 (en) * 2013-05-13 2016-03-22 Hoyos Labs Ip, Ltd. System and method for generating a biometric identifier
US9892576B2 (en) * 2013-08-02 2018-02-13 Jpmorgan Chase Bank, N.A. Biometrics identification module and personal wearable electronics network based authentication and transaction processing
US20150046328A1 (en) * 2013-08-12 2015-02-12 Manu Mitra Secured point of sale transaction using fingerprint recognition

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040017978A (ko) * 2002-08-23 2004-03-02 삼성전자주식회사 냉장고 및 그 제어방법
KR20060038049A (ko) * 2004-10-29 2006-05-03 에스케이 텔레콤주식회사 통신망을 이용한 건강 관리 장치 및 방법
KR20060082677A (ko) * 2005-01-13 2006-07-19 인하대학교 산학협력단 심전도를 이용한 생체인식 시스템 및 방법

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170208652A1 (en) * 2014-09-03 2017-07-20 Electrolux Appliances Aktiebolag Domestic Appliance, In Particular Cooking Oven, With A Camera
US10674569B2 (en) * 2014-09-03 2020-06-02 Electrolux Appliances Aktiebolag Domestic appliance, in particular cooking oven, with a camera
KR20180017741A (ko) * 2016-08-10 2018-02-21 엘지전자 주식회사 냉장고 및 냉장고의 제어방법
KR20180025039A (ko) * 2016-08-31 2018-03-08 엘지전자 주식회사 냉장고
KR20190038669A (ko) * 2016-09-01 2019-04-08 삼성전자주식회사 디스플레이를 가진 냉장 저장 시스템
KR20180119999A (ko) * 2017-04-26 2018-11-05 (주)도넛시스템엘에스아이 체성분측정 기능을 가진 가전장치
KR20180126859A (ko) * 2017-05-18 2018-11-28 삼성전자주식회사 냉장고 및 냉장고의 음식 관리방법
WO2020032440A1 (ko) * 2018-08-07 2020-02-13 엘지전자 주식회사 인공지능을 이용하여 헬스 케어 기능을 수행하는 홈어플라이언스 및 클라우드 서버
KR20200025376A (ko) 2018-08-30 2020-03-10 단국대학교 산학협력단 스마트 냉장고 및 그 동작 방법
WO2020145471A1 (ko) * 2019-01-08 2020-07-16 삼성전자 주식회사 외부 전자 장치의 내부 공간을 관리하는 전자 장치 및 방법
USD956774S1 (en) 2019-04-25 2022-07-05 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface

Also Published As

Publication number Publication date
US10115286B2 (en) 2018-10-30
US20150161871A1 (en) 2015-06-11
KR102212064B1 (ko) 2021-02-05

Similar Documents

Publication Publication Date Title
KR102212064B1 (ko) 냉장고에 의해 헬스 서비스를 제공하는 방법 및 이를 위한 냉장고
CN110799977B (zh) 使用雷达的无缝认证
Bharti et al. HuMAn: Complex activity recognition with multi-modal multi-positional body sensing
CN104699958B (zh) 一种根据用户身体状况推荐菜谱的方法及装置
US10186014B2 (en) Information display method and electronic device for supporting the same
CN105975182B (zh) 一种终端操作方法及终端
KR102206054B1 (ko) 지문 처리 방법 및 그 전자 장치
CN106067891B (zh) 用于提供车辆服务的方法和装置
US10984082B2 (en) Electronic device and method for providing user information
KR20160037074A (ko) 전환 거울을 구비한 장치의 이미지 디스플레이 방법 및 그 장치
CN107533641A (zh) 指纹信息处理方法及支持指纹信息处理方法的电子装置
CN105511277A (zh) 推荐饮品的方法及装置
US9892248B2 (en) Refrigerator and method for measuring body composition using the refrigerator
KR20150098158A (ko) 지문인식 장치 및 방법
CN105474223A (zh) 用于改变电子设备的设置的用户验证
US11651842B2 (en) Server, portable terminal device, electronic device, and control method therefor
CN106095340B (zh) 测量仪数据存储方法和装置
CN110088764A (zh) 用于虹膜识别功能的操作方法及支持该方法的电子设备
CN106469297A (zh) 情绪识别方法、装置和终端设备
US10263989B2 (en) Method for matching multiple devices, and device and server system for enabling matching
US9521202B2 (en) Method for matching multiple devices, and device and server system for enabling matching
KR102392787B1 (ko) 전자 장치에서 온도를 측정하는 장치 및 방법
CN103886284A (zh) 人物属性信息识别方法、装置及电子设备
WO2022047272A9 (en) Electronic devices with a static artificial intelligence model for contextual situations, including age blocking for vaping and ignition start, using data analysis and operating methods thereof
WO2018062102A1 (ja) 筐体及びシステム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right