KR102209678B1 - Companion animal care method, device and computer readable medium for performing the method - Google Patents
Companion animal care method, device and computer readable medium for performing the method Download PDFInfo
- Publication number
- KR102209678B1 KR102209678B1 KR1020190012639A KR20190012639A KR102209678B1 KR 102209678 B1 KR102209678 B1 KR 102209678B1 KR 1020190012639 A KR1020190012639 A KR 1020190012639A KR 20190012639 A KR20190012639 A KR 20190012639A KR 102209678 B1 KR102209678 B1 KR 102209678B1
- Authority
- KR
- South Korea
- Prior art keywords
- toy
- companion animal
- user
- image
- video call
- Prior art date
Links
- 241001465754 Metazoa Species 0.000 title claims abstract description 123
- 238000000034 method Methods 0.000 title claims abstract description 37
- 238000004891 communication Methods 0.000 claims abstract description 22
- 230000008569 process Effects 0.000 claims abstract description 21
- 238000004458 analytical method Methods 0.000 claims abstract description 18
- 230000003993 interaction Effects 0.000 claims description 7
- 238000004590 computer program Methods 0.000 claims description 2
- 239000000284 extract Substances 0.000 description 10
- 238000010586 diagram Methods 0.000 description 6
- 206010037180 Psychiatric symptoms Diseases 0.000 description 2
- 238000010191 image analysis Methods 0.000 description 2
- 206010003805 Autism Diseases 0.000 description 1
- 208000020706 Autistic disease Diseases 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000002354 daily effect Effects 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 238000010195 expression analysis Methods 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000036651 mood Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/22—Social work or social welfare, e.g. community support activities or counselling services
-
- G06Q50/30—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/50—Business processes related to the communications industry
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Tourism & Hospitality (AREA)
- Health & Medical Sciences (AREA)
- Primary Health Care (AREA)
- General Business, Economics & Management (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Economics (AREA)
- Strategic Management (AREA)
- Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Child & Adolescent Psychology (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Operations Research (AREA)
- Image Analysis (AREA)
Abstract
본 발명의 일 실시예에 따른 반려동물 돌봄 장치는, 반려동물의 생활반경에 배치된 단말과 영상 통화를 수행하며, 영상통화 과정에서 생성되는 촬영영상을 누적 수집하는 영상통화 수행부; 상기 촬영영상을 기초로 상기 반려동물이 선호하는 사용자의 자세정보를 추출하고, 상기 자세정보에 대응되는 UI객체를 생성하여 표시하는 상호교감부; 및 상기 촬영영상을 기초로 상기 생활반경 내에 배치된 장난감의 마모도를 판단하여 알림 메시지를 생성하는 선호도분석부를 포함할 수 있다.An apparatus for caring for a companion animal according to an embodiment of the present invention includes: a video call performing unit for performing a video call with a terminal arranged in a life radius of the companion animal and accumulating and collecting photographed images generated during a video call process; A mutual communication unit for extracting the user's posture information preferred by the companion animal based on the captured image, and generating and displaying a UI object corresponding to the posture information; And a preference analysis unit configured to generate a notification message by determining a wear degree of a toy disposed within the life radius based on the captured image.
Description
본 발명은 반려동물 돌봄 방법, 이를 수행하기 위한 시스템 및 기록매체에 관한 것으로서, 더욱 상세하게는 원격지에서 반려동물의 상태를 확인하고 이와 관련된 돌봄 서비스를 제공하는 반려동물 돌봄 방법, 이를 수행하기 위한 시스템 및 기록매체에 관한 것이다.The present invention relates to a companion animal caring method, a system for performing the same, and a recording medium, and more particularly, a companion animal caring method for checking the condition of a companion animal at a remote location and providing a related caring service, and a system for performing the same And a recording medium.
최근 독신 생활을 하는 사람들이 갈수록 많아지고 있으며 일반적으로 독신 생활의 시간이 길어질수록 사람들의 고독감은 더욱 심해진다.Recently, more and more people live single life, and in general, the longer the single life is, the more severe the loneliness of people.
이를 해결하기 위한 한 방안으로 사람들은 반려동물을 기르는 방식을 통하여 고독감을 해소한다.As a solution to this, people solve the feeling of loneliness by raising companion animals.
그러나 반려동물을 기르는 대부분의 사람들은 직장생활을 하고 있어 매일 반려동물하고 같이 있는 시간이 매우 적으며, 따라서 반려동물이 혼자 집에 있는 시간이 많아지게 되고 이에 따라 많은 반려동물이 자폐증 혹은 우울증 등의 병에 걸리는 등 문제가 나타나게 된다.However, most people who have companion animals live at work, so they spend very little time with their companion animals every day, and therefore, the amount of time that companion animals are alone at home increases. Accordingly, many companion animals suffer from autism or depression. Problems appear, such as getting sick.
나아가 이로 인해 생기는 문제들은 반려동물 및 반려동물의 주인 모두에게 스트레스로 작용하며 특히 반려동물이 건강 상의 이유로 동물병원을 이용하게 되면 반려동물을 키우는 사람의 경제적 손실이 증가하게 된다.Furthermore, the problems arising from this act as stress on both the companion animal and the owner of the companion animal, and in particular, when the companion animal uses the veterinary hospital for health reasons, the economic loss of the person raising the companion animal increases.
이를 해결하기 위한 종래기술에는 한국특허공개공보 제10-2014-0146806호, 한국특허공개공보 제10-2008-0094117호 등이 있으나, 상기 종래기술은 단지 주인의 음성 또는 반려동물의 스케쥴 등의 기 입력 혹은 설정된 단순한 정보만을 전달하는 데 그쳐 실시간으로 반려동물의 행동을 파악하는데 어려움이 있고 결과적으로 반려동물을 돌보는 데 제한적일 수 밖에 없었다.Conventional techniques for solving this problem include Korean Patent Laid-Open Publication No. 10-2014-0146806, Korean Patent Publication No. 10-2008-0094117, etc., but the prior art is only used in terms of the owner's voice or companion animal's schedule. It is difficult to grasp the behavior of the companion animal in real time as it only delivers input or set simple information, and as a result, there is limited in caring for the companion animal.
본 발명의 일측면은 원격지에서도 반려동물과 상호교감을 수행함과 동시에 반려동물의 선호 물품을 자동으로 분석하여 사용자에게 적절한 물품을 추천하는 반려동물 돌봄 방법, 이를 수행하기 위한 장치 및 기록매체를 제공한다.One aspect of the present invention provides a companion animal care method for recommending an appropriate product to a user by automatically analyzing the companion animal's preferred product while performing mutual interaction with the companion animal even at a remote location, and an apparatus and a recording medium for performing the same. .
본 발명의 기술적 과제는 이상에서 언급한 기술적 과제로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.The technical problem of the present invention is not limited to the technical problem mentioned above, and other technical problems that are not mentioned will be clearly understood by those skilled in the art from the following description.
본 발명의 일 실시예에 따른 반려동물 돌봄 장치는, 반려동물의 생활반경에 배치된 단말과 영상 통화를 수행하며, 영상통화 과정에서 생성되는 촬영영상을 누적 수집하는 영상통화 수행부; 상기 촬영영상을 기초로 상기 반려동물이 선호하는 사용자의 자세정보를 추출하고, 상기 자세정보에 대응되는 UI객체를 생성하여 표시하는 상호교감부; 및 상기 촬영영상을 기초로 상기 생활반경 내에 배치된 장난감의 마모도를 판단하여 알림 메시지를 생성하는 선호도분석부를 포함한다.An apparatus for caring for a companion animal according to an embodiment of the present invention includes: a video call performing unit for performing a video call with a terminal arranged in a life radius of the companion animal and accumulating and collecting photographed images generated during a video call process; A mutual communication unit for extracting the user's posture information preferred by the companion animal based on the captured image, and generating and displaying a UI object corresponding to the posture information; And a preference analysis unit configured to generate a notification message by determining the degree of wear of the toy disposed within the life radius based on the captured image.
상기 상호 교감부는, 상기 촬영영상으로부터 반려동물에 대응되는 영역을 추출하고, 추출된 영역을 분석하여 상기 반려동물의 표정을 판단하되, 상기 반려동물의 표정이 기쁨인 것으로 판단되는 시점에서 상기 반려동물 돌봄 장치를 이용 중인 사용자를 촬영하여 상기 반려동물이 선호하는 사용자의 자세정보를 추출할 수 있다.The mutual communication unit extracts a region corresponding to the companion animal from the photographed image, analyzes the extracted region to determine the expression of the companion animal, and at a time point when the expression of the companion animal is determined to be joy, the companion animal By photographing a user who is using a caring device, posture information of the user preferred by the companion animal may be extracted.
상기 상호 교감부는, 상기 자세정보의 외곽선 형상에 대응되는 상기 UI객체를 생성하고, 영상통화 과정에서 사용자의 화면영역에 상기 UI객체를 배치하여 상호교감과 관련된 미션정보를 생성하고, 영상통화 과정에서 촬영되는 사용자 측의 촬영영상을 기초로 상기 미션정보의 달성여부를 판단할 수 있다.The mutual communication unit generates the UI object corresponding to the outline shape of the posture information, and generates mission information related to the mutual communication by placing the UI object on the screen area of the user during the video call process. It is possible to determine whether the mission information is achieved based on the captured image of the user being photographed.
상기 선호도분석부는, 상기 촬영영상으로부터 적어도 하나의 장난감 객체를 추출하고, 기 저장된 서로 다른 종류의 복수의 장난감 이미지와 비교하여 추출된 상기 장난감 객체의 종류를 구분하고, 구분된 장난감 객체와 동종의 장난감에 대한 기준 이미지와 상기 장난감 객체를 비교하여 유사도를 산출하며, 산출된 상기 유사도를 기초로 상기 장난감의 마모도를 판단할 수 있다.The preference analysis unit extracts at least one toy object from the photographed image, compares it with a plurality of previously stored toy images of different types to classify the extracted toy object, and separates the toy object and the same kind of toy. A degree of similarity is calculated by comparing the reference image to and the toy object, and the degree of wear of the toy may be determined based on the calculated similarity.
상기 선호도분석부는, 서로 다른 종류의 장난감 객체 중 상기 마모도가 기준값 이상인 장난감의 구매를 추천하는 메시지를 생성하여 표시할 수 있다.The preference analysis unit may generate and display a message recommending purchase of a toy whose wear degree is greater than or equal to a reference value among different types of toy objects.
또한, 본 발명의 일 실시예에 따른 반려동물 돌봄 장치에 의해 수행되는 반려동물 돌봄 방법은, 반려동물의 생활반경에 배치된 단말과 영상 통화를 수행하여 영상통화 과정에서 생성되는 촬영영상을 누적 수집하고, 상기 촬영영상을 기초로 상기 반려동물이 선호하는 사용자의 자세정보를 추출하고, 상기 자세정보에 대응되는 UI객체를 생성하여 표시하며, 상기 촬영영상을 기초로 상기 생활반경 내에 배치된 장난감의 마모도를 판단하여 알림 메시지를 생성한다.In addition, the companion animal care method performed by the companion animal care device according to an embodiment of the present invention accumulates and collects photographed images generated during the video call process by performing a video call with a terminal arranged in the life radius of the companion animal. And, based on the photographed image, the posture information of the user preferred by the companion animal is extracted, a UI object corresponding to the posture information is generated and displayed, and based on the photographed image, the toy disposed within the life radius is It determines the degree of wear and generates a notification message.
상기 자세정보를 추출하는 것은, 상기 촬영영상으로부터 반려동물에 대응되는 영역을 추출하고, 추출된 영역을 분석하여 상기 반려동물의 표정을 판단하되, 상기 반려동물의 표정이 기쁨인 것으로 판단되는 시점에서 상기 반려동물 돌봄 장치를 이용 중인 사용자를 촬영하여 상기 반려동물이 선호하는 사용자의 자세정보를 추출하는 것일 수 있다.Extracting the posture information includes extracting an area corresponding to the companion animal from the photographed image, and analyzing the extracted area to determine the expression of the companion animal, but at a point in time when the expression of the companion animal is determined to be joy. It may be to extract the posture information of the user preferred by the companion animal by photographing the user who is using the companion animal care device.
상기 UI객체를 생성하여 표시하는 것은, 상기 자세정보의 외곽선 형상에 대응되는 상기 UI객체를 생성하고, 영상통화 과정에서 사용자의 화면영역에 상기 UI객체를 배치하여 상호교감과 관련된 미션정보를 생성하고, 영상통화 과정에서 촬영되는 사용자 측의 촬영영상을 기초로 상기 미션정보의 달성여부를 판단하는 것을 포함할 수 있다.Creating and displaying the UI object includes generating the UI object corresponding to the outline shape of the posture information, placing the UI object on the user's screen area during a video call process to generate mission information related to mutual interaction, and , It may include determining whether or not the mission information is achieved based on a photographed image of the user photographed during the video call process.
상기 장난감의 마모도를 판단하는 것은, 상기 촬영영상으로부터 적어도 하나의 장난감 객체를 추출하고, 기 저장된 서로 다른 종류의 복수의 장난감 이미지와 비교하여 추출된 상기 장난감 객체의 종류를 구분하고, 구분된 장난감 객체와 동종의 장난감에 대한 기준 이미지와 상기 장난감 객체를 비교하여 유사도를 산출하며, 산출된 상기 유사도를 기초로 상기 장난감의 마모도를 판단하는 것일 수 있다.Determining the degree of wear of the toy may include extracting at least one toy object from the photographed image, classifying the type of the extracted toy object by comparing it with a plurality of previously stored toy images of different types, and distinguishing the toy object The similarity may be calculated by comparing a reference image for a toy of the same type as and the toy object, and the degree of wear of the toy may be determined based on the calculated similarity.
서로 다른 종류의 장난감 객체 중 상기 마모도가 기준값 이상인 장난감의 구매를 추천하는 메시지를 생성하여 표시하는 것을 더 포함할 수 있다.It may further include generating and displaying a message recommending purchase of a toy whose wear degree is equal to or greater than the reference value among different types of toy objects.
또한, 본 발명의 일 실시예에 따른 컴퓨터로 판독 가능한 기록매체는, 본 발명에 따른 반려동물 돌봄 방법을 수행하기 위한 컴퓨터 프로그램이 기록될 수 있다.In addition, in the computer-readable recording medium according to an embodiment of the present invention, a computer program for performing the companion animal care method according to the present invention may be recorded.
상술한 본 발명의 일측면에 따르면, 원격지에서도 미션정보를 통해 반려동물과 상호교감을 수행할 수 있으며, 영상통화 과정에서 장난감의 마모도를 자동으로 분석하여 반려동물이 선호하는 장난감만 선택적으로 추천할 수 있다.According to one aspect of the present invention described above, it is possible to perform mutual interaction with companion animals through mission information even at a remote location, and by automatically analyzing the wear degree of toys during a video call process, only toys that companion animals prefer can be selectively recommended. I can.
도 1은 본 발명의 일 실시예에 따른 반려동물 돌봄 시스템의 개략적인 구성이 도시된 개념도이다.
도 2는 도 1의 사용자 단말의 구체적인 구성이 도시된 블록도이다.
도 3은 도 2의 상호교감부에서 미션정보를 생성하는 구체적인 일 예가 도시된 도면이다.
도 4는 본 발명의 일 실시예에 따른 반려동물 돌봄 방법의 개략적인 흐름이 도시된 순서도이다.1 is a conceptual diagram showing a schematic configuration of a companion animal care system according to an embodiment of the present invention.
2 is a block diagram showing a detailed configuration of the user terminal of FIG. 1.
3 is a diagram illustrating a specific example of generating mission information in the mutual communication unit of FIG. 2.
4 is a flowchart illustrating a schematic flow of a method for caring for a companion animal according to an embodiment of the present invention.
후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이들 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 여기에 기재되어 있는 특정 형상, 구조 및 특성은 일 실시예와 관련하여 본 발명의 정신 및 범위를 벗어나지 않으면서 다른 실시예로 구현될 수 있다. 또한, 각각의 개시된 실시예 내의 개별 구성요소의 위치 또는 배치는 본 발명의 정신 및 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 취하려는 것이 아니며, 본 발명의 범위는, 적절하게 설명된다면, 그 청구항들이 주장하는 것과 균등한 모든 범위와 더불어 첨부된 청구항에 의해서만 한정된다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 기능을 지칭한다.DETAILED DESCRIPTION OF THE INVENTION The detailed description of the present invention described below refers to the accompanying drawings, which illustrate specific embodiments in which the present invention may be practiced. These embodiments are described in detail sufficient to enable a person skilled in the art to practice the present invention. It is to be understood that the various embodiments of the present invention are different from each other but need not be mutually exclusive. For example, certain shapes, structures, and characteristics described herein may be implemented in other embodiments without departing from the spirit and scope of the present invention in relation to one embodiment. In addition, it is to be understood that the location or arrangement of individual components within each disclosed embodiment may be changed without departing from the spirit and scope of the present invention. Accordingly, the detailed description to be described below is not intended to be taken in a limiting sense, and the scope of the present invention, if properly described, is limited only by the appended claims, along with all scopes equivalent to those claimed by the claims. Like reference numerals in the drawings refer to the same or similar functions over several aspects.
이하, 도면들을 참조하여 본 발명의 바람직한 실시예들을 보다 상세하게 설명하기로 한다.Hereinafter, preferred embodiments of the present invention will be described in more detail with reference to the drawings.
도 1은 본 발명의 일 실시예에 따른 반려동물 돌봄 시스템(1000)의 개략적인 구성이 도시된 개념도이다.1 is a conceptual diagram showing a schematic configuration of a companion
구체적으로, 본 발명의 일 실시예에 따른 반려동물 돌봄 시스템(1000)은 반려동물 단말(100)과 사용자 단말(200)을 포함할 수 있다.Specifically, the companion
반려동물 단말(100)은 반려동물이 주로 생활화는 생활반경 내에 배치되는 장치로, 사용자 단말(200)과 영상통화를 수행할 수 있는 수단들이 구비될 수 있다. 예컨대, 반려동물 단말(100)은 반려동물을 촬영하는 카메라 모듈과, 사용자 단말(200)과 무선통신을 수행하기 위한 통신 모듈과, 사용자의 목소리를 재생하는 스피커 모듈과, 사용자 단말(200)로부터 전송되는 영상을 표시하는 디스플레이 모듈 등이 구비될 수 있다.The
사용자 단말(200)은 반려동물의 보호자인 사용자가 휴대하는 장치로, 스마트폰(smartphone), 디바이스(device), 기구(apparatus), 단말(terminal), UE(user equipment), MS(mobile station), 무선기기(wireless device), 휴대기기(handheld device) 등 다른 용어로 불릴 수 있다.The
사용자 단말(200)은 반려동물 단말(100)와 영상통화를 수행하여 원격지에서도 반려동물의 상태를 확인할 수 있다. The
사용자 단말(200)은 본 발명에 따른 반려동물 돌봄 방법이 구현된 애플리케이션이 미리 설치될 수 있다. 사용자 단말(200)은 설치된 애플리케이션을 통해 반려동물의 돌봄과 관련된 다양한 서비스를 제공받을 수 있다. 예컨대, 사용자 단말(200)은 반려동물 훈련과 관련된 가이드 정보를 표시하거나, 반려동물의 돌봄과 관련된 기록을 저장하여 이에 따른 맞춤 서비스를 제공할 수 있다.The
특히, 본 발명에 따른 사용자 단말(200)은 영상통화 과정에서 수집되는 촬영영상을 기초로 상호교감을 위한 미션을 생성할 수 있으며, 또한 촬영영상을 분석하여 반려동물이 선호하는 장난감 및 그 장난감의 마모도를 자동을 분석하여 사용자에게 그에 따른 정보를 제공할 수 있다. 이와 관련하여, 도 2를 함께 참조하여 설명하기로 한다.In particular, the
도 2은 도 1의 사용자 단말(200, 이하 반려동물 돌봄 장치)의 구체적인 구성이 도시된 도면이다.FIG. 2 is a diagram illustrating a specific configuration of the user terminal 200 (hereinafter, a companion animal care device) of FIG. 1.
구체적으로, 반려동물 돌봄 장치(200)는 영상통화 수행부(210), 상호교감부(220) 및 선호도분석부(230)를 포함할 수 있다.Specifically, the companion
영상통화 수행부(210)는 반려동물의 생활반경에 배치된 단말인 반려동물과 단말(100)과 영상 통화를 수행할 수 있다. 영상통화 수행부(210)는 영상통화 과정에서 생성되는 촬영영상을 누적 수집할 수 있다. 영상통화 수행부(210)는 반려동물 단말(100)로부터 전송되는 반려동물측 영상과 사용자 단말(200)에서 촬영되는 사용자측 영상을 구분하여 관리할 수 있다.The video
상호교감부(220)는 영상통화 수행부(210)에 의해 누적 수집되는 촬영영상을 기초로 사용자와 반려동물의 교감을 위한 미션정보를 생성하여 표시할 수 있다.The
이를 위해, 상호교감부(220)는 반려동물이 선호하는 사용자의 자세정보를 추출할 수 있다. 즉, 상호교감부(220)는 사용자가 어떠한 포즈를 취했을 때 반려동물이 좋아하는지를 분석하여, 다음 영상통화 때 사용자가 동일한 포즈를 취하도록 하여 원격지에서도 반려동물과 사용자의 교감이 형성되도록 유도할 수 있다.To this end, the
구체적으로, 상호교감부(220)는 반려동물측 촬영영상 반려동물에 대응되는 영역을 추출하고, 추출된 영역을 분석하여 상기 반려동물의 표정을 판단할 수 있다. 상호교감부(220)는 기 공지된 다양한 영상분석 및 표정분석 알고리즘을 이용하여 촬영영상에 포함된 반려동물의 기분을 추정할 수 있다.Specifically, the
이 과정에서, 상호교감부(220)는 반려동물의 표정이 기쁨인 것으로 판단되는 시점에서 반려동물 돌봄 장치(200)를 이용 중인 사용자를 촬영하여 상기 반려동물이 선호하는 사용자의 자세정보를 추출할 수 있다. 예컨대, 상호교감부(220)는 반려동물측 촬영영상을 분석하여 반려동물이 행복하다고 느끼는 시점에서의 사용자측 촬영영상을 분석하여 해당 시점에 사용자가 하이파이브 포즈를 취한 것으로 판단되면, 하이파이브 포즈를 자세정보로 추출할 수 있다.In this process, the
이후, 상호교감부(220)는 추출된 상기 자세정보에 대응되는 미션정보를 생성할 수 있다. 이와 관련하여, 도 3을 함께 참조하여 설명하기로 한다.Thereafter, the
도 3은 상호교감부(220)에서 미션정보를 생성하는 구체적인 일 예가 도시된 도면이다.3 is a diagram illustrating a specific example of generating mission information in the
구체적으로, 상호교감부(220)는 상기 자세정보의 외곽선 형상에 대응되는 상기 UI객체를 생성할 수 있다. 상술한 예시에서, 상호교감부(220)는 하이파이브 포즈인 사용자의 손바닥의 외곽선 형상에 대응되는 UI객체(A)를 생성할 수 있다. 하지만, UI객체의 종류는 상술한 예시에 한정되는 것은 아니며 추정된 사용자의 자세정보에 따라 다양한 형태로 생성될 수 있다.Specifically, the
상호교감부(220)는 영상통화 과정에서 사용자의 화면영역에 UI객체(A)를 배치하여 상호교감과 관련된 미션정보를 생성할 수 있다.The
이후, 상호교감부(220)는 영상통화 과정에서 촬영되는 사용자 측의 촬영영상을 기초로 상기 미션정보의 달성여부를 판단할 수 있다. 상호교감부(220)는 사용자측 촬영영상으로부터 손바닥 객체를 추출하고, 손바닥 객체가 UI객체(A)가 배치된 영역 상에 형성되어있는지 여부를 판단할 수 있다. 상호교감부(220)는 UI객체(A) 상에 손바닥 객체가 소정 비율 이상 위치한 것으로 확인되면 미션을 달성한 것으로 판단하여 소정의 리워드를 지급할 수 있다.Thereafter, the
선호도분석부(230)는 반려동물측 촬영영상을 기초로 상기 생활반경 내에 배치된 장난감의 마모도를 판단하여 알림 메시지를 생성할 수 있다.The
상기 선호도분석부(230)는, 상기 촬영영상으로부터 적어도 하나의 장난감 객체를 추출할 수 있다. 예컨대, 선호도분석부(230)는 기 구축된 영상분석 알고리즘을 통해 반려동물측 촬영영상의 복수의 영역으로 레이블링하고, 각각의 레이블링된 영역이 어떠한 객체에 해당되는지를 판단할 수 있다. The
선호도분석부(230)는 기 저장된 서로 다른 종류의 복수의 장난감 이미지와 비교하여 반려동물측 촬영영상으로부터 추출된 상기 장난감 객체의 종류를 구분할 수 있다. 구체적으로, 선호도분석부(230)는 사용자로부터 미리 입력된 반려동물의 장난감 이미지를 수집하고, 이를 추출된 장난감 객체와 비교하여 사용자가 반려동물에게 지급한 장난감 중 촬영영상에 포함된 장난감이 어떤 종류의 장난감인지를 구분할 수 있다.The
선호도분석부(230)는 구분된 장난감 객체와 동종의 장난감에 대한 기준 이미지와 상기 장난감 객체를 비교하여 유사도를 산출하며, 산출된 상기 유사도를 기초로 상기 장난감의 마모도를 판단할 수 있다. 예를 들어, 선호도분석부(230)는 기준 이미지와 상기 장난감 객체가 80%일치하는 것으로 확인되면, 반려동물에 지급된 장난감이 20% 마모된 것으로 판단할 수 있다.The
여기서, 기준 이미지는 다양한 방법으로 수집할 수 있다. 예컨대, 선호도분석부(230)는 사용자가 새로운 장난감의 구입 시, 해당 장난감에 대한 이미지를 촬영하도록 요구함으로써, 마모되지 않은 상태의 장난감 이미지인 기준 이미지를 수집할 수 있다. 또는, 선호도분석부(230)는 외부 서버와의 통신을 통해 사용자로부터 입력된 장난감 정보에 대응되는 기준 이미지를 검색하여 수집할 수 있다.Here, the reference image can be collected in various ways. For example, when a user purchases a new toy, the
한편 선호도분석부(230)는, 서로 다른 종류의 장난감 객체 중 상기 마모도가 기준값 이상인 장난감의 구매를 추천하는 메시지를 생성하여 표시할 수 있다.Meanwhile, the
도 4는 본 발명의 일 실시예에 따른 반려동물 돌봄 방법의 개략적인 흐름이 도시된 순서도이다.4 is a flowchart illustrating a schematic flow of a method for caring for a companion animal according to an embodiment of the present invention.
본 발명에 따른 반려동물 돌봄 방법은 상술한 본 발명에 따른 반려동물 돌봄 장치(200)에 의해 수행될 수 있다. 이를 위해, 본 발명에 따른 반려동물 돌봄 장치(200)는 후술하는 반려동물 돌봄 방법을 구성하는 각 단계를 수행하기 위한 애플리케이션(소프트웨어)가 미리 설치될 수 있다.The companion animal care method according to the present invention may be performed by the companion
반려동물 돌봄 장치(200)는 반려동물 단말(100)과의 영상 통화를 통해 촬영영상을 수집할 수 있다(41).The companion
반려동물 돌봄 장치(200)는 반려동물의 생활반경에 배치된 반려동물 단말(100)과 영상 통화를 수행하여 영상통화 과정에서 생성되는 촬영영상을 누적 수집할 수 있다.The companion
반려동물 돌봄 장치(200)는 실시간 수집되는 촬영영상을 기초로 반려동물과 사용자의 상호교감을 위한 미션정보인 UI객체를 생성할 수 있다(42).The companion
반려동물 돌봄 장치(200)는 상기 촬영영상을 기초로 상기 반려동물이 선호하는 사용자의 자세정보를 추출할 수 있으며, 구체적으로는 상기 자세정보를 추출하는 것은, 상기 촬영영상으로부터 반려동물에 대응되는 영역을 추출하고, 추출된 영역을 분석하여 상기 반려동물의 표정을 판단하되, 상기 반려동물의 표정이 기쁨인 것으로 판단되는 시점에서 상기 반려동물 돌봄 장치를 이용 중인 사용자를 촬영하여 상기 반려동물이 선호하는 사용자의 자세정보를 추출할 수 있다.Companion
반려동물 돌봄 장치(200)는 추출된 자세정보의 외곽선 형상에 대응되는 상기 UI객체를 생성하고, 영상통화 과정에서 사용자의 화면영역에 상기 UI객체를 배치하여 상호교감과 관련된 미션정보를 생성하고, 영상통화 과정에서 촬영되는 사용자 측의 촬영영상을 기초로 상기 미션정보의 달성여부를 판단할 수 있다.The companion
또한, 반려동물 돌봄 장치(200)는 촬영영상을 분석하여 반려동물의 장난감 마모도를 판단하고, 이에 따른 구매 장난감을 추천할 수 있다(43).In addition, the companion
반려동물 돌봄 장치(200)는 상기 촬영영상으로부터 적어도 하나의 장난감 객체를 추출하고, 기 저장된 서로 다른 종류의 복수의 장난감 이미지와 비교하여 추출된 상기 장난감 객체의 종류를 구분하고, 구분된 장난감 객체와 동종의 장난감에 대한 기준 이미지와 상기 장난감 객체를 비교하여 유사도를 산출하며, 산출된 상기 유사도를 기초로 상기 장난감의 마모도를 판단하는 것일 수 있다. 반려동물 돌봄 장치(200)는 서로 다른 종류의 장난감 객체 중 상기 마모도가 기준값 이상인 장난감의 구매를 추천하는 메시지를 생성하여 표시할 수 있다.The companion
이와 같은, 반려 동물 돌봄 방법을 제공하는 기술은 애플리케이션으로 구현되거나 다양한 컴퓨터 구성요소를 통하여 수행될 수 있는 프로그램 명령어의 형태로 구현되어 컴퓨터 판독 가능한 기록 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능한 기록 매체는 프로그램 명령어, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다.Such a technique for providing a companion animal care method may be implemented as an application or implemented in the form of program instructions that can be executed through various computer components, and recorded in a computer-readable recording medium. The computer-readable recording medium may include program instructions, data files, data structures, etc. alone or in combination.
상기 컴퓨터 판독 가능한 기록 매체에 기록되는 프로그램 명령어는 본 발명을 위하여 특별히 설계되고 구성된 것들이거니와 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수도 있다.The program instructions recorded in the computer-readable recording medium may be specially designed and constructed for the present invention, and may be known and usable to those skilled in the computer software field.
컴퓨터 판독 가능한 기록 매체의 예에는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM, DVD 와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 ROM, RAM, 플래시 메모리 등과 같은 프로그램 명령어를 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다.Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks, and magnetic tapes, optical recording media such as CD-ROMs and DVDs, and magnetic-optical media such as floptical disks. media), and a hardware device specially configured to store and execute program instructions such as ROM, RAM, flash memory, and the like.
프로그램 명령어의 예에는, 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함된다. 상기 하드웨어 장치는 본 발명에 따른 처리를 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.Examples of the program instructions include not only machine language codes such as those produced by a compiler, but also high-level language codes that can be executed by a computer using an interpreter or the like. The hardware device may be configured to operate as one or more software modules to perform processing according to the present invention, and vice versa.
이상에서는 실시예들을 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.Although the above has been described with reference to embodiments, those skilled in the art will understand that various modifications and changes can be made to the present invention without departing from the spirit and scope of the present invention described in the following claims. I will be able to.
Claims (11)
상기 촬영영상을 기초로 상기 반려동물이 선호하는 사용자의 자세정보를 추출하고, 상기 자세정보에 대응되는 UI객체를 생성하여 표시하는 상호교감부; 및
상기 촬영영상을 기초로 상기 생활반경 내에 배치된 장난감의 마모도를 판단하여 알림 메시지를 생성하는 선호도분석부를 포함하며,
상기 촬영영상으로부터 적어도 하나의 장난감 객체를 추출하고, 기 저장된 서로 다른 종류의 복수의 장난감 이미지와 비교하여 추출된 상기 장난감 객체의 종류를 구분하고, 구분된 장난감 객체와 동종의 장난감에 대한 기준 이미지와 상기 장난감 객체를 비교하여 유사도를 산출하며, 산출된 상기 유사도를 기초로 비유사도를 마모도로 설정하여 상기 장난감의 마모도를 판단하며,
서로 다른 종류의 장난감 객체 중 상기 마모도가 기준값 이상인 장난감의 구매를 추천하는 메시지를 생성하여 표시하고,
상기 상호 교감부는,
상기 촬영영상으로부터 반려동물에 대응되는 영역을 추출하고, 추출된 영역을 분석하여 상기 반려동물의 표정을 판단하되, 상기 반려동물의 표정이 기쁨인 것으로 판단되는 시점에서 반려동물 돌봄 장치를 이용 중인 사용자를 촬영하여 상기 반려동물이 선호하는 사용자의 자세정보를 추출하고,
상기 자세정보의 외곽선 형상에 대응되는 상기 UI객체를 생성하고, 영상통화 과정에서 사용자의 화면영역에 상기 UI객체를 배치하여 상호교감과 관련된 미션정보를 생성하고, 영상통화 과정에서 촬영되는 사용자 측의 촬영영상을 기초로 상기 미션정보의 달성여부를 판단하며,
상기 상호 교감부는,
상기 UI객체 상에 손바닥 객체가 소정 비율 이상 위치한 것으로 확인되면 미션을 달성한 것으로 판단하여 소정의 리워드를 지급하고,
상기 선호도분석부는,
상기 사용자가 새로운 장난감을 구입하는 경우 상기 새로운 장난감에 대한 이미지가 촬영되도록 하여 마모되지 않은 상태의 장난감 이미지를 상기 기준 이미지로 수집하는 것을 특징으로 하는, 반려동물 돌봄 장치.
A video call execution unit that performs a video call with a terminal arranged in the life radius of the companion animal and accumulates and collects photographed images generated during the video call process;
A mutual sympathizer for extracting the posture information of the user preferred by the companion animal based on the captured image, and generating and displaying a UI object corresponding to the posture information; And
And a preference analysis unit for generating a notification message by determining a wear degree of a toy disposed within the life radius based on the photographed image,
At least one toy object is extracted from the captured image, and the type of the extracted toy object is compared by comparing it with a plurality of previously stored toy images, and a reference image for the toy object and the same kind of toy The toy object is compared to calculate a similarity, and based on the calculated similarity, the dissimilarity is set as a wear degree to determine the wear degree of the toy,
A message recommending the purchase of a toy whose wear degree is more than a reference value among different types of toy objects is generated and displayed,
The mutual communication unit,
A user who is using a companion animal care device at a point in time when an area corresponding to the companion animal is extracted from the photographed image and the expression of the companion animal is determined by analyzing the extracted area, and the expression of the companion animal is determined to be joy To extract the posture information of the user preferred by the companion animal,
The UI object corresponding to the outline shape of the posture information is created, the UI object is placed on the user's screen area in the video call process to generate mission information related to mutual interaction, and the user's side photographed in the video call process Determine whether the mission information has been achieved based on the captured image,
The mutual communication unit,
If it is confirmed that the palm object is located at a predetermined ratio or more on the UI object, it is determined that the mission has been accomplished and a predetermined reward is paid,
The preference analysis unit,
When the user purchases a new toy, an image of the new toy is photographed to collect an unworn toy image as the reference image.
반려동물의 생활반경에 배치된 단말과 영상 통화를 수행하여 영상통화 과정에서 생성되는 촬영영상을 누적 수집하고,
상기 촬영영상을 기초로 상기 반려동물이 선호하는 사용자의 자세정보를 추출하고, 상기 자세정보에 대응되는 UI객체를 생성하여 표시하며,
상기 촬영영상을 기초로 상기 생활반경 내에 배치된 장난감의 마모도를 판단하여 알림 메시지를 생성하며,
상기 촬영영상으로부터 적어도 하나의 장난감 객체를 추출하고, 기 저장된 서로 다른 종류의 복수의 장난감 이미지와 비교하여 추출된 상기 장난감 객체의 종류를 구분하고, 구분된 장난감 객체와 동종의 장난감에 대한 기준 이미지와 상기 장난감 객체를 비교하여 유사도를 산출하며, 산출된 상기 유사도를 기초로 비유사도를 마모도로 설정하여 상기 장난감의 마모도를 판단하며,
서로 다른 종류의 장난감 객체 중 상기 마모도가 기준값 이상인 장난감의 구매를 추천하는 메시지를 생성하여 표시하는 것을 더 포함하고,
상기 자세정보를 추출하는 것은,
상기 촬영영상으로부터 반려동물에 대응되는 영역을 추출하고, 추출된 영역을 분석하여 상기 반려동물의 표정을 판단하되, 상기 반려동물의 표정이 기쁨인 것으로 판단되는 시점에서 상기 반려동물 돌봄 장치를 이용 중인 사용자를 촬영하여 상기 반려동물이 선호하는 사용자의 자세정보를 추출하는 것이고,
UI객체를 생성하여 표시하는 것은,
상기 자세정보의 외곽선 형상에 대응되는 상기 UI객체를 생성하고, 영상통화 과정에서 사용자의 화면영역에 상기 UI객체를 배치하여 상호교감과 관련된 미션정보를 생성하고, 영상통화 과정에서 촬영되는 사용자 측의 촬영영상을 기초로 상기 미션정보의 달성여부를 판단하는 것이며,
상호 교감부는,
상기 UI객체 상에 손바닥 객체가 소정 비율 이상 위치한 것으로 확인되면 미션을 달성한 것으로 판단하여 소정의 리워드를 지급하고,
선호도분석부는,
상기 사용자가 새로운 장난감을 구입하는 경우 상기 새로운 장난감에 대한 이미지가 촬영되도록 하여 마모되지 않은 상태의 장난감 이미지를 상기 기준 이미지로 수집하는 것을 특징으로 하는, 반려동물 돌봄 방법.
In the companion animal care method performed by the companion animal care device,
By performing a video call with a terminal arranged in the life radius of the companion animal, the captured images generated in the video call process are accumulated and collected,
Extracting the user's posture information preferred by the companion animal based on the captured image, and generating and displaying a UI object corresponding to the posture information,
Based on the photographed image, a notification message is generated by determining the degree of wear of the toy disposed within the living radius,
At least one toy object is extracted from the captured image, and the type of the extracted toy object is compared by comparing it with a plurality of previously stored toy images, and a reference image for the toy object and the same kind of toy The toy object is compared to calculate a similarity, and based on the calculated similarity, the dissimilarity is set as a wear degree to determine the wear degree of the toy,
Further comprising generating and displaying a message recommending purchase of a toy having a wear degree of a reference value or more among different types of toy objects,
Extracting the posture information,
An area corresponding to the companion animal is extracted from the photographed image, and the expression of the companion animal is determined by analyzing the extracted area, and the companion animal care device is being used at a time when the expression of the companion animal is determined to be joy. To extract the user's posture information preferred by the companion animal by photographing the user,
Creating and displaying UI objects,
The UI object corresponding to the outline shape of the posture information is created, the UI object is placed on the user's screen area in the video call process to generate mission information related to mutual interaction, and the user's side photographed in the video call process It is to judge whether the mission information has been achieved based on the captured image,
The reciprocal department,
If it is confirmed that the palm object is located at a predetermined ratio or more on the UI object, it is determined that the mission has been accomplished and a predetermined reward is paid,
The Preference Analysis Department,
When the user purchases a new toy, the image of the new toy is photographed to collect an unworn toy image as the reference image.
A computer-readable recording medium having a computer program recorded thereon for performing the companion animal care method according to claim 6.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020190012639A KR102209678B1 (en) | 2019-01-31 | 2019-01-31 | Companion animal care method, device and computer readable medium for performing the method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020190012639A KR102209678B1 (en) | 2019-01-31 | 2019-01-31 | Companion animal care method, device and computer readable medium for performing the method |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20200095046A KR20200095046A (en) | 2020-08-10 |
KR102209678B1 true KR102209678B1 (en) | 2021-01-28 |
Family
ID=72049177
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020190012639A KR102209678B1 (en) | 2019-01-31 | 2019-01-31 | Companion animal care method, device and computer readable medium for performing the method |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102209678B1 (en) |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20080094117A (en) | 2007-04-06 | 2008-10-23 | 주식회사 칼라짚미디어 | System for managing a companion animal and method therefor |
KR20140146806A (en) | 2013-06-18 | 2014-12-29 | 이동환 | Animal companion management apparatus and method thereof |
KR102256057B1 (en) * | 2014-03-17 | 2021-05-25 | 에스케이플래닛 주식회사 | Apparatus for providing a search result based on posture of object, method thereof and computer readable medium having computer program recorded therefor |
KR101640410B1 (en) * | 2014-04-09 | 2016-07-18 | 주식회사 도브투래빗 | Multiple digital interacting method and system |
KR101713198B1 (en) * | 2015-02-09 | 2017-03-09 | 주식회사 디바이스넷 | Apparatus and method for managing companion animals |
KR101792217B1 (en) * | 2016-04-15 | 2017-10-31 | (주)코어센스 | Method for estimating damage of object |
-
2019
- 2019-01-31 KR KR1020190012639A patent/KR102209678B1/en active IP Right Grant
Also Published As
Publication number | Publication date |
---|---|
KR20200095046A (en) | 2020-08-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10380603B2 (en) | Assessing personality and mood characteristics of a customer to enhance customer satisfaction and improve chances of a sale | |
CN105339969B (en) | Linked advertisements | |
US9159362B2 (en) | Method and system for detecting and recognizing social interactions in a video | |
JP7440020B2 (en) | Information processing method, terminal device, information processing device, and information processing system | |
CN109145707B (en) | Image processing method and device, electronic equipment and storage medium | |
JP5441071B2 (en) | Face analysis device, face analysis method, and program | |
KR102374861B1 (en) | O2O(On-line to Off-line) BASED SYSTEM AND METHOD FOR SUGGESTING CUSTOMIZED INFORMATION | |
KR101925701B1 (en) | Determination of attention towards stimuli based on gaze information | |
US20110085700A1 (en) | Systems and Methods for Generating Bio-Sensory Metrics | |
US20140012944A1 (en) | Information distribution apparatus, signage system and method for distributing content data | |
US9491507B2 (en) | Content providing program, content providing method, and content providing apparatus | |
US20130102854A1 (en) | Mental state evaluation learning for advertising | |
JP2012252613A (en) | Customer behavior tracking type video distribution system | |
JP7151789B2 (en) | Information processing equipment | |
KR101992411B1 (en) | Method, system and non-transitory computer-readable recording medium for providing scent recommendation based on sns | |
KR102255520B1 (en) | Companion animal communication device and system through artificial intelligence natural language message delivery based on big data analysis | |
Bilalpur et al. | EEG-based evaluation of cognitive workload induced by acoustic parameters for data sonification | |
JP2019110421A (en) | Moving image distribution system | |
JP6399096B2 (en) | Information processing apparatus, display method, and computer program | |
KR102209678B1 (en) | Companion animal care method, device and computer readable medium for performing the method | |
US11587122B2 (en) | System and method for interactive perception and content presentation | |
JP2016173735A (en) | Customer information system and program | |
WO2012054048A1 (en) | Apparatus and method for evaluating an object | |
JP2019191718A (en) | Serving operation analysis and evaluation system | |
JP6977834B2 (en) | Information processing equipment, genetic information creation method and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
AMND | Amendment | ||
E601 | Decision to refuse application | ||
X091 | Application refused [patent] | ||
AMND | Amendment | ||
X701 | Decision to grant (after re-examination) | ||
GRNT | Written decision to grant |