KR101710667B1 - 로봇을 이용한 서비스 어플리케이션 제공 장치 및 그 방법 - Google Patents

로봇을 이용한 서비스 어플리케이션 제공 장치 및 그 방법 Download PDF

Info

Publication number
KR101710667B1
KR101710667B1 KR1020120147600A KR20120147600A KR101710667B1 KR 101710667 B1 KR101710667 B1 KR 101710667B1 KR 1020120147600 A KR1020120147600 A KR 1020120147600A KR 20120147600 A KR20120147600 A KR 20120147600A KR 101710667 B1 KR101710667 B1 KR 101710667B1
Authority
KR
South Korea
Prior art keywords
service
user
information
service application
robot
Prior art date
Application number
KR1020120147600A
Other languages
English (en)
Other versions
KR20140079604A (ko
Inventor
박천수
장민수
이대하
김재홍
조영조
박종현
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020120147600A priority Critical patent/KR101710667B1/ko
Priority to US13/913,875 priority patent/US20140172909A1/en
Publication of KR20140079604A publication Critical patent/KR20140079604A/ko
Application granted granted Critical
Publication of KR101710667B1 publication Critical patent/KR101710667B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J13/00—Controls for manipulators
    • B25J13/08—Controls for manipulators by means of sensing devices, e.g. viewing or touching devices
    • B25J13/088—Controls for manipulators by means of sensing devices, e.g. viewing or touching devices with position, velocity or acceleration sensors
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J13/00—Controls for manipulators
    • B25J13/08—Controls for manipulators by means of sensing devices, e.g. viewing or touching devices
    • B25J13/081—Touching devices, e.g. pressure-sensitive
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/953—Querying, e.g. by the use of web search engines
    • G06F16/9535—Search customisation based on user profiles and personalisation
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S901/00—Robots
    • Y10S901/01—Mobile robot

Abstract

본 발명은 로봇을 이용한 서비스 어플리케이션 제공 장치 및 그 방법에 관한 것으로, 로봇의 이동성을 이용하여 실시간으로 주변 환경 정보 및 사용자 정보를 수집함으로써 각 사용자에게 필요한 서비스 어플리케이션을 제공할 수 있고, 사용자와 로봇 간의 상호 작용(Human Robot Interaction)으로 발생하는 피드백을 통해 서비스 어플리케이션에 대한 다양한 평가를 진행할 수 있는 로봇을 이용한 서비스 어플리케이션 제공 장치 및 그 방법에 관한 기술이다.

Description

로봇을 이용한 서비스 어플리케이션 제공 장치 및 그 방법{DEVICE AND METHOD FOR PROVIDING SERVICE APPLICATION USING ROBOT}
본 발명은 로봇을 이용한 서비스 어플리케이션 제공 장치 및 그 방법에 관한 것이다. 보다 자세하게는, 본 발명은 로봇의 이동성을 이용하여 실시간으로 주변 환경 정보 및 사용자 정보를 수집함으로써 각 사용자에게 필요한 서비스 어플리케이션을 제공할 수 있고, 사용자와 로봇 간의 상호 작용(Human Robot Interaction)으로 발생하는 피드백을 통해 서비스 어플리케이션에 대한 다양한 평가를 진행할 수 있는 로봇을 이용한 서비스 어플리케이션 제공 장치 및 그 방법을 제공한다.
최근 스마트폰, 스마트패드, PC 등에서 다양한 서비스 어플리케이션이 제공되고 있다. 일반적으로, 서비스 어플리케이션은 사용자가 어플리케이션 스토어(이하, 앱 스토어라 함)에서 원하는 서비스 어플리케이션을 검색 및 선택하여 다운로드 받아 사용하는 과정으로 제공된다. 사용자가 앱 스토어에서 다운로드 받아 사용하는 서비스 어플리케이션은 정해진 순서와 단계에 따라 수행되기 때문에 단 방향의 제한적인 사용자 반응만을 피드백 받을 수 있다. 이러한 피드백은 다운로드 횟수, 사용자 만족도, 사용자 호감도 등의 사용과 관련된 평가가 대부분이고, 사용자가 앱 스토어에서 서비스 어플리케이션을 검색 할 때 사용자에게 불필요한 서비스 어플리케이션들이 함께 검색되는 경우가 많다. 또한, 사용자는 단순히 다운로드 받은 횟수가 많거나 사용자의 호감도가 높은 서비스 어플리케이션들을 선택하는 경우가 많다.
따라서, 사용자가 앱 스토어에서 제공하는 서비스 어플리케이션을 검색 및 선택하는 정적인 과정에 그치는 것이 아니라, 현재 사용자의 상황 및 의도를 인식하고, 각 사용자에게 특화된 서비스 어플리케이션을 제공할 수 있는 동적인 과정이 필요하다. 또한, 사용성 평가뿐만 아니라 다양한 피드백을 통해 서비스 어플리케이션에 대한 평가를 진행할 필요가 있다.
이에, 본 발명은 로봇 서비스가 가능한 공간에서 로봇의 이동성을 이용하여 실시간으로 주변 환경 정보 및 사용자 정보를 수집함으로써 각 사용자에게 필요한 서비스 어플리케이션을 제공할 수 있고, 사용자와 로봇 간의 상호 작용에서 발생하는 피드백을 통해 서비스 어플리케이션에 대한 구체적인 상황 및 사용 경험 등을 포함하는 다양한 평가를 진행할 수 있는 로봇을 이용한 서비스 어플리케이션 제공 장치 및 그 방법을 제공하고자 한다.
상술한 본 발명은 로봇을 이용한 서비스 어플리케이션 제공장치에 관한 것으로, 로봇의 이동 경로 주변에 대한 주변 감지 정보 및 사용자 상태 정보를 생성하는 감지부와, 상기 주변 감지 정보 및 상기 사용자 상태 정보를 통해 사용자의 상황 및 의도를 판단하여 사용자 인지 정보를 생성하고, 상기 사용자 인지 정보에 따라 서비스 어플리케이션을 검색 및 다운로드 받는 사용자 상황 판단부와, 상기 로봇의 이동 경로 주변의 서비스 표현 장치를 검색하고, 검색된 상기 서비스 표현 장치 중 적어도 하나에 상기 서비스 어플리케이션에 대응하는 서비스를 이송하는 서비스 제공부, 및 상기 서비스 표현 장치를 통해 상기 서비스를 제공받는 과정에서 상기 사용자와 상기 로봇 간의 상호 작용에 대응하는 피드백 정보를 관리하는 사용자 피드백 관리부를 포함한다.
여기서, 상기 사용자 상황 판단부는 상기 서비스 어플리케이션에 기술된 메타데이터를 기반으로 상기 서비스 어플리케이션을 검색하는 것을 특징으로 한다. 그리고, 상기 메타데이터는 상기 서비스의 도메인, 상기 서비스 어플리케이션이 지원하는 기기 정보, 상기 서비스 어플리케이션에 포함된 콘텐츠 정보, 상기 서비스의 실행 정보 또는 상기 피드백 정보를 포함하는 것을 특징으로 한다.
또한, 상기 사용자 상황 판단부는 상기 메타데이터를 기반으로 상기 사용자 인지 정보에 따라 상기 사용자와 상기 로봇 간의 상호 작용 시나리오를 구성하여 상기 서비스 어플리케이션을 검색하는 것을 특징으로 한다. 그리고, 상기 서비스 제공부는 상기 메타데이터를 기반으로 상기 서비스 표현 장치의 연결 정보 및 기기 정보에 따라 상기 서비스 어플리케이션에 대응되는 서비스 표현 장치를 검색하는 것을 특징으로 한다.
또한, 상기 서비스 제공부는 상기 메타데이터와 상기 서비스 표현장치의 기기 정보를 비교 분석하여 상기 서비스를 제공하기 위한 서비스 표현장치를 선택하는 것을 특징으로 한다. 그리고, 상기 사용자 피드백 관리부는 상기 사용자와 상기 로봇 간의 상호 작용에서 발생하는 사용자 반응 및 사용성 평가를 상기 서비스 어플리케이션에 대한 상기 피드백 정보로 관리하는 것을 특징으로 한다.
그리고, 본 발명의 실시 예는 로봇을 이용한 서비스 어플리케이션 제공 방법에 관한 것으로, 로봇의 이동 경로 주변에 대한 주변 감지 정보 및 사용자 상태 정보를 생성하는 단계와, 상기 주변 감지 정보 및 상기 사용자 상태 정보를 통해 사용자의 상황 및 의도를 판단하여 사용자 인지 정보를 생성하는 단계와, 상기 사용자 인지 정보에 따라 서비스 어플리케이션을 검색 및 다운로드 받는 단계와, 상기 로봇의 이동 경로 주변의 서비스 표현 장치를 검색하는 단계와, 검색된 상기 서비스 표현 장치 중 적어도 하나에 상기 서비스 어플리케이션에 대응하는 서비스를 이송하는 단계, 및 상기 서비스 표현 장치를 통해 상기 서비스를 제공받는 과정에서 상기 사용자와 상기 로봇 간의 상호 작용에 대응하는 피드백 정보를 관리하는 단계를 포함한다.
여기서, 상기 서비스 어플리케이션을 검색하는 단계는 상기 서비스 어플리케이션에 기술된 메타데이터를 이용하여 검색하는 것을 특징으로 한다. 그리고, 상기 서비스 어플리케이션을 검색하는 단계는 상기 메타데이터를 기반으로 상기 사용자 인지 정보에 따라 상기 사용자와 상기 로봇 간의 상호 작용 시나리오를 구성하는 단계를 포함하는 것을 특징으로 한다.
또한, 상기 서비스 표현 장치를 검색하는 단계는 상기 메타데이터를 기반으로 상기 서비스 표현 장치의 연결 정보 및 기기 정보에 따라 상기 서비스 어플리케이션에 대응되는 상기 서비스 표현 장치를 검색하는 것을 특징으로 한다. 그리고, 상기 서비스를 이송하는 단계는 상기 메타데이터와 상기 서비스 표현장치의 기기 정보를 비교 분석하여 상기 서비스를 제공하기 위한 서비스 표현장치를 선택하는 단계를 포함하는 것을 특징으로 한다. 또한, 상기 피드백 정보는 상기 사용자와 상기 로봇 간의 상호 작용에서 발생하는 사용자 반응 및 사용성 평가를 포함하는 것을 특징으로 한다.
본 발명은 로봇을 이용한 서비스 어플리케이션 제공 장치 및 그 방법에 있어서, 로봇을 활용할 수 있는 교육, 실버케어, 홈, 오피스, 관광 등의 서비스 도메인에서 필요한 서비스 어플리케이션을 메타데이터를 포함한 서비스 어플리케이션 기술 언어를 통해 제작 및 배포하고, 로봇이 이동함에 따라 실시간으로 변화하는 주변 상황을 인식하여 사용자에게 적합한 서비스 어플리케이션을 검색하고, 서비스 표현 장치를 통해 해당 서비스를 제공함으로써 서비스 어플리케이션에 대한 사용자 만족도를 높일 수 있고, 변화하는 상황에 대처를 할 수 있는 서비스 어플리케이션을 제공할 수 있는 효과가 달성된다.
또한, 본 발명은 사용자와 로봇 간의 상호 작용에서 발생하는 정보를 피드백 정보로 이용함으로써 서비스 어플리케이션의 다운로드 횟수, 사용자 만족도, 사용자 호감도 등의 사용과 관련된 평가뿐만 아니라 해당 서비스 어플리케이션이 필요한 환경, 상황 및 경험을 사용자 간에 공유할 수 있어 서비스 어플리케이션의 활용 가치를 향상시킬 수 있고, 서로 다른 서비스 도메인과 연계하여 사용 할 수 있어 다양한 서비스 영역에 적용시킬 수 있는 효과가 달성된다.
도 1은 본 발명의 실시 예에 따른 로봇을 이용한 서비스 어플리케이션 제공 장치를 도시한 개략도.
도 2는 도 1의 로봇(100)의 구성을 도시한 블록도.
도 3은 본 발명의 실시 예에 따른 로봇을 이용한 서비스 어플리케이션 제공 방법을 도시한 순서도.
후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이들 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 여기에 기재되어 있는 특정 형상, 구조 및 특성은 일 실시예에 관련하여 본 발명의 정신 및 범위를 벗어나지 않으면서 다른 실시예로 구현될 수 있다. 또한, 각각의 개시된 실시예 내의 개별 구성요소의 위치 또는 배치는 본 발명의 정신 및 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 취하려는 것이 아니며, 본 발명의 범위는, 적절하게 설명된다면, 그 청구항들이 주장하는 것과 균등한 모든 범위와 더불어 첨부된 청구항에 의해서만 한정된다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 기능을 지칭한다.
이하, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 하기 위하여, 본 발명의 바람직한 실시예들에 관하여 첨부된 도면을 참조하여 상세히 설명하기로 한다.
도 1은 본 발명의 실시 예에 따른 로봇을 이용한 서비스 어플리케이션 제공 장치를 도시한 개략도이다.
도 1을 참조하면, 본 발명의 서비스 어플리케이션 제공 장치는 로봇(100), 외부 감지장치(200) 및 서비스 표현장치(300)를 포함한다. 여기서, 로봇(100)은 교육 시설, 실버 타운, 홈, 오피스, 공공 장소 등에 위치하며, 이동 가능한 장치이다. 로봇(100)은 이동 경로에 배치된 주변의 외부 감지장치(200)를 통해 감지된 사용자(400)의 정보 또는 주변환경 등의 변화 정보와 사용자(400)의 피드백 정보를 이용하여 사용자(400)의 상황 및 의도를 감지하고, 사용자(400)의 상황 및 의도에 따라 앱 스토어에서 서비스 어플리케이션을 검색하고, 선택적으로 다운로드 한다.
그리고, 로봇(100)은 사용자(400)의 이동 경로 주변에 배치된 서비스 표현 장치(300) 중 다운로드 된 서비스 어플리케이션에서 제공하는 서비스를 표현할 수 있는 서비스 표현 장치(300)가 있는지 여부를 판단한다. 판단 결과, 서비스 표현에 적합한 서비스 표현 장치(300)가 검색되는 경우 로봇(100)은 해당 서비스 표현 장치(300)의 권장 환경에 맞추어 서비스를 이송(migration) 한다.
서비스 표현장치(300)는 TV, 오디오, 스크린, PC, 스마트폰, 스마트패드 등을 포함한다. 그리고, 서비스 표현 장치(300)는 로봇(100)으로부터 이송된 서비스를 사용자(400)에게 제공한다. 외부 감지장치(200)는 카메라, 마이크, 적외선 센서, 모션 센서, 환경 센서 등을 포함한다. 여기서, 로봇(100)은 UPnP(universal plug and play) 프로토콜, Bonjour 프로그램 등을 이용하여 외부 감지장치(200) 및 서비스 표현장치(300)를 인식할 수 있다.
도 2는 도 1에 도시된 로봇(100)을 도시한 블록도이다.
도 2를 참조하면, 본 발명의 실시 예에 따른 로봇(100)은 인터페이스부(110), 감지부(120), 상황 판단부(130), 서비스 제공부(140) 및 사용자 피드백 관리부(150)를 포함한다. 여기서, 인터페이스부(110)는 외부 감지 장치(200) 및 서비스 표현장치(300) 각각과 통신한다. 인터페이스부(110)는 사용자(400)로부터 서비스 어플리케이션의 실행 및 다운로드와 관련된 선택을 하기 위한 키 입력 수단을 포함할 수 있다.
감지부(120)는 주변 상황 및 사용자를 감지하여 주변 감지 정보 및 사용자 상태 정보를 생성한다. 여기서, 주변 감지 정보는 로봇(100)의 이동 경로에 대응하는 공간 정보이며, 로봇(100) 자체에 구비된 내부 감지장치, 예컨대 카메라, 마이크, 터치 센서, 적외선 센서 등을 통해 수집하거나, 외부 감지장치(200)로부터 전달받을 수 있다. 그리고, 사용자 상태 정보는 사용자의 개인 정보, 위치 정보, 얼굴 인식 정보, 음성, 얼굴표정, 행동(제스처), 감성 상태를 포함한다.
그리고, 상황 판단부(130)는 주변 감지 정보 및 사용자 상태 정보에 따라 사용자의 상황 및 의도를 판단하고, 판단된 사용자의 상황 및 의도에 따라 앱 스토어에서 제공하는 다수의 서비스 어플리케이션 중 적어도 하나를 선택하여 다운로드 받는다. 이를 위해, 상황 판단부(130)는 상황 및 의도 인식부(132)와, 서비스 어플리케이션 구성부(134)를 포함한다. 상황 및 의도 인식부(132)는 주변 감지 정보 및 사용자 상태 정보를 통해 사용자의 상황 및 의도를 판단하여 사용자 인지 정보를 생성한다.
그리고, 서비스 어플리케이션 구성부(134)는 서비스 어플리케이션에 기술(description)된 메타데이터를 기반으로 주변 감지 정보 및 사용자 인지 정보를 이용하여 서비스 어플리케이션을 검색 및 다운로드받는다. 여기서, 서비스 어플리케이션 구성부(134)는 서비스 도메인, 사용자 프로파일 정보, 서비스 어플리케이션 사용 정보에 따라 서비스 어플리케이션을 선택적으로 다운로드 받을 수 있다. 서비스 어플리케이션 구성부(134)는 검색된 서비스 어플리케이션을 사용자에게 추천하고, 사용자에 의해 다운로드 여부를 선택 받을 수 있다.
여기서, 본 발명의 실시 예에 따른 서비스 도메인은 교육, 실버케어, 주택, 회사, 관광 등 로봇을 활용할 수 있는 서비스 도메인을 모두 포함할 수 있다. 그리고, 서비스 어플리케이션 구성부(134)는 다운로드 받은 서비스 어플리케이션 실행시 해당 서비스 어플리케이션에 포함된 무료 콘텐츠의 경우는 기본적으로 실행시키고, 유료 콘텐츠의 경우는 사용자의 선택에 따라 다운로드 및 실행시키는 것이 바람직하다.
본 발명의 실시 예에 따른 서비스 어플리케이션은 특정 운영체계(OS)나 플랫폼에 독립적으로 기술하기 위해 HTML5(hyper text markup language 5) 등과 같은 웹 기반의 어플리케이션 형태로 제작된다. 그리고, 서비스 도메인에 따른 서비스 어플리케이션이나 콘텐츠들은 클라우드, 서버 등에 등록된다. 여기서, 서비스 시나리오에 연결된 콘텐츠는 서비스 어플리케이션과 다른 물리적 공간에 저장되거나, 연결 정보만을 가질 수 있다.
서비스 어플리케이션 기술 언어(service application description language)에는 서비스 어플리케이션 검색에 필요한 메타데이터를 기술한다. 서비스 어플리케이션에 기술된 메타데이터는 서비스 도메인, 서비스 어플리케이션이 지원 가능한 기기 정보, 서비스 어플리케이션에 포함된 콘텐츠가 지원하는 해상도(SD, HD, Full-HD, 640*480, 720p, 1080p 등으로 기술), 콘텐츠의 3D 화면 지원 여부에 대한 정보, 서비스 어플리케이션을 실행하기 위한 조건과 상황 정보, 서비스 검색에 필요한 콘텐츠 정보 및 상호 작용 피드백에 대한 정보를 포함한다. 여기서, 콘텐츠는 교육용 콘텐츠, 실버용 콘텐츠, 관광용 콘텐츠 등을 포함하며, 피드백 정보는 사용자의 성향이나 반응 데이터를 포함하고, 사용자의 개인 보안 정보는 제외하여 기술하는 것이 바람직하다.
또한, 본 발명의 실시 예에 따른 서비스 어플리케이션 기술 언어는 서비스 실행을 위한 상호작용 시나리오, 서비스 실행에 대한 성공 여부, 상황 정보, 세부 콘텐츠 정보, 콘텐츠에 연결하기 위한 연결 정보 및 로봇(100)과 사용자(400) 간의 상호 작용을 통해 발생하는 피드백 정보 등을 포함할 수 있다. 각 서비스 어플리케이션은 시나리오 기반의 흐름을 제공하며, 시나리오 상에서 필요한 콘텐츠는 연결 정보를 통해 기술한다. 예컨대, 교육 도메인의 교육용 서비스 어플리케이션은 국어, 수학, 전래동화 등의 서비스 어플리케이션을 정의할 수 있고, 각 서비스 어플리케이션은 메타데이터를 포함한 시나리오 기반의 콘텐츠들로 구성된다.
다시 도 2를 참조하면, 서비스 제공부(140)는 일정 주기마다 주변의 서비스 표현장치(300)를 인식하고, 인식된 서비스 표현장치(300)에서 표현 가능한 서비스를 확인한다. 그리고, 서비스 제공부(140)는 다운로드 받은 서비스 어플리케이션의 메타 데이터와 서비스 표현장치(300)에서 표현 가능한 서비스를 비교 분석하여 적합한 서비스 표현장치(300)를 선택하고, 선택된 서비스 표현장치(300)의 서비스 환경에 맞추어 해당 서비스 어플리케이션에서 제공하는 서비스를 이송한다.
이를 위해, 서비스 제공부(140)는 서비스 표현장치 검색 및 선택부(142) 및 서비스 이송부(144)를 포함한다. 여기서, 서비스 표현장치 검색 및 선택부(142)는 서비스 표현장치(300)의 연결 정보 및 기기 정보를 전달받고, 이동 경로 주변에 연결된 서비스 표현장치(300)를 인식한다.
그리고, 서비스 표현장치 검색 및 선택부(142)는 다운로드 받은 서비스 어플리케이션의 메타데이터에서 연결된 서비스 표현장치(300)와 관련된 정보를 파싱(parsing)하고, 서비스 표현장치(300)가 해당 서비스 어플리케이션을 제공할 수 있는지 여부를 확인하여 서비스 표현장치(300)를 선택한다.
여기서, 서비스 표현장치 검색 및 선택부(142)는 서비스 어플리케이션의 기기 관련 메타 데이터와 서비스 표현장치(300)의 기능을 맵핑(mapping)하여 서로 유사하거나 일치하는 경우 해당 서비스 표현장치(300)가 서비스 어플리케이션을 제공할 수 있는 것으로 판단한다.
서비스 이송부(144)는 서비스 표현장치 검색 및 선택부(142)를 통해 선택된 서비스 표현 장치(300)의 서비스 환경을 판단하고, 해당 서비스 표현 장치(300)의 서비스 환경에 맞추어 서비스 어플리케이션에서 제공하는 서비스를 이송한다. 예컨대, 음성 및 영상 콘텐츠의 경우 서비스 표현장치(300)로 오디오와 스크린이 검색되면, 서비스 이송부(144)는 음성 콘텐츠를 오디오에 제공하고, 영상 콘텐츠는 스크린에 제공할 수 있다. 만약, 서비스 표현장치(300)가 주변에서 검색되지 않는 경우, 서비스 이송부(144)는 로봇(100) 자체에 구비된 내부 서비스 표현장치, 예컨대 마이크나 디스플레이를 이용하여 콘텐츠를 제공할 수 있다.
사용자 피드백 관리부(150)는 해당 서비스 어플리케이션에 대한 사용성 평가, 사용자의 반응 등에 따른 피드백 정보를 생성한다. 여기서, 사용자의 반응은 사용자(400)와 로봇(100) 간의 대화, 사용자의 터치, 얼굴 표정, 몸짓 등을 포함할 수 있다. 즉, 사용자 피드백 관리부(150)는 사용성 평가뿐만 아니라 어떤 환경 또는 상황에서 사용자의 만족도가 높은지 등에 대해 사용자의 반응을 통해 파악할 수 있다.
이하, 도 3을 참고하여 본 발명의 실시 예에 따른 로봇을 이용한 서비스 어플리케이션 제공 방법을 설명한다.
도 3은 본 발명의 실시 예에 따른 로봇을 이용한 서비스 어플리케이션 제공 방법을 도시한 순서도이다.
도 3을 참고하면, 먼저 로봇(100)이 이동하기 시작한다(단계 S1). 그 다음, 감지부(120)는 로봇(100)의 이동 경로에 위치한 사용자(400), 외부 감지장치(200) 및 서비스 표현장치(300)를 감지하여 주변 감지 정보 및 사용자 상태 정보를 생성한다(단계 S2). 이때, 감지부(120)는 로봇(100)에 구비된 센서 등을 통해 직접 주변 감지 정보 및 사용자 상태 정보를 생성할 수도 있다.
그 다음, 상황 및 의도 인식부(132)는 주변 감지 정보 및 사용자 상태 정보에 따라 사용자의 현재 상황을 판단하여 사용자 상황 인지 정보를 생성한다(단계 S3). 그러면, 서비스 어플리케이션 구성부(134)는 서비스 어플리케이션의 메타데이터를 기반으로 현재 상황에서 사용자에게 필요한 서비스 어플리케이션을 검색한다(단계 S4).
그 다음, 서비스 어플리케이션 구성부(134)는 사용자에게 해당 서비스 어플리케이션을 추천하고, 사용자가 이를 선택했는지 여부를 판단한다(단계 S5). 단계 S5에서, 사용자가 서비스 어플리케이션 구성부(134)가 추천한 서비스 어플리케이션을 선택한 경우 서비스 표현장치 검색 및 선택부(142)는 인터페이스부(110)를 통해 주변의 서비스 표현장치(300)를 검색한다(단계 S6). 이때, 서비스 표현장치 검색 및 선택부(142)는 사용자의 선택 없이 자동으로 실행되는 서비스 어플리케이션의 경우에도 단계 S6을 실행하는 것이 바람직하다.
반면, 단계 S5에서, 사용자가 서비스 어플리케이션 구성부(134)가 추천한 서비스 어플리케이션을 선택하지 않은 경우, 사용자 피드백 관리부(150)는 현재 사용자의 상황에 적합하지 않은 서비스 어플리케이션으로 판단하여 피드백 정보로 생성하여 관리한다(단계 S7).
그 다음, 단계 S6에서, 서비스 표현장치 검색 및 선택부(142)가 메타데이터를 기반으로 호환이 가능한 서비스 표현장치(300)를 검색한 경우 서비스 어플리케이션을 다운로드 받는다(단계 S8). 반면, 단계 S6에서, 서비스 표현장치 검색 및 선택부(142)가 서비스 표현장치(300)를 검색하지 못한 경우 로봇(100) 자체의 마이크, 디스플레이 등의 표현장치를 검색하고(단계 S9), 단계 S8을 실행한다.
그 다음, 서비스 이송부(144)는 서비스 어플리케이션에서 제공하는 서비스를 단계 S6에서 검색된 서비스 표현장치(300)로 이송하여(단계 S10), 사용자에게 제공한다(단계 S11). 이때, 사용자가 서비스를 제공받는 과정에서 사용자와 로봇(100)간의 상호 작용이 발생한다(단계 S12). 예컨대, 사용자와 로봇(100) 간의 대화, 로봇(100)을 터치하거나, 사용자의 얼굴 표정이 변화하거나, 몸짓이 변화하는 등의 상호 작용이 발생할 수 있다. 그러면, 사용자 피드백 관리부(150)는 사용자(400)와 로봇(100) 간에 발생하는 상호 작용을 피드백 정보로 생성한다(단계 S13). 로봇(100)은 이와 같은 단계를 주기적으로 반복하여 사용자에게 적합한 서비스 어플리케이션을 선택하고, 서비스 어플리케이션에서 제공하는 서비스를 서비스 표현장치(300)를 통해 제공할 수 있다.
이상에서 살펴본 바와 같이, 본 발명의 실시예에 따른 로봇을 이용한 서비스 어플리케이션 제공 장치 및 그 방법은, 로봇을 활용할 수 있는 교육, 실버케어, 주택, 회사, 관광 등의 서비스 도메인에서 필요한 서비스 어플리케이션을 메타데이터를 포함한 서비스 어플리케이션 기술 언어를 통해 제작 및 배포하고, 로봇이 이동함에 따라 실시간으로 변화하는 주변 상황을 인식하여 사용자에게 적합한 서비스 어플리케이션을 검색하고, 서비스 표현 장치를 통해 해당 서비스를 제공함으로써 서비스 어플리케이션에 대한 사용자 만족도를 높일 수 있고, 변화하는 상황에 대처를 할 수 있는 서비스 어플리케이션을 제공할 수 있다. 또한, 사용자와 로봇 간의 상호 작용에서 발생하는 정보를 피드백 정보로 이용함으로써 서비스 어플리케이션의 다운로드 횟수, 사용자 만족도, 사용자 호감도 등의 사용성 평가뿐만 아니라 해당 서비스 어플리케이션이 필요한 환경, 상황 및 경험을 사용자 간에 공유할 수 있어 서비스 어플리케이션의 활용 가치를 향상시킬 수 있고, 서로 다른 서비스 도메인과 연계하여 사용 할 수 있어 다양한 서비스 영역에 적용시킬 수 있다.
이상에서 본 발명이 구체적인 구성요소 등과 같은 특정 사항들과 한정된 실시예 및 도면에 의해 설명되었으나, 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명이 상기 실시예들에 한정되는 것은 아니며, 본 발명이 속하는 기술분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형을 꾀할 수 있다.
따라서, 본 발명의 사상은 상기 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐만 아니라 이 특허청구범위와 균등하게 또는 등가적으로 변형된 모든 것들은 본 발명의 사상의 범주에 속한다고 할 것이다.
100: 로봇
110: 인터페이스부
120: 감지부
130: 사용자 상황 판단부
140: 서비스 제공부
150: 사용자 피드백 관리부
200: 외부 감지장치
300: 서비스 표현장치

Claims (13)

  1. 사용자의 얼굴 표정, 사용자의 행동, 및 사용자의 감성 상태 중 적어도 하나를 나타내는 정보를 포함하는 사용자 상태 정보 및 로봇의 이동 경로 주변에 대한 주변 감지 정보를 생성하는 감지부;
    상기 주변 감지 정보 및 상기 사용자 상태 정보를 통해 사용자의 상황 및 의도를 판단하여 사용자 인지 정보를 생성하고, 상기 사용자 인지 정보에 따라 서비스 어플리케이션을 검색 및 다운로드 받는 사용자 상황 판단부;
    상기 로봇의 이동 경로 주변의 서비스 표현 장치를 검색하고, 검색된 상기 서비스 표현 장치 중 적어도 하나에 상기 서비스 어플리케이션에 대응하는 서비스를 이송하는 서비스 제공부; 및
    상기 서비스 표현 장치를 통해 상기 서비스를 제공받는 과정에서 상기 사용자와 상기 로봇 간의 상호 작용에 대응하는 피드백 정보를 관리하는 사용자 피드백 관리부
    를 포함하는 로봇을 이용한 서비스 어플리케이션 제공 장치.
  2. 제1 항에 있어서,
    상기 사용자 상황 판단부는
    상기 서비스 어플리케이션에 기술된 메타데이터를 기반으로 상기 서비스 어플리케이션을 검색하는 것을 특징으로 하는 로봇을 이용한 서비스 어플리케이션 제공 장치.
  3. 제2 항에 있어서,
    상기 메타데이터는 상기 서비스의 도메인, 상기 서비스 어플리케이션이 지원하는 기기 정보, 상기 서비스 어플리케이션에 포함된 콘텐츠 정보, 상기 서비스의 실행 정보 또는 상기 피드백 정보를 포함하는 것을 특징으로 하는 로봇을 이용한 서비스 어플리케이션 제공 장치.
  4. 제2 항에 있어서,
    상기 사용자 상황 판단부는
    상기 메타데이터를 기반으로 상기 사용자 인지 정보에 따라 상기 사용자와 상기 로봇 간의 상호 작용 시나리오를 구성하여 상기 서비스 어플리케이션을 검색하는 것을 특징으로 하는 로봇을 이용한 서비스 어플리케이션 제공 장치.
  5. 제2 항에 있어서,
    상기 서비스 제공부는
    상기 메타데이터를 기반으로 상기 서비스 표현 장치의 연결 정보 및 기기 정보에 따라 상기 서비스 어플리케이션에 대응되는 서비스 표현 장치를 검색하는 것을 특징으로 하는 로봇을 이용한 서비스 어플리케이션 제공 장치.
  6. 제 5 항에 있어서,
    상기 서비스 제공부는
    상기 메타데이터와 상기 서비스 표현장치의 기기 정보를 비교 분석하여 상기 서비스를 제공하기 위한 서비스 표현장치를 선택하는 것을 특징으로 하는 로봇을 이용한 서비스 어플리케이션 제공 장치.
  7. 제 1 항에 있어서,
    상기 사용자 피드백 관리부는 상기 사용자와 상기 로봇 간의 상호 작용에서 발생하는 사용자 반응 및 사용성 평가를 상기 서비스 어플리케이션에 대한 상기 피드백 정보로 관리하는 것을 특징으로 하는 로봇을 이용한 서비스 어플리케이션 제공 장치.
  8. 사용자의 얼굴 표정, 사용자의 행동, 및 사용자의 감성 상태 중 적어도 하나를 나타내는 정보를 포함하는 사용자 상태 정보 및 로봇의 이동 경로 주변에 대한 주변 감지 정보를 생성하는 단계;
    상기 주변 감지 정보 및 상기 사용자 상태 정보를 통해 사용자의 상황 및 의도를 판단하여 사용자 인지 정보를 생성하는 단계;
    상기 사용자 인지 정보에 따라 서비스 어플리케이션을 검색 및 다운로드 받는 단계;
    상기 로봇의 이동 경로 주변의 서비스 표현 장치를 검색하는 단계;
    검색된 상기 서비스 표현 장치 중 적어도 하나에 상기 서비스 어플리케이션에 대응하는 서비스를 이송하는 단계; 및
    상기 서비스 표현 장치를 통해 상기 서비스를 제공받는 과정에서 상기 사용자와 상기 로봇 간의 상호 작용에 대응하는 피드백 정보를 관리하는 단계
    를 포함하는 로봇을 이용한 서비스 어플리케이션 제공 방법.
  9. 제8 항에 있어서,
    상기 서비스 어플리케이션을 검색하는 단계는
    상기 서비스 어플리케이션에 기술된 메타데이터를 이용하여 검색하는 것을 특징으로 하는 로봇을 이용한 서비스 어플리케이션 제공 방법.
  10. 제9 항에 있어서,
    상기 서비스 어플리케이션을 검색하는 단계는
    상기 메타데이터를 기반으로 상기 사용자 인지 정보에 따라 상기 사용자와 상기 로봇 간의 상호 작용 시나리오를 구성하는 단계를 포함하는 것을 특징으로 하는 로봇을 이용한 서비스 어플리케이션 제공 방법.
  11. 제9 항에 있어서,
    상기 서비스 표현 장치를 검색하는 단계는
    상기 메타데이터를 기반으로 상기 서비스 표현 장치의 연결 정보 및 기기 정보에 따라 상기 서비스 어플리케이션에 대응되는 상기 서비스 표현 장치를 검색하는 것을 특징으로 하는 로봇을 이용한 서비스 어플리케이션 제공 방법.
  12. 제 11 항에 있어서,
    상기 서비스를 이송하는 단계는
    상기 메타데이터와 상기 서비스 표현장치의 기기 정보를 비교 분석하여 상기 서비스를 제공하기 위한 서비스 표현장치를 선택하는 단계를 포함하는 것을 특징으로 하는 로봇을 이용한 서비스 어플리케이션 제공 방법.
  13. 제 8 항에 있어서,
    상기 피드백 정보는 상기 사용자와 상기 로봇 간의 상호 작용에서 발생하는 사용자 반응 및 사용성 평가를 포함하는 것을 특징으로 하는 로봇을 이용한 서비스 어플리케이션 제공 방법.
KR1020120147600A 2012-12-17 2012-12-17 로봇을 이용한 서비스 어플리케이션 제공 장치 및 그 방법 KR101710667B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020120147600A KR101710667B1 (ko) 2012-12-17 2012-12-17 로봇을 이용한 서비스 어플리케이션 제공 장치 및 그 방법
US13/913,875 US20140172909A1 (en) 2012-12-17 2013-06-10 Apparatus and method for providing service application using robot

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120147600A KR101710667B1 (ko) 2012-12-17 2012-12-17 로봇을 이용한 서비스 어플리케이션 제공 장치 및 그 방법

Publications (2)

Publication Number Publication Date
KR20140079604A KR20140079604A (ko) 2014-06-27
KR101710667B1 true KR101710667B1 (ko) 2017-02-27

Family

ID=50932214

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120147600A KR101710667B1 (ko) 2012-12-17 2012-12-17 로봇을 이용한 서비스 어플리케이션 제공 장치 및 그 방법

Country Status (2)

Country Link
US (1) US20140172909A1 (ko)
KR (1) KR101710667B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210019818A (ko) 2019-08-13 2021-02-23 주식회사 프론트유 양방향 교감 맞춤형 학습 컨텐츠 제공 시스템 및 방법

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101257896B1 (ko) * 2011-05-25 2013-04-24 (주) 퓨처로봇 스마트 서비스 로봇 운영 시스템 및 방법
KR102332934B1 (ko) * 2014-12-10 2021-11-30 삼성전자주식회사 다른 전자 장치와 연결되는 전자 장치 및 그 제어 방법
CN106239506B (zh) * 2016-08-11 2018-08-21 北京光年无限科技有限公司 智能机器人的多模态输入数据处理方法及机器人操作系统
KR102463806B1 (ko) 2017-11-09 2022-11-07 삼성전자주식회사 이동이 가능한 전자 장치 및 그 동작 방법
CN111061370B (zh) * 2019-12-16 2021-07-16 深圳市云网万店电子商务有限公司 用于智能设备的人机交互装置及方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8924412B2 (en) * 2005-12-21 2014-12-30 Digimarc Corporation Rules driven pan ID metadata routing system and network
KR101127490B1 (ko) * 2009-12-22 2012-03-22 (주)이산솔루션 로봇과 디스플레이 장치의 상호 작용형 고객 서비스 시스템 및 고객 서비스 방법
KR20120047577A (ko) * 2010-11-04 2012-05-14 주식회사 케이티 대화형 행동모델을 이용한 로봇 인터랙션 서비스 제공 장치 및 방법
US20120119889A1 (en) * 2010-11-17 2012-05-17 Carrillo Michael A Interactive mobile communication device
KR101257896B1 (ko) * 2011-05-25 2013-04-24 (주) 퓨처로봇 스마트 서비스 로봇 운영 시스템 및 방법

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210019818A (ko) 2019-08-13 2021-02-23 주식회사 프론트유 양방향 교감 맞춤형 학습 컨텐츠 제공 시스템 및 방법

Also Published As

Publication number Publication date
US20140172909A1 (en) 2014-06-19
KR20140079604A (ko) 2014-06-27

Similar Documents

Publication Publication Date Title
CN104007891B (zh) 在设备上显示用户界面的方法和设备
KR101710667B1 (ko) 로봇을 이용한 서비스 어플리케이션 제공 장치 및 그 방법
US10114534B2 (en) System and method for dynamically displaying personalized home screens respective of user queries
KR101737246B1 (ko) 네트워크에서의 검색가능 데이터에 대한 인덱스 구성
EP2523436A1 (en) Mobile device and method of managing applications for a mobile device
JP7138676B2 (ja) デバイスがユーザ・インターフェースをディスプレイする方法及びそのデバイス
CN104077047A (zh) 用于运行应用的方法和设备
JP2015090570A (ja) 情報処理装置および制御方法
US20200073903A1 (en) Method and device of tagging links included in a screenshot of webpage
JP7104242B2 (ja) 個人情報を共有する方法、装置、端末設備及び記憶媒体
KR101978299B1 (ko) 콘텐츠 서비스 시스템에서의 콘텐츠 서비스를 위한 장치
US20220350626A1 (en) Device navigational maps for connected devices
US9857177B1 (en) Personalized points of interest for mapping applications
CN113435926A (zh) 广告展示方法及装置、存储介质及电子装置
KR101602403B1 (ko) 모바일 어플리케이션 관리시스템 및 이를 이용한 관리 방법
KR20200089123A (ko) 장치 속성에 기반한 공유 데이터의 제공 방법 및 그 전자 장치
CN109240512A (zh) 计算机设备、键盘及界面展示方法、装置
KR101820721B1 (ko) 웹 서비스를 제공하는 화상형성장치 및 그 방법
KR101560748B1 (ko) 스마트폰을 이용한 원격 제어 시스템 장치 및 그 동작 방법
Delfos et al. Enhancing accessibility to web mapping systems with technology-aligned adaptive profiles
JP6930553B2 (ja) 情報処理システム、情報処理装置、情報処理方法及びプログラム
US10489026B2 (en) Accessible user interface for application with moving items
Bellucci et al. WOEB: Rapid Setting of Wizard of Oz Experiments and Reuse for Deployed Applications
JP2015061281A (ja) 情報処理装置、情報処理方法及びプログラム
KR20150138594A (ko) 클라우드 게임 서비스를 위한 사용자 인터페이스 제공 장치 및 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant