KR20140005410A

KR20140005410A - 음성을 이용한 사용자 디바이스들 간 서비스 연결 방법 및 장치

Info

Publication number: KR20140005410A
Application number: KR1020120072290A
Authority: KR
Inventors: 박세환
Original assignee: 삼성전자주식회사
Priority date: 2012-07-03
Filing date: 2012-07-03
Publication date: 2014-01-15
Also published as: CN104604274A; EP3493513A1; US20140012587A1; CN104604274B; US10475464B2; WO2014007545A1; EP2683147B1; EP2683147A1; US20180047406A1; US9805733B2; KR101972955B1

Abstract

본 발명은 사용자 디바이스들을 통해 입력된 사용자 음성을 이용하여 사용자 디바이스들 간 서비스를 자동으로 연결할 수 있는 음성을 이용한 사용자 디바이스들 간 서비스 연결 방법 및 장치에 관한 것으로, 이러한 본 발명은 디바이스들 간 서비스 연결 방법에 있어서, 음성 명령 버튼이 입력된 상태에서 입력되는 사용자 음성을 녹음하는 과정; 음성 명령 버튼의 입력이 해제될 시 녹음된 데이터 기반의 제1 정보를 출력하는 과정; 상기 제1 정보에 대응하는 제2 정보를 입력받는 과정; 제1 정보 및 제2 정보를 참조하여 서비스 타입을 인지하는 과정; 서비스 타입에 따른 동작 모드에서 연결 대상 디바이스와 연결하는 과정; 및 연결된 디바이스와 서비스를 수행하는 과정을 포함한다.

Description

음성을 이용한 사용자 디바이스들 간 서비스 연결 방법 및 장치{METHOD AND APPARATUS FOR CONNECTING SERVICE BETWEEN USER DEVICES USING VOICE}

본 발명은 사용자 디바이스들 간의 서비스 연결 방법 및 장치에 관한 것으로, 특히 사용자 디바이스들을 통해 입력된 사용자 음성을 이용하여 사용자 디바이스들 간 서비스를 자동으로 연결할 수 있는 음성을 이용한 사용자 디바이스들 간 서비스 연결 방법 및 장치에 관한 것이다.

최근 디지털 기술의 발달과 함께 이동통신 단말기, PDA(Personal Digital Assistant), 전자수첩, 스마트 폰, 태블릿 PC(Personal Computer) 등과 같이 이동하면서 통신 및 개인정보 처리가 가능한 사용자 디바이스들이 다양하게 출시되고 있다. 이러한 사용자 디바이스는 각자의 전통적인 고유 영역에 머무르지 않고 다른 단말들의 영역까지 아우르는 모바일 컨버전스(mobile convergence) 단계에 이르고 있다. 대표적으로, 사용자 디바이스는 음성 통화, 영상 통화, SMS(Short Message Service)/MMS(Multimedia Message Service) 등과 같은 문자 메시지 전송, 전자수첩, 촬영, 이메일 송수신, 방송 재생, 동영상 재생, 인터넷, 전자상거래, 음악 재생, 일정관리, 소셜 네트워크 서비스(SNS, Social Networking Service), 친구 찾기 서비스, 메신저, 사전, 게임, 무선 랜(WLAN, Wireless Local Area Network) 링크 형성과 같이 다양한 기능들을 구비할 수 있다.

특히, 무선통신 기술의 발전에 따라 사용자 디바이스들 간 연동 서비스를 제공하는데 사용 가능한 다양한 무선 연결들이 개발 및 적용되고 있다. 예를 들어, 사용자 디바이스들 간 연동 서비스를 지원하기 위해 블루투스(BLUETOOTH), 지그비(Zigbee), UWB(Ultraband Wideband) 등의 무선 연결 기술들이 개발되고 있다.

이러한 무선 연결 기술들을 사용하기 위해서는 해당 무선 연결 기술을 지원하는 주변기기 검색, 선택, 인증, 연결, 공유하고자 하는 데이터 선택, 선택된 데이터 전송 선택 등과 같은 복잡한 과정이 요구된다.

예를 들어, 종래에서 사용자 디바이스들 간 서비스 연결을 위해서는 연결 하고자 하는 사용자 디바이스들 간에 서로의 어드레스(address)를 인지하고 있는 상태에서 사용자 디바이스들 중 어느 하나가 먼저 마스터(master)로서 구동이 되고 난 후, 다른 사용자 디바이스가 슬레이브(slave)로서 구동되어 기 실행된 마스터에 연결 요청을 수행한다. 그리고 마스터는 연결 요청을 하는 슬레이브가 자신이 연결하고자 하는 슬레이브인지를 식별하기 위해 별도의 기 설정해 놓은 코드(code)를 확인하는 과정을 통해 연결이 이루어지게 된다.

이와 같이, 기존의 사용자 디바이스들 간 서비스 연결 기능을 사용하고자 하는 경우, 서비스 연결을 위해 필요한 인증 및 서비스 연결을 수행하기 위해 많은 사용자 인터랙션(user interaction)을 필요로 함에 따라, 사용자 디바이스들 간 서비스 연결을 위한 사용자 편의성이 떨어지는 문제점이 있다. 따라서 사용자 디바이스들 간의 연동 서비스를 위한 다양한 무선 연결들의 복잡한 페어링 절차를 보다 간소화하여 사용자 편의를 향상시킬 수 있는 서비스가 요구되고 있다.

본 발명의 목적은 적어도 두 개의 사용자 디바이스들 간 서비스 연결을 위한 절차를 간소화할 수 있는 음성을 이용한 사용자 디바이스들 간 서비스 연결 방법 및 장치를 제공함에 있다.

본 발명의 다른 목적은 사용자 디바이스들 간 연결과 연결된 사용자 디바이스들 간 서비스 수행을 쉽고 빠르게 지원할 수 있는 음성을 이용한 사용자 디바이스들 간 서비스 연결 방법 및 장치를 제공함에 있다.

본 발명의 또 다른 목적은 사용자의 음성을 이용하여 사용자 디바이스들 간 인증을 자동 수행하고, 입력된 음성에 따른 서비스 연결을 자동 수행할 수 있는 음성을 이용한 사용자 디바이스들 간 서비스 연결 방법 및 장치를 제공함에 있다.

본 발명의 또 다른 목적은 사용자 디바이스를 통해 입력된 사용자 음성에 따라 서비스 연결하는 각 사용자 디바이스들 간의 마스터 모드 및 슬레이브 모드가 자동 결정되고, 각 사용자 디바이스들이 서로 연결될 시 마스터 모드 또는 슬레이브 모드에서 사용자 음성에 따른 서비스를 자동 실행할 수 있는 음성을 이용한 사용자 디바이스들 간 서비스 연결 방법 및 장치를 제공함에 있다.

본 발명의 또 다른 목적은 사용자 디바이스들 간의 서비스 연결 및 서비스 실행을 지원하기 위한 최적의 환경을 구현하여 사용자 편의성 및 사용자 디바이스의 사용성을 향상시킬 수 있는 음성을 이용한 사용자 디바이스들 간 서비스 연결 방법 및 장치를 제공함에 있다.

상기와 같은 과제를 해결하기 위한 본 발명의 실시 예에 따른 방법은, 디바이스들 간 서비스 연결 방법에 있어서, 음성 명령 버튼이 입력된 상태에서 입력되는 사용자 음성을 녹음하는 과정; 음성 명령 버튼의 입력이 해제될 시 녹음된 데이터 기반의 제1 정보를 출력하는 과정; 상기 제1 정보에 대응하는 제2 정보를 입력받는 과정; 제1 정보 및 제2 정보를 참조하여 서비스 타입을 인지하는 과정; 서비스 타입에 따른 동작 모드에서 연결 대상 디바이스와 연결하는 과정; 및 연결된 디바이스와 서비스를 수행하는 과정을 포함한다.

상기와 같은 과제를 해결하기 위한 본 발명의 실시 예에 따른 방법은, 음성을 이용한 서비스 연결 방법에 있어서, 음성 명령 버튼이 입력될 시 타임스탬프를 기록하고 사용자 음성 입력 수신을 대기하는 과정; 사용자로부터 입력되는 음성을 녹음하여 녹음 데이터를 생성하는 과정; 상기 음성 명령 버튼이 해제될 시 상기 타임스탬프, 상기 녹음 데이터 및 디바이스의 디바이스 어드레스를 포함하는 음성 정보를 생성하는 과정; 생성된 음성 정보를 서버로 전송하는 과정; 상기 서버로부터 서비스 정보를 수신하는 과정; 상기 서비스 정보로부터 디바이스의 동작 모드, 연결 대상 디바이스의 디바이스 어드레스 및 실행 서비스 종류를 확인하는 과정; 상기 동작 모드에 따라 연결 대상 디바이스와 연결하는 과정; 및 상기 연결 대상 디바이스와 연결될 시 상기 동작 모드에 대응하여 상기 실행 서비스 종류에 따른 서비스를 수행하는 과정을 포함한다.

상기와 같은 과제를 해결하기 위한 본 발명의 실시 예에 따른 방법은, 음성을 이용한 서비스 연결 방법에 있어서, 제1 디바이스가 음성 명령 버튼이 입력될 시 타임스탬프를 기록하고 사용자 음성 입력 수신을 대기하는 과정; 사용자로부터 입력되는 음성을 녹음하여 녹음 데이터를 생성하는 과정; 상기 음성 명령 버튼이 해제될 시 상기 타임스탬프, 상기 녹음 데이터 및 디바이스의 디바이스 어드레스를 포함하는 제1 음성 정보를 생성하는 과정; 생성된 음성 정보를 사운드에 실어 스피커를 통해 출력하는 과정; 제2 디바이스의 스피커를 통해 출력되는 제2 음성 정보를 마이크를 통해 입력받는 과정; 상기 제1 음성 정보와 상기 제2 음성 정보로부터 디바이스의 동작 모드, 연결 대상 디바이스의 디바이스 어드레스 및 실행 서비스 종류를 확인하는 과정; 상기 동작 모드에 따라 연결 대상 디바이스와 연결하는 과정; 및 상기 연결 대상 디바이스와 연결될 시 상기 동작 모드에 대응하여 상기 실행 서비스 종류에 따른 서비스를 수행하는 과정을 포함한다.

상기와 같은 과제를 해결하기 위한 본 발명의 실시 예에 따른 방법은, 음성을 이용한 서비스 연결 방법에 있어서, 음성 명령 버튼이 입력될 시 타임스탬프를 기록하고 사용자 음성 입력 수신을 대기하는 과정; 사용자로부터 입력되는 음성을 녹음하여 녹음 데이터를 생성하는 과정; 상기 음성 명령 버튼이 해제될 시 상기 녹음 데이터의 음성 파형 및 상기 타임스탬프를 이용하여 고유한 문자열을 가진 인증키를 생성하는 과정; 상기 인증키를 이용하여 디바이스 식별을 위한 기기 정보를 변경 설정하는 과정; 설정된 통신 모드에서 상기 인증키에 대응하는 기기 정보를 가진 연결 대상 디바이스를 검색하는 과정; 상기 연결 대상 디바이스와 연결 요청 및 연결 승인 송수신을 통해 연결하는 과정; 및 상기 연결 대상 디바이스와 연결될 시 서비스를 수행하는 과정을 포함한다.

상기와 같은 과제를 해결하기 위하여 본 발명의 실시 예에서는, 상기 방법을 프로세서에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체를 포함한다.

상기와 같은 과제를 해결하기 위한 본 발명의 실시 예에 따른 장치는, 적어도 하나의 프로그램이 저장되는 저장부; 및 상기 적어도 하나의 프로그램을 실행하여 음성을 이용한 디바이스들 서비스 연결을 지원하도록 제어하는 제어부를 포함하고, 상기 적어도 하나의 프로그램은, 음성 명령 버튼이 입력된 상태에서 입력되는 사용자 음성을 녹음하는 과정; 음성 명령 버튼의 입력이 해제될 시 녹음된 데이터 기반의 제1 정보를 출력하는 과정; 상기 제1 정보에 대응하는 제2 정보를 입력받는 과정; 제1 정보 및 제2 정보를 참조하여 서비스 타입을 인지하는 과정; 서비스 타입에 따른 동작 모드에서 연결 대상 디바이스와 연결하는 과정; 및 연결된 디바이스와 서비스를 수행하는 과정을 실행하는 명령어들을 포함한다.

상기와 같은 과제를 해결하기 위한 본 발명의 실시 예에 따른 기록 매체는, 음성 명령 버튼이 입력된 상태에서 사용자 음성을 녹음하고, 음성 명령 버튼의 입력이 해제될 시 녹음된 데이터 기반의 제1 정보를 생성하여 출력하고, 상기 제1 정보에 대응하는 제2 정보를 수신할 시 상기 제1 정보 및 상기 제2 정보를 참조하여 서비스 타입을 인지하고, 서비스 타입 따라 동작 모드 결정 및 결정된 동작 모드에서 연결 대상 디바이스와의 서비스 연결을 수행하는 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체를 포함한다.

전술한 바와 같은 내용들은 당해 분야 통상의 지식을 가진 자가 후술되는 본 발명의 구체적인 설명으로부터 보다 잘 이해할 수 있도록 하기 위하여 본 발명의 특징들 및 기술적인 장점들을 다소 넓게 약술한 것이다. 이러한 특징들 및 장점들 이외에도 본 발명의 청구범위의 주제를 형성하는 본 발명의 추가적인 특징들 및 장점들이 후술되는 본 발명의 구체적인 설명으로부터 잘 이해될 것이다.

상술한 바와 같이 본 발명에서 제안하는 음성을 이용한 사용자 디바이스들 간 서비스 연결 방법 및 장치에 따르면, 적어도 두 개의 사용자 디바이스들의 연결 및 그에 따른 서비스 연결을 위한 절차의 간소화를 통해, 사용자가 희망하는 서비스를 쉽고 빠르게 실행할 수 있도록 한다. 본 발명에 따르면, 사용자는 연결하고자 하는 사용자 디바이스들의 음성 명령 버튼을 각각 누른 상태에서 기기 연결을 의미하는 음성 명령어를 말(입력)하는 것에 의해 사용자 디바이스들을 쉽고 빠르게 자동 연결할 수 있다. 또한 사용자는 연결하고자 하는 사용자 디바이스들의 음성 명령 버튼을 각각 누른 상태에서 기기 연결을 의미하는 음성 명령어와 실제 수행하고자 하는 서비스를 의미하는 음성 명령어를 말(입력)하는 것에 의해 사용자 디바이스들 간 연결에 의한 서비스를 쉽고 빠르게 자동 실행할 수 있다.

본 발명에 따르면, 각 사용자 디바이스들에 사용자 음성이 입력되는 시차에 따라 각 사용자 디바이스들 간의 마스터 모드 및 슬레이브 모드가 자동 결정되고, 각 사용자 디바이스들은 서로 연결될 시 마스터 모드 또는 슬레이브 모드에서 사용자 음성에 따른 서비스(예컨대, 데이터 전송, 해당 모드에 따른 동작(기능) 수행 등)를 자동 실행할 수 있다. 따라서 사용자는 각 사용자 디바이스들의 음성 명령 버튼을 이용하여 기기 연결 및 서비스에 따른 음성 명령어를 입력하는 것만으로도 사용자 디바이스들을 간편하게 연결하여 서비스를 자동으로 실행할 수 있는 효과가 있다.

따라서 본 발명에 따르면 사용자 디바이스들 간 연결 및 서비스 실행을 지원하기 위한 최적의 환경을 구현함으로써, 사용자의 편의성을 향상시키고, 사용자 디바이스의 사용성, 편의성 및 경쟁력을 향상시키는데 기여할 수 있다. 이러한 본 발명은 모든 형태의 사용자 디바이스 및 그에 대응하는 다양한 디바이스들에 간편하게 구현될 수 있다.

도 1은 본 발명의 실시 예에 따른 사용자 디바이스들이 서비스를 연결하는 동작 설명을 위해 개략적으로 도시한 도면이다.
도 2는 본 발명의 실시 예에 따른 사용자 디바이스의 구성을 개략적으로 도시한 도면이다.
도 3은 본 발명의 실시 예에 따른 기능을 처리하는 사용자 디바이스의 플랫폼 구조를 개략적으로 도시한 도면이다.
도 4는 본 발명의 실시 예에 따른 사용자 디바이스들 간의 서비스 연결 과정을 도시한 신호 흐름도이다.
도 5는 본 발명의 실시 예에 따른 사용자 디바이스들의 서비스 연결에 사용되는 음성 정보가 저장되는 예시를 도시한 도면이다.
도 6은 본 발명의 실시 예에 따른 사용자 디바이스에서 사용자 음성 기반의 서비스 연결을 처리하는 과정을 도시한 흐름도이다.
도 7은 본 발명의 실시 예에 따른 서버에서 사용자 디바이스들을 인증하는 과정을 도시한 흐름도이다.
도 8은 본 발명의 실시 예에 따른 사용자 디바이스들이 서비스를 연결하는 개념 설명을 위해 개략적으로 도시한 도면이다.
도 9는 본 발명의 실시 예에 따른 사용자 디바이스들 간의 서비스 연결 과정을 도시한 신호 흐름도이다.
도 10은 본 발명의 실시 예에 따른 사용자 디바이스에서 사용자 음성 기반의 서비스 연결을 처리하는 과정을 도시한 흐름도이다.
도 11 및 도 12는 본 발명의 실시 예에 따른 사용자 디바이스에서 사용자 음성 기반의 서비스 연결을 처리하는 과정을 도시한 흐름도들이다.

이하, 첨부된 도면들을 참조하여 본 발명의 바람직할 실시 예들을 상세히 설명한다. 이때, 첨부된 도면들에서 동일한 구성 요소는 가능한 동일한 부호로 나타내고 있음에 유의해야 한다. 또한 본 발명의 요지를 흐리게 할 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략할 것이다. 즉, 하기의 설명에서는 본 발명의 실시 예에 따른 동작을 이해하는데 필요한 부분만이 설명되며, 그 이외 부분의 설명은 본 발명의 요지를 흩트리지 않도록 생략될 것이라는 것을 유의하여야 한다.

제안하는 본 발명은 사용자 디바이스들의 서비스 연결에 관한 것으로, 특히 사용자 디바이스들을 통해 입력된 사용자 음성을 이용하여 사용자 디바이스들 간 서비스를 자동으로 연결할 수 있는 음성을 이용한 사용자 디바이스들 간 서비스 연결 방법 및 장치에 관한 것이다. 본 발명의 실시 예에 따르면, 사용자 디바이스들에서 입력되는 사용자 음성을 이용하여, 사용자 디바이스들의 연결을 위한 인증과 연결되는 사용자 디바이스들의 서비스를 자동 실행할 수 있다.

본 발명의 실시 예에 따르면, 사용자는 서비스를 연결하고자 하는 적어도 두 개의 사용자 디바이스들에 실행하고자 하는 서비스(예컨대, 기기 연결, 기기 연결 후 데이터 공유, 기기 연결 후 지정된 기능(예컨대, 스피커 모드, 와이파이 디스플레이(WiFi Display) 등) 실행 등)의 명령어를 음성으로 입력할 수 있다. 그러면 각 사용자 디바이스들은 사용자 음성을 기반으로 마스터 모드(master mode)(또는 AP 모드)와 슬레이브 모드(slave mode)(또는 non-AP 모드)를 결정하고, 결정된 모드에서 음성 명령어에 대응하는 서비스 연결을 자동 수행할 수 있다. 즉, 각 사용자 디바이스들은 사용자의 음성 명령어에 따라 서로 연결 및 연결에 따른 서비스를 자동 실행할 수 있다.

본 발명에서 마스터 모드의 디바이스는 적어도 2개의 사용자 디바이스들 중 음성 명령 버튼에 의해 서비스 연결 과정을 개시하는 입력이 먼저 이루어진 디바이스로, 데이터를 전달하는 주체일 수 있다. 그리고 본 발명에서 슬레이브 모드의 디바이스는 적어도 2개의 사용자 디바이스들 중 음성 명령 버튼에 의해 서비스 연결 과정을 개시하는 입력이 다른 디바이스보다 늦게 이루어진 디바이스로, 마스터 모드의 디바이스로부터 데이터를 수신하는 주체일 수 있다.

본 발명의 실시 예에 따르면, 사용자 디바이스들 간 서비스 연결을 위한 인증은 사용자로부터 입력된 음성 파형을 이용하여 인증이 수행되고, 연결되는 각 사용자 디바이스들의 마스터 모드 및 슬레이브 모드 결정은 사용자로부터 입력된 음성의 시간 분석을 통해 수행될 수 있다. 그리고 각 사용자 디바이스들이 연결되어 실행될 서비스는 사용자로부터 입력된 음성에 대응하는 파라미터(parameter)(또는 명령어) 분석을 통해 서비스가 결정될 수 있다. 이러한 디바이스들 간 서비스 연결을 위한 인증은 서버와 연동하는 것에 의해 이루어지거나, 디바이스들 간에 교류된 데이터를 이용하여 이루어질 수 있다.

예를 들어, 서버와 연동하는 경우, 디바이스는 음성 명령 버튼이 입력될 시 타임스탬프를 기록할 수 있다. 디바이스는 상기 음성 명령 버튼의 입력이 유지되는 상태에서 사용자 음성 입력 수신을 대기하며, 마이크를 통해 사용자 음성이 입력될 시 입력되는 음성을 녹음하여 녹음 데이터를 생성할 수 있다. 디바이스는 상기 음성 명령 버튼의 입력이 해제될 시 상기 타임스탬프, 상기 녹음 데이터 및 디바이스의 디바이스 어드레스를 포함하는 음성 정보를 생성하여 서버로 전송할 수 있다. 디바이스는 상기 서버로부터 상기 음성 정보에 대응되는 서비스 정보를 수신하고, 수신된 서비스 정보로부터 디바이스의 동작 모드, 연결 대상 디바이스의 디바이스 어드레스 및 실행 서비스 종류를 확인할 수 있다. 그리고 디바이스는 상기 동작 모드에 따라 연결 대상 디바이스와 연결하고, 이후 상기 연결 대상 디바이스와 연결될 시 상기 동작 모드에 대응하여 상기 실행 서비스 종류에 따른 서비스를 수행할 수 있다.

또한 디바이스들 간에 교류된 데이터를 이용하는 경우, 디바이스는 음성 명령 버튼이 입력될 시 타임스탬프를 기록하고 사용자 음성 입력 수신을 대기하면, 마이크를 통해 사용자로부터 입력되는 음성을 녹음하여 녹음 데이터를 생성할 수 있다. 디바이스는 상기 음성 명령 버튼의 입력이 해제될 시 상기 타임스탬프, 상기 녹음 데이터 및 디바이스의 디바이스 어드레스를 포함하는 제1 음성 정보를 생성하고, 생성된 음성 정보를 사운드에 실어 스피커를 통해 인접된 다른 디바이스에게 출력할 수 있다. 디바이스는 상기 다른 디바이스의 스피커를 통해 출력되는 제2 음성 정보가 마이크를 통해 입력되면, 상기 제1 음성 정보와 상기 제2 음성 정보로부터 디바이스의 동작 모드, 연결 대상 디바이스의 디바이스 어드레스 및 실행 서비스 종류를 확인할 수 있다. 그리고 디바이스는 상기 동작 모드에 따라 연결 대상 디바이스와 연결하고, 이후 상기 연결 대상 디바이스와 연결될 시 상기 동작 모드에 대응하여 상기 실행 서비스 종류에 따른 서비스를 수행할 수 있다.

이하에서, 본 발명의 실시 예에 따른 사용자 디바이스의 구성과 그의 운용 제어 방법에 대하여 하기 도면들을 참조하여 살펴보기로 한다. 본 발명의 실시 예에 따른 사용자 디바이스의 구성과 그의 운용 제어 방법이 하기에서 기술하는 내용에 제한되거나 한정되는 것은 아니므로, 하기의 실시 예들에 의거하여 다양한 실시 예들에 적용할 수 있음에 유의하여야 한다.

도 1은 본 발명의 실시 예에 따른 사용자 디바이스들이 서비스를 연결하는 동작 설명을 위해 개략적으로 도시한 도면이다.

상기 도 1에 도시된 바와 같이, 본 발명의 사용자 음성 기반의 서비스 연결을 위한 시스템은, 제1 사용자 디바이스(100), 제2 사용자 디바이스(200), 그리고 서버(300)를 포함하여 구성된다. 본 발명에서는 두 개의 사용자 디바이스들(100, 200)을 이용하여 서비스 연결 동작을 설명하지만, 본 발명이 이에 한정되는 것은 아니며 두 개 이상의 사용자 디바이스들에 대한 서비스 연결도 가능함은 물론이다.

제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)는 음성 기반의 서비스 연결을 수행하기 위해 사용자로부터의 음성 입력을 수신 대기하는 음성 명령 버튼(150)을 구비할 수 있다. 본 발명에서 상기 음성 명령 버튼(150)은 하드웨어(hardware) 버튼 또는 소프트 인터페이스(soft interface) 등과 같이 다양하게 구현될 수 있다. 사용자는 제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)의 음성 명령 버튼(150)을 누른 상태에서 음성을 입력할 수 있다.

제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)는 음성 명령 버튼(150)에 의한 입력을 감지할 시 사용자 음성 입력 수신을 대기할 수 있다. 이때, 제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)는 음성 명령 버튼(150)이 입력될 시 음성 명령 버튼(150)이 입력된 시간 값을 타임스탬프(timestamp)로 기록할 수 있다. 그리고 제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)는 음성 명령 버튼(150)이 눌려진 상태에서 입력되는 사용자 음성을 녹음(녹음 데이터 생성)하고, 음성 명령 버튼(150)에 의한 입력이 해제될 시 녹음된 음성(녹음 데이터)에 대한 음성 인식을 수행할 수 있다. 제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)는 음성 인식 결과 사용자 디바이스들 간의 연결을 위한 명령어가 검출될 시 녹음 데이터(특히, 음성 파형(waveform)), 타임스탬프, 그리고 디바이스 식별자 등을 포함하는 음성 정보를 서버(300)로 전송할 수 있다.

제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)는 음성 정보를 서버(300)에게 전송한 후, 상기 서버(300)로부터 상기 음성 정보에 대응하는 서비스 정보를 수신할 수 있다. 그리고 제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)는 서버(300)로부터 서비스 정보를 수신할 시, 서비스 정보에 따라 상호 간에 연결하여 서비스를 실행할 수 있다. 이때, 제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)는 수신된 서비스 정보를 분석하여, 서비스 타입, 연결 정보(연결 대상의 디바이스 정보), 실행 정보 등을 판단할 수 있다. 그리고 제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)는 서비스 타입에 따라 마스터 모드 또는 슬레이브 모드를 결정하고, 결정된 해당 모드에서 연결 정보에 따라 다른 디바이스와 설정된 통신 방식으로 연결을 수행하며, 연결 정보에 대응하는 디바이스와 연결될 시 실행 정보에 따라 서비스를 실행할 수 있다.

본 발명에서 상기 통신 방식은 무선 랜(WLAN, Wireless Local Area Network)(WiFi) 연결, 블루투스 연결, 와이파이 다이렉트(WiFi Direct) 연결, 와이파이 디스플레이(WiFi Display) 연결, NFC(Near Field Communication) 연결 등과 같은 다양한 무선 통신 방식을 포함할 수 있으며, 연결에 사용되는 통신 방식은 상기와 같은 통신 방식 중 사용자 설정에 따라 미리 정의되거나, 최근 수행된 연결 방식을 이용하여 자동 결정되거나, 랜덤하게 결정될 수도 있다.

본 발명에서 상기 실행 정보는 실행하고자 하는 서비스의 종류를 나타내는 것으로, 데이터 공유(전송)를 비롯하여, 좌 및 우 스피커 연동 기능, 입력 및 출력 연동 기능 등의 특정 기능(동작)을 지시하는 정보를 포함할 수 있다.

서버(300)는 동일한 시간대에 동일한 녹음 데이터를 전송한 적어도 2개의 디바이스들을 검색하고, 검색된 디바이스들을 서로 간에 서비스 연결을 위한 일군의 디바이스들로 결정할 수 있다. 그리고 결정된 일군의 디바이스들 간의 서비스 연결을 지원하기 위한 서비스를 정보를 생성하여, 상기 일군의 디바이스들에게 각각 전송할 수 있다.

구체적으로, 서버(300)는 제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)와 같이 다양한 사용자 디바이스들로부터 음성 정보를 수신하여 저장할 수 있다. 특히, 서버(300)는 사용자 디바이스(예컨대, 도 1에서와 같이 제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200))로부터 음성 정보를 수신하고, 수신된 음성 정보를 각 디바이스별로 구분하여 데이터베이스(DB, database)에 저장할 수 있다. 이때, 서버(300)는 음성 정보 저장 시 디바이스 정보, 녹음 데이터(파형), 타임스탬프, 연결 정보(예컨대, 디바이스 어드레스(address)), 로우 데이터(raw data) 등으로 파싱하여 저장할 수 있다.

서버(300)는 사용자 디바이스로부터 음성 정보가 수신될 시, 음성 정보를 전송한 사용자 디바이스의 연결 인증을 위해 상기 음성 정보에 따른 음성 파형을 비교 분석할 수 있다. 예를 들어, 수신된 음성 정보의 음성 파형과 일치되는 음성 파형을 데이터베이스에서 비교 검출할 수 있다.

서버(300)는 동일한 음성 파형이 검출될 시 동일한 음성 파형을 가진 각 사용자 디바이스들의 음성 정보들에서 타임스탬프를 비교하고, 각 타임스탬프에 따른 시간차에 따라 각 사용자 디바이스가 수행될 동작 모드의 서비스 타입을 결정할 수 있다. 서버(300)는 음성 정보의 녹음 데이터로부터 음성 파라미터(parameter)(명령어)를 인식하여 실행 정보를 생성할 수 있다. 그리고 서버(300)는 각 사용자 디바이스별 서비스 타입, 연결 정보, 그리고 실행 정보를 이용하여 각 사용자 디바이스에 전송할 서비스 정보를 각각 생성하고, 생성된 서비스 정보를 동일한 음성 파형을 가지는 것으로 판단된 상기 사용자 디바이스들에게 각각 전송할 수 있다. 이때, 상기 판단된 사용자 디바이스들이 제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)인 것으로 가정할 시, 제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)에게 다른 서비스 정보가 제공될 수 있다.

예를 들어, 제1 사용자 디바이스(100)에게 전송되는 서비스 정보는 마스터 모드로 동작할 것을 알리는 서비스 타입, 연결 대상 디바이스인 제2 사용자 디바이스(200)의 디바이스 식별자(예컨대, 디바이스 어드레스 등)를 지시하는 연결 정보, 그리고 실행할 서비스에 대한 실행 정보를 가지는 제1 서비스 정보가 제공될 수 있다. 또한 제2 사용자 디바이스(200)에게 전송되는 서비스 정보는 슬레이브 모드로 동작할 것을 알리는 서비스 타입, 연결 대상 디바이스인 제1 사용자 디바이스(200)의 디바이스 식별자(예컨대, 디바이스 어드레스 등)를 지시하는 연결 정보, 그리고 실행할 서비스에 대한 실행 정보를 가지는 제2 서비스 정보가 제공될 수 있다.

이상에서 살펴본 바와 같은 구성을 가지는 본 발명의 실시 예에 따르면, 각 사용자 디바이스들(100, 200)은 사용자 음성 기반의 서비스 연결을 지원하기 위한 하드웨어 타입 또는 소프트 인터페이스 타입의 음성 명령 버튼(150)을 제공할 수 있다. 사용자는 제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)와 같이 서로 연결하고자 하는 2개 또는 그 이상의 사용자 디바이스들의 각 음성 명령 버튼(150)을 동시 또는 설정된 일정 오차 범위 내에서 누를 수 있다. 그리고 사용자는 각 음성 명령 버튼(150)을 누른 상태에서, 원하는 음성 서비스 명령을 입력(말)하고 각 음성 명령 버튼(150)의 누름 상태를 해제할 수 있다.

제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)는 음성 명령 버튼(150) 기반의 입력이 해제되는 것을 검출할 시 마이크를 통해 입력되어 저장된 사용자 음성을 음성 인식 모듈을 통해 음성 인식을 수행할 수 있다. 그리고 음성 인식에 따른 결과에서 디바이스 간 서비스 연결을 의미하는 미리 정의된 명령어(예컨대, "기기 연결")가 검출되면, 검출된 사용자 음성의 녹음 데이터, 타임스탬프, 디바이스 식별자(예컨대, 디바이스 어드레스) 등과 같은 서비스 연결에 필요한 음성 정보를 서버(300)로 각각 전송할 수 있다.

서버(300)는 사용자 디바이스들(예컨대, 제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200))로부터 음성 정보가 수신되면 이를 저장하고, 저장된 각 음성 정보를 비교하여 서로 관련이 있는 음성 정보를 가지는 적어도 2개의 사용자 디바이스들을 검색할 수 있다. 예를 들어, 서버(300)는 서로 일치되거나 또는 일정 오차 범위 내에서 유사한 음성 파형을 가지며, 일정 오차 범위 내에서 유사한 타임스탬프를 가지는 2개 이상의 사용자 디바이스들을 검색할 수 있다. 서버(300)는 음성 정보를 비교함에 있어서 휴리스틱(heuristic) 접근법으로 도출할 수 있다. 즉, 서버(300)는 완전히 일치하는 데이터(음성 정보)를 검색하는 것이 아니라, 현실적으로 만족할 만한 수준의 데이터(일정 오차 범위 내에서 일치되거나 유사한 데이터)를 검색할 수 있다. 따라서 서버(300)는 분석의 초기 단계에서는 모든 변수를 고려하지 않고 중요 변수만을 분석하고 점차 변수의 범위를 넓혀 서로 대응되는 데이터를 좁혀 나가는 방식으로 도출할 수 있다. 이하에서는, 설명의 편의를 위하여 적어도 2개의 데이터들의 비교에서 "일치"되는 데이터들을 도출하는 것으로 명시하기로 한다.

그리고 서버(300)는 서로 연관된 음성 정보를 가지는 2개 이상의 사용자 디바이스들이 검색될 시, 해당 음성 정보의 녹음 데이터를 분석할 수 있다. 이때, 녹음 데이터 분석은 검색된 각 음성 정보들을 각각을 분석할 수 있다. 또는 본 발명의 실시 예의 경우 각 음성 정보들의 녹음 데이터는 한 사용자로부터 입력된 동일한 녹음 데이터일 수 있으며, 이에 따라 어느 하나의 녹음 데이터만을 분석할 수도 있다. 예를 들어, 서버(300)는 녹음 데이터를 분석(예컨대, 음성 인식)을 통해 음성 명령어(또는 음성 파라미터)(예컨대, "기기 연결", "기기 연결 현재 이미지 파일 전송", "기기 연결 와이파이 디스플레이", "기기 연결 스피커", "기기 연결 폰북 전송" 등) 인식할 수 있다. 즉, 서버(300)는 디바이스들 간 연결을 통해 수행하고자 하는 서비스 종류를 인식할 수 있다.

서버(300)는 앞서와 같은 동작에 따라 일치되는 사용자 디바이스 및 수행하고자 하는 서비스 종류 등이 결정될 시 서비스 타입, 연결 정보, 그리고 실행 정보를 포함하는 서비스 정보를 결정된 사용자 디바이스별로 생성하고, 생성된 서비스 정보를 각 사용자 디바이스에게 전송할 수 있다.

서버(300)로부터 서비스 정보를 각각 수신하는 일군(1 set)의 사용자 디바이스들(예컨대, 제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200))은 수신된 서비스 정보로부터 서비스 타입에 따라 마스터 모드 또는 슬레이브 모드를 결정하고, 결정된 해당 모드에서 연결 정보에 따라 연결 대상의 사용자 디바이스(예컨대, 제1 사용자 디바이스(100) 또는 제2 사용자 디바이스(200))와 설정된 통신 방식으로 연결하고, 실행 정보에 따라 해당 서비스를 실행할 수 있다. 예를 들어, 제1 사용자 디바이스(100)와 제2 사용자 디바이스(200)는 무선 랜 링크(link)를 형성하고, 서로 간에 연결이 완료될 시 마스터로 결정된 사용자 디바이스가 현재 표시되고 있는 이미지 파일을 상대 사용자 디바이스에게 전송할 수 있다. 또는 마스터로 결정된 사용자 디바이스는 좌 스피커로 동작하고 슬레이브로 결정된 사용자 디바이스는 우 스피커로 동작하여, 마스터 디바이스에서 재생되는 미디어 파일의 오디오를 각각 출력할 수도 있다. 또는 마스터로 결정된 사용자 디바이스는 입력 수단으로 동작하고 슬레이브로 결정된 사용자 디바이스는 표시 수단으로 동작하여, 마스터의 사용자 디바이스에 의해 입력되는 정보를 슬레이브의 사용자 디바이스를 통해 표시할 수 있다. 또는 마스터로 결정된 사용자 디바이스에서 표시되는 데이터를 슬레이브로 결정된 사용자 디바이스로 전송하여 마스터의 사용자 디바이스에서 표시되는 데이터를 슬레이브의 사용자 디바이스와 함께 공유하여 표시할 수도 있다.

도 2는 본 발명의 실시 예에 따른 사용자 디바이스의 구성을 개략적으로 도시한 도면이다. 상기 도 2에서 상기 사용자 디바이스는 앞서 살펴본 바와 같은 제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)를 대표하는 것으로, 상기 도 2의 구성은 제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200) 모두에 구현될 수 있다.

상기 도 2를 참조하면, 본 발명의 사용자 디바이스는 무선 통신부(210), 사용자 입력부(220), 표시부(230), 오디오 처리부(240), 저장부(250), 인터페이스부(260), 제어부(controller)(270), 그리고 전원 공급부(280)를 포함하여 구성된다. 본 발명의 사용자 디바이스는 도 2에 도시된 구성 요소들이 필수적인 것은 아니어서, 그보다 많은 구성 요소들을 가지거나, 또는 그보다 적은 구성 요소들을 가지는 것으로 구현될 수 있다.

상기 무선 통신부(210)는 사용자 디바이스와 무선 통신 시스템 사이 또는 사용자 디바이스와 사용자 디바이스가 위치한 네트워크(network) 사이의 무선 통신을 가능하게 하는 하나 이상의 모듈을 포함할 수 있다. 예를 들어, 무선 통신부(210)는 이동통신 모듈(211), 무선 랜(WLAN, Wireless Local Area Network) 모듈(213), 근거리 통신 모듈(215), 위치 산출 모듈(217), 그리고 방송 수신 모듈(219) 등을 포함하여 구성될 수 있다.

이동통신 모듈(211)은 이동통신 네트워크 상에서 기지국, 외부의 디바이스, 서버 중 적어도 하나와 무선 신호를 송수신한다. 상기 무선 신호는 음성통화 신호, 화상통화 신호 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터 등을 포함할 수 있다. 이동통신 모듈(211)은 사용자 디바이스의 서비스 연결 모드 시 이동통신 네트워크를 통해 미리 정의된 서버(300)에게 음성 정보를 전송하고, 서버(300)로부터 상기 음성 정보에 대응하는 서비스 정보를 수신할 수 있다. 본 발명에서 음성 정보는 사용자 디바이스들 간 서비스 연결에 필요한 사용자 음성의 녹음 데이터와 관련 정보를 포함할 수 있다. 상기 관련 정보는 타임스탬프(timestamp), 사용자 디바이스의 식별정보(예컨대, 어드레스(address), 식별자, 전화번호 등)를 포함할 수 있다. 그리고 본 발명에서 상기 서비스 정보는 사용자 디바이스에 대해 결정된 모드 정보(예컨대, 마스터 모드, 슬레이브 모드), 결정된 모드에서 수행할 기능 정보, 서비스 연결할 대상의 사용자 디바이스에 대한 기기 정보 등을 포함할 수 있다.

무선 랜 모듈(213)은 무선 인터넷(internet) 접속 및 다른 사용자 디바이스와 무선 랜 링크를 형성하기 위한 모듈을 나타내는 것으로, 사용자 디바이스에 내장되거나 외장될 수 있다. 무선 인터넷 기술로는 WLAN(Wireless LAN)(WiFi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 등이 이용될 수 있다. 상기 무선 랜 모듈(213)은 무선 인터넷을 통해 본 발명에서 정의되는 음성 정보를 송신하거나, 서버(300)로부터 서비스 정보를 수신할 수 있다. 무선 랜 모듈(213)은 사용자 디바이스의 서비스 연결을 위한 접속 방식이 무선 랜 방식으로 설정된 경우, 서비스 정보에 대응하는 대상 사용자 디바이스와의 무선 랜 링크를 형성할 수 있다.

근거리 통신 모듈(215)은 근거리 통신을 위한 모듈을 나타낸다. 근거리 통신(short range communication) 기술로 블루투스(BLUETOOTH), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), 지그비(ZigBee), 그리고 NFC(Near Field Communication) 등이 이용될 수 있다. 근거리 통신 모듈(215)은 사용자 디바이스의 서비스 연결을 위한 접속 방식이 근거리 통신 방식으로 설정된 경우, 서비스 정보에 대응하는 대상 사용자 디바이스와의 근거리 통신 링크를 형성할 수 있다.

위치 산출 모듈(215)은 사용자 디바이스의 위치를 획득하기 위한 모듈로서, 그의 대표적인 예로는 GPS(Global Position System) 모듈이 있다. 위치 산출 모듈(215)은 3개 이상의 기지국들로부터 떨어진 거리 정보와 정확한 시간 정보를 산출한 다음 상기 산출된 정보에 삼각법을 적용함으로써, 위도, 경도, 및 고도에 따른 3차원의 현 위치 정보를 산출할 수 있다. 또는 위치 산출 모듈(215)은 3개 이상의 위성으로부터 사용자 디바이스의 현 위치를 실시간으로 계속 수신함으로써 위치 정보를 산출할 수 있다. 사용자 디바이스의 위치 정보는 다양한 방법에 의해 획득될 수 있다.

방송 수신 모듈(219)은 방송 채널(예컨대, 위성 채널, 지상파 채널 등)을 통하여 외부의 방송 관리 서버로부터 방송 신호(예컨대, TV 방송 신호, 라디오 방송 신호, 데이터 방송 신호 등) 및/또는 상기 방송과 관련된 정보(예컨대, 방송 채널, 방송 프로그램 또는 방송 서비스 제공자에 관련한 정보 등)를 수신한다. 본 발명의 실시 예에 따라 방송 수신 모듈(219)을 통해 수신된 방송 신호는 연결된 상대 사용자 디바이스로 전송(또는 스트리밍)되어 표시될 수도 있다.

사용자 입력부(220)는 사용자가 사용자 디바이스의 동작 제어를 위한 입력 데이터를 발생시킨다. 사용자 입력부(220)는 키패드(key pad), 돔 스위치(dome switch), 터치패드(touch pad)(정압/정전), 조그 휠(jog wheel), 조그 스위치(jog switch) 등으로 구성될 수 있다. 특히, 사용자 입력부(220)는 본 발명의 음성 기반의 서비스 연결을 위한 과정을 개시(initiate)하는 하드웨어 또는 소프트 인터페이스 타입의 음성 명령 버튼(150)을 포함할 수 있다.

표시부(230)는 사용자 디바이스에서 처리되는 정보를 표시(출력)한다. 예를 들어, 사용자 디바이스가 통화모드인 경우 통화와 관련된 사용자 인터페이스(UI, User Interface) 또는 그래픽 사용자 인터페이스(GUI, Graphical UI)를 표시한다. 또한 표시부(230)는 사용자 디바이스가 화상 통화모드 또는 촬영 모드인 경우에는 촬영 또는/및 수신된 영상 또는 UI, GUI를 표시한다. 표시부(230)는 내부 또는 외부에서 수집하는 메시지와 관련된 UI 또는 GUI를 표시한다. 표시부(230)는 본 발명의 음성 기반의 서비스 연결 시 수행되는 실행화면을 표시할 수 있다. 예를 들어, 음성 명령 버튼(150)이 입력될 시 음성 입력을 가이드 하는 가이드 화면, 입력된 사용자 음성에 의한 인증 수행에 따른 인증 처리 화면, 그리고 서비스 정보에 따라 결정된 모드 정보, 연결 대상 디바이스의 디바이스 정보, 연결되는 디바이스와 수행하는 서비스의 실행 정보 등의 서비스 수행 화면과 관련된 UI 또는 GUI를 표시할 수 있다.

표시부(230)는 액정 디스플레이(Liquid Crystal Display, LCD), 박막 트랜지스터 액정 디스플레이(Thin Film Transistor-Liquid Crystal Display, TFT LCD), 발광 다이오드(Light Emitting Diode, LED), 유기 발광 다이오드(Organic LED, OLED), 능동형 OLED(Active Matrix OLED, AMOLED), 플렉시블 디스플레이(flexible display), 벤디드 디스플레이(bended display), 그리고 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다. 이들 중 일부 디스플레이는 외부를 볼 수 있도록 투명형 또는 광투과형으로 구성되는 투명 디스플레이로 구현될 수 있다.

본 발명에 따르면, 표시부(230)와 터치 동작을 감지하는 터치 패널이 상호 레이어(layer) 구조를 이루는 경우(이하, '터치스크린(touchscreen)'이라 칭함)에, 표시부(230)는 출력 장치 이외에 입력 장치로도 사용될 수 있다. 터치 패널은 표시부(230)의 특정 부위에 가해진 압력 또는 표시부(230)의 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력신호로 변환하도록 구성될 수 있다. 터치 패널은 터치되는 위치 및 면적뿐만 아니라, 터치 시의 압력까지도 검출할 수 있도록 구성될 수 있다. 터치 패널에 대한 터치 입력이 있는 경우, 그에 대응하는 신호(들)는 터치 제어기(touch controller)(미도시)로 보내진다. 터치 제어기(미도시)는 그 신호(들)를 처리한 다음 대응하는 데이터를 제어부(270)로 전송한다. 이로써, 제어부(270)는 표시부(230)의 어느 영역이 터치 되었는지 여부 등을 알 수 있게 된다.

오디오 처리부(240)는 제어부(270)로부터 입력 받은 오디오 신호를 스피커(241)로 전송하고, 마이크(243)로부터 입력 받은 음성 등의 오디오 신호를 제어부(270)로 전달하는 기능을 수행한다. 오디오 처리부(240)는 음성/음향 데이터를 제어부(270)의 제어에 따라 스피커(241)를 통해 가청음으로 변환하여 출력하고 마이크(243)로부터 수신되는 음성 등의 오디오 신호를 디지털 신호로 변환하여 제어부(270)로 전달할 수 있다. 특히, 본 발명에 따른 오디오 처리부(240)는 제어부(270)의 제어 하에 음성 정보(특히, 녹음 데이터(음성 파형), 타임스탬프 등)가 실린 사운드를 스피커(241)를 통해 출력할 수 있고, 마이크(243)를 통해 다른 사용자 디바이스의 스피커를 통해 출력되는 음성 정보가 실린 사운드를 입력받아 제어부(270)로 전달할 수 있다. 본 발명에서 오디오 처리부(240) 및 스피커(241) 중 적어도 하나는 출력하는 사운드가 인접된 영역에 존재하는 다른 사용자 디바이스의 마이크(243)를 통해 입력되도록 하기 위하여 추가의 회로나 전자부품(예컨대, 저항, 콘덴서 등)을 포함할 수 있다.

스피커(241)는 통화모드, 녹음모드, 음성인식 모드, 방송수신 모드 등에서 무선 통신부(210)로부터 수신되거나, 저장부(250)에 저장된 오디오 데이터를 출력할 수 있다. 스피커(241)는 사용자 디바이스에서 수행되는 기능(예컨대, 통화신호 수신음, 메시지 수신음, 음악 컨텐츠 재생 등)과 관련된 음향 신호를 출력할 수도 있다. 스피커(241)는 후술하는 본 발명의 실시 예에 따라 음성 정보를 포함하는 사운드를 설정된 출력 세기에 따라 출력할 수 있다.

마이크(243)는 통화모드, 녹음모드, 음성인식 모드 등에서 외부의 음향 신호를 입력 받아 전기적인 음성 데이터로 처리한다. 처리된 음성 데이터는 통화모드인 경우 이동통신 모듈(211)을 통하여 이동통신 기지국으로 송신 가능한 형태로 변환되어 출력될 수 있다. 마이크(243)에는 외부의 음향 신호를 입력 받는 과정에서 발생되는 잡음(noise)을 제거하기 위한 다양한 잡음 제거 알고리즘이 구현될 수 있다. 마이크(243)는 후술하는 본 발명의 실시 예에 따라 다른 사용자 디바이스의 스피커(미도시)에서 출력되는 사운드를 입력 받아 제어부(270)로 전달할 수 있다.

저장부(250)는 제어부(270)의 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 입/출력되는 데이터들(예컨대, 전화번호부, 메시지, 오디오, 정지영상, 전자도서, 동영상, 음성 정보, 로그 정보 등)의 임시 저장을 위한 기능을 수행할 수도 있다. 저장부(250)에는 상기 데이터들 각각에 대한 사용 빈도(예컨대, 각 전화번호, 각 메시지, 각 멀티미디어에 대한 사용빈도 등) 및 중요도도 함께 저장될 수 있다. 또한 저장부(250)에는 터치스크린 상의 터치 입력 시 출력되는 다양한 패턴의 진동 및 음향에 관한 데이터를 저장할 수 있다. 특히, 저장부(250)는 서비스 연결 시 실행될 통신 방식, 서버(300)로부터 수신하는 서비스 정보, 서비스 개시 명령어(예컨대, "기기 연결" 등), 서비스 명령어(예컨대, "파일 전송", "주소록 공유", "스피커 실행", "키보드 연결" 등) 등을 저장할 수 있다. 본 발명에서 개시 명령 및 서비스 명령어는 사용자 설정에 따라 정의될 수 있으며, 서비스 명령어의 경우 해당 서비스 수행 시 사용자 디바이스가 동작할 기능의 기능 정보(예컨대, 키보드 연결 시 입력 수단으로 동작할 지 표시 수단으로 동작할 지에 대한 정보, 스피커 실행 시 좌측 사운드를 담당할지 우측 사운드를 담당할 지에 대한 정보 등)가 함께 매핑될 수도 있다. 또한 저장부(250)는 후술하는 도 3의 플랫폼(platform)을 저장할 수도 있다.

저장부(250)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 마이크로 타입(micro type), 및 카드 타입의 메모리(예컨대, SD 또는 XD 메모리 등)와, 램(RAM, Random Access Memory), SRAM(Static RAM), 롬(ROM, Read-Only Memory), EEPROM(Electrically Erasable Programmable ROM), PROM(Programmable ROM), 자기 메모리(MRAM, Magnetic RAM), 자기 디스크(magnetic disk), 및 광디스크(optical disk) 타입의 메모리 중 적어도 하나의 타입의 저장 매체(storage medium)를 포함할 수 있다. 사용자 디바이스는 인터넷 상에서 상기 저장부(250)의 저장 기능을 수행하는 웹 스토리지(web storage)와 관련되어 동작할 수도 있다.

인터페이스부(260)는 사용자 디바이스에 연결되는 모든 외부 기기와의 통로 역할을 한다. 인터페이스부(260)는 외부 기기로부터 데이터를 전송 받거나, 전원을 공급받아 사용자 디바이스 내부의 각 구성 요소에 전달하거나, 사용자 디바이스 내부의 데이터가 외부 기기로 전송되도록 한다. 예를 들어, 유/무선 헤드셋 포트, 외부 충전기 포트, 유/무선 데이터 포트, 메모리 카드(memory card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트, 오디오 I/O(Input/Output) 포트, 비디오 I/O 포트, 이어폰 포트 등이 인터페이스부(260)에 포함될 수 있다.

제어부(270)는 사용자 디바이스의 전반적인 동작을 제어한다. 예를 들어, 음성 통화, 데이터 통신, 화상 통화 등을 위한 관련된 제어 및 처리를 수행한다. 제어부(270)는 멀티미디어 재생을 위한 멀티미디어 모듈(미도시)을 구비할 수도 있다. 멀티미디어 모듈(미도시)은 제어부(270) 내에 구현될 수도 있고, 제어부(270)와 별도로 구현될 수도 있다. 특히, 제어부(270)는 본 발명의 사용자 디바이스를 통해 입력된 사용자 음성을 이용한 사용자 디바이스들 간 서비스를 자동 연결 및 실행하는 것과 관련된 전반적인 동작을 제어할 수 있다.

예를 들어, 제어부(270)는 음성 명령 버튼(150)에 의해 서비스가 개시될 시 마이크(243)를 통해 입력된 음성 기반의 음성 정보 생성을 제어하고, 음성 명령 버튼(150)에 의한 해제를 감지할 시 생성된 음성 정보를 무선 통신부(210)를 통한 서버(300)에게 전송 또는 스피커(241)를 통한 외부 출력을 제어할 수 있다. 그리고 제어부(270)는 서버(300)로부터 서비스 정보가 수신될 시 수신된 서비스 정보에 따라 사용자 디바이스의 모드를 결정하고, 결정된 모드에 따른 서비스 연결 및 서비스 실행을 제어할 수 있다. 또는 제어부(270)는 마이크(243)를 통해 다른 사용자 디바이스로부터 음성 정보가 수신될 시 수신된 음성 정보에 따라 사용자 디바이스의 모드를 결정하고, 결정된 모드에 따른 서비스 연결 및 서비스 실행을 제어할 수도 있다. 즉, 제어부(270)는 본 발명의 음성을 이용한 사용자 디바이스들 간 서비스 연결 및 서비스 실행 기능과 관련된 전반적인 제어를 담당한다. 이러한 제어부(270)의 상세 제어 동작에 대해 후술하는 도면들을 참조한 사용자 디바이스의 동작 예시 및 그의 제어 방법에서 설명될 것이다.

전원 공급부(280)는 제어부(270)의 제어에 의해 외부의 전원, 내부의 전원을 인가받아 각 구성 요소들의 동작에 필요한 전원을 공급한다.

상기 도 2에서는 그의 도시 및 설명은 생략하였으나, 저장부(250) 및 제어부(270) 중 적어도 하나에 음성 인식 모듈(미도시)이 저장 또는 탑재(loading)되거나, 별도의 구성으로 구현될 수도 있다.

한편, 본 발명에서 설명되는 다양한 실시 예들은 소프트웨어(software), 하드웨어(hardware) 또는 이들의 조합된 것을 이용하여 컴퓨터(computer) 또는 이와 유사한 장치로 읽을 수 있는 기록 매체 내에서 구현될 수 있다. 하드웨어적인 구현에 의하면, 본 발명에서 설명되는 실시 예들은 ASICs(Application Specific Integrated Circuits), DSPs(Digital Signal Processors), DSPDs(Digital Signal Processing Devices), PLDs(Programmable Logic Devices), FPGAs(Field Programmable Gate Arrays), 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(micro-controllers), 마이크로프로세서(microprocessors), 기타 기능 수행을 위한 전기적인 유닛 중 적어도 하나를 이용하여 구현될 수 있다. 일부의 경우에 본 명세서에서 설명되는 실시 예들이 제어부(270) 자체로 구현될 수 있다. 소프트웨어적인 구현에 의하면, 본 명세서에서 설명되는 절차 및 기능과 같은 실시 예들은 별도의 소프트웨어 모듈들로 구현될 수 있다. 상기 소프트웨어 모듈들 각각은 본 명세서에서 설명되는 하나 이상의 기능 및 작동을 수행할 수 있다.

그리고 상기 도 1에 나타낸 본 발명의 사용자 디바이스는 본 발명의 기능을 지원하는 모든 정보통신기기, 멀티미디어기기 및 그에 대한 응용기기와 같이 AP(Application Processor), GPU(Graphic Processing Unit), CPU(Central Processing Unit)를 사용하는 모든 디바이스를 포함할 수 있다. 예를 들어, 상기 사용자 디바이스는 다양한 통신 시스템에 대응되는 각 통신 프로토콜들(communication protocols)에 의거하여 동작하는 이동통신 단말기를 비롯하여, 태블릿(tablet) PC(Personal Computer), 스마트 폰(Smart Phone), 디지털 카메라, PMP(Portable Multimedia Player), 미디어 플레이어(Media Player), 휴대게임단말, 랩톱 컴퓨터 및 PDA(Personal Digital Assistant) 등의 디바이스를 포함할 수 있다. 아울러, 본 발명의 기능 제어 방법은 디지털 TV(Digital Television), DS(Digital Signage), LFD(Large Format Display) 등과 같이 다양한 디스플레이 디바이스에 적용되어 운용될 수 있다.

도 3은 본 발명의 실시 예에 따른 기능을 처리하는 사용자 디바이스의 플랫폼 구조를 개략적으로 도시한 도면이다.

상기 도 3을 참조하면, 본 발명의 실시 예에 따른 사용자 디바이스의 플랫폼은, 상술한 음성을 이용한 서비스 연결과 관련된 다양한 동작을 수행하기 위해 OS(Operating System) 기반의 소프트웨어를 구비할 수 있다. 상기 도 3에 도시된 바와 같이, 본 발명의 실시 예에 따른 사용자 디바이스는 커널(Kernel)(310), 음성 인식 프레임워크(Voice Recognition Framework)(330), 그리고 쉐어링 서비스 어플리케이션(Sharing Service Application)(350)을 포함하여 설계될 수 있다.

상기 커널(310)은 OS(Operating System)의 핵심으로써, 디바이스의 구동 시 하드웨어 드라이버(driver) 구동, 디바이스 내의 하드웨어와 프로세서의 보안, 시스템 자원의 효율적 관리, 메모리 관리, 하드웨어 추상화에 의한 하드웨어에 대한 인터페이스 제공, 멀티 프로세스, 그리고 서비스 연결 관리 등 중 적어도 하나를 수행할 수 있다. 상기 커널(310) 내의 하드웨어 드라이버는 디스플레이 드라이버, 입력 장치 드라이버, 와이파이 드라이버, 블루투스 드라이버, USB 드라이버, 오디오 드라이버, 파워 관리자(Power management), 바인더 드라이버(Binder Driver), 메모리 드라이버 등 중 적어도 하나를 포함할 수 있다.

상기 음성 인식 프레임워크(330)는 쉐어링 서비스 어플리케이션(350) 층 내의 어플리케이션의 기반이 되는 프로그램을 포함할 수 있다. 음성 인식 프레임워크(330)는 어떠한 어플리케이션과도 호환 가능하며, 컴포턴트(component)의 재사용, 이동 또는 교환이 가능할 수 있다. 음성 인식 프레임워크(330)는 지원 프로그램, 다른 소프트웨어 구성 요소들을 연결시켜 주는 프로그램 등을 포함할 수 있다. 예를 들어, 음성 인식 프레임워크(330)는 사운드 레코더(Sound Recorder)(351), 엔진 매니저(Engine Manager)(353), 스피치 인식 엔진(Speech Recognition Engine)(355), 커넥션 매니저(Connection Manager)(357), 그리고 서비스 매니저(Service Manager)(359) 등을 포함할 수 있다.

사운드 레코더(351)는 마이크(243)로부터 입력되어 상기 커널(310)을 통해 전달된 사용자 음성을 기록하여 녹음 데이터를 생성할 수 있다.

엔진 매니저(353)는 상기 사운드 레코드(351)로부터 전달된 녹음 데이터를 스피치 인식 엔진(355)으로 전달하고, 상기 스피치 인식 엔진(355)으로부터 전달된 결과 정보에 따라 커넥션 매니저(357)에게 음성 정보를 전달한다. 엔진 매니저(353)는 음성 명령 버튼(150)이 입력이 이루어질 시 그 입력 시간에 대한 타임스탬프를 기록할 수 있다. 그리고 엔진 매니저(353)는 스피치 인식 엔진(355)로부터 서비스 연결을 요청하는 명령어로 해석된 분석 결과가 전달될 시 상기 타임스탬프, 상기 녹음 데이터 및 디바이스의 디바이스 어드레스를 포함하는 음성 정보를 생성하여 커넥션 매니저(357)에게 전달하여 전송을 요청할 수 있다.

스피치 인식 엔진(355)은 상기 엔진 매니저(353)를 통해 전달된 녹음 데이터를 해석할 수 있다. 즉, 스피치 인식 엔진(355)은 상기 녹음 데이터를 해석하여 서비스 연결을 요청하는 개시 명령어가 포함되는지 분석할 수 있다. 스피치 인식 엔진(355)은 녹음 데이터로부터 디바이스들 간 서비스 연결을 요청하는 명령어인 것으로 해석할 시 그에 대한 분석 결과를 상기 엔진 매니저(353)로 전달할 수 있다. 본 발명에서 스피치 인식 엔진(355)은 입력된 신호를 텍스트 또는 음성으로 변환하기 위한 엔진으로, 입력된 텍스트를 음성으로 변환하는 TTS 엔진과, 음성을 메시지의 텍스트로 변환하는 STT 엔진을 포함하는 프로그램으로 구성될 수도 있다.

커넥션 매니저(357)는 상기 엔진 매니저(353)로부터 음성 정보를 수신하고, 상기 음성 정보를 무선 통신부(210)를 통해 서버(300)에게 전송할 수 있다. 그러면, 서버(300)는 다른 디바이스에서 동일한 녹음 데이터와 동일한 시간대의 타임스탬프를 가지는지 비교 판단하고, 만약 동일한 녹음 데이터와 동일한 시간대의 타임스탬프를 가지는 디바이스가 존재하면 해당 디바이스와 서비스 연결을 위한 서비스 정보를 디바이스에게 전송할 수 있다. 따라서 커넥션 매니저(357)는 서버(300)로부터 상기 서비스 정보가 수신되면, 상기 서비스 정보를 서비스 매니저(359)에게 전달할 수 있다. 그리고 커넥션 매니저(357)는 서비스 매니저(359)에서 전달된 연결 대상 디바이스의 디바이스 어드레스에 따라 설정된 통신 방식의 연결을 처리한다. 이후, 커넥션 매니저(357)는 연결 대상 디바이스와 연결이 이루어지면, 서비스 매니저(359)에서 전달된 서비스의 실행 정보에 따라 연결 대상 디바이스와 관련 서비스 수행을 처리한다.

서비스 매니저(359)는 상기 커넥션 매니저(357)로부터 상기 서비스 정보를 수신하고, 수신된 서비스 정보를 분석할 수 있다. 서비스 매니저(359)는 서비스 정보로부터 디바이스의 동작 모드, 연결 대상 디바이스의 디바이스 어드레스 및 실행 서비스의 종류 등을 분석할 수 있다. 이때, 서비스 매니저(359)는 서비스 정보를 수신할 시 디바이스에서 현재 수행 중인 어플리케이션의 정보를 쉐어링 서비스 어플리케이션(350)으로부터 수집할 수 있다.

상기 쉐어링 서비스 어플리케이션(350)은 디바이스 내에서 구동되어 표시 가능한 다양한 프로그램을 포함한다. 예를 들어, 디바이스 내의 다양한 메뉴 등에 관한 UI 어플리케이션과, 외부 장치 또는 네트워크를 통해 다운로드 되어 저장되며, 사용자에 의해 설치 또는 삭제가 자유로운 어플리케이션 등을 포함할 수 있다. 이러한 어플리케이션을 통해, 네트워크 접속에 의한 인터넷 전화 서비스, 주문형 비디오(VOD) 서비스, 웹 앨범 서비스, SNS, 위치기반 서비스(LBS), 지도 서비스, 웹 검색 서비스, 애플리케이션 검색 서비스, 문자/멀티미디어 메시지 서비스, 메일 서비스, 주소록 서비스, 미디어 재생 서비스 등이 수행될 수 있다. 또한, 게임, 일정관리 등 다양한 기능이 수행될 수 있다.

이 외에도, 본 발명의 플랫폼은 미들웨어(middleware)(미도시)를 더 포함할 수 있다. 상기 미들웨어(미도시)는 커널(310)과 어플리케이션(350) 층 사이에 위치하여, 다른 하드웨어 또는 소프트웨어 간에 데이터를 주고받을 수 있도록 중간에서 매개 역할을 할 수 있다. 이에 의해, 표준화된 인터페이스 제공이 가능하며, 다양한 환경 지원, 및 체계가 다른 업무와 상호 연동이 가능해질 수 있다.

한편, 이상에서 살펴본 바와 같은 플랫폼은 본 발명의 사용자 디바이스는 물론, 그 외 다양한 전자기기에서 범용으로 사용 가능하다. 그리고 본 발명의 플랫폼은 앞서 살펴본 바와 같은 저장부(250) 및 제어부(270) 중 적어도 하나 또는 별도의 프로세서(미도시)에, 저장 또는 탑재(loading)될 수도 있다. 또한, 어플리케이션 실행을 위한 별도의 어플리케이션 프로세서(미도시)가 더 구비될 수도 있다.

도 4는 본 발명의 실시 예에 따른 사용자 디바이스들 간의 서비스 연결 과정을 도시한 신호 흐름도이고, 도 5는 본 발명의 실시 예에 따른 사용자 디바이스들의 서비스 연결에 사용되는 음성 정보가 저장되는 예시를 도시한 도면이다.

상기 도 4를 참조하면, 제1 디바이스(100) 및 제2 디바이스(200)는 음성 명령 버튼(150) 입력이 수신되면(401단계, 403단계), 마이크(243)를 통해 입력되는 사용자 음성을 각각 녹음할 수 있다(405단계, 407단계). 예를 들어, 사용자는 제1 디바이스(100)와 제2 디바이스(200)에 구비된 음성 명령 버튼(150)을 누른 상태에서 디바이스들 간의 연결을 위한 개시 명령어(예컨대, "기기 연결") 또는 디바이스 연결 및 실행하고자 하는 서비스 명령어(예컨대, "기기 연결 파일 전송", "기기 연결 주소록 공유" 등)를 입력(말)하고, 음성 명령 버튼(150)의 입력을 해제할 수 있다.

제1 디바이스(100) 및 제2 디바이스(200)는 음성 명령 버튼(150)의 입력이 해제될 시 녹음된 음성에 대한 음성 인식을 수행할 수 있다(409단계, 411단계). 제1 디바이스(100) 및 제2 디바이스(200)는 녹음된 음성 분석을 통해 디바이스들 간 서비스 연결을 위한 개시 명령어(예컨대, "기기 연결")가 검출되는지 판별할 수 있다.

제1 디바이스(100) 및 제2 디바이스(200)는 서비스 연결을 위한 개시 명령어가 검출될 시 음성 정보를 생성하여 서버(300)로 각각 전송할 수 있다(413단계, 415단계). 본 발명에서 음성 정보는 사용자 디바이스들 간 서비스 연결에 필요한 사용자 음성의 녹음 데이터와 관련 정보를 포함할 수 있다. 예를 들어, 녹음 데이터(특히, 음성 파형), 타임스탬프, 그리고 디바이스 식별자 등을 포함할 수 있다.

서버(300)는 제1 디바이스(100) 및 제2 디바이스(200)로부터 음성 정보가 수신될 시, 수신된 음성 정보를 각 디바이스별로 구분하여 데이터베이스에 저장할 수 있다(411단계). 그리고 서버(300)는 데이터베이스 저장된 음성 정보에 대한 분석을 수행할 수 있다(419단계).

예를 들어, 서버(300)는 음성 정보가 수신될 시 수신된 음성 정보에 대응되는 음성 정보가 데이터베이스에 존재하는지 비교 검색할 수 있다. 예를 들어, 도 5에 도시된 바와 같이, 서버(300)는 수신된 음성 정보를 각 디바이스별로 구분하여 디바이스 정보, 녹음 데이터(음성 파형), 타임스탬프, 연결 정보(디바이스 어드레스), 로우 데이터 등으로 구분하여 저장할 수 있다. 그리고 서버(300)는 상기 도 5와 같이 저장된 음성 정보에서 서로 일치되는 음성 정보를 검색할 수 있다. 즉, 서버(300)는 수신된 음성 정보의 녹음 데이터와 동일한 것으로 판단되는 음성 파형을 검출하고, 검출된 음성 파형들의 타임스탬프를 확인하여 검출된 음성 파형들이 동일한 시간대에 생성되었는지 비교 분석할 수 있다. 그리고 서버(300)는 동일한 음성 파형과 동일한 시간대를 가지는 것으로 확인할 시 해당 디바이스들이 연결을 시도하고 있는 것으로 판단할 수 있다. 일예로, 서버(300)는 상기 도 5에서 디바이스 B와 디바이스 E가 서로 일치되는 음성 정보를 가지는 것으로 결정할 수 있다.

이때, 서버(300)는 음성 정보가 수신된 순서에 따라 음성 정보 분석을 처리할 수 있다. 예를 들어, 제1 디바이스(100)에 의한 음성 정보가 제2 디바이스(200)보다 먼저 수신될 시, 제2 디바이스(100)로부터 수신된 음성 정보를 기준으로 분석을 수행할 수 있다. 그리고 만약 제1 디바이스(100)로부터 수신된 음성 정보에 대응하게 검출된 음성 정보가 제2 디바이스(200)의 음성 정보인 경우 제2 디바이스(200)로부터 수신된 음성 정보의 타임스탬프를 확인하여 동일한 시간대에 속하는 경우 제2 디바이스(200)로부터 수신된 음성 정보에 대한 분석은 생략할 수도 있다.

서버(300)는 음성 정보 분석을 통해 서로 일치되는 음성 정보가 제공된 디바이스들(예컨대, 제1 디바이스(100) 및 제2 디바이스(200))에서 수행할 연결 방식, 서비스 종류 등에 대한 서비스 타입을 인식할 수 있다(421단계). 예를 들어, 서버(300)는 서로 일치되는 음성 정보를 가진 적어도 2개의 디바이스들을 결정할 시 각 디바이스들의 타임스탬프를 확인하여 타임스탬프에 기록된 시간의 차이에 따라 각 디바이스가 수행될 모드를 인식하고, 녹음 데이터로부터 음성 명령어를 분석하여 실행하고자 하는 서비스를 인식할 수 있다. 즉, 서버(300)는 인식된 음성 명령어(예컨대, "기기 연결", "기기 연결 파일 전송" 등)를 해석하는 과정을 통해 디바이스들 간에 어떤 서비스 연결을 하려는 것인지 인식할 수 있다.

서버(300)는 서비스 타입에 따른 서비스 정보를 각 디바이스별(예컨대, 제1 디바이스(100) 및 제2 디바이스)로 생성하여 제1 디바이스(100) 및 제2 디바이스(200)에 각각 전송할 수 있다(423단계, 425단계). 예를 들어, 서버(300)는 각 디바이스별 서비스 타입, 연결 정보, 그리고 실행 정보를 이용하여 각 디바이스들(제1 디바이스(100) 및 제2 디바이스(200))에게 전송할 서비스 정보를 각각 생성하고, 생성된 서비스 정보를 제1 디바이스(100) 및 제2 디바이스(200)에게 각각 전송할 수 있다. 상기 서비스 정보는 각 디바이스별 서비스 타입, 연결 정보, 그리고 실행 정보를 포함할 수 있으며, 상기 실행 정보는 해석된 음성 명령어 타입에 따라 선택적으로 포함될 수 있다. 일예로, 음성 명령어가 "기기 연결"과 같이 서비스 개시 명령어("기기 연결")만을 포함할 시 실행 정보는 생략될 수 있고, 음성 명령어가 "기기 연결 파일 전송"과 같이 서비스 개시 명령어("기기 연결")와 서비스 명령어("파일 전송")를 포함할 시 파일 전송을 지시하는 실행 정보가 포함될 수 있다.

제1 디바이스(100) 및 제2 디바이스(200)는 서버(300)로부터 음성 정보 전송에 대한 서비스 정보가 수신될 시, 수신된 서비스 정보에 따라 서로 간에 결정된 연결을 수행할 수 있다(423단계). 예를 들어, 제1 디바이스(100) 및 제2 디바이스(200)는 서비스 정보(특히, 서비스 타입)에 따라 동작할 모드 결정 및 서비스 정보(특히, 연결 정보)에 따라 연결 대상의 디바이스 정보를 확인할 수 있다. 그리고 제1 디바이스(100) 및 제2 디바이스(200) 중 마스터 모드로 동작하는 디바이스는 서비스 정보(특히, 연결 정보)에 대응하는 디바이스와 미리 설정된 연결 방식(예컨대, 블루투스 연결, 무선 랜 연결, 와이파이 다이렉트 연결 등)에 따라 연결을 시도할 수 있다.

제1 디바이스(100) 및 제2 디바이스(200)는 서로 연결될 시 서비스 정보에 따른 서비스를 수행할 수 있다(429단계). 예를 들어, 서로 간에 연결이 완료되면, 마스터 모드의 디바이스가 연결된 슬레이브 모드의 디바이스와 서비스 정보(특히, 실행 정보)에 대응하는 서비스를 실행할 수 있다.

일예로, 제1 디바이스(100)가 마스터 모드로 동작하고 제2 디바이스(200)가 슬레이브 모드로 동작하는 것을 가정하고, 실행 정보가 <파일 전송>에 해당하는 경우 제1 디바이스(100)에서 현재 선택된(또는 표시된) 파일을 제2 디바이스(200)에게 전송할 수 있다. 또한 실행 정보가 <주소록 공유>에 해당하는 경우 제1 디바이스(100)의 주소록 정보를 제2 디바이스(200)에게 전송할 수 있다. 이때, 주소록 공유의 경우 제2 디바이스(200)의 주소록을 제1 디바이스(100)의 주소록으로 동기화하거나, 또는 제1 디바이스(100)의 주소록을 제2 디바이스(200)에 주소록에 추가하는 방식 중 설정된 방식에 따라 수행될 수도 있다. 또한 실행 정보가 <게임 연결>에 해당하는 경우 제1 디바이스(100)와 제2 디바이스(200)의 네트워크 게임 연결이 진행될 수 있다. 또한 실행 정보가 <스피커 실행>에 해당하는 경우 제1 디바이스(100)가 서라운드 스피커의 좌측 사운드 출력을 담당하고 제2 디바이스(200)가 서라운드 스피커의 우측 사운드 출력을 담당할 수 있다. 또한 실행 정보가 <키보드 연결>에 해당하는 경우 제2 디바이스(200)가 제1 디바이스(100)의 입력 수단으로 동작할 수 있도록 제2 디바이스(200)가 가상 키보드 또는 가상 마우스로 동작할 수 있다.

한편, 앞서 설명한 바와 같이 서비스 정보에 실행 정보가 포함되지 않을 시 제1 디바이스(100) 및 제2 디바이스(200) 간에 서비스를 실행하는 단계인 상기 429단계는 생략될 수도 있다.

도 6은 본 발명의 실시 예에 따른 사용자 디바이스에서 사용자 음성 기반의 서비스 연결을 처리하는 과정을 도시한 흐름도이다.

상기 도 6을 참조하면, 제어부(270)는 음성 명령 버튼(150) 입력이 수신되면(601단계), 마이크(243)를 통해 입력되는 사용자 음성을 녹음할 수 있다(603단계). 이때, 제어부(270)는 음성 명령 버튼(150) 입력을 검출할 시 마이크(243)의 상태를 확인하여, 만약 비활성화 상태일 시 마이크(243)를 활성화 상태로 전환할 수 있다. 아울러, 제어부(270)는 표시부(230)를 통해 사용자의 음성 입력을 가이드 하는 가이드 화면 표시를 제어할 수도 있다.

제어부(270)는 음성 명령 버튼(150)의 입력 해제를 감지할 시 녹음된 사용자 음성에 대한 인식을 수행하고(605단계), 음성 인식에 따른 결과를 분석할 수 있다(607단계). 그리고 제어부(270)는 녹음된 사용자 음성 인식을 통해 사용자 음성이 서비스 연결을 위한 명령어에 해당하는지 판단할 수 있다(609단계). 즉, 제어부(270)는 음성 인식을 통해 디바이스들 간 서비스 연결을 위한 개시 명령어(예컨대, "기기 연결")가 검출되는지 판단할 수 있다.

제어부(270)는 서비스 연결을 위한 개시 명령어가 검출되지 않으면(609단계의 NO), 해당 동작 수행을 제어할 수 있다(611단계). 예를 들어, 제어부(270)는 입력된 사용자의 음성 명령어에 대한 내부 데이터(또는 컨텐츠 등) 검색을 수행하거나, 마켓(또는 인터넷) 검색을 수행할 수 있다.

제어부(270)는 서비스 연결을 위한 개시 명령어가 검출되면(609단계의 YES), 음성 정보를 생성하고(613단계), 생성된 음성 정보를 미리 약속된 서버(300)에게 전송할 수 있다(615단계). 예를 들어, 제어부(270)는 디바이스들 간 서비스 연결에 필요한 사용자 음성의 녹음 데이터, 음성 명령 버튼(150)이 입력된 시간 정보(타임스탬프), 그리고 디바이스 식별자(디바이스 어드레스) 등을 포함하는 음성 정보를 생성하여 서버(300)에게 전송할 수 있다.

제어부(270)는 음성 정보를 전송한 후 상기 음성 정보에 대한 응답을 서버(300)로부터 수신하면(617단계), 서버(300)로부터의 응답이 서비스 정보에 해당하는지 판단할 수 있다(619단계). 제어부(270)는 서버(300)의 응답이 서비스 정보가 아니면(619단계의 NO) 해당 동작 수행을 제어할 수 있다(621단계). 예를 들어, 제어부(270)는 서버(300)로부터 수신된 응답이 서비스 정보가 아니고 에러 정보에 해당하면, 사용자에게 에러 정보 출력을 제어할 수 있다. 그리고 제어부(270)는 에러 정보 출력 후 사용자로부터의 입력에 응답하여 서비스 연결 절차를 재수행 하거나, 서비스 연결 절차를 종료할 수 있다.

제어부(270)는 서버(300)의 응답이 서비스 정보에 해당하면(619단계의 YES) 수신된 서비스 정보를 분석할 수 있다(623단계). 예를 들어, 제어부(270)는 수신된 서비스 정보로부터 서비스 타입, 연결 대상의 디바이스, 연결하는 디바이스와의 실행 서비스 등을 판단할 수 있다.

제어부(270)는 서비스 정보에 따라 모드를 결정하고(625단계), 결정된 모드에 따라 연결 대상의 디바이스와 설정된 통신 방식의 연결을 수행할 수 있다(627단계). 예를 들어, 제어부(270)는 서비스 정보에 따라 마스터 모드 및 슬레이브 모드 중 어느 하나의 동작 모드를 결정하고, 결정된 동작 모드에서 연결 대상 디바이스에게 연결 요청을 전송하거나, 연결 대상 디바이스로부터 연결 요청을 수신하고 그에 따라 연결을 수행할 수 있다.

제어부(270)는 연결 대상 디바이스와 연결될 시, 연결된 대상 디바이스와 서비스 정보에 대응하는 서비스를 수행할 수 있다(629단계). 예를 들어, 제어부(270)는 앞서 살펴본 바와 같이 마스터 모드에서 실행 정보에 대응하게 서비스를 수행하거나, 슬레이브 모드에서 실행 정보에 대응하게 서비스를 수행할 수 있다.

도 7은 본 발명의 실시 예에 따른 서버(300)에서 사용자 디바이스들을 인증하는 과정을 도시한 흐름도이다.

상기 도 7을 참조하면, 서버(300)는 소정의 디바이스로부터 음성 정보가 수신되면(701단계), 수신된 음성 정보를 저장하고(703단계), 상기 음성 정보에 대한 분석을 수행할 수 있다(705단계). 이때, 서버(300)는 수신된 음성 정보를 각 디바이스별로 구분하여 데이터베이스에 저장할 수 있다.

서버(300)는 음성 정보 분석을 통해 상기 음성 정보가 서비스 연결 명령에 해당하는지 판단할 수 있다(707단계). 예를 들어, 서버(300)는 수신된 음성 정보가 디바이스들 간 서비스 연결을 위한 개시 명령어(예컨대, "기기 연결")와 같은 미리 정의된 명령어를 포함하는지 판단할 수 있다.

서버(300)는 수신된 음성 정보가 서비스 연결 명령을 포함하지 않으면(707단계의 NO) 해당 동작 수행을 처리할 수 있다(609단계). 예를 들어, 서버(300)는 수신된 음성 정보를 일반적인 음성 검색어에 해당하는 것으로 판단하고, 검색어에 대응하여 데이터베이스 검색을 수행할 수 있다.

서버(300)는 수신된 음성 정보가 서비스 연결 명령을 포함할 시(707단계의 YES) 음성 정보에 포함된 음성 파형 비교(711단계) 등을 통해 수신된 음성 정보에 대응하여 다른 음성 정보(이하, 인증된 음성 정보)가 존재하는지 판단할 수 있다(713단계). 예를 들어, 서버(300)는 음성 정보가 수신될 시 수신된 음성 정보에 대응되는 음성 정보가 데이터베이스에 존재하는지 비교 검색할 수 있다. 즉, 서버(300)는 음성 정보의 녹음 데이터와 일치되는 음성 파형을 가진 다른 음성 정보를 검색하고, 검색된 음성 정보의 타임스탬프를 확인하여 음성 정보들이 동일한 시간대에 생성되었는지 비교 분석할 수 있다.

서버(300)는 수신된 음성 정보에 대응하는 인증된 음성 정보가 존재하지 않을 시(713단계의 NO) 에러 정보를 생성하고(715단계), 음성 정보를 전송한 해당 디바이스에게 에러 정보를 전송할 수 있다(717단계). 예를 들어, 서버(300)는 서비스 연결 요청에 대해 연결 대상 디바이스가 없으며 이에 따라 서비스 연결 절차를 종료함을 통지하는 에러 정보를 해당 디바이스에게 전송할 수 있다.

서버(300)는 수신된 음성 정보에 대응하는 인증된 음성 정보가 존재할 시(713단계의 YES) 디바이스들이 연결을 시도하고 있는 것으로 판단하고 수신된 음성 정보와 인증된 음성 정보를 이용하여 서비스 타입을 인식할 수 있다(719단계). 예를 들어, 서버(300)는 음성 정보들의 각 타임스탬프를 확인하여 타임스탬프가 기록된 시간의 차이에 따라 디바이스들에 대한 동작 모드(마스터 모드, 슬레이브 모드)를 결정하여 배분하고, 음성 정보의 녹음 데이터로부터 도출된 명령어를 확인하여 디바이스들 간 연결 및 그에 따른 실행 서비스를 판단할 수 있다.

서버(300)는 인식된 서비스 타입에 따라 적어도 2개의 디바이스별 서비스 정보들을 생성할 수 있다(721단계). 그리고 서버(300)는 서비스 정보를 각 디바이스별로 구분하여 전송할 수 있다(723단계). 예를 들어, 서버(300)는 각 디바이스별 서비스 타입, 연결 정보, 그리고 실행 정보를 이용하여 각 디바이스들에게 전송할 서비스 정보를 각각 생성하고, 생성된 서비스 정보를 대응되는 디바이스마다 개별 전송할 수 있다. 일예로, 수신된 음성 정보와 인증된 음성 정보에 의해 2개의 디바이스들(예컨대, 제1 디바이스(100) 및 제2 디바이스(200))로부터 서비스 연결 요청이 된 경우, 서버(300)는 제1 디바이스(100)에게 전송할 제1 서비스 정보와 제2 디바이스(200)에게 전송할 제2 디바이스 정보를 각각 생성할 수 있다. 그리고 서버(300)는 제1 서비스 정보를 제1 디바이스(100)에게 전송하고, 제2 서비스 정보를 제2 디바이스(200)에게 전송할 수 있다.

도 8은 본 발명의 실시 예에 따른 사용자 디바이스들이 서비스를 연결하는 다른 동작 설명을 위해 개략적으로 도시한 도면이다.

상기 도 1에 도시된 바와 같이, 본 발명의 사용자 음성 기반의 서비스 연결을 위한 시스템은, 제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)를 포함하여 구성될 수 있다. 즉, 앞서 도 1의 시스템 구성과는 다르게, 도 8에서는 서버(300)의 구성없이 구현되는 경우의 예시를 나타낸다. 그리고 도 8에서는 두 개의 사용자 디바이스들(100, 200)을 이용하여 서비스 연결 동작을 설명하지만, 본 발명이 이에 한정되는 것은 아니며 두 개 이상의 사용자 디바이스들에 대한 서비스 연결도 가능함은 물론이다. 제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)는 앞서 도 1 내지 도 7을 참조한 설명에서와 같은 기능 및 동작을 수행할 수 있다. 다만, 도 8과 같은 시스템 환경에서, 제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)는 서버(300)와 연동하는 기능 및 동작이 생략되고, 서버(300) 없이 사용자 음성 인증을 위한 기능 및 동작을 추가 수행할 수 있다.

상기 도 8을 참조하면, 상기 도 8에서는 제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)가 무선 랜을 이용하여 연결하는 동작을 설명한다. 그리고 제1 사용자 디바이스(100)가 마스터 모드(또는 AP)로 동작하고, 제2 사용자 디바이스(200)가 슬레이브 모드(또는 Non-AP)로 동작하는 경우를 가정한다. 즉, 제1 사용자 디바이스(100)의 음성 명령 버튼(150)이 제2 사용자 디바이스(200)의 음성 명령 버튼(150)보다 먼저 입력되어 그에 따른 타임스탬프의 시간차가 발생되는 것을 가정할 수 있다.

제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)는 앞서 설명한 바와 같이 음성 기반의 서비스 연결을 수행하기 위해 사용자로부터 음성 입력을 수신 대기하는 하드웨어 또는 소프트 인터페이스 타입의 음성 명령 버튼(150)을 구비할 수 있다. 제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)는 음성 명령 버튼(150)이 입력될 시 타임스탬프를 기록하고, 음성 명령 버튼(150)이 눌려진 상태에서 입력되는 사용자 음성을 녹음할 수 있다. 그리고 제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)는 음성 명령 버튼(150)에 의한 입력이 해제될 시 녹음된 음성(녹음 데이터)에 대한 음성 인식을 수행할 수 있다.

제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)는 음성 인식 결과 사용자 디바이스들 간의 연결을 위한 명령어가 검출될 시 녹음 데이터를 포함하는 음성 정보를 사운드에 실어 스피커(241)를 통해 출력할 수 있다. 예를 들어, 제1 사용자 디바이스(100)에서 생성된 제1 음성 정보가 실린 사운드는 스피커(241)를 통해 인접된 제2 사용자 디바이스(200)에게 전달되고, 제2 사용자 디바이스(200)는 제1 사용자 디바이스(100)에서 출력된 사운드를 마이크(243)를 통해 입력받을 수 있다. 반대로, 제2 사용자 디바이스(200)에서 생성된 제2 음성 정보가 실린 사운드는 스피커(241)를 통해 인접된 제1 사용자 디바이스(100)에게 전달되고, 제1 사용자 디바이스(100)는 제2 사용자 디바이스(200)에서 출력된 사운드를 마이크(243)를 통해 입력받을 수 있다. 본 발명에서 상기 사운드는 예컨대, 가청 주파수 또는 가청 주파수 이상의 음파를 포함하는 것으로, 이하에서는 "사운드"라 칭하기로 한다. 이때, 제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)는 녹음 데이터를 코드화 하고, 코드화된 녹음 데이터를 사용자의 가청 주파수 또는 가청 주파수 이상의 사운드(음파)로 변환하여 스피커(241)를 통해 출력할 수 있다. 이때, 상기 음성 정보는 사용자 음성의 녹음 데이터를 비롯하여, 타임스탬프, 그리고 디바이스 어드레스 등이 포함될 수 있다.

제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)는 스피커(241)를 통해 사운드를 출력한 후, 자신의 마이크(243)를 통해 다른 사용자 디바이스로부터 출력된 사운드를 입력받을 수 있다. 그러면, 제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)는 마이크(243)를 통해 입력된 음성 정보와 전송된 음성 정보를 이용하여 상호 간에 연결하여 서비스를 실행할 수 있다. 이때, 제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)는 입력된 음성 정보를 인증하여, 서비스 연결을 위한 음성 정보에 해당하는지 판단할 수 있다. 예를 들어, 제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)는 입력된 음성 정보에 타임스탬프가 포함되어 있는지, 또는 입력된 음성 정보의 녹음 데이터와 전송된 음성 정보의 녹음 데이터가 일치되는지 등의 비교 분석을 통해 입력된 음성 정보에 대한 인증을 처리할 수 있다.

제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)는 입력된 음성 정보가 서비스 연결을 위한 인증된 음성 정보에 해당할 시, 음성 정보를 분석하여 동작 모드 결정, 연결 대상의 디바이스 확인, 실행 서비스 확인 등을 수행할 수 있다. 예를 들어, 제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)는 음성 정보들의 각 타임스탬프를 비교하여 그들의 기록 시간차에 따라 마스터 모드 또는 슬레이브 모드를 결정하고, 디바이스 어드레스를 통해 연결 대상의 디바이스를 확인하며, 음성 인식에 따른 명령어를 기반으로 실행 서비스를 확인할 수 있다.

제1 사용자 디바이스(100) 및 제2 사용자 디바이스(200)는 분석된 음성 정보에 따라 결정된 동작 모드에서 연결 대상 사용자 디바이스와 설정된 통신 방식의 연결을 수행하며, 상호 간에 연결될 시 결정된 동작 모드에서 명령어에 대응하는 서비스를 수행할 수 있다. 예를 들어, 제1 사용자 디바이스(100)와 제2 사용자 디바이스(200)는 무선 랜 링크(link)를 형성하고, 서로 간에 연결이 완료될 시 마스터로 결정된 사용자 디바이스가 현재 표시되고 있는 이미지 파일을 상대 사용자 디바이스에게 전송할 수 있다. 또는 마스터로 결정된 사용자 디바이스는 좌 스피커로 동작하고 슬레이브로 결정된 사용자 디바이스는 우 스피커로 동작하여, 마스터 디바이스에서 재생되는 미디어 파일의 오디오를 각각 출력할 수도 있다. 또는 마스터로 결정된 사용자 디바이스는 입력 수단으로 동작하고 슬레이브로 결정된 사용자 디바이스는 표시 수단으로 동작하여, 마스터의 사용자 디바이스에 의해 입력되는 정보를 슬레이브의 사용자 디바이스를 통해 표시할 수 있다. 또는 마스터로 결정된 사용자 디바이스에서 표시되는 데이터를 슬레이브로 결정된 사용자 디바이스로 전송하여 마스터의 사용자 디바이스에서 표시되는 데이터를 슬레이브의 사용자 디바이스와 함께 공유하여 표시할 수도 있다.

도 9는 본 발명의 실시 예에 따른 사용자 디바이스들 간의 서비스 연결 과정을 도시한 신호 흐름도이다. 특히, 상기 도 9에서는 앞서 살펴본 바와 같은 서버(300) 없이 사용자 디바이스들 간의 직접 연결을 지원하는 동작 예시를 나타낸 것이다.

상기 도 9를 참조하면, 제1 디바이스(100) 및 제2 디바이스(200)는 음성 명령 버튼(150) 입력이 수신되면(901단계, 903단계), 마이크(243)를 통해 입력되는 사용자 음성을 각각 녹음할 수 있다(905단계, 907단계). 예를 들어, 사용자는 제1 디바이스(100)와 제2 디바이스(200)에 구비된 음성 명령 버튼(150)을 누른 상태에서 디바이스들 간 연결을 위한 개시 명령어(예컨대, "기기 연결") 또는 디바이스 연결 및 실행하고자 하는 서비스 명령어(예컨대, "기기 연결 파일 전송", "기기 연결 주소록 공유" 등)를 입력(말)하고, 음성 명령 버튼(150)의 입력을 해제할 수 있다.

제1 디바이스(100) 및 제2 디바이스(200)는 음성 명령 버튼(150)의 입력이 해제될 시 녹음된 음성에 대한 음성 인식을 수행할 수 있다(909단계, 911단계). 제1 디바이스(100) 및 제2 디바이스(200)는 녹음된 음성 분석을 통해 디바이스들 간 서비스 연결을 위한 개시 명령어(예컨대, "기기 연결")가 검출되는지 판별할 수 있다.

제1 디바이스(100) 및 제2 디바이스(200)는 서비스 연결을 위한 개시 명령어가 검출될 시 음성 정보를 생성하여 제1 디바이스(100) 및 제2 디바이스(200)에 구비된 스피커(241)를 통해 각각 출력할 수 있다(913단계, 915단계). 예를 들어, 제1 디바이스(100) 및 제2 디바이스(200)는 생성된 음성 정보를 사운드에 실어 각 스피커를 통해 인접된 상대 디바이스에게 출력할 수 있다. 예를 들어, 제1 디바이스(100)에서 생성된 제1 음성 정보가 실린 사운드는 스피커(241)를 통해 인접된 제2 사용자 디바이스(200)에게 전달되고, 제2 사용자 디바이스(200)는 제1 사용자 디바이스(100)에서 출력된 사운드를 마이크(243)를 통해 입력받을 수 있다. 반면, 제2 사용자 디바이스(200)에서 생성된 제2 음성 정보가 실린 사운드는 스피커(241)를 통해 인접된 제1 사용자 디바이스(100)에게 전달되고, 제1 사용자 디바이스(100)는 제2 사용자 디바이스(200)에서 출력된 사운드를 마이크(243)를 통해 입력받을 수 있다.

제1 디바이스(100) 및 제2 디바이스(200)는 스피커(241)를 통해 사운드를 출력한 후, 자신의 마이크(243)를 통해 인접된 상대 디바이스로부터 출력된 음성 정보가 수신될 시, 마이크(243)를 통해 입력된 음성 정보와 스피커(241)를 통해 전송된 음성 정보를 비교하여 인증할 수 있다(917단계, 919단계). 즉, 제1 디바이스(100) 및 제2 디바이스(200)는 각자의 마이크(243)를 통해 입력된 음성 정보를 인증하여, 서비스 연결을 위한 음성 정보에 해당하는지 판단할 수 있다. 일예로, 제1 디바이스(100) 및 제2 디바이스(200)는 입력된 음성 정보가 타임스탬프를 포함하는지, 또는 입력된 음성 정보의 녹음 데이터와 전송된 음성 정보의 녹음 데이터가 일치하는지 등의 비교 분석을 통해 인증을 수행할 수 있다.

제1 디바이스(100) 및 제2 디바이스(200)는 입력된 음성 정보가 서비스 연결을 위한 음성 정보가 정상 인증될 시, 서비스 타입을 판단할 수 있다(921단계, 923단계). 예를 들어, 제1 디바이스(100) 및 제2 디바이스(200)는 입력된 음성 정보와 전송된 음성 정보를 참조하여 동작 모드 확인, 연결 대상의 디바이스 확인, 그리고 연결 시 실행 서비스의 종류 확인 등을 수행할 수 있다. 그리고 제1 디바이스(100) 및 제2 디바이스(200)는 서비스 타입 판단에 따라 자신들이 동작할 동작 모드를 결정하고(925단계, 927단계), 결정된 각 동작 모드에서 연결 대상의 디바이스와 미리 설정된 연결 방식에 따라 연결을 시도할 수 있다.

제1 디바이스(100) 및 제2 디바이스(200)는 서로 연결될 시(929단계) 각 동작 모드에서 음성 정보에 대응하는 서비스를 수행할 수 있다(931단계). 예를 들어, 제1 디바이스(100) 및 제2 디바이스(200)는 서로 간에 연결이 완료되면, 마스터 모드의 디바이스가 연결된 슬레이브 모드의 디바이스와 음성 정보에 대응하는 서비스를 실행할 수 있다. 일예로, 제1 디바이스(100)가 마스터 모드로 동작하고 제2 디바이스(200)가 슬레이브 모드로 동작하는 것을 가정할 시, 제1 디바이스(100)에서 현재 선택된(또는 표시된) 파일을 제2 디바이스(200)에게 전송하거나, 제1 디바이스(100)의 주소록 정보를 제2 디바이스(200)에게 전송하거나, 제1 디바이스(100)가 서라운드 스피커의 좌측 사운드 출력을 담당하고 제2 디바이스(200)가 서라운드 스피커의 우측 사운드 출력을 담당하거나, 제2 디바이스(200)가 제1 디바이스(100)의 입력 수단으로 동작할 수 있도록 제2 디바이스(200)가 가상 키보드 또는 가상 마우스로 동작할 수 있다.

한편, 앞서 설명한 바와 같이 음성 정보에 실행할 서비스 명령어가 포함되지 않고, 디바이스들 간 연결을 위한 개시 명령어만 포함된 경우에는 제1 디바이스(100) 및 제2 디바이스(200) 간에 서비스를 실행하는 단계인 상기 931단계는 생략될 수도 있다.

도 10은 본 발명의 실시 예에 따른 사용자 디바이스에서 사용자 음성 기반의 서비스 연결을 처리하는 과정을 도시한 흐름도이다.

상기 도 10을 참조하면, 제어부(270)는 음성 명령 버튼(150) 입력이 수신되면(1001단계), 마이크(243)를 통해 입력되는 사용자 음성을 녹음할 수 있다(1003단계). 이때, 제어부(270)는 음성 명령 버튼(150) 입력을 검출할 시 마이크(243)의 상태를 확인하여, 만약 비활성화 상태일 시 마이크(243)를 턴-온(turn-on) 제어할 수 있다. 아울러, 제어부(270)는 표시부(230)를 통해 사용자의 음성 입력을 가이드 하는 가이드 화면 표시를 제어할 수도 있다.

제어부(270)는 음성 명령 버튼(150)의 입력 해제를 감지할 시 녹음된 사용자 음성에 대한 인식을 수행하고(1005단계), 음성 인식에 따른 결과를 분석할 수 있다(1007단계). 그리고 제어부(270)는 녹음된 사용자 음성 인식을 통해 사용자 음성이 서비스 연결을 위한 명령어에 해당하는지 판단할 수 있다(1009단계). 즉, 제어부(270)는 음성 인식을 통해 디바이스들 간 서비스 연결을 위한 개시 명령어(예컨대, "기기 연결")가 검출되는지 판단할 수 있다.

제어부(270)는 서비스 연결을 위한 개시 명령어가 검출되지 않으면(1009단계의 NO), 해당 동작 수행을 제어할 수 있다(1011단계). 예를 들어, 제어부(270)는 입력된 사용자의 음성 명령어에 대한 내부 데이터(또는 컨텐츠 등) 검색을 수행하거나, 마켓(또는 인터넷) 검색을 수행할 수 있다.

제어부(270)는 서비스 연결을 위한 개시 명령어가 검출되면(1009단계의 YES), 음성 정보를 생성하고(1013단계), 생성된 음성 정보를 사운드에 실어 스피커(241)를 통해 출력할 수 있다(1015단계). 예를 들어, 제어부(270)는 디바이스들 간 서비스 연결에 필요한 사용자 음성의 녹음 데이터, 음성 명령 버튼(150)이 입력된 시간 정보(타임스탬프), 그리고 디바이스 식별을 위한 디바이스 어드레스 등을 포함하는 음성 정보를 특정 주파수 대역의 음파(사운드)로 변환하여 스피커(241)를 통해 외부 출력할 수 있다.

제어부(270)는 음성 정보를 전송한 후 마이크(243)를 통해 다른 음성 정보를 수신할 수 있다(1017단계). 즉, 제어부(270)는 음성 정보를 전송한 후 마이크(243)를 통해 다른 디바이스로부터 출력되는 음성 정보를 포함하는 사운드를 수신할 수 있다. 그러면, 제어부(270)는 수신된 사운드를 파싱하여 음성 정보를 도출할 수 있다. 만약, 사운드에 음성 명령어가 포함되지 않을 시 제어부(270)는 수신된 사운드를 무시할 수 있다. 즉, 음성 명령어가 포함되지 않은 사운드의 경우 잡음(noise)으로 판단하고, 그에 대한 입력을 무시할 수 있다.

제어부(270)는 마이크(243)를 통해 입력된 음성 정보와 스피커(241)를 통해 출력한 음성 정보를 비교하여(1019단계), 입력된 음성 정보가 인증된 음성 정보에 해당하는지 판단할 수 있다(1021단계). 예를 들어, 제어부(270)는 입력된 음성 정보가 타임스탬프를 포함하는지, 또는 입력된 음성 정보의 녹음 데이터와 출력된 음성 정보의 녹음 데이터가 일치되는지 등의 비교 분석을 통해 입력된 음성 정보에 대한 인증을 처리할 수 있다.

제어부(270)는 입력된 음성 정보가 서비스 연결을 위한 인증된 음성 정보가 아니면(1021단계의 NO), 에러 정보를 출력할 수 있다(1023단계). 예를 들어, 제어부(270)는 입력된 음성 정보가 서비스 연결을 위한 음성 정보가 아니면, 사용자에게 서비스를 연결할 수 없음을 알리는 등의 에러 정보를 출력할 수 있다.

제어부(270)는 입력된 음성 정보가 서비스 연결을 위한 인증된 음성 정보이면(1021단계의 YES), 입력된 음성 정보와 출력된 음성 정보를 참조하여 서비스 타입을 인식할 수 있다(1025단계). 예를 들어, 제어부(270)는 음성 정보들로부터 타임스탬프들 간의 시간차에 따른 동작 모드, 연결 대상의 디바이스, 그리고 연결하는 디바이스와 실행할 서비스 등을 판단할 수 있다.

제어부(270)는 음성 정보들에 따라 동작 모드를 결정하고(1027단계), 결정된 동작 모드에 따라 연결 대상의 디바이스와 설정된 통신 방식의 연결을 수행할 수 있다(1029단계). 예를 들어, 제어부(270)는 음성 정보들에 따라 마스터 모드 및 슬레이브 모드 중 어느 하나의 동작 모드를 결정하고, 결정된 동작 모드에서 연결 대상 디바이스에게 연결 요청을 전송하거나, 연결 대상 디바이스로부터 연결 요청을 수신하고 그에 따라 연결을 수행할 수 있다.

제어부(270)는 연결 대상 디바이스와 연결될 시, 결정된 동작 모드에서 연결된 디바이스와 서비스를 수행할 수 있다(1031단계). 예를 들어, 제어부(270)는 앞서 살펴본 바와 같이 마스터 모드에서 서비스를 수행하거나, 슬레이브 모드에서 서비스를 수행할 수 있다.

도 11은 본 발명의 실시 예에 따른 사용자 디바이스에서 사용자 음성 기반의 서비스 연결을 처리하는 과정을 도시한 흐름도이다.

상기 도 11에서는 앞서 살펴본 바와 같은 서버(300) 없이 사용자 디바이스들 간의 직접 연결을 지원하는 다른 동작 예시를 나타낸 것이다. 이때, 서비스 연결을 수행하고자 하는 사용자 디바이스들이 제1 디바이스 및 제2 디바이스이고, 제1 디바이스가 설정된 통신 방식(예컨대, WiFi Direct, Bluetooth)에 따라 제2 디바이스에게 기기 연결을 요청하는 디바이스이며, 제2 디바이스가 제1 디바이스로부터 기기 연결 요청을 수신하는 디바이스인 경우를 가정할 때, 상기 도 11에서는 제1 디바이스에서의 사용자 음성 기반의 서비스 연결을 처리하는 동작을 나타낸다.

상기 도 11을 참조하면, 제어부(270)는 음성 명령 버튼(150) 입력이 수신되면(1101단계), 마이크(243)를 통해 입력되는 사용자 음성을 녹음할 수 있다(1103단계). 이때, 제어부(270)는 음성 명령 버튼(150) 입력을 검출할 시 시간 정보(타임스탬프)를 기록할 수 있다. 또한 제어부(270)는 음성 명령 버튼(150) 입력을 검출할 시 마이크(243)의 상태를 확인하여, 만약 비활성화 상태일 시 마이크(243)를 턴-온 제어할 수 있다. 아울러, 제어부(270)는 표시부(230)를 통해 사용자의 음성 입력을 가이드 하는 가이드 화면 표시를 제어할 수도 있다.

제어부(270)는 음성 명령 버튼(150)의 입력 해제를 감지할 시 녹음된 사용자 음성에 대한 인식을 수행하고(1105단계), 음성 인식에 따른 결과를 분석할 수 있다(1107단계). 그리고 제어부(270)는 녹음된 사용자 음성 인식을 통해 사용자 음성이 서비스 연결을 위한 명령어에 해당하는지 판단할 수 있다(1109단계). 즉, 제어부(270)는 음성 인식을 통해 디바이스들 간 서비스 연결을 위한 개시 명령어(예컨대, "기기 연결")가 검출되는지 판단할 수 있다.

제어부(270)는 서비스 연결을 위한 개시 명령어가 검출되지 않으면(1109단계의 NO), 해당 동작 수행을 제어할 수 있다(1111단계). 예를 들어, 제어부(270)는 입력된 사용자의 음성 명령어에 대한 내부 데이터(또는 컨텐츠 등) 검색을 수행하거나, 마켓(또는 인터넷) 검색을 수행할 수 있다.

제어부(270)는 서비스 연결을 위한 개시 명령어가 검출되면(1109단계의 YES), 인증키를 생성할 수 있다(1113단계). 예를 들어, 제어부(270)는 서비스 연결을 위한 개시 명령어에 따라 디바이스 연결을 결정하면, 상기 마이크(243)를 통해 입력되어 녹음된 사용자 음성의 녹음 데이터로부터 음성 파형을 추출하고, 음성 명령 버튼(150)이 입력된 시간 정보(타임스탬프)를 확인할 수 있다. 그리고 제어부(270)는 음성 파형과 시간 정보를 이용하여 인증키 값을 생성할 수 있다.

본 발명에서 상기 인증키 값은 녹음된 음성 파형 정보의 특징과 시간 정보(타임스탬프)를 활용하여 고유한 문자열로 생성될 수 있다. 일예로, 생성되는 인증키 값은 "2412582952572257239529"와 같은 난수 형태로 생성될 수 있으며, 이는 사용자 음성 파형과 그에 따른 난수가 매핑된 난수표 등으로부터 도출되어 구성될 수 있다. 그리고 상기 인증키 값은 음성 파형을 지시하는 부분과 시간 정보를 지시하는 부분으로 구분될 수 있다. 일예로, "2412582952572257239529"와 같은 문자열을 가진 인증키 값은 "24125829525722"와 같은 음성 파형 부분의 문자열과 "57239529"와 같이 시간 정보 부분의 문자열로 구분될 수 있다. 이때, 인증키 값, 음성 파형 부분 및 시간 정보 부분의 길이(length)는 미리 정의될 수 있다. 그리고 서비스를 연결하고자 하는 제1 디바이스 및 제2 디바이스에서 생성되는 인증키에서, 음성 파형 부분의 문자열은 서로 동일한 값으로 생성될 수 있으며, 시간 정보 부분의 문자열은 제1 디바이스 및 제2 디바이스의 타임스탬프에 따라 다르게 생성될 수 있다. 즉, 타임스탬프의 기록 시간에 따른 시간차에 따라 그 값이 달리 생성되어 인증키에 포함될 수 있다.

제어부(270)는 인증키가 생성될 시 상기 인증키를 디바이스들 간 연결 시 디바이스 식별을 위해 사용되는 기기 정보(예컨대, 디바이스 식별자)로 생성하여 적용할 수 있다. 이때, 제어부(270)는 1113단계에서 인증키를 생성할 시 서비스 연결을 위해 설정된 통신 방식 확인 및 확인된 통신 방식을 지원하기 위한 통신 모드(기능) 활성화 제어할 수 있다. 예를 들어, 제어부(270)는 무선 랜 모듈(213) 또는 근거리 통신 모듈(215)(예컨대, 블루투스 모듈)을 턴-온하여 해당 통신 모드(기능)을 활성화 제어할 수 있다. 그리고 제어부(270)는 활성화된 통신 모드(기능)에서 사용할 디바이스 식별자를 상기 인증키 기반의 기기 정보로 변경 설정할 수 있다.

제어부(270)는 인증키 기반의 기기 정보 설정 후 상기 통신 방식에 따른 주변 디바이스 검색을 제어할 수 있다(1117단계). 예를 들어, 제어부(270)는 무선 랜 모듈(213)을 이용한 WiFi Direct 연결을 위한 주변 디바이스 검색 또는 근거리 통신 모듈(215)(예컨대, 블루투스 모듈)을 이용한 근거리 통신(예컨대, 블루투스 통신) 연결을 위한 주변 디바이스 검색 등을 수행할 수 있다.

제어부(270)는 앞서와 같은 주변 디바이스 검색에 따라 검색된 디바이스 중에서 서비스 연결을 위한 연결 대상 디바이스를 결정할 수 있다(1119단계). 특히, 제어부(270)는 검색된 연결 가능한 디바이스들 중 상기에서 생성된 인증키에 대응되는 기기 정보를 가지는 디바이스를 검출하고 검출된 디바이스를 연결 대상 디바이스로 결정할 수 있다. 이때, 제어부(270)는 인증키 중 사용자 음성 파형 부분의 문자열과 일치되는 문자열의 기기 정보를 검색할 수 있다. 즉, 인증키 중 시간 정보 부분의 문자열은 각 디바이스에서 음성 명령 버튼(150)을 입력하는 시간에 따라 그 타임스탬프에 차이가 발생할 수 있으며, 따라서 시간 정보 부분은 일치되지 않을 수도 있으며, 이에 시간 파형 부분의 일치 여부를 판단할 수 있다.

제어부(270)는 연결 대상 디바이스를 결정할 시 상기 연결 대상 디바이스에게 기기 연결 요청을 전송할 수 있다(1121단계). 이때, 제어부(270)는 앞서 결정된 통신 방식에 따라 WiFi Direct 연결 또는 블루투스 연결 등과 같은 요청을 전송할 수 있다.

제어부(270)는 상기 연결 요청을 전송한 후 상기 연결 대상 디바이스로부터 상기 연결 요청에 대한 연결 승인이 수신될 시(1123단계), 상기 연결 대상의 디바이스와 상기 통신 방식의 기기 연결을 수행할 수 있다(1125단계).

제어부(270)는 연결 대상 디바이스와 연결될 시, 서비스를 수행할 수 있다(1127단계). 예를 들어, 제어부(270)는 연결 대상 디바이스와 연결된 후 사용자 요청에 따른 데이터를 연결 대상 디바이스로 전송하거나, 연결 대상 디바이스로부터 전송되는 데이터를 수신할 수 있다.

또는 앞서 살펴본 바와 같이 음성 인식을 통해 서비스 명령어가 검출될 시 서비스 명령어에 따른 서비스를 자동 수행할 수도 있다. 제어부(270)는 서비스 자동 수행 시 마스터 모드 또는 슬레이브 모드를 결정하고, 결정되는 마스터 모드 또는 슬레이브 모드에서 서비스를 수행할 수 있다. 이때, 제어부(270)의 마스터 모드 또는 슬레이브 모드 결정은 상기 인증키와 연결 대상 디바이스의 기기 정보에서 시간 정보 부분의 문자열을 비교하여 시간차를 확인하고, 확인된 시간차에 따라 마스터 모드 또는 슬레이브 모드를 결정할 수 있다.

도 12는 본 발명의 실시 예에 따른 사용자 디바이스에서 사용자 음성 기반의 서비스 연결을 처리하는 과정을 도시한 흐름도이다.

상기 도 12에서는 앞서 살펴본 바와 같은 서버(300) 없이 사용자 디바이스들 간의 직접 연결을 지원하는 다른 동작 예시를 나타낸 것이다. 이때, 서비스 연결을 수행하고자 하는 사용자 디바이스들이 제1 디바이스 및 제2 디바이스이고, 제1 디바이스가 설정된 통신 방식(예컨대, WiFi Direct, Bluetooth)에 따라 제2 디바이스에게 기기 연결을 요청하는 디바이스이고, 제2 디바이스가 제1 디바이스로부터 기기 연결 요청을 수신하는 디바이스인 것을 가정할 때, 상기 도 12에서는 제2 디바이스에서의 사용자 음성 기반의 서비스 연결을 처리하는 동작을 나타낸다.

상기 도 12를 참조하면, 제어부(270)는 음성 명령 버튼(150) 입력이 수신되면(1201단계), 마이크(243)를 통해 입력되는 사용자 음성을 녹음할 수 있다(1203단계). 이때, 제어부(270)는 음성 명령 버튼(150) 입력을 검출할 시 시간 정보(타임스탬프)를 기록할 수 있다. 또한 제어부(270)는 음성 명령 버튼(150) 입력을 검출할 시 앞서 살펴본 바와 같이 마이크(243)의 턴-온 제어 및 음성 입력 가이드를 위한 화면 표시 등을 제어할 수도 있다.

제어부(270)는 음성 명령 버튼(150)의 입력 해제를 감지할 시 녹음된 사용자 음성에 대한 인식을 수행하고(1205단계), 음성 인식에 따른 결과를 분석할 수 있다(1207단계). 그리고 제어부(270)는 녹음된 사용자 음성 인식을 통해 사용자 음성이 서비스 연결을 위한 명령어에 해당하는지 판단할 수 있다(1208단계). 즉, 제어부(270)는 음성 인식을 통해 디바이스들 간 서비스 연결을 위한 개시 명령어(예컨대, "기기 연결")가 검출되는지 판단할 수 있다.

제어부(270)는 서비스 연결을 위한 개시 명령어가 검출되지 않으면(1208단계의 NO), 해당 동작 수행을 제어할 수 있다(1209단계). 예를 들어, 제어부(270)는 입력된 사용자의 음성 명령어에 대한 내부 데이터(또는 컨텐츠 등) 검색을 수행하거나, 마켓(또는 인터넷) 검색을 수행할 수 있다.

제어부(270)는 서비스 연결을 위한 개시 명령어가 검출되면(1208단계의 YES), 인증키를 생성할 수 있다(1211단계). 예를 들어, 제어부(270)는 서비스 연결을 위한 개시 명령어에 따라 디바이스 연결을 결정하면, 상기 마이크(243)를 통해 입력되어 녹음된 사용자 음성의 녹음 데이터로부터 음성 파형을 추출하고, 음성 명령 버튼(150)이 입력된 시간 정보(타임스탬프)를 확인할 수 있다. 그리고 제어부(270)는 음성 파형과 시간 정보를 이용하여 인증키 값을 생성할 수 있다. 본 발명에서 상기 인증키 값은 앞서 살펴본 바와 같이 녹음된 음성 파형 정보의 특징과 시간 정보(타임스탬프)를 활용하여 고유한 문자열로 생성될 수 있다.

제어부(270)는 인증키가 생성될 시 상기 인증키를 디바이스들 간 연결 시 디바이스 식별을 위해 사용되는 기기 정보(예컨대, 디바이스 식별자)로 생성하여 적용할 수 있다. 이때, 제어부(270)는 1211단계에서 인증키를 생성할 시 서비스 연결을 위해 설정된 통신 방식 확인 및 확인된 통신 방식을 지원하기 위한 통신 모드(기능) 활성화를 제어할 수 있다. 그리고 제어부(270)는 활성화된 통신 모드(기능)에서 사용할 디바이스 식별자를 상기 인증키 기반의 기기 정보로 변경 설정할 수 있다.

제어부(270)는 인증키 기반의 기기 정보가 설정된 상태에서 외부의 다른 디바이스로부터 서비스 연결을 위한 연결 요청을 수신할 수 있다(1215단계). 이때, 제어부(270)는 상기 인증키 기반의 기기 정보 설정 후 앞서 도 11에서 살펴본 바와 같은 1117단계 내지 1121단계를 수행할 수도 있다. 다만, 상기 도 12에서는 외부의 다른 디바이스에게 연결 요청을 전송하기 전에 외부의 다른 디바이스로부터 연결 요청이 수신된 경우를 나타내며, 이러한 경우 제어부(270)는 연결 요청 절차를 생략할 수 있다.

제어부(270)는 외부의 다른 디바이스로부터 연결 요청이 수신될 시 상기 생성한 인증키와 연결을 요청한 다른 디바이스의 기기 정보를 비교하고(1217단계), 인증키와 기기 정보가 일치하는지 판단할 수 있다(1219단계). 특히, 제어부(270)는 상기 인증키와 기기 정보에서 사용자 음성 파형 부분의 문자열을 비교하여 그들의 일치 여부를 판별할 수 있다. 즉, 인증키 중 시간 정보 부분의 문자열은 각 디바이스에서 음성 명령 버튼(150)을 입력하는 시간에 따라 그 타임스탬프에 차이가 발생할 수 있으며, 따라서 시간 정보 부분은 일치되지 않을 수도 있으며, 이에 시간 파형 부분의 일치 여부를 판단할 수 있다.

제어부(270)는 인증키와 기기 정보가 일치하지 않으면(1219단계의 NO) 해당 동작 수행을 제어할 수 있다(1221단계). 예를 들어, 제어부(270)는 다른 디바이스로부터의 연결 요청을 무시하고, 인증된 디바이스의 연결 요청을 설정 시간동안 대기할 수 있다. 또는 제어부(270)는 앞서 도 111에서 살펴본 바와 같은 1117단계 내지 1127단계를 수행하여 서비스 연결을 요청하는 주체로서 동작할 수도 있다.

제어부(270)는 인증키와 기기 정보가 일치하면(1219단계의 YES) 연결 요청을 전송한 상기 다른 디바이스에게 연결 승인을 전송할 수 있다(1223단계). 예를 들어, 제어부(270)는 연결 요청을 전송한 상기 다른 디바이스를 연결 대상 디바이스로 결정할 수 있다. 그리고 제어부(270)는 연결 대상 디바이스의 연결 요청에 대한 응답으로 연결 승인을 연결 대상 디바이스에게 전송할 수 있다.

제어부(270)는 상기 연결 승인을 전송한 후 상기 연결 대상 디바이스와 상기 통신 방식의 기기 연결을 수행할 수 있다(1225단계).

제어부(270)는 연결 대상 디바이스와 연결될 시 서비스를 수행할 수 있다(1227단계). 예를 들어, 제어부(270)는 연결 대상 디바이스와 연결된 후 사용자 요청에 따른 데이터를 연결 대상 디바이스로 전송하거나, 연결 대상 디바이스로부터 전송되는 데이터를 수신할 수 있다. 또는 앞서 살펴본 바와 같이 음성 인식을 통해 서비스 명령어가 검출될 시 서비스 명령어에 따른 서비스를 자동 수행할 수도 있다. 이때, 제어부(270)는 앞서 살펴본 바와 같이 인증키와 연결 대상 디바이스의 기기 정보를 참조하여 마스터 모드 또는 슬레이브 모드를 결정하고, 결정된 동작 모드에서 서비스 자동 수행을 처리할 수 있다.

한편, 이상에서 살펴본 바와 같이, 본 발명의 실시 예에 따르면 "기기 연결"과 같은 서비스 연결을 개시하는 개시 명령어를 제공한다. 이는 음성 인식 모드에서 입력된 음성이 기기 연결을 위한 것인지 또는 디바이스 내부 데이터/컨텐츠 등의 검색을 위한 일반적인 음성 입력인지 구분하기 위한 것이다. 아울러, 본 발명의 실시 예에서는 서비스 연결을 개시하는 개시 명령어에 실행할 서비스에 대한 서비스 명령어를 조합하여 제공할 수 있다. 즉, "기기 연결 파일 전송" 등과 같이 기기 연결을 위한 개시 명령어("기기 연결")와 연결된 디바이스들 간 서비스 실행을 위한 서비스 명령어("파일 전송")를 함께 조합하여 입력(말)할 수 있다. 서비스 명령어는 개시 명령어 뒤에 입력되거나, 또는 앞에 먼저 입력(예컨대, "파일 전송 기기 연결")될 수도 있다.

한편, 상술한 바와 같은 본 발명의 실시 예들은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터로 판독 가능한 기록 매체에 기록될 수 있다. 상기 컴퓨터로 판독 가능한 기록 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 기록 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다.

상기 컴퓨터로 판독 가능한 기록 매체에는 하드디스크, 플로피디스크 및 자기 테이프와 같은 마그네틱 매체(Magnetic Media)와, CD-ROM(Compact Disc Read Only Memory), DVD(Digital Versatile Disc)와 같은 광기록 매체(Optical Media)와, 플롭티컬 디스크(Floptical Disk)와 같은 자기-광 매체(Magneto-Optical Media)와, 그리고 ROM(Read Only Memory), RAM(Random Access Memory), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 또한 프로그램 명령에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상술한 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지다.

그리고 본 명세서와 도면에 개시된 본 발명의 실시 예들은 본 발명의 기술 내용을 쉽게 설명하고 본 발명의 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 발명의 범위를 한정하고자 하는 것은 아니다. 따라서 본 발명의 범위는 여기에 개시된 실시 예들 이외에도 본 발명의 기술적 사상을 바탕으로 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.

100: 제1 사용자 디바이스 200: 제2 사용자 디바이스
150: 음성 명령 버튼 300: 서버
210: 무선 통신부 220: 사용자 입력부
230: 표시부 240: 오디오 처리부
250: 저장부 260: 인터페이스부
270: 제어부 280: 전원 공급부
310: 커널 330: 음성 인식 프레임워크
350: 쉐어링 서비스 어플리케이션

Claims

디바이스들 간 서비스 연결 방법에 있어서,
음성 명령 버튼이 입력된 상태에서 입력되는 사용자 음성을 녹음하는 과정;
음성 명령 버튼의 입력이 해제될 시 녹음된 데이터 기반의 제1 정보를 출력하는 과정;
상기 제1 정보에 대응하는 제2 정보를 입력받는 과정;
제1 정보 및 제2 정보를 참조하여 서비스 타입을 인지하는 과정;
서비스 타입에 따른 동작 모드에서 연결 대상 디바이스와 연결하는 과정; 및
연결된 디바이스와 서비스를 수행하는 과정을 포함하는 것을 특징으로 하는 디바이스들 간 서비스 연결 방법.
제1항에 있어서, 상기 녹음하는 과정은
상기 음성 명령 버튼 입력에 대응하는 타임스탬프를 기록하는 과정을 포함하는 것을 특징으로 하는 디바이스들 간 서비스 연결 방법.
제2항에 있어서, 상기 제1 정보는
상기 사용자 음성에 따른 녹음 데이터, 상기 타임스탬프 및 상기 디바이스의 디바이스 어드레스를 포함하는 것을 특징으로 하는 디바이스들 간 서비스 연결 방법.
제3항에 있어서, 상기 출력하는 과정은
상기 제1 정보를 미리 설정된 서버로 전송하는 과정을 포함하는 것을 특징으로 하는 디바이스들 간 서비스 연결 방법.
제4항에 있어서, 상기 입력받는 과정은
상기 서버로부터 상기 제2 정보를 수신하는 과정을 포함하고,
상기 제2 정보는 디바이스에 대해 결정된 동작 모드 정보, 연결 대상 디바이스의 디바이스 어드레스 및 실행 서비스의 실행 정보를 포함하는 것을 특징으로 하는 디바이스들 간 서비스 연결 방법.
제5항에 있어서, 상기 인지하는 과정은
상기 제2 정보로부터 동작 모드, 연결 대상 디바이스 및 실행 서비스 종류를 판단하는 과정을 포함하는 것을 특징으로 하는 디바이스들 간 서비스 연결 방법.
제6항에 있어서, 상기 연결하는 과정은
상기 동작 모드에 따라 마스터 모드 또는 슬레이브 모드를 결정하는 과정;
결정된 동작 모드에서 미리 설정된 통신 방식으로 상기 연결 대상 디바이스와 연결하는 과정을 포함하는 것을 특징으로 하는 디바이스들 간 서비스 연결 방법.
제7항에 있어서, 상기 수행하는 과정은
상기 마스터 모드로 동작하는 디바이스와 상기 슬레이브 모드로 동작하는 디바이스가 상기 실행 서비스 종류에 따라 데이터를 송수신 하거나, 특정 기능 수행을 위해 동작하는 과정을 포함하는 것을 특징으로 하는 디바이스들 간 서비스 연결 방법.
제4항에 있어서, 상기 서버는
동일한 시간대에 동일한 녹음 데이터를 전송한 적어도 2개의 디바이스들을 검색하고, 검색된 디바이스들을 서로 간에 서비스 연결을 위한 일군의 디바이스들로 결정하는 과정을 포함하는 것을 특징으로 하는 디바이스들 간 서비스 연결 방법.
제9항에 있어서, 상기 서버는
디바이스들로부터 상기 제1 정보를 수신하는 과정;
상기 제1 정보의 녹음 데이터 및 타임스탬프에 대응되는 제3 정보를 가지는 적어도 하나의 디바이스를 비교 검색하는 과정;
상기 제1 정보의 타임스탬프와 상기 제3 정보의 타임스탬프를 확인하여 각 디바이스별 동작 모드를 결정하는 과정;
각 디바이스들에 대응하는 동작 모드, 연결 대상의 디바이스 어드레스 및 실행 서비스에 대한 상기 제2 정보를 생성하여 각 디바이스들에게 전송하는 과정을 포함하는 것을 특징으로 하는 디바이스들 간 서비스 연결 방법.
제4항에 있어서, 상기 출력하는 과정은
상기 제1 정보를 사운드에 실어 스피커를 통해 출력하는 과정을 포함하는 것을 특징으로 하는 디바이스들 간 서비스 연결 방법.
제11항에 있어서, 상기 입력받는 과정은
인접된 디바이스에서 출력되는 상기 제2 정보를 마이크를 통해 입력받는 과정을 포함하고,
상기 제2 정보는 상기 인접된 디바이스의 녹음 데이터, 타임스탬프 및 상기 인접된 디바이스의 디바이스 어드레스를 포함하는 것을 특징으로 하는 디바이스들 간 서비스 연결 방법.
제12항에 있어서, 상기 인지하는 과정은
상기 제1 정보 및 상기 제2 정보로부터 동작 모드, 연결 대상 디바이스의 디바이스 어드레스 및 실행 서비스 종류를 판단하는 과정을 포함하는 것을 특징으로 하는 디바이스들 간 서비스 연결 방법.
제13항에 있어서, 상기 동작 모드는
상기 제1 정보의 타임스탬프와 상기 제2 정보의 타임스탬프의 시간차에 따라 마스터 모드 및 슬레이브 모드 중 어느 하나의 동작 모드를 결정하는 것을 특징으로 하는 디바이스들 간 서비스 연결 방법.
제14항에 있어서, 상기 연결하는 과정은
상기 결정된 동작 모드에서 미리 설정된 통신 방식으로 상기 연결 대상 디바이스의 디바이스 어드레스를 참조하여 연결하는 과정을 포함하는 것을 특징으로 하는 디바이스들 간 서비스 연결 방법.
제15항에 있어서, 상기 수행하는 과정은
상기 마스터 모드로 동작하는 디바이스와 상기 슬레이브 모드로 동작하는 디바이스가 상기 실행 서비스 종류에 따라 데이터를 송수신 하거나, 특정 기능 수행을 위해 동작하는 과정을 포함하는 것을 특징으로 하는 디바이스들 간 서비스 연결 방법.
제2항에 있어서,
상기 음성 명령 버튼의 입력이 해제될 시 녹음된 데이터 기반의 상기 제1 정보를 생성하는 과정;
상기 제1 정보를 이용하여 디바이스의 기기 정보를 변경 설정하는 과정;
상기 제1 정보에 대응하는 디바이스 기기 정보를 가지는 연결 대상 디바이스를 검색하여 연결하는 과정을 더 포함하는 것을 특징으로 하는 디바이스들 간 서비스 연결 방법.
제17항에 있어서, 상기 제1 정보는
상기 녹음된 데이터의 음성 파형 및 상기 타임스탬프를 이용하여 생성되는 고유한 문자열을 가지는 인증키인 것을 특징으로 하는 디바이스들 간 서비스 연결 방법.
제18항에 있어서, 상기 기기 정보는
상기 인증키의 문자열을 이용하여 변경 설정되는 디바이스 식별자인 것을 특징으로 하는 디바이스들 간 서비스 연결 방법.
제19항에 있어서, 상기 연결하는 과정은
미리 설정된 통신 방식으로 주변 디바이스를 검색하는 과정;
검색된 주변 디바이스 중 상기 인증키와 일치되는 기기 정보를 가진 디바이스를 상기 연결 대상 디바이스로 결정하는 과정; 및
상기 연결 대상 디바이스에게 연결 요청을 전송하는 과정을 포함하는 것을 특징으로 하는 디바이스들 간 서비스 연결 방법.
제20항에 있어서, 상기 연결하는 과정은
상기 연결 대상 디바이스가 상기 연결 요청을 수신할 시 자신이 생성한 인증키와 상기 연결 요청을 전송한 디바이스의 기기 정보를 비교하는 과정;
상기 인증키와 상기 디바이스의 기기 정보가 일치할 시 상기 디바이스에게 연결 승인을 전송하는 과정을 포함하는 것을 특징으로 하는 디바이스들 간 서비스 연결 방법.
음성을 이용한 서비스 연결 방법에 있어서,
음성 명령 버튼이 입력될 시 타임스탬프를 기록하고 사용자 음성 입력 수신을 대기하는 과정;
사용자로부터 입력되는 음성을 녹음하여 녹음 데이터를 생성하는 과정;
상기 음성 명령 버튼이 해제될 시 상기 타임스탬프, 상기 녹음 데이터 및 디바이스의 디바이스 어드레스를 포함하는 음성 정보를 생성하는 과정;
생성된 음성 정보를 서버로 전송하는 과정;
상기 서버로부터 서비스 정보를 수신하는 과정;
상기 서비스 정보로부터 디바이스의 동작 모드, 연결 대상 디바이스의 디바이스 어드레스 및 실행 서비스 종류를 확인하는 과정;
상기 동작 모드에 따라 연결 대상 디바이스와 연결하는 과정; 및
상기 연결 대상 디바이스와 연결될 시 상기 동작 모드에 대응하여 상기 실행 서비스 종류에 따른 서비스를 수행하는 과정을 포함하는 것을 특징으로 하는 음성을 이용한 디바이스들 간 서비스 연결 방법.
음성을 이용한 서비스 연결 방법에 있어서,
제1 디바이스가 음성 명령 버튼이 입력될 시 타임스탬프를 기록하고 사용자 음성 입력 수신을 대기하는 과정;
사용자로부터 입력되는 음성을 녹음하여 녹음 데이터를 생성하는 과정;
상기 음성 명령 버튼이 해제될 시 상기 타임스탬프, 상기 녹음 데이터 및 디바이스의 디바이스 어드레스를 포함하는 제1 음성 정보를 생성하는 과정;
생성된 음성 정보를 사운드에 실어 스피커를 통해 출력하는 과정;
제2 디바이스의 스피커를 통해 출력되는 제2 음성 정보를 마이크를 통해 입력받는 과정;
상기 제1 음성 정보와 상기 제2 음성 정보로부터 디바이스의 동작 모드, 연결 대상 디바이스의 디바이스 어드레스 및 실행 서비스 종류를 확인하는 과정;
상기 동작 모드에 따라 연결 대상 디바이스와 연결하는 과정; 및
상기 연결 대상 디바이스와 연결될 시 상기 동작 모드에 대응하여 상기 실행 서비스 종류에 따른 서비스를 수행하는 과정을 포함하는 것을 특징으로 하는 음성을 이용한 디바이스들 간 서비스 연결 방법.
음성을 이용한 서비스 연결 방법에 있어서,
음성 명령 버튼이 입력될 시 타임스탬프를 기록하고 사용자 음성 입력 수신을 대기하는 과정;
사용자로부터 입력되는 음성을 녹음하여 녹음 데이터를 생성하는 과정;
상기 음성 명령 버튼이 해제될 시 상기 녹음 데이터의 음성 파형 및 상기 타임스탬프를 이용하여 고유한 문자열을 가진 인증키를 생성하는 과정;
상기 인증키를 이용하여 디바이스 식별을 위한 기기 정보를 변경 설정하는 과정;
설정된 통신 모드에서 상기 인증키에 대응하는 기기 정보를 가진 연결 대상 디바이스를 검색하는 과정;
상기 연결 대상 디바이스와 연결 요청 및 연결 승인 송수신을 통해 연결하는 과정; 및
상기 연결 대상 디바이스와 연결될 시 서비스를 수행하는 과정을 포함하는 것을 특징으로 하는 음성을 이용한 디바이스들 간 서비스 연결 방법.
제24항에 있어서, 상기 검색하는 과정은
상기 설정된 통신 모드에서 주변 디바이스들을 검색하는 과정; 및
상기 주변 디바이스들 중 상기 인증키의 음성 파형 부분의 문자열과 일치되는 기기 정보를 가지는 디바이스를 상기 연결 대상 디바이스로 결정하는 과정을 포함하는 것을 특징으로 하는 음성을 이용한 디바이스들 간 서비스 연결 방법.
제24항에 있어서,
상기 인증키의 시간 정보 부분의 문자열과 상기 기기 정보에서 시간 정보 부분의 문자열을 비교하여 디바이스의 동작 모드를 결정하는 과정을 더 포함하는 것을 특징으로 하는 디바이스들 간 서비스 연결 방법.
적어도 하나의 프로그램이 저장되는 저장부; 및
상기 적어도 하나의 프로그램을 실행하여 음성을 이용한 디바이스들 서비스 연결을 지원하도록 제어하는 제어부를 포함하고,
상기 적어도 하나의 프로그램은,
음성 명령 버튼이 입력된 상태에서 입력되는 사용자 음성을 녹음하는 과정;
음성 명령 버튼의 입력이 해제될 시 녹음된 데이터 기반의 제1 정보를 출력하는 과정;
상기 제1 정보에 대응하는 제2 정보를 입력받는 과정;
제1 정보 및 제2 정보를 참조하여 서비스 타입을 인지하는 과정;
서비스 타입에 따른 동작 모드에서 연결 대상 디바이스와 연결하는 과정; 및
연결된 디바이스와 서비스를 수행하는 과정을 실행하는 명령어들을 포함하는 것을 특징으로 하는 디바이스.
음성 명령 버튼이 입력된 상태에서 입력되는 사용자 음성을 녹음하고, 음성 명령 버튼의 입력이 해제될 시 녹음된 데이터 기반의 제1 정보를 생성하여 출력하고, 상기 제1 정보에 대응하는 제2 정보를 수신할 시 상기 제1 정보 및 상기 제2 정보를 참조하여 서비스 타입을 인지하고, 서비스 타입 따라 동작 모드 결정 및 결정된 동작 모드에서 연결 대상 디바이스와의 서비스 연결을 수행하는 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체.