KR20160052704A

KR20160052704A - 관련된 멀티미디어 흐름과의 소셜 메시지의 연관

Info

Publication number: KR20160052704A
Application number: KR1020167009073A
Authority: KR
Inventors: 압델크림 헤바르; 제롬 피콜; 미리암 리비에르; 얀 가스트
Original assignee: 알까뗄 루슨트
Priority date: 2013-10-07
Filing date: 2014-09-24
Publication date: 2016-05-12
Also published as: JP6158435B2; WO2015051996A1; JP2016536677A; CN105612720A; US20160255036A1; EP2858310A1

Abstract

방송 수신기 디바이스(BRD)에 의해 수신된 관련된 멀티미디어 흐름과의 소셜(social) 디바이스(SD)에서 이용자에 의해 기록된 소셜 네트워크 메시지의 연관을 위해, 상관 디바이스(CD)는 소셜 디바이스(SD)와 동일한 위치에서 멀티미디어 흐름을 수신하는 방송 수신기 디바이스(BRD)의 존재를 검출하고, 이용자에 의해 기록된 소셜 메시지로부터 소셜 키워드들(SK)을 추출하고, 방송 수신기 디바이스(BRD)에 수신된 멀티미디어 흐름에 관한 메타데이터를 요청하고 멀티미디어 흐름의 메타데이터로부터 멀티미디어 키워드들(MK)을 추출하고, 멀티미디어 키워드들(MK)과 소셜 키워드들(SK) 사이의 확률적 측정의 결과로서 상관 계수(CoC)를 제공하며, 멀티미디어 흐름과 연관된 소셜 네트워크 쓰레드(thread)의 식별자(OH)를 검색한다. 상관 계수(CoC)가 제 1 미리 규정된 임계치보다 크면, 검색된 식별자는 소셜 메시지의 텍스트에 부가된다.

Description

관련된 멀티미디어 흐름과의 소셜 메시지의 연관{ASSOCIATION OF A SOCIAL MESSAGE WITH A RELATED MULTIMEDIA FLOW}

본 발명은 소셜(social) 네트워크 메시지를 관련된 멀티미디어 흐름과 연관시키기 위한 메커니즘에 관한 것이다.

소셜 매체 서비스들 및 마이크로 블로깅 애플리케이션(micro blogging application)들은 많은 사람들이 전통적인 방송 매체들을 소비하는 방식을 변화시키고 있다. 실시간 백채널(backchannel) 대화들은 이제, 사람들이 시청하고 있는 것과 관련된 그들 자신의 생각들, 정서들, 의견들 및 감정들을 방송하기 위해 소셜 매체들을 이용하면서 사람들이 TV를 동시에 볼 때 아주 흔한 것이다.

그러나, 소셜 네트워크 쓰레드(thread)들과 같은 소셜 상호작용들의 콘텐트 분석은 멀티미디어 콘텐트들에 관한 지식을 풍부하게 하기 위한 양호한 접근법일 수 있다. 멀티미디어 흐름과 연관된 소셜 상호작용들의 콘텐트의 연구는 다음에 기여할 수 있다:

- 멀티미디어 콘텐트에 관한 지식을 증가시킨다: 사람들은 종종 멀티미디어 콘텐트에서 발생하고 있는 것(사건들, 사람, 장소들, 등)에 관해 말한다. 이것은 멀티미디어 설명을 풍부하게 할 뿐만 아니라, 다양한 관점들을 표현하기 위해 이용될 수 있어서, 상이한 레벨들의 표현력으로 얻어진 지식을 분류하는데 도움이 된다.

- (상호작용들의 유사성들에 기초하여) 콘텐트의 다른 피스(piece)들에 대한 시맨틱 링크(semantic link)들을 생성함으로써 콘텐트를 연장한다. 이것은 사람들로 하여금 다른 사람의 대화들을 통해 대안적인 멀티미디어 리소스들을 발견하게 할 것이다.

오늘날, 소셜 주석 쓰레드와 TV 프로그램 사이의 링크는 "#obama_election"과 같은, 소위 "해시태그(hashtag)"의 수단에 의해 행해지고, 이는 마이크로블로깅 애플리케이션들의 이용자들에 의해 메시지의 요소로서 수동적으로 입력된다.

최악의 경우에, 해시태그들은 이용자들 그들 자신들에 의해 생성되고, 이는 TV 프로그램과 관계있는 소셜 쓰레드들의 식별들의 대규모 다양성 및 이질성(heterogeneity)을 야기한다.

최상의 경우에, "공식(official)" 해시태그는 방송자에 의한 TV 프로그램 동안 제공되지만, 이것은 유일성의 보장이 아니다.

게다가, 해시태그는 임의의 시간 정보 없이, 특정한 토픽 또는 "채널"에 속하는 것으로서 개별적인 메시지들을 마킹(marking)하기 위해 이용된다. 즉, 해시태그는 결코 사라지지 않을 것이다: 그것은, 토픽 또는 사건의 수명이 무엇에 관련되는지 간에 동일한 방식으로 이용가능하고 이용될 것이다.

따라서, 매체 콘텐트를 매체 콘텐트의 사회적으로 활성인 뷰어들에 의해 생성된 소셜 상호작용들과 끊김없이 연관시킬 필요성이 존재한다.

이 요약은 본 발명적인 주제에 관련된 개념들을 도입하기 위해 제공된다. 이 요약은 청구된 주제의 근본적인 특징들을 식별하기 위해 의도되지 않고 또한, 청구된 주제의 범위를 결정하거나 제한할 때 이용하기 위해 의도되지도 않는다.

하나의 실시예에 따라, 소셜 디바이스에서 이용자에 의해 기록된 소셜 네트워크 메시지를 방송 수신기 디바이스에 의해 수신된 관련된 멀티미디어 흐름과 연관시키기 위한 방법이 제공되고, 상기 방법은 소셜 디바이스 및 방송 수신기 디바이스와 통신할 수 있는 상관 디바이스에서 다음의 단계들을 포함한다:

소셜 디바이스(SD)와 동일한 위치에서 멀티미디어 흐름을 수신하는 방송 수신기 디바이스의 존재를 검출하는 단계,

이용자에 의해 기록된 소셜 메시지로부터 소셜 키워드들을 추출하는 단계,

방송 수신기 디바이스에 수신된 멀티미디어 흐름에 관한 메타데이터를 요청하고 멀티미디어 흐름의 메타데이터로부터 멀티미디어 키워드들을 추출하는 단계,

멀티미디어 키워드들과 소셜 키워드들(SK) 사이의 확률적 측정의 결과로서 상관 계수를 제공하는 단계,

멀티미디어 흐름과 연관된 소셜 네트워크 쓰레드의 식별자를 검색하는 단계, 및

상관 계수가 제 1 미리 규정된 임계치보다 크면, 소셜 메시지의 텍스트에 검색된 식별자를 부가하는 단계.

이롭게, 본 발명은 주 멀티미디어 디바이스와 동반(companion) 디바이스 사이에 끊김없는 접속들 및 시청된 멀티미디어 콘텐트에 관한 용이한 상호작용들을 제공하는 시스템을 제공한다: 태그는, 소셜 네트워크 채널에 관한 소셜 메시지들을 얻고 포스팅(posting)하는 것이 용이하게 되도록 자동으로 제공된다.

부가적으로, 본 발명은 멀티미디어 흐름과 연관된 고유 식별자(즉, 해시태그)를 제공하고, 이는 단일 라벨링(labeling)된 데이터 세트를 구성하기 위해 관리가능하지 않은 과잉의/많은 이용자들의 생성된 태그들을 회피한다.

이 식별자는 그 다음, TV 프로그램에 소셜 상호작용들을 용이하게 링크하기 위해 이용될 수 있다. 멀티미디어 콘텐트에 관련된 소셜 상호작용들의 분석의 경우에, 그것은 멀티미디어 콘텐트에 관한 지식을 풍부하게 하거나 동적 요약들 또는 제 2 스크린 애플리케이션들과 같은 새로운 멀티미디어 서비스들을 제공하기 위해 이용될 것이다.

일 실시예에서, 상관 계수가 제 2 미리 규정된 임계치보다 크고 제 1 미리 규정된 임계치 미만이면, 이용자는 소셜 메시지가 소셜 메시지의 텍스트에 검색된 공식 식별자를 부가하기 전에 검색된 공식 식별자와 관계 있다는 확인을 요구받는다.

일 실시예에서, 소셜 키워드들은, 이용자가 소셜 메시지의 주어진 수의 단어들을 입력하자마자 이용자에 의해 기록된 소셜 메시지로부터 추출되고, 소셜 키워드들은 이용자에 의해 기록된 다음 단어들을 위해 업데이트된다.

일 실시예에서, 소셜 키워드들은, 이용자가 소셜 메시지를 기록하는 것을 끝냈고 그것을 포스팅할 준비가 되었을 때 이용자에 의해 기록된 소셜 메시지로부터 추출된다.

일 실시예에서, 확률적 측정은 멀티미디어 키워드들과 소셜 키워드들 사이의 코사인 유사성 측정에 기초한다.

일 실시예에서, 소셜 네트워크 쓰레드의 식별자는 멀티미디어 흐름과 연관된 메타데이터로부터 검색된다.

일 실시예에서, 소셜 네트워크 쓰레드의 식별자는 멀티미디어 흐름과 연관된 메타데이터에 포함된 멀티미디어 흐름의 식별자에 의해 서버로부터 검색된다.

일 실시예에서, 소셜 네트워크 쓰레드의 식별자는 해시태그이다.

일 실시예에서, 방송 수신기 디바이스의 존재는 디지털 리빙 네트워크 연합(Digital Living Network Alliance) 프로토콜 중의 통신 프로토콜들 및 블루투스 프로토콜 중 적어도 하나를 이용하여 디바이스 발견 프로세스 동안 검출된다.

일 실시예에서, 방송 수신기 디바이스 및 소셜 디바이스는 동일한 개체(entity)에 포함된다.

일 실시예에서, 소셜 디바이스 및 상관 디바이스는 동일한 개체에 포함된다.

본 발명은 또한, 소셜 디바이스에서 이용자에 의해 기록된 소셜 네트워크 메시지를 방송 수신기 디바이스에 의해 수신된 관련된 멀티미디어 흐름과 연관시키기 위한 상관 디바이스가 제공되고, 상기 상관 디바이스는 소셜 디바이스 및 방송 수신기 디바이스와 통신할 수 있으며:

소셜 디바이스와 동일한 위치에서 멀티미디어 흐름을 수신하는 방송 수신기 디바이스의 존재를 검출하기 위한 수단,

이용자에 의해 기록된 소셜 메시지로부터 소셜 키워드들을 추출하기 위한 수단,

방송 수신기 디바이스에 수신된 멀티미디어 흐름에 관한 메타데이터를 요청하고 멀티미디어 흐름의 메타데이터로부터 멀티미디어 키워드들을 추출하기 위한 수단,

멀티미디어 키워드들과 소셜 키워드들 사이의 확률적 측정의 결과로서 상관 계수를 제공하기 위한 수단,

멀티미디어 흐름과 연관된 소셜 네트워크 쓰레드의 식별자를 검색하기 위한 수단, 및

상관 계수가 제 1 미리 규정된 임계치보다 크면, 소셜 메시지의 텍스트에 검색된 식별자를 부가하기 위한 수단을 포함한다.

본 발명은 또한, 디바이스 내에 구현될 수 있는 컴퓨터 프로그램에 관한 것이고, 상기 프로그램은 상기 디바이스 내에서 실행될 때 본 발명에 따른 방법의 단계들을 실행하는 지시들을 포함한다.

본 발명 및 그의 이득들은 첨부된 도면들을 참조하는 아래의 설명의 검토시에 더 양호하게 이해될 것이다.

도 1은 소셜 메시지를 관련된 멀티미디어 흐름과 연관시키기 위한 본 발명의 하나의 실시예에 따른 통신 시스템의 개략적인 블록도.
도 2는 본 발명의 하나의 실시예에 따라 소셜 메시지를 관련된 멀티미디어 흐름과 연관시키기 위한 방법의 알고리즘.

동일한 참조 부호는 모든 도면들 상의 동일한 요소 또는 동일한 유형의 요소를 표현한다.

도 1을 참조하면, 본 발명에 따른 통신 시스템은 원격통신 네트워크(TN), 방송 수신기 디바이스(BRD), 소셜 디바이스(SD), 상관 디바이스(CD), 적어도 하나의 멀티미디어 서버(MS) 및 적어도 하나의 소셜 네트워크 서버(SNS)를 포함한다.

원격통신 네트워크(TN)는 유선 또는 무선 네트워크, 또는 유선 또는 무선 네트워크들의 조합일 수 있다.

원격통신 네트워크(TN)는 패킷 네트워크 예를 들면, 인터넷 또는 인트라넷과 같은 인터넷 프로토콜("Internet Protocol"; IP) 고속 네트워크, 또는 심지어 회사의 특정 사설 네트워크일 수 있다.

도입으로서, 본 명세서를 이해하기 위해 도움이 되는 몇몇 용어들 및 개념들은 아래에 규정된다.

멀티미디어 흐름은 원격통신 네트워크(TN)를 통해 요청하는 통신 디바이스를 향해 멀티미디어 서버(MS)에 의해 제공된다.

멀티미디어 흐름은 인터넷 프로토콜 텔레비전(IPTV)일 수 있거나, 임의의 다른 종류의 비디오 스트림, 오디오 스트림, 슬라이드쇼, 뉴스 타이틀 스트림과 같은 텍스트 스트림, 등일 수 있다.

멀티미디어 흐름은 멀티미디어 서버(MS)에 의해 방송되고 온라인 또는 실시간 멀티미디어 콘텐트와 연관되는 라이브 스트림일 수 있다. 대안적으로, 멀티미디어 흐름은 멀티미디어 서버의 전용 서비스에 의해 이용된 업로딩된 콘텐트와 같은 오프라인 콘텐트와 연관될 수 있다.

소셜 네트워크 쓰레드는, 가능하게 서로에 응답하여, 그리고 가능하게 사진들, 단편 비디오들, 링크들, 등과 같은 첨부되거나 임베딩된 콘텐트들을 갖는 근본적으로 이용자 포스팅된 소셜 메시지들의 집성이다. 소셜 네트워크 쓰레드들은 소셜 네트워크 플랫폼을 형성하는 적어도 하나의 소셜 네트워크 서버(SNS) 상에 위치되고 인터넷을 통해 액세스되는 소셜 네트워크 데이터베이스들에 저장된다.

예를 들면, 소셜 네트워크 쓰레드들은 주석들, 멀티미디어 콘텐트의 하나의 요소에 관한 사람으로부터의 유사한 코멘트들, 또는 멀티미디어 콘텐트에 관한 사람들 사이의 대화들일 수 있다.

방송 수신기 디바이스(BRD)는 멀티미디어 스트림을 수신 및 디스플레이할 수 있는 디바이스이다.

방송 수신기 디바이스(BRD)는 예를 들면, 개인용 컴퓨터 또는 랩톱, 전자 태블릿, 스마트 폰, 개인 휴대용 정보 단말기, 셋 톱 박스, 가정용 게이트웨이(residential gateway), 게임 콘솔 또는 접속된 텔레비전일 수 있다. 더 일반적으로, 그것은 데이터를 다른 통신 장비들과 교환하기 위해 적어도 하나의 유선 또는 무선 통신 네트워크와의 접속을 확립할 수 있는, 통신 모듈을 포함하는 임의의 유형의 전자 장비에 관한 것이다.

멀티미디어 흐름은 멀티미디어 서버(MS)에 의한 멀티미디어 콘텐트 방송으로 구성되고 메타데이터로 구성된다.

멀티미디어 흐름은 또한, 해시태그와 연관된다.

더 일반적으로, 해시태그가 소셜 네트워크 쓰레드의 식별자임이 가정된다.

해시태그는 고유하거나 의사 고유한 것이어야 한다(그것이 인간들의 소셜 메시지들에 특히, 또 다른 콘텍스트에 부가적인 해시태그들을 부가하는 인간들에 의해 실수로 거의 재생성가능하지 않을 수 있도록).

하나의 실시예에서, 해시태그는 멀티미디어 서버(MS)에 의해 제공된다. 해시태그는 예를 들면, 프로그램 이름, 채널 이름 및 방송 날짜의 해시 코드를 취함으로써 멀티미디어 서버(MS)에 의해 생성될 수 있다. 해시태그는 멀티미디어 흐름의 메타데이터의 부분일 수 있다.

또 다른 실시예에서, 해시태그는 멀티미디어 서버(MS)와 협동하는 해시태그 제공자 서버(HPS)에 의해 제공된다. 이 경우에, 멀티미디어 흐름과 해시태그 사이의 통신은 멀티미디어 흐름 식별자(IdMF)를 통해 행해질 수 있다.

선택적으로, 공식 해시태그는 또한, 주 스트림의 오버레이 이미지로서 방송 수신기 디바이스에 의해 디스플레이될 수 있다.

방송 수신기 디바이스(BRD)는 매체 플레이어(MP)를 포함한다.

매체 플레이어(MP)는 그것의 스크린 상에 멀티미디어 흐름의 콘텐트(예로서, TV 비디오 프로그램)를 실시간으로 디스플레이할 책임이 있고, 방송 수신기 디바이스(BRD)의 통신 수단을 통해 정보를 인근의 다른 디바이스들과 교환할 수 있다.

소셜 디바이스(SD)는 소셜 네트워크 서버(SNS)와 상호작용할 수 있는 디바이스이다.

소셜 디바이스(SD)는 예를 들면, 개인용 컴퓨터 또는 랩톱, 전자 태블릿, 스마트 폰, 개인 휴대용 정보 단말기, 셋 톱 박스, 가정용 게이트웨이, 게임 콘솔 또는 접속된 텔레비전일 수 있다. 더 일반적으로, 그것은 데이터를 다른 통신 장비들과 교환하기 위해 적어도 하나의 유선 또는 무선 통신 네트워크와의 접속을 확립할 수 있는, 통신 모듈을 포함하는 임의의 유형의 전자 장비에 관한 것이다.

소셜 디바이스(SD)는 소셜 상호작용 클라이언트(SIC)를 포함한다.

소셜 상호작용 클라이언트(SIC)는 이용자에 의해 입력된 소셜 메시지를 처리할 책임이 있다. 소셜 메시지는 소셜 네트워크 쓰레드 상에 이용자에 의해 포스팅된 메시지이다. 이러한 소셜 메시지는 또한, 소셜 상호작용 메시지 또는 소셜 네트워크 메시지로 명명될 수 있는데, 이는 이러한 메시지의 목적이 소셜 메시지를 포스팅한 이용자의 소셜 네트워크의 다른 이용자들과의 상호작용이기 때문이다.

상관 디바이스(CD)는 예를 들면, 개인용 컴퓨터, 랩톱, 서버, 전자 태블릿, 스마트 폰, 개인 휴대용 정보 단말기, 셋 톱 박스, 가정용 게이트웨이, 게임 콘솔 또는 접속된 텔레비전일 수 있다. 더 일반적으로, 그것은 데이터를 다른 통신 장비들과 교환하기 위해 적어도 하나의 유선 또는 무선 통신 네트워크와의 접속을 확립할 수 있는, 통신 모듈을 포함하는 임의의 유형의 전자 장비에 관한 것이다.

상관 디바이스(CD)는 소셜 상호작용 인터셉터(interceptor)(SII), 디바이스 근접 검출기(DPD), 및 상관 계수 산출기(CCC)를 포함한다.

소셜 상호작용 인터셉터(SII)는 이용자에 의해 입력된 소셜 네트워크 메시지를 인터셉트하고 프로세싱할 책임이 있다.

디바이스 근접 검출기(DPD)는 디바이스 발견 프로세스를 구현하고 디지털 리빙 네트워크 연합(DLNA) 또는 블루투스와 같은, 상이한 종류들의 통신 프로토콜들을 취급할 수 있다.

디바이스 근접 검출기(DPD)는 통신 디바이스와 동일한 위치에서 또 다른 디바이스의 존재를 검출할 수 있고 검출된 디바이스의 종류를 결정할 수 있다. 디바이스 근접 검출기(DPD)는 검출된 방송 수신기 디바이스들의 목록으로부터 비 방송 디바이스들을 필터링 아웃(filtering out)할 수 있다(각각의 디바이스의 기능은 프로토콜을 통해 광고된다).

디바이스 근접 검출기(DPD)는 또한, 상관 디바이스(CD)와 검출된 방송 수신기 디바이스들 사이의 통신 채널을 개방시킬 책임이 있다. 디바이스 근접 검출기는 목록을 업데이트하기 위해 주위의 이용가능한 방송 디바이스(들)를 주기적으로 검출한다.

특히, 이용자가 태블릿과 같은, 소셜 디바이스(SD) 및 TV 수신기와 같은, 방송 수신기 디바이스(BRD)를 소유하고, 동일한 위치에서 그들 둘 모두를 이용하는 경우에, 디바이스 근접 검출기는 방송 수신기 디바이스(BRD)를 검출할 수 있다.

하나의 실시예에서, 상관 디바이스(CD) 및 소셜 디바이스(SD)는 동일한 개체에 포함된다. 이 경우에, 소셜 상호작용 인터셉터(SII) 및 소셜 상호작용 클라이언트(SIC)는 동일한 애플리케이션에 의해 관리될 수 있다.

일단, 통신 채널이 상관 디바이스(CD)와 방송 수신기 디바이스(BRD) 사이에서 개방되면, 상관 계수 산출기(CCC)는 방송 수신기 디바이스에 이 후자에 의해 디스플레이된 현재 프로그램에 관한 메타데이터를 요청한다. 이들 메타데이터는 멀티미디어 서버(MS)에 의해 제공되고 장르 분류, 프로그램 요약, 서술 키워드들, 등과 같은 현재 TV 프로그램에 관련된 모든 종류들의 메타데이터를 포함한다.

이용자가 그의 소셜 메시지를 기록했고 검증에 의해 그것을 포스팅할 준비가 되었을 때, 소셜 상호작용 인터셉터(SII)는 상관 계수 산출기(CCC)를 호출하고, 상기 상관 계수 산출기(CCC)의 역할은 소셜 상호작용 활동이 멀티미디어 흐름을 참조하고, 몇몇 방송 수신기 디바이스(들)가 존재하는 경우(예로서, 상이한 채널들에 대해 상이한 룸들에서의 TV)에 어떤 멀티미디어 흐름을 참조하는지를 이해하기 위해, 소셜 디바이스(SD)와 방송 수신기 디바이스(들) 사이의 활동의 상관을 계산하는 것이다.

상관 계수 산출기(CCC)는 이용자가 기록하고 있는 소셜 메시지와 멀티미디어 흐름과 연관된 메타데이터 사이의 상관의 확률적 측정을 제공한다. 이 확률적 측정은 이용자가 기록하고 있는 소셜 메시지로부터 추출된 키워드들의 세트와 멀티미디어 흐름 메타데이터로부터 추출된 키워드들의 세트 사이의 "코사인" 유사성 측정에 기초할 수 있다. 또 다른 확률적 측정은 소렌센-다이스(Sorensen-Dice) 계수와 같은 유사성 측정일 수 있다.

상관 계수 산출기(CCC)는 또한, 소셜 네트워크 쓰레드들 및 멀티미디어 흐름들에 관련된 미가공 데이터 스트림들로부터 지식 정보를 모을 책임이 있다. 상관 계수 산출기(CCC)는 이용자에 의해 기록된 소셜 메시지로부터 및 멀티미디어 흐름의 메타데이터로부터 키워드들의 벡터들을 추출한다.

몇몇 방송 디바이스들이 존재하면, 확률적 측정은 소셜 메시지가 좀 더 참조할 것 같은 멀티미디어 흐름을 결정하기 위해, 각각의 디바이스에 대해 행해지고 결과들은 값을 감소시킴으로써 그 순위가 매겨진다.

하나의 변형에서, 상관은 이용자가 소셜 메시지를 입력하고 있는 동안 실시간으로 계산될 수 있고, 이용자가 단어를 입력할 때마다 업데이트될 수 있다.

또 다른 변형에서, 상관은 이용자가 최소 수의 단어들을 입력한 후에 계산될 수 있고, 각각의 다음 입력된 단어를 위해 업데이트될 수 있다.

소셜 상호작용 인터셉터(SII)는 멀티미디어 서버(MS)에 의해 이전에 생성되거나 해시태그 제공자 서버(HPS)에 의해 제공된 "공식" 해시태그를 검색한다. 하나의 변형에서, 소셜 상호작용 인터셉터(SII)는 방송 멀티미디어 흐름과 연관된 메타데이터로부터의 해시태그의 생성에 전용된 모듈로부터 해시태그를 검색한다.

상관 계수가 미리 규정된 임계치보다 크면, 소셜 상호작용 인터셉터(SII)는 소셜 메시지의 텍스트에 검색된 해시태그를 자동으로 부가한다. 상관 계수의 값에서의 중간 확신의 경우에, 이용자는 확인을 요구받을 수 있다. 소셜 메시지는 그 다음, 소셜 네트워크 서버(SNS)에 포스팅된다.

상관 계수 값이 너무 낮으면, 이용자가 기록하고 있는 소셜 메시지와 상기 이용자가 시청하고 있는 스트리밍된 멀티미디어 콘텐트 중 임의의 것 사이에 어떠한 링크도 존재하지 않는다고 가정된다. 따라서, 어떠한 해시태그도 그와 같이 소셜 네트워크 서버(SNS) 상에 포스팅되는 소셜 메시지에 부가되지 않는다.

하나의 실시예에서, 방송 수신기 디바이스(BRD) 및 소셜 디바이스(SD)는 동일한 개체에 포함된다.

하나의 실시예에서, 멀티미디어 흐름은 방송 수신기 디바이스(BRD) 상에 디스플레이되지 않고, 예를 들면 단지 수신되고 기록될 수 있다.

또 다른 실시예에서, 방송 수신기 디바이스(BRD), 소셜 디바이스(SD) 및 상관 디바이스(CD)는 동일한 개체에 포함된다.

이 경우에, 디바이스 근접 검출기(DPD)는, 매체 플레이어(MP)가 론칭(launching)되고 멀티미디어 흐름을 수신하고 있는지를 검출한다.

도 2를 참조하면, 본 발명의 하나의 실시예에 따라 소셜 네트워크 메시지를 관련된 멀티미디어 흐름과 연관시키기 위한 방법은 통신 시스템 내에서 실행된 단계들(S1 내지 S7)을 포함한다.

단계(S1)에서, 이용자는 방송 수신기 디바이스(BRD) 상의 멀티미디어 흐름을 시청하고 있다. 멀티미디어 흐름은 메타데이터와 연관하여 멀티미디어 서버(MS)에 의해 방송된다.

하나의 실시예에서, 메타데이터는 공식 해시태그(OH)를 포함한다.

또 다른 실시예에서, 멀티미디어 흐름의 식별자와 부합하여 저장된 공식 해시태그(OH)는 해시태그 제공자 서버(HPS)로부터 액세스가능하다. 멀티미디어 흐름의 동일한 식별자는 멀티미디어 흐름의 메타데이터에 포함된다.

이용자는 소셜 네트워크 웹사이트 상에 메시지를 기록하고 포스팅하기를 원하고, 상기 메시지는 방송 수신기 디바이스(BRD) 상에서 이용자에 의해 시청된 멀티미디어 흐름에 관련된다. 이를 위해, 이용자는 소셜 네트워크 서버(SNS)와 통신할 수 있는 소셜 디바이스(SD) 상에 소셜 상호작용 클라이언트(SIC)를 론칭한다.

상관 디바이스(CD)에서의 소셜 상호작용 인터셉터(SII)는, 소셜 상호작용 클라이언트(SIC)가 실행됨을 검출하고 디바이스 근접 검출기(DPD)를 트리거링(triggering)한다.

디바이스 근접 검출기(DPD)는 소셜 디바이스(SD)와 동일한 위치에서 멀티미디어 흐름을 수신하는 방송 수신기 디바이스(BRD)의 존재를 검출한다.

디바이스 근접 검출기(DPD)가 임의의 디바이스를 검출하지 않으면, 그것은 이용자가 임의의 방송 멀티미디어 흐름과의 관련 없이 메시지를 기록하고 있음을 의미한다.

디바이스 근접 검출기(DPD)는 방송 수신기 디바이스(BRD)를 통해 통신 채널을 개방시킨다.

디바이스 근접 검출기(DPD)가 소셜 디바이스(SD)와 동일한 위치에서 방송 수신기 디바이스(BRD)의 존재를 검출할 때, 그것은 방송 수신기 디바이스(BRD) 및 소셜 디바이스(SD)가 동일한 룸에 또는 인접 룸들에 있음을 의미하고, 이용자는 방송 수신기 디바이스(BRD) 및 소셜 디바이스(SD) 둘 모두를 볼 수 있다.

단계(S2)에서, 이용자는 소셜 메시지를 기록한다. 이용자가 소셜 메시지를 기록하는 것을 끝냈고 예를 들면, "전송" 유형 버튼을 클릭하거나 "리턴" 유형 키스트로크(keystroke)를 누름으로써 그것을 포스팅할 준비가 되었을 때, 소셜 상호작용 인터셉터(SII)는 상관 계수 산출기(CCC)를 호출한다.

단계(S3)에서, 상관 계수 산출기(CCC)는 이용자에 의해 기록된 소셜 메시지로부터 소셜 키워드들(SK)의 목록을 추출한다.

단계(S4)에서, 상관 계수 산출기(CCC)는 방송 수신기 디바이스에 현재 방송 멀티미디어 흐름에 관한 메타데이터를 요청한다. 예를 들면, 메타데이터는 장르 분류, 프로그램 요약, 서술 키워드들, 등을 포함한다.

상관 계수 산출기(CCC)는 멀티미디어 흐름의 메타데이터로부터 멀티미디어 키워드들(MK)의 목록을 추출한다.

하나의 실시예에서, 단계들(S3 및 S4)은 상호변경될 수 있다.

단계(S5)에서, 상관 계수 산출기(CCC)는 이용자가 기록하고 있는 소셜 메시지와 멀티미디어 흐름과 연관된 메타데이터 사이의 상관의 확률적 측정을 제공한다. 예를 들면, 확률적 측정은 멀티미디어 키워드들(MK)과 소셜 키워드들(SK) 사이의 "코사인" 유사성 측정에 기초할 수 있다.

상관 계수 산출기(CCC)는 확률적 측정의 결과로서 상관 계수(CoC)를 제공한다.

하나의 변형에서, 상관은 이용자가 단어를 입력하자마자, 이용자가 소셜 메시지를 입력하고 있는 동안 실시간으로 상관 계수 산출기(CCC)에 의해 제공되고, 이용자가 단어를 입력할 때마다 업데이트된다.

이 경우에, 단계들(S2, S3)에서, 상관 계수 산출기(CCC)는, 이용자가 소셜 메시지의 단어를 입력하자마자 소셜 상호작용 인터셉터(SII)에 의해 호출된다. 상관 계수 산출기(CCC)는 이용자에 의해 기록된 다음 단어들로부터 소셜 키워드들(SK)의 목록을 추출하고 업데이트한다.

또 다른 변형에서, 상관은 이용자가 최소 수의 단어들을 입력한 후에, 이용자가 소셜 메시지를 입력하고 있는 동안 실시간으로 상관 계수 산출기(CCC)에 의해 제공되고, 이용자가 단어를 입력할 때마다 업데이트된다.

이 경우에, 단계들(S2, S3)에서, 상관 계수 산출기(CCC)는, 이용자가 소셜 메시지의 주어진 수의 단어들을 입력하자마자 소셜 상호작용 인터셉터(SII)에 의해 호출되고, 이용자에 의해 기록된 다음 단어들로부터 소셜 키워드들(SK)의 목록을 추출하고 업데이트한다.

단계(S6)에서, 소셜 상호작용 인터셉터(SII)는 멀티미디어 서버(MS)에 의해 제공된 방송 멀티미디어 흐름과 연관된 공식 해시태그(OH)를 검색한다.

하나의 실시예에서, 공식 해시태그(OH)는 방송 멀티미디어 흐름과 연관되고 통신 채널을 통해 방송 수신기 디바이스(BRD)의 매체 플레이어(MP)에 의해 송신된 메타데이터로부터 검색된다.

또 다른 실시예에서, 공식 해시태그(OH)는 방송 멀티미디어 흐름과 연관된 메타데이터에 포함된 멀티미디어 흐름의 식별자에 의해 해시태그 제공자 서버(HPS)로부터 검색된다.

또 다른 실시예에서, 소셜 상호작용 인터셉터(SII)는 방송 멀티미디어 흐름과 연관된 메타데이터로부터 해시태그를 생성한 모듈로부터 해시태그를 검색한다. 해시태그는 예를 들면, 프로그램 이름, 채널 이름 및 방송 날짜의 해시코드의 조합으로부터 멀티미디어 서버(MS)에 의해 생성된 해시태그와 동일한 방식에 의해 생성될 수 있다. 이 방식에 의해, 모든 개체들(상관 디바이스, 멀티미디어 서버 및 해시태그 제공자 서버)은 동일한 멀티미디어 흐름에 대해 동일하고 고유한 해시태그를 생성한다.

단계(S7)에서, 상관 계수(CoC)가 제 1 미리 규정된 임계치(Th1)보다 크면, 소셜 상호작용 인터셉터(SII)는 이용자에 의해 기록된 소셜 메시지의 텍스트에 검색된 공식 해시태그(OH)를 자동으로 부가한다. 소셜 메시지는 그 다음, 공식 해시태그(OH)를 갖고 소셜 네트워크 서버(SNS)에 포스팅된다.

상관 계수가, 상관 계수의 값의 중간 확신을 의미하는 제 2 미리 규정된 임계치(Th2)보다 크고 제 1 미리 규정된 임계치(Th1) 미만이면, 이용자는 기록된 메시지가 공식 식별자와 관계 있다는 확인을 요구받는다. 소셜 상호작용 인터셉터(SII)는 이용자에 의한 확인 후에 공식 해시태그(OH)를 부가한다. 소셜 메시지는 그 다음, 공식 해시태그(OH)를 갖고 소셜 네트워크 서버(SNS)에 포스팅된다.

상관 계수가 제 2 미리 규정된 임계치(Th2) 미만이면, 이용자가 기록한 소셜 메시지와 상기 이용자가 시청하고 있는 방송 멀티미디어 흐름 사이에 어떠한 링크도 존재하지 않는다고 가정된다. 소셜 메시지는 그 다음, 공식 해시태그(OH) 없이 소셜 네트워크 서버(SNS)에 포스팅된다. 또 다른 해시태그는 이 소셜 메시지를 위해 이용될 수 있다.

하나의 변형에서, 상관이 이용자가 소셜 메시지를 입력하고 있는 동안 실시간으로 상관 계수 산출기(CCC)에 의해 제공될 때, 상관 계수가 적어도 제 2 미리 규정된 임계치(Th2)보다 크면, 소셜 상호작용 인터셉터(SII)는 이용자에게 예를 들면, 공식 해시태그를 디스플레이함으로써 기록된 메시지에 공식 해시태그(OH)를 부가할 것을 제안한다.

본 명세서에서 설명된 본 발명은 소셜 네트워크 메시지를 관련된 멀티미디어 흐름과 연관시키기 위한 방법 및 디바이스에 관한 것이다. 본 발명의 하나의 구현에 따라, 본 발명의 단계들은 통신 디바이스(CD)와 같은, 디바이스에 통합된 컴퓨터 프로그램의 지시들에 의해 결정된다. 프로그램은, 상기 프로그램이 디바이스 내에서 로딩되고 실행될 때 방법의 단계들을 실행하는 프로그램 지시들을 포함한다.

결과적으로, 본 발명은 또한, 컴퓨터 프로그램 특히, 본 발명을 구현하기 위해 적합한, 정보 매체 상의 또는 내의 컴퓨터 프로그램에 적용된다. 이 프로그램은 임의의 프로그래밍 언어를 이용할 수 있고, 부분적으로 컴파일링된 형태, 또는 본 발명에 따른 방법을 구현하기 위해 바람직한 임의의 다른 형태와 같은, 소스 코드, 객체 코드, 또는 소스 코드와 객체 코드 사이의 중간 코드의 형태일 수 있다.

Claims

소셜(social) 디바이스(SD)에서 이용자에 의해 기록된 소셜 네트워크 메시지를 방송 수신기 디바이스(BRD)에 의해 수신된 관련된 멀티미디어 흐름과 연관시키기 위한 방법에 있어서,
상기 소셜 디바이스 및 상기 방송 수신기 디바이스와 통신할 수 있는 상관 디바이스(CD)에서:
상기 소셜 디바이스(SD)와 동일한 위치에서 멀티미디어 흐름을 수신하는 상기 방송 수신기 디바이스(BRD)의 존재를 검출하는 단계(S1),
상기 이용자에 의해 기록된 소셜 메시지로부터 소셜 키워드들(SK)을 추출하는 단계(S3),
상기 방송 수신기 디바이스(BRD)에 상기 수신된 멀티미디어 흐름에 관한 메타데이터를 요청하고 상기 멀티미디어 흐름의 메타데이터로부터 멀티미디어 키워드들(MK)을 추출하는 단계(S4),
상기 멀티미디어 키워드들(MK)과 상기 소셜 키워드들(SK) 사이의 확률적 측정의 결과로서 상관 계수(CoC)를 제공하는 단계(S5),
상기 멀티미디어 흐름과 연관된 소셜 네트워크 쓰레드(thread)의 식별자(OH)를 검색하는 단계(S6), 및
상기 상관 계수(CoC)가 제 1 미리 규정된 임계치(Th1)보다 크면, 상기 소셜 메시지의 텍스트에 상기 검색된 식별자를 부가하는 단계(S7)를 포함하는, 소셜 네트워크 메시지의 연관 방법.
제 1 항에 있어서,
상기 상관 계수가 제 2 미리 규정된 임계치(Th2)보다 크고 상기 제 1 미리 규정된 임계치(Th1) 미만이면, 상기 이용자는 상기 소셜 메시지가 상기 소셜 메시지의 텍스트에 상기 검색된 공식 식별자를 부가하기 전에 상기 검색된 공식 식별자와 관계 있다는 확인을 요구받는, 소셜 네트워크 메시지의 연관 방법.
제 1 항 또는 제 2 항에 있어서,
소셜 키워드들(SK)은, 상기 이용자가 상기 소셜 메시지의 주어진 수의 단어들을 입력하자마자 상기 이용자에 의해 기록된 상기 소셜 메시지로부터 추출되고, 상기 소셜 키워드들은 상기 이용자에 의해 기록된 다음 단어들을 위해 업데이트되는, 소셜 네트워크 메시지의 연관 방법.
제 1 항 또는 제 2 항에 있어서,
소셜 키워드들(SK)은, 상기 이용자가 상기 소셜 메시지를 기록하는 것을 끝냈고 상기 소셜 메시지를 포스팅할 준비가 되었을 때 상기 이용자에 의해 기록된 상기 소셜 메시지로부터 추출되는, 소셜 네트워크 메시지의 연관 방법.
제 1 항 내지 제 4 항 중 어느 한 항에 있어서,
상기 확률적 측정은 상기 멀티미디어 키워드들과 상기 소셜 키워드들 사이의 유사성 측정에 기초하는, 소셜 네트워크 메시지의 연관 방법.
제 5 항에 있어서,
상기 유사성 측정은 코사인 유사성 측정인, 소셜 네트워크 메시지의 연관 방법.
제 1 항 내지 제 6 항 중 어느 한 항에 있어서,
소셜 네트워크 쓰레드의 상기 식별자(OH)는 상기 멀티미디어 흐름과 연관된 메타데이터로부터 검색되는, 소셜 네트워크 메시지의 연관 방법.
제 1 항 내지 제 6 항 중 어느 한 항에 있어서,
소셜 네트워크 쓰레드의 상기 식별자(OH)는 상기 멀티미디어 흐름과 연관된 메타데이터에 포함된 상기 멀티미디어 흐름의 식별자에 의해 서버(HPS)로부터 검색되는, 소셜 네트워크 메시지의 연관 방법.
제 1 항 내지 제 6 항 중 어느 한 항에 있어서,
소셜 네트워크 쓰레드의 상기 식별자(OH)는 상기 방송 멀티미디어 흐름과 연관된 메타데이터로부터 상기 식별자를 생성한 모듈로부터 검색되는, 소셜 네트워크 메시지의 연관 방법.
제 1 항 내지 제 9 항 중 어느 한 항에 있어서,
소셜 네트워크 쓰레드의 상기 식별자(OH)는 해시태그(hashtag)인, 소셜 네트워크 메시지의 연관 방법.
제 1 항 내지 제 10 항 중 어느 한 항에 있어서,
상기 방송 수신기 디바이스(BRD)의 존재는 디지털 리빙 네트워크 연합(Digital Living Network Alliance) 프로토콜 중의 통신 프로토콜들 및 블루투스 프로토콜 중 적어도 하나를 이용하여 디바이스 발견 프로세스 동안 검출되는, 소셜 네트워크 메시지의 연관 방법.
제 1 항 내지 제 11 항 중 어느 한 항에 있어서,
상기 방송 수신기 디바이스(BRD) 및 상기 소셜 디바이스(SD)는 동일한 개체(entity)에 포함되는, 소셜 네트워크 메시지의 연관 방법.
제 1 항 내지 제 12 항 중 어느 한 항에 있어서,
상기 소셜 디바이스(SD) 및 상기 상관 디바이스(CD)는 동일한 개체에 포함되는, 소셜 네트워크 메시지의 연관 방법.
소셜 디바이스(SD)에서 이용자에 의해 기록된 소셜 네트워크 메시지를 방송 수신기 디바이스(BRD)에 의해 수신된 관련된 멀티미디어 흐름과 연관시키기 위한 상관 디바이스(CD)로서, 상기 소셜 디바이스 및 상기 방송 수신기 디바이스와 통신할 수 있는, 상기 상관 디바이스에 있어서:
상기 소셜 디바이스(SD)와 동일한 위치에서 멀티미디어 흐름을 수신하는 상기 방송 수신기 디바이스(BRD)의 존재를 검출하기 위한 수단(DPD),
상기 이용자에 의해 기록된 소셜 메시지로부터 소셜 키워드들(SK)을 추출하기 위한 수단(DPD),
상기 방송 수신기 디바이스(BRD)에 상기 수신된 멀티미디어 흐름에 관한 메타데이터를 요청하고 상기 멀티미디어 흐름의 메타데이터로부터 멀티미디어 키워드들(MK)을 추출하기 위한 수단(CCC),
상기 멀티미디어 키워드들(MK)과 상기 소셜 키워드들(SK) 사이의 확률적 측정의 결과로서 상관 계수(CoC)를 제공하기 위한 수단(CCC),
상기 멀티미디어 흐름과 연관된 소셜 네트워크 쓰레드의 식별자(OH)를 검색하기 위한 수단(SII), 및
상기 상관 계수(CoC)가 제 1 미리 규정된 임계치(Th1)보다 크면, 상기 소셜 메시지의 텍스트에 상기 검색된 식별자를 부가하기 위한 수단(CCC)을 포함하는, 상관 디바이스.
소셜 디바이스(SD)에서 이용자에 의해 기록된 소셜 네트워크 메시지를 방송 수신기 디바이스(BRD)에 의해 수신된 관련된 멀티미디어 흐름과 연관시키기 위한 상관 디바이스(CD) 내에서 구현될 수 있는 컴퓨터 프로그램에 있어서,
상기 상관 디바이스(CD)는 상기 소셜 디바이스 및 상기 방송 수신기 디바이스와 통신할 수 있고, 상기 프로그램은, 상기 프로그램이 상기 디바이스 내에서 로딩되고 실행될 때:
상기 소셜 디바이스(SD)와 동일한 위치에서 멀티미디어 흐름을 수신하는 상기 방송 수신기 디바이스(BRD)의 존재를 검출하는 단계(S1),
상기 이용자에 의해 기록된 소셜 메시지로부터 소셜 키워드들(SK)을 추출하는 단계(S3),
상기 방송 수신기 디바이스(BRD)에 상기 수신된 멀티미디어 흐름에 관한 메타데이터를 요청하고 상기 멀티미디어 흐름의 메타데이터로부터 멀티미디어 키워드들(MK)을 추출하는 단계(S4),
상기 멀티미디어 키워드들(MK)과 상기 소셜 키워드들(SK) 사이의 확률적 측정의 결과로서 상관 계수(CoC)를 제공하는 단계(S5),
상기 멀티미디어 흐름과 연관된 소셜 네트워크 쓰레드의 식별자(OH)를 검색하는 단계(S6), 및
상기 상관 계수(CoC)가 제 1 미리 규정된 임계치(Th1)보다 크면, 상기 소셜 메시지의 텍스트에 상기 검색된 식별자를 부가하는 단계(S7)를 실행하는 지시들을 포함하는, 컴퓨터 프로그램.