KR20180063051A - 어텐션 검출에 기초한 미디어 콘텐츠 제어를 위한 방법들, 시스템들 및 장치 - Google Patents

어텐션 검출에 기초한 미디어 콘텐츠 제어를 위한 방법들, 시스템들 및 장치 Download PDF

Info

Publication number
KR20180063051A
KR20180063051A KR1020187006065A KR20187006065A KR20180063051A KR 20180063051 A KR20180063051 A KR 20180063051A KR 1020187006065 A KR1020187006065 A KR 1020187006065A KR 20187006065 A KR20187006065 A KR 20187006065A KR 20180063051 A KR20180063051 A KR 20180063051A
Authority
KR
South Korea
Prior art keywords
block
information
media content
media
control operation
Prior art date
Application number
KR1020187006065A
Other languages
English (en)
Inventor
마크 프랜시스 럼레이크
조엘 엠 포겔슨
토마스 에드워드 홀렌더
Original Assignee
톰슨 라이센싱
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 톰슨 라이센싱 filed Critical 톰슨 라이센싱
Publication of KR20180063051A publication Critical patent/KR20180063051A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508—Management of client data or end-user data
    • H04N21/4532—Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42212—Specific keyboard arrangements
    • H04N21/42218—Specific keyboard arrangements for mapping a matrix of displayed objects on the screen to the numerical key-matrix of the remote control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Human Computer Interaction (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 원리들의 양태는 적어도 미디어 제어 동작을 수행하는 방법들, 시스템들, 장치, 그리고 명령들을 실행하기 위한 컴퓨터 실행가능 코드에 관련된다. 이것은 제공된 미디어 콘텐츠 및 어텐션 정보를 모니터링하는 것; 어텐션 정보에 기초하여 어텐션 검출을 결정하는 것; 어텐션 검출 및 부가 어텐션 정보에 기초하여 필터 조건을 평가하는 것; 및 필터 조건의 긍정적인 결정에 기초하여 미디어 제어 동작을 제공하는 것을 포함할 수도 있다. 방법들, 시스템들 및 장치 그리고 컴퓨터 실행가능 코드는 또한 미디어 제어 동작을 디스플레이할 수도 있다.

Description

어텐션 검출에 기초한 미디어 콘텐츠 제어를 위한 방법들, 시스템들 및 장치
관련된 가출원에 대한 참조
이 출원은 2015 년 9 월 1 일에 출원된, 명칭이 "Methods, Systems and Apparatus for Media Content Control Based on Attention Detection" 인, 미국 가출원 제 62/212668 호로부터의 우선권을 주장하며, 그 내용은 본 명세서에 참조로서 전부 통합된다.
기술 분야
실시형태들의 본 원리들은 일반적으로 오디오/비디오 미디어 콘텐츠를 디스플레이하기 위한 방법 및 장치에 관련된다. 특히, 본 원리들은 어텐션 (attention) 검출에 기초한 미디어 콘텐츠 제어를 위한 방법들, 시스템들 및 장치에 관련된다.
많은 전자 및 컴퓨팅 디바이스들은 다수의 사용자들의 청중에게 미디어 콘텐츠 (예를 들어, 이미지, 오디오 및/또는 비디오 콘텐츠) 를 디스플레이한다. 하지만, 그것은 사용자들의 하나 이상이 시간의 기간 동안 미디어 콘텐츠를 관찰하는 것을 정지할 때 문제가 있을 수 있다. 예를 들어, 하나 이상의 사용자들은, 콘텐츠가 디스플레이되고 있는 동안 그들이 룸을 떠날 때 콘텐츠를 놓칠 수도 있다는 리스크가 있다. 일시정지 버튼이 사용되는 경우, 나머지 사용자(들) 은 알려지지 않은 양의 시간 동안 대기하는 유휴를 겪게 된다. 대안으로, 일시정지에 바로 후속하는 콘텐츠가 시청할 가치가 없을 수도 있고; 이로써 사용자는 일시정지 동작이 중지될 때 불필요한 콘텐츠를 겪게 된다. 또는, 관련 콘텐츠를 찾으려고 노력하는 것이 시간 소모적이고 부정확한 프로세스일 수도 있다.
본 발명의 특징들 및 이점들은 하기 기재된 도면들과 관련되어 취해질 때 하기의 상세한 설명으로부터 명백해질 것이다:
도 1 은 본 원리들에 따른 시스템의 개략적인 다이어그램을 도시한다.
도 2 는 본 원리들에 따른 장치의 개략적인 다이어그램을 도시한다.
도 3a 는 본 원리들에 따른 방법의 플로우 다이어그램을 도시한다.
도 3b 는 본 원리들에 따른 미디어 콘텐츠 제어 동작(들) 을 제공하기 위한 방법의 플로우 다이어그램을 도시한다.
도 4 는 본 원리들에 따른 방법의 플로우 다이어그램을 도시한다.
도 5 는 본 원리들에 따른 방법의 플로우 다이어그램을 도시한다.
도 6 은 본 원리들에 따른 방법의 플로우 다이어그램을 도시한다.
도 7 은 본 원리들에 따른 방법의 플로우 다이어그램을 도시한다.
도 8 은 본 원리들에 따른 방법의 미디어 동작(들)을 디스플레이하기 위한 사용자 인터페이스의 개략적 다이어그램을 도시한다.
개요
하나 이상의 사용자들이 미디어 콘텐츠를 관찰하는 것을 정지할 때 혼란을 최소화할 필요가 있다. 예를 들어, 다수의 시청자들이 동일한 콘텐츠를 시청하고 있고 이들 중 하나가 복귀할 것을 계획하면서 룸을 떠날 때 사람(들) 이 미디어 콘텐츠에 대해 놓치는 것을 방지하는 방법이 필요하다.
본 원리들의 일 양태는 적어도 미디어 콘텐츠 제어 동작을 수행하는 방법들, 시스템들, 장치들, 그리고 명령들을 실행하기 위한 컴퓨터 실행가능 코드에 관련된다. 이것은 제공된 미디어 콘텐츠 및 어텐션 정보를 모니터링하는 것, 어텐션 정보에 기초하여 어텐션 검출을 결정하는 것; 어텐션 검출 및 부가 어텐션 정보에 기초하여 필터 조건을 평가하는 것; 및 필터 조건의 긍정적인 결정에 기초하여 미디어 제어 동작을 제공하는 것을 포함할 수도 있다. 방법들, 시스템들 및 장치들, 그리고 컴퓨터 실행가능 코드는 또한 미디어 제어 동작을 디스플레이할 수도 있다.
부가 어텐션 정보는 적어도 이벤트 기록 또는 메타데이터일 수도 있다. 이벤트 기록 정보는 미디어 콘텐츠의 복수의 관찰자들의 어텐션에 관한 정보를 포함할 수도 있다. 이벤트 기록 정보는 시간 지속기간, 관찰자들의 수, 미디어 콘텐츠의 타입, 시간 정보, 생체인식 정보, 관찰 패턴, 시간 정보, 디스플레이 정보, 및 보조 디바이스들의 그룹으로부터 선택된 적어도 하나를 포함할 수도 있다.
이벤트 기록 정보는 적어도 이벤트 기록을 포함한다. 이벤트 기록은 미디어 콘텐츠의 시간에 관한 타임 스탬프, 미디어 콘텐츠의 시간에서의 미디어 콘텐츠 정보, 및 미디어 콘텐츠의 시간에서의 적어도 관찰자의 적어도 어텐션 정보 중 적어도 하나를 포함할 수도 있다. 미디어 콘텐츠 정보는, 얼마나 중요한 장면인지의 표시, 플롯 정보 등을 포함할 수도 있다. 이벤트 기록 정보는 복수의 이벤트 기록들의 로그를 포함하고, 로그는 이벤트 기록들의 각각의 각 타임 스탬프와 동기화된다. 어텐션 검출은 관찰자가 임계 이상의 미디어 콘텐츠에 대한 어텐션을 상실했다는 결정에 기초할 수도 있다.
필터 조건은 적어도 관찰자가 미디어 콘텐츠로 어텐션을 복귀했을 경우 긍정적일 수도 있다. 필터 조건은 메타데이터에 기초하여 결정될 수도 있으며, 메타데이터는 하루중 시간, 요일, 기상 조건, 시청자의 연령 또는 성별, 시청 화면의 크기, 일일 TV 시청 시간, 지리적 위치, 및 선호도 프로파일들의 그룹으로부터 선택된 적어도 하나이다.
미디어 제어 동작을 제공하는 것은, 적어도 미디어 제어 동작을 제안하거나 활성화하는 것이다. 미디어 제어 동작은 되감기 (rewind), 일시정지 (pause), 빨리감기 (fast forward) 및 미디어에서 미리 지정된 곳으로 점핑하는 타임 스탬프의 그룹으로부터 선택된 적어도 하나에 대응할 수도 있다.
상세한 설명
본 명세서에서 사용된 바와 같이, "미디어 콘텐츠" 는 임의의 소스로부터 수신된 오디오, 비디오, 및/또는 이미지 미디어 콘텐츠의 임의의 타입을 포함한, 임의의 타입의 미디어를 포함하도록 정의될 수도 있다. 예를 들어, "미디어 콘텐츠" 는 인터넷 콘텐츠, 스트리밍 서비스들 (예를 들어, M-Go, Netflix, Hulu, Amazon), 기록된 비디오 콘텐츠, 비디오-온-디맨드 콘텐츠, 브로드캐스트 콘텐츠, 텔레비전 콘텐츠, 텔레비전 프로그램들 (또는 프로그래밍), 광고들, 상업광고들, 뮤직, 영화, 비디오 클립들, 인터렉티브 게임들, 네트워크 기반 엔터테인먼트 어플리케이션들, 및 다른 미디어 어셋 (asset) 들을 포함할 수도 있다. 미디어 어셋들은 오디오 파일들, 이미지 파일들 또는 비디오 파일들과 같은, 임의의 종류 및 모든 종류의 디지털 미디어 포맷들을 포함할 수도 있다.
본 원리들의 일 양태는 미디어 콘텐츠 제어 동작(들) 옵션들을 디스플레이에 대해 제공하기 위한 시스템(들), 장치, 및 방법(들) 에 관련된다. 특히, 본 원리들의 일 양태는 미디어 콘텐츠의 하나 이상의 관찰자들의 어텐션 변화들 (예를 들어, 어텐션의 상실 또는 복귀) 의 검출에 기초하여 미디어 콘텐츠 제어 동작(들) 옵션들을 디스플레이에 대해 제공하는 것에 관련된다.
본 원리들의 일 양태는 미디어 콘텐츠 관찰자들에 관한 어텐션 정보를 수신하는 것으로 지향된다. 예를 들어, 일 양태는 센서들 (예를 들어, 카메라들, 마이크로폰들) 로부터 어텐션 정보를 수신하는 것으로 지향된다. 일 예에서, 어텐션 정보는 관찰자가 미디어 콘텐츠를 관찰하고 있는지 여부를 식별하기 위한 시각 및 청각 정보에 관련될 수도 있다. 일 예에서, 어텐션 값이 결정될 수도 있다. 예를 들어, 어텐션 값은 각각의 획득된 관찰자에 대해 1 만큼 증분되고 상실된 관찰자에 대해 1 만큼 감분될 수도 있다. 대안으로, 관찰자의 액션들에 기초하여 관찰자에 대해 부분적인 어텐션 값을 결정할 수도 있다. 예를 들어, 사람의 어텐션은 소수 어텐션 단위 (1.0 에서 0.9 로 0.8 로... 0 으로) 로 측정될 수도 있다.
본 원리들의 일 양태는 영화상영 중에 사람이 룸을 떠나고 후속하여 복귀할 때와 같은, 특정 조건들에 기초하여 미디어 제어 동작들 (예를 들어, 일시정지, 되감기) 를 제공하는 것에 관련된다. 일 예에서, 본 원리들의 일 양태는 사람이 룸 및/또는 시청 영역을 떠났을 때를 결정 및/또는 인식할 수도 있는 장치 (예를 들어, 미디어 플레이어, TV, 블루-레이 플레이어, 디지털 셋톱 박스, 비디오 게임 시스템, 컴퓨터, 태블릿, 폰) 로 지향된다. 사람이 특정 조건들 하에서 복귀할 때, 장치는 사람이 룸/시청 영역을 떠났을 때의 사간으로 콘텐츠를 되감기하도록 제안할 수도 있다.
본 원리들의 일 양태는, (i) 관찰자(들) 이 미디어 콘텐츠를 관찰하고 있지 않은 시간 지속기간; (ii) 미디어 콘텐츠를 관찰하고 있거나 관찰하고 있지 않은 관찰자(들) 의 수; (iii) 미디어 콘텐츠를 관찰하고 있는 관찰자들의 총 수; (iv) 관찰자(들) 이 미디어 콘텐츠를 관찰하고 있지 않은 시간 동안 제공되는 미디어 콘텐츠의 타입; (v) 시간 정보 (예를 들어, 요일, 하루중 시간); (vi) 지리학적 정보 (예를 들어, 위치, 기상); (vii) 관찰자 정보 (예를 들어, 연령, 제스처들, 선호도들, 생체인식 정보); (viii) 관찰자 영역 내의 보조 디바이스들 (예를 들어, 폰들, 태블릿들) 및 그러한 디바이스들과 관찰자의 상호작용; (ix) 디스플레이 정보 (예를 들어, 크기); (x) 관찰 패턴들 (예를 들어, 일일 관찰된 콘텐츠의 총 시간, 일일 관찰된 평균 콘텐츠) 과 같은, 정보에 기초하여 미디어 콘텐츠 제어 동작들을 제공하는 것에 관련된다.
본 원리들의 일 양태는 메타데이터에 기초한 미디어 제어 동작들에 관련된다. 일 예에서, 메타데이터는 특정 장면으로 복귀하는 가능성을 결정하기 위해 분석될 수도 있다. 예를 들어, 되감기 미디어 제어 동작은, 부재의 시청자가 플롯에 필수적인 정보를 놓쳤음을 메타데이터가 표시하는 경우 제공될 수도 있다.
본 원리들의 일 양태는 미디어 제어 동작을 제공할지 여부를 결정하기 위해 메타데이터를 분석하는 것으로 지향된다. 그러한 메타데이터는 하루중 시간, 요일, 기상 조건, 시청자들의 연령, 시청자들의 성별, 시청 화면의 크기, 일일 TV 시청 시간, 지리학적 위치 등을 포함할 수도 있다. 예를 들어, 되감기 미디어 제어 동작은 늦은 시간 대 (예를 들어, 오후 9 시 이후) 동안 시청자들이 부재라는 결정에 기초하여 제공될 수도 있다. (예를 들어, 시청자가 복귀할 때와 같은) 조건 결정에 기초하여, 메타데이터의 로그는 임의의 높은 관심 이벤트들에 대해 체크될 수도 있다. 높은 관심 이벤트들은 드라마에서 플롯 트위스트, 스포츠 콘텐츠에서 플레이들 또는 스코어링 이벤트들 등을 포함할 수도 있다.
메타데이터는 사용자 프로파일들에 관한 정보를 포함할 수도 있다. 프로파일은 선호도 정보 (예를 들어, 스포츠를 좋아하고, 코미디를 좋아함) 를 포함할 수도 있다. 미디어 제어 동작들은 그러한 사용자 프로파일들에 관한 메타데이터에 기초하여 제공될 수도 있다. 예를 들어, 되감기 옵션이 제공되는지 여부는 사용자의 선호도들에 의존할 수도 있다. 또 다른 예에서, 콘텐츠가 스포츠에 관련되고 사용자 프로파일이 그러한 사용자가 스포츠를 좋아하는 것을 표시하면, 시스템은 되감기 동작을 제공할 수도 있다. 하지만, 콘텐츠가 코미디에 관련되고 사용자 프로파일이 사용자가 코미디를 싫어하는 것을 표시하면, 되감기 동작이 제안되지 않을 수도 있다.
도 1 은 본 원리들에 따른 시스템 (100) 의 개략적인 다이어그램을 도시한다. 시스템 (100) 은 장치 (예를 들어, 디바이스) 일 수도 있고, 또는 다수의 디바이스들 또는 장치들로 구성될 수도 있다. 장치는 셋톱 박스, 블루-레이 플레이어, 텔레비전, 스마트 텔레비전, 게임 콘솔, 랩톱, 풀-사이즈 개인용 컴퓨터, 스마트 폰, 태블릿 PC 등을 포함하는, 명령들을 프로세싱하고 디스플레이가능한 이미지들을 생성할 수 있는 임의의 디바이스로 구성될 수 있다. 시스템 (100) 은 미디어 콘텐츠 모듈 (101), 어텐션 검출 모듈 (102), 미디어 커맨드(들) 모듈 (103), 프로세싱 유닛(들) (104), 및 메모리 (105) 를 포함할 수도 있다.
미디어 콘텐츠 모듈 (101) 은 하나 이상의 소스들로부터 미디어 콘텐츠를 수신할 수도 있다. 미디어 콘텐츠는 브로드캐스트 (예를 들어, 텔레비전 및/또는 라디오), 무선 통신, 케이블, 위성 브로드캐스팅, 인터넷, 또는 임의의 다른 통신 매체를 포함하는 임의의 통신 매체를 통해 송신될 수도 있다. 미디어 콘텐츠 모듈 (101) 은 ABC (American Broadcasting Company), NBC (National Broadcasting Company), CBS (Columbia Broadcasting System) 또는 임의의 다른 브로드캐스팅 서비스와 같은 내셔널 브로드캐스트 서비스와 같은 브로드캐스트 제휴 관리자로부터 미디어 콘텐츠를 수신할 수도 있다.
미디어 콘텐츠 모듈 (101) 은 미디어 콘텐츠 데이터를 수신 및 프리-프로세싱할 수도 있다. 프리-프로세싱은 데이터를 아날로그 포맷으로부터 디지털 포맷으로 컨버팅하는 것을 포함할 수도 있다. 미디어 콘텐츠 모듈 (101) 은 타임 스탬프 정보를 포함하는 메타데이터를 더 수신할 수도 있다. 타임 스탬프들은 미디어 콘텐츠의 장면들 또는 플롯들의 시작 및 종료를 식별할 수도 있다. 메타데이터는 또한, 본 원리들에 따라 본 명세서에 기술된 임의의 다른 정보를 포함할 수도 있다.
미디어 콘텐츠 모듈 (101) 은 장치, 디바이스, 등일 수도 있다. 미디어 콘텐츠 모듈 (101) 은 전기 신호들, 파동 (wave) 들, 등을 수신할 수도 있다.
어텐션 검출 모듈 (102) 은 어텐션 정보를 수신할 수도 있다. 어텐션 정보는 어텐션 검출과 관련될 수도 있다. 어텐션 정보는 미디어 콘텐츠의 하나 이상의 관찰자들의 어텐션과 관련될 수도 있다. 어텐션 정보는 관찰자가 수신된 미디어 콘텐츠를 관찰하는 것에 대해 중지했는지, 시작했는지 또는 복귀했는지 여부의 결정을 허용한다. 일 예에서, 어텐션 검출 모듈 (102) 은 관찰자의 어텐션의 상실 또는 획득을 결정 및/또는 인식하게 하는 정보를 수신할 수도 있다. 예를 들어, 어텐션 검출 모듈 (102) 은 사람이 언제 영역에 들어왔는지 또는 떠났는지 그리고 그러한 입구/출구 지점(들)이 디스플레이되고 있는 미디어 콘텐츠에 대해 어떻게 맵핑하는지를 추적할 수도 있다. 일 예에서, 어텐션 검출 모듈 (102) 은 어텐션 정보 (예를 들어, 사용자가 미디어 콘텐츠를 관찰하고 있는지 여부) 를 감지하기 위한 하나 이상의 센서들을 포함할 수도 있다. 대안적으로, 어텐션 검출 모듈 (102) 은 시스템 (100) 외부에 위치된 센서들로부터 정보를 수신할 수도 있다. 센서들은 미디어 콘텐츠 관찰에 관한 시각적, 오디오 및/또는 기타 정보를 감지할 수도 있다. 센서 소스들은 카메라, 검출 유닛, 이미지 캡쳐 디바이스, 모션 감지 디바이스, 열 감지 디바이스, 생체인식 피드백 디바이스, 및 마이크로폰 중 하나 이상을 포함할 수도 있다.
일 예에서, 어텐션 검출 모듈 (102) 은 사용자가 룸 또는 관찰 영역 내에 있는지 여부에 관한 정보를 수신할 수도 있다. 일 예에서, 어텐션 검출 모듈 (102) 은 영역을 커버하는 카메라들로부터 정보를 수신할 수도 있다. 영역은 미디어 콘텐츠의 정상적인 시청 및/또는 청취 영역과 유사하거나 복제하는 청취 및/또는 시야에 대응할 수도 있다.
일 예에서, 어텐션 검출 모듈 (102) 은 하나 이상의 미디어 콘텐츠 관찰자들의 생체인식 정보를 수신할 수도 있다. 생체인식 정보는 비디오 카메라, 마이크로폰, 온도계 및/또는 다른 생체인식 측정 디바이스들과 같은 임의의 소스들로부터 수신될 수도 있다. 어텐션 검출 모듈 (102) 은 관찰자의 시선에 관한 정보 (예를 들어, 시선이 돌려지고 있는지 또는 시청중인 화면 상에 고정되는지 여부) 를 수신할 수도 있다. 어텐션 검출 모듈 (102) 은 영역에서의 대화 레벨에 관한 정보를 수신할 수도 있다.
어텐션 검출 모듈 (102) 은 다른 생체인식 측정치들 (예를 들어, 사용자들의 온도, 사용자들의 맥박수) 를 수신할 수도 있다. 어텐션 검출 모듈 (102) 은 미디어 콘텐츠의 관찰에 관한 다른 사용자 정보를 수신할 수도 있다. 이는 표정들, 모션들 또는 인간 인식을 위한 다른 특징들과 관련된 정보를 포함할 수도 있다. 예를 들어, 어텐션 검출 모듈 (102) 은 머리 방향, 눈의 방향 추적 및 어텐션 정보와 관련된 임의의 다른 정보에 기초하여 어텐션 정보를 결정할 수도 있다.
일 예에서, 어텐션 검출 모듈 (102) 은 수신된 정보에 기초하여 하나 이상의 관찰자들의 어텐션 레벨을 결정할 수도 있다. 대안적으로, 어텐션 검출 모듈 (102) 은 어텐션 레벨(들)에 관한 결정들을 위해 수신된 정보를 프로세싱 유닛(들) (104) 에 송신할 수도 있다.
어텐션 검출 모듈 (102) 은 어텐션 이벤트 기록의 생성에 대한 정보를 더 수신할 수도 있다. 기록은 관찰자(들)의 어텐션 정보와 관련된 기록들의 로그의 일부일 수도 있다. 어텐션 검출 모듈 (102) 은 어텐션 이벤트 기록을 생성하거나 또는 어텐션 이벤트 기록을 생성하기 위한 정보를 프로세싱 유닛(들) (104) 에 제공할 수도 있다. 어텐션 이벤트 기록은 어텐션 이벤트가 검출된 시간에 대응하는 타임 스탬프들, 미디어 콘텐츠 식별 정보 (그 시간에 미디어 콘텐츠를 식별함), 관찰자 식별 정보 (어텐션의 획득 또는 부족이 검출된 관찰자를 식별함), 및 임의의 다른 관련 메타데이터 (예를 들어, 장면 메타데이터, 프로그램 장르, 프로그램 지속기간, 시작 시간 , 종료 시간, 쇼 정보, 재방송 또는 신규 릴리스, 중요한 장면 또는 플롯 정보, 프로그램 품질 표시들, 예를 들어 평가, 영화 또는 텔레비전 쇼 정보) 를 포함할 수도 있다.
어텐션 검출 모듈 (102) 은 장치, 디바이스, 등일 수도 있다. 어텐션 검출 모듈 (102) 은 전기 신호들, 파동들, 등을 수신할 수도 있다.
미디어 커맨드(들) 모듈 (103) 은 미디어 콘텐츠 동작 커맨드들을 수신할 수도 있다. 미디어 콘텐츠 동작 커맨드들은 (예를 들어, 원격을 통해) 사용자로부터 커맨드들을 수신하는 통신 인터페이스를 통해 수신될 수도 있다. 미디어 커맨드(들) 모듈 (103) 은 임의의 매체를 통해 임의의 입력 디바이스들 (예를 들어, 키보드, 마우스, 키패드, 이미지 캡처 디바이스, 모션 감지 디바이스, 마이크로폰) 로부터 정보를 수신할 수 있다. 미디어 커맨드(들) 모듈 (103) 은 미디어 콘텐츠의 동작의 제어에 관한 정보 (예를 들어, 일시정지, 되감기, 빨리 감기 및 특정 타임 스탬프 선택과 관련된 커맨드들) 를 수신할 수도 있다.
미디어 커맨드(들) 모듈 (103) 은 장치, 디바이스, 등일 수도 있다. 미디어 커맨드(들) 모듈 (103) 은 전기 신호들, 파동들, 등을 수신할 수도 있다.
프로세싱 유닛(들) (104) 은 시스템 버스를 통해 다른 컴포넌트들에 동작가능하게 커플링된 적어도 프로세서 (CPU) 를 포함한다. 프로세싱 유닛(들) (104) 은 미디어 콘텐츠 모듈 (101), 어텐션 검출 모듈 (102) 및 미디어 커맨드(들) 모듈 (103) 로부터 수신된 미디어 콘텐츠 정보를 프로세싱할 수도 있다. 프로세싱 유닛(들) (104) 은 컴퓨터 코드를 실행함으로써 본 원리들에 따른 다양한 프로세싱 동작들을 수행하도록 구성될 수도 있다. 일 예에서, 프로세싱 유닛(들) (104) 은 도 3 내지 도 7 과 관련하여 기술된 기법들을 수행할 수도 있다. 일 예에서, 프로세싱 유닛(들) (104) 은 미디어 콘텐츠 모듈 (101), 어텐션 검출 모듈 (102) 및/또는 미디어 커맨드(들) 모듈 (103) 의 동작을 위한 프로세싱을 수행할 수도 있다.
일 예에서, 프로세싱 유닛(들) (104) 은 본 원리들에 따라 어텐션 결정들을 수행할 수도 있다. 프로세싱 유닛(들) (104) 은 사용자가 미디어 콘텐츠를 관찰하고 있는지 여부의 결정에 관한 프로세싱 동작들을 수행할 수도 있다. 일 예에서, 프로세싱 유닛(들) (104) 은 사용자의 어텐션의 상실 또는 획득을 인식하기 위한 결정들을 수행할 수도 있다. 예를 들어, 프로세싱 유닛(들) (104) 은 사람이 미디어 플레이어로 영역에 들어갔는지/떠났는지의 여부 및 그러한 입구/출구 지점들이 시청되고 있는 콘텐츠에 대해 어떻게 맵핑하는지에 관한 결정들을 수행할 수도 있다. 예를 들어, 프로세싱 유닛(들) (104) 은 어텐션의 획득을 표시하기 위해 감지된 어텐션이 임계보다 높은지 또는 낮은지를 결정할 수도 있다. 다른 예에서, 프로세싱 유닛(들) (104) 은 어텐션의 상실을 표시하기 위해 감지된 어텐션이 임계보다 높은지 또는 낮은지를 결정할 수도 있다.
프로세싱 유닛(들) (104) 은 감지된 어텐션 정보에 기초하여 어텐션 결정들을 수행할 수도 있다. 프로세싱 유닛(들) (104) 은 수신된 시각 정보, 오디오 정보, 생체인식 측정치들 (예를 들어, 사람의 시선, 온도, 맥박에 관한 정보), 표정들, 모션들 또는 인간 인식을 위한 다른 특징들에 기초하여 결정들을 수행할 수도 있다.
일 예에서, 프로세싱 유닛(들) (104) 은 미디어 콘텐츠 관찰자들에 관한 메타데이터를 수신하고 프로세싱할 수도 있다. 메타데이터는 관찰자(들)와 연관된 사용자 프로파일들에 관한 정보를 포함할 수도 있다. 프로파일은 선호도 정보 (예를 들어, 스포츠를 좋아함, 코미디를 싫어함) 를 포함할 수도 있다. 메타데이터 정보는 메모리 (105) 에 저장될 수도 있다.
프로세싱 유닛(들) (104) 은 어텐션 검출 이벤트 기록들을 생성할 수도 있다. 프로세싱 유닛(들) (104) 은 어텐션 이벤트 기록을 생성할 수도 있다. 어텐션 이벤트 기록은 어텐션 이벤트가 검출된 시간에 대응하는 타임 스탬프들, 미디어 콘텐츠 식별 정보 (그 시간에 미디어 콘텐츠를 식별함), 관찰자 식별 정보 (어텐션의 획득 또는 부족이 검출된 관찰자를 식별함), 및 임의의 다른 관련 메타데이터 (예를 들어, 장면 메타데이터, 프로그램 장르, 프로그램 지속기간, 시작 시간, 종료 시간, 쇼 정보, 재방송 또는 신규 릴리스, 중요한 장면 또는 플롯 정보, 프로그램 품질 표시들, 예를 들어 평가, 영화 또는 텔레비전 쇼 정보) 를 포함할 수도 있다. 어텐션 이벤트 기록들은 미디어 제어 동작을 제안할지 여부를 결정하는 필터링 시스템에 대한 트리거로서 사용될 수도 있다. 어텐션 이벤트 기록들은 메모리 (105) 에 저장될 수도 있다. 프로세싱 유닛(들) (104) 은 미디어 제어 동작을 제안할지 여부를 결정하는 필터링 시스템에 대한 트리거들로서 어텐션 이벤트 기록들을 사용할 수도 있다.
프로세싱 유닛(들) (104) 은 어텐션 이벤트 기록들 및/또는 추가 메타데이터에 기초하여 어텐션 또는 필터 결정들을 수행할 수도 있다. 예를 들어, 프로세싱 유닛(들) (104) 은 (i) 관찰자(들)이 미디어 콘텐츠를 관찰하지 않는 시간 지속기간; (ii) 미디어 콘텐츠를 관찰하거나 관찰하지 않는 관찰자(들)의 수; (iii) 미디어 콘텐츠를 관찰하는 관찰자들의 총 수; (iv) 관찰자(들)이 미디어 콘텐츠를 관찰하지 않는 동안 제공되고 있는 미디어 콘텐츠의 타입; (v) 시간 정보 (예를 들어, 요일, 하루중 시간); (vi) 지리적 정보 (예를 들어, 위치, 날씨); (vii) 관찰자 정보 (연령, 제스처들, 선호도들, 생체인식 정보); (viii) 보조 디바이스들 (예를 들어, 폰들, 태블릿들) 및 관찰자의 그러한 디바이스들과의 상호작용; (ix) 디스플레이 정보 (예를 들어, 사이즈); (x) 관찰 패턴들 (예를 들어, 하루에 관찰되는 콘텐츠의 총 시간, 하루에 관찰된 평균 콘텐츠) 중 하나 이상에 기초하여 필터 결정들을 수행할 수도 있다. 프로세싱 유닛(들) (104) 은 미디어 제어 동작을 제안할지 여부를 결정하기 위해 필터 결정들을 수행할 수도 있다. 프로세싱 유닛(들) (104) 은 도 3 내지 도 7 과 관련하여 기술된 바와 같이 필터 결정들을 수행할 수도 있다.
일 예에서, 프로세싱 유닛(들) (104) 은 메타데이터 (예를 들어, 사용자 프로파일들, 미디어 콘텐츠 메타데이터) 에 기초하여 결정들을 추가로 수행할 수도 있다. 프로세싱 유닛(들) (104) 은 미디어 제어 동작을 제공할지 여부를 결정하기 위해 메타데이터를 분석할 수도 있다. 이러한 메타데이터는 하루중 시간, 요일, 기상 조건, 시청자들의 연령 또는 성별, 시청중인 화면의 사이즈, 하루에 소비되는 콘텐츠의 시간들, 지리적 위치 또는 임의의 다른 관찰자 정보를 포함할 수도 있다. 예를 들어, 프로세싱 유닛(들) (104) 은 국부적으로 개발된 이전 데이터로부터 또는 동일한 콘텐츠의 다른 소비로부터 결정될 수 있는 특정 장면으로 복귀할 가능성을 결정하기 위해 메타데이터를 분석할 수도 있다. 메타데이터가 부재한 시청자가 플롯에 필수적인 정보를 놓친 것을 나타내면, 되감기 미디어 제어 동작이 제공될 수도 있다. 다른 예에서, 되감기 미디어 제어 동작은 시청자들이 늦은 시간 (예를 들어, 오후 9 시 이후) 동안 부재한다는 결정에 기초하여 제공될 수도 있다. 프로세싱 유닛(들) (104) 은 임의의 높은 관심 이벤트들에 대한 메타데이터의 로그를 체크할 수도 있다. 높은 관심 이벤트들은 드라마에서의 플롯 트위스트들, 스포츠 콘텐츠에서의 플레이들 또는 스코어링 이벤트들 등을 포함할 수도 있다.
다른 예에서, 프로세싱 유닛(들) (104) 은 사용자 프로파일들에 관련된 메타데이터를 분석할 수도 있다. 프로파일은 선호도 정보 (예를 들어, 스포츠를 좋아함, 코미디를 싫어함) 를 포함할 수도 있다. 프로세싱 유닛(들) (104) 은 사용자 프로파일들에 표시된 사용자 선호도들에 기초하여 프로세싱 결정들을 수행할 수도 있다. 예를 들어, 콘텐츠가 스포츠와 관련되고 사용자 프로파일이 그러한 사용자가 스포츠를 좋아한다는 것을 나타내면, 시스템은 되감기 동작을 제공할 수도 있다. 그러나, 콘텐츠가 코미디와 관련되고 사용자 프로파일이 사용자가 코미디를 좋아하지 않는다고 나타내면, 되감기 동작은 제안되지 않을 수도 있다. 즉, 콘텐츠 자체의 양태들은 다양한 미디어 제어 동작들이 발생하는지 여부를 결정할 수도 있다 (예를 들어, 콘텐츠가 30 분보다 짧으면 콘텐츠는 되감기되지 않는다).
프로세싱 유닛(들) (104) 은 미디어 콘텐츠 제어 동작(들)을 제공할 수도 있다. 제공하는 것은 그러한 미디어 콘텐츠를 제안하거나 활성화하는 것일 수도 있다. 예를 들어, 프로세싱 유닛(들) (104) 은 미디어 콘텐츠 제어 동작(들)의 디스플레이 옵션들을 제안할 수도 있다. 일 예에서, 프로세싱 유닛(들) (104) 은 미디어 제어 동작들 (예를 들어, 되감기, 일시정지, 빨리 감기, 미디어 콘텐츠를 특정 타임 스탬프로 설정) 의 디스플레이 제의를 제공할 수도 있다. 예를 들어, 프로세싱 유닛(들) (104) 은 사용자가 룸을 떠날 때의 장면의 작은 이미지 및 되감기 옵션의 표시를 갖는 아이콘을 디스플레이에 제공할 수도 있다. 프로세싱 유닛(들) (104) 은 또한, 미디어 제어 동작들 (예를 들어, 되감기, 일시정지, 빨리 감기, 미디어 콘텐츠를 특정 타임 스탬프로 설정) 을 수행하거나 활성화할 수도 있다. 프로세싱 유닛(들) (104) 은 그래픽 프로세싱, 이미지, 오디오 및/또는 비디오 인코딩/디코딩, 및 오디오 인코딩/디코딩을 옵션적으로 더 수행할 수도 있다.
메모리 (105) 는 미디어 콘텐츠 모듈 (101), 어텐션 검출 모듈 (102) 및 미디어 커맨드(들)모듈 (103) 중 하나 이상으로부터 수신된 정보를 저장하도록 구성 될 수도 있다. 메모리 (105) 는 다양한 메모리 타입들 중 하나 이상일 수도 있다. 예를 들어, 메모리 (105) 는 HDD, DRAM, 캐시, ROM (Read Only Memory), RAM (Random Access Memory), 디스크 저장 디바이스 (예를 들어, 자기 또는 광 디스크 저장 디바이스), 솔리드 스테이트 자기 디바이스 등 중 하나 이상일 수도 있다.
메모리 (105) 는 도 3 내지 도 7 에 따른 기법들을 수행하도록 구성된 컴퓨터 실행가능한 명령들을 저장할 수도 있다. 실행가능한 명령들은 상술한 바와 같이 프로세싱 유닛(들) (104) 에 의해 액세스 가능하다. 실행가능한 명령들은 랜덤 액세스 메모리 ("RAM") 에 저장될 수도 있거나 또는 비-일시적인 컴퓨터 판독가능 매체에 저장될 수 있다. 이러한 비-일시적인 컴퓨터 판독가능 매체는 예를 들어, 전자, 자기, 광학, 전자기 또는 반도체 매체와 같은 다수의 물리적 매체 중 임의의 매체를 포함할 수 있다. 적합한 비-일시적인 컴퓨터 판독가능 매체의 보다 구체적인 예들은 플로피 디스켓들 또는 하드 드라이브들과 같은 휴대용 자기 컴퓨터 디스켓, 판독 전용 메모리 ("ROM"), 소거가능한 프로그래머블 판독 전용 메모리, 휴대용 컴팩트 디스크 또는 직접 또는 간접적으로 커플링될 수 있는 다른 저장 디바이스들을 포함하지만, 이에 제한되지 않을 수도 있다. 매체는 또한, 전술한 및/또는 다른 디바이스들 중 하나 이상의의 임의의 조합도 포함할 수 있다.
메모리 (105) 는 타임 스탬프 정보 및/또는 어텐션 검출 이벤트 기록들을 추가로 저장할 수도 있다. 메모리 (105) 는 어텐션 관련 정보, 사용자 관련 정보 (예를 들어, 사용자 프로파일들), 미디어 콘텐츠 관련 정보 및 메타데이터 관련 정보를 추가로 저장할 수도 있다. 메모리 (105) 는 관찰자 또는 사용자 정보 및/또는 선호도들에 관한 메타데이터를 추가로 저장할 수도 있다.
시스템 (100) 은 특정 엘리먼트들을 생략할 뿐만 아니라 당업자가 용이하게 고려할 수 있는 것과 같은 다른 엘리먼트들 (미도시) 을 추가로 포함할 수도 있다. 예를 들어, 다양한 다른 입력 디바이스들 및/또는 출력 디바이스들이 당업자가 용이하게 이해할 수 있는 것과 같은 동일한 특정 구현에 따라 포함될 수 있다. 예를 들어, 다양한 타입들의 무선 및/또는 유선 입력 및/또는 출력 디바이스들이 사용될 수 있다. 또한, 당업자가 용이하게 이해할 수 있는 바와 같이, 다양한 구성들에서 추가의 프로세서들, 제어기들, 메모리들 등이 또한 이용될 수 있다. 프로세싱 시스템 (100) 의 이러한 변형 및 다른 변형은 본 명세서에 제공된 본 원리들의 교시들을 고려하면 당업자에 의해 용이하게 고려된다.
또한, 시스템 (100) 은 본 명세서에 개시된 기법들을 실행할 수도 있음이 이해될 것이다. 예를 들어, 시스템 (100) 은 도 3 내지 도 7 과 관련하여 기술된 방법(들) 중 하나 이상을 전체적으로 또는 부분적으로 수행할 수도 있다.
또한, 도 2 와 관련하여 후술되는 장치 (200) 는 본 원리들의 각각의 실시형태들을 구현하기 위한 장치임이 이해될 것이다. 디바이스 (200) 의 일부 또는 전부는 시스템 (100) 의 엘리먼트들 중 하나 이상에 구현될 수도 있다.
도 2 는 본 원리들에 따라 미디어 콘텐츠 제어 동작들의 프로세싱을 수행하기 위한 예시적인 장치 (200) 의 개략적인 다이어그램을 도시한다.
장치 (200) 는 셋톱 박스, 블루-레이 플레이어, 텔레비전, 스마트 텔레비전, 게임 콘솔, 랩톱, 개인용 컴퓨터, 스마트 폰, 태블릿 디바이스, 등을 포함하지만 이에 제한되지 않는, 명령들을 프로세싱하고 디스플레이가능한 이미지들을 생성할 수있는 임의의 디바이스일 수도 있다. 장치 (200) 는 메모리 (201), 프로세싱 유닛(들) (202), 필터 관리기 (203), 디스플레이 프로세서 (204) 및 디스플레이 (205) 를 포함할 수도 있다.
메모리 (201) 는 도 1 과 관련하여 기술된 메모리 (105) 와 유사한 메모리일 수도 있다. 예를 들어, 메모리 (201) 는 미디어 콘텐츠, 어텐션, 이벤트 기록 및 메타데이터 정보를 저장할 수도 있다. 마찬가지로, 프로세싱 유닛(들) (202) 은 도 1 과 관련하여 기술된 프로세싱 유닛(들) (104) 과 유사한 프로세싱 유닛(들)일 수도 있다.
필터 관리기 (203) 는 도 3 내지 도 7 과 관련하여 기술된 원리들에 따라 필터링 프로세스들을 수행할 수도 있다. 하나의 예에서, 필터 관리기 (203) 는 메모리 (201) 및 프로세싱 유닛(들) (202) 상에 구현될 수도 있다. 필터 관리기 (203) 는 도 1 의 프로세싱 유닛(들) (104) 과 관련하여 기술된 원리들에 따라 필터링 동작들을 수행할 수도 있다.
디스플레이 프로세서 (204) 는 필터 관리기 (203) 에 의한 결정들에 기초하여 미디어 콘텐츠 제어 동작들을 디스플레이를 위해 생성할 수도 있다. 일 예에서, 디스플레이 프로세서 (204) 는 메모리 (201) 및 프로세싱 유닛(들) (202) 을 활용하여 디스플레이를 위한 정보를 생성할 수도 있다. 일 예에서, 디스플레이 프로세서 (204) 는 메모리 (201) 및 프로세싱 유닛(들) (202) 상에 구현될 수도 있다. 디스플레이 프로세서 (204) 는 도 1 의 프로세싱 유닛(들) (104) 과 관련하여 기술된 원리들에 따라 동작들을 수행할 수도 있다.
디스플레이 (205) 가 도 2 의 장치 (200) 의 일부로서 도시되지만, 다른 예들에서 장치 (200) 는 단지, 인터페이스 등을 통해 장치 (200) 에 커플링된, (콘텐츠 소비 또는 콘텐츠 프리젠테이션 디바이스와 같은) 상이한 시스템 또는 디바이스의 일부일 수 있는, 디스플레이 (205) 와 상호작용할 수도 있다.
도 3a 는 본 원리들에 따라 미디어 콘텐츠 제어 동작(들)을 제공하는 방법 (300) 의 플로우 다이어그램을 도시한다. 방법 (300) 은 미디어 콘텐츠가 복수의 관찰자들 또는 사용자들에게 제공되는 동안 수행될 수도 있다.
방법 (300) 은 어텐션 정보를 수신하기 위한 블록 (301) 을 포함한다. 일 예에서, 블록 (301) 은 임의의 매체 (예를 들어, 유선, 무선) 를 통해 임의의 소스 (예를 들어, 센서들, 컴퓨팅 디바이스(들)) 로부터 정보를 수신할 수도 있다.
블록 (301) 은 하나 이상의 미디어 콘텐츠 관찰자(들) 또는 사용자(들) 의 어텐션과 관련된 정보를 수신할 수도 있다. 일 예에서, 블록 (301) 은 하나 이상의 관찰자(들) 또는 사용자(들)의 어텐션 결정들 (예를 들어, 어텐션의 상실, 획득 또는 복귀) 에 대한 어텐션 정보를 수신할 수도 있다. 다른 예에서, 블록 (301) 은 하나 이상의 관찰자(들) 또는 사용자(들)의 어텐션 정보가 결정될 수도 있는 원시 데이터 (예를 들어, 센서 데이터) 를 수신할 수도 있다. 일 예에서, 블록 (301) 은 도 1 의 어텐션 검출 모듈 (102) 과 관련하여 기술된 어텐션 정보를 수신할 수도 있다.
일 예에서, 블록 (301) 은 생체인식 피드백과 관련된 정보를 수신할 수도 있다. 예를 들어, 블록 (301) 은 사람의 시선, 온도, 맥박수 등에 관한 정보를 수신할 수도 있다. 다른 예에서, 블록 (301) 은 인간의 표정들, 모션들 또는 인간 인식을 위한 다른 특징들에 관한 정보를 수신할 수도 있다. 일 예에서, 블록 (301) 은 타임 스탬프 정보를 추가로 수신할 수도 있다. 타임 스탬프 정보는 도 1 의 어텐션 검출 모듈 (102) 과 관련하여 기술된 이벤트 기록들과 같은 이벤트 기록들에 대응할 수도 있다.
블록 (302) 은 수신된 어텐션에 기초하여 어텐션 결정들을 수행할 수도 있다. 일 예에서, 블록 (302) 은 미디어 콘텐츠의 하나 이상의 관찰자(들) 또는 사용자(들)의 어텐션의 상실, 획득 및/또는 복귀가 존재하는지의 여부를 결정할 수도 있다.
블록 (302) 은 룸을 떠나는 것, 디스플레이 및/또는 마이크로폰의 매우 근방을 떠나는 것, 잠드는 것, 책을 읽는 것 등과 같은 어텐션의 상실을 결정할 수도 있다. 예를 들어, 블록 (302) 은 사용자 또는 관찰자가 뷰 영역을 떠났는지 여부를 결정할 수도 있다. 블록 (302) 은 사람이 미디어 플레이어로 영역에 들어간/떠난 때 및 그러한 입구/출구 지점들이 시청되고 있는 콘텐츠에 대해 어떻게 맵핑하는지를 추적할 수도 있다. 블록 (302) 은 마찬가지로, 룸으로 들어가는/복귀하는 것, 디스플레이 및/또는 마이크로폰의 매우 근방으로 들어가는/복귀하는 것, 다른 활동 (예를 들어, 자는 것, 읽는 것) 으로부터 미디어 콘텐츠로 어텐션을 쉬프트하는 것과 같은 어텐션 획득을 결정할 수도 있다. 블록 (302) 은 관찰자의 시선이 돌려지고 있는지 또는 시청중인 화면 상에 고정되는지 여부를 결정할 수도 있다.
일 예에서, 블록 (302) 은 블록 (301) 으로부터 수신된 어텐션 정보에 기초하여 어텐션 값을 결정할 수도 있다. 일 예에서, 블록 (302) 은 콘텐츠의 각 시청자/소비자에 대응하는 상이한 값들을 가질 수 있는 개별 어텐션 값을 결정할 수도 있다. 예를 들어, 블록 (302) 은 각각의 획득된 관찰자에 대하여 어텐션 값을 1 만큼 증분하고 각각의 상실된 관찰자에 대하여 카운트를 1 만큼 감분할 수도 있다. 다른 예에서, 블록 (302) 은 관찰자의 액션들에 기초하여 관찰자에 대한 부분 어텐션 값을 결정할 수도 있다. 예를 들어, 부분 어텐션 상실은 어텐션의 쉬프트 (예를 들어, 자는 것, 읽는 것, 다른 보조 디바이스들을 관찰하는 것, 다른 사람들과 대화하는 것) 에 의해 보여질 수도 있다. 예를 들어, 사람의 어텐션은 어텐션이 쉬프트한 각각의 관찰자에 대하여 소수의 어텐션 유닛들 (1.0 에서 0.9 로 0.8 로... 0 으로) 로 측정될 수도 있다. 일 예에서, 블록 (302) 은 표 2 내지 표 7에 기초하여 어텐션 값들을 결정할 수도 있다.
일 예에서, 블록 (302) 은 어텐션 변화가 있는지를 결정할 수도 있다. 일 예에서, 블록 (302) 은 어텐션 값에 기초하여 어텐션 변화를 결정할 수도 있다. 일 예에서, 블록 (302) 은 어텐션 값을 임계와 (예를 들어, 어텐션 값이 임계 초과인지, 동일한지, 및/또는 미만인지 여부를 결정하기 위해) 비교할 수도 있다. 블록 (302) 은 또한, 어텐션의 획득, 상실 또는 복귀가 존재하는지를 결정할 수도 있다. 어텐션 변화의 결정에 기초하여, 블록 (302) 은 그 후에, 제어를 블록 (303) 으로 전달할 수도 있다.
블록 (302) 은 검출된 어텐션 및/또는 대응하는 미디어 콘텐츠에 관한 시간을 식별하는 타임 스탬프들을 포함하는 이벤트 기록의 생성을 트리거할 수도 있다. 어텐션 이벤트 기록은 블록 (305) 에 제공될 수도 있다.
블록 (303) 은 블록 (302) 으로부터 어텐션 결정들을 수신할 수도 있다. 예를 들어, 블록 (303) 은 어텐션 변화의 결정 및/또는 어텐션 변화의 양 (예를 들어, 어텐션 획득, 상실 또는 복귀의 양) 과 같은 어텐션 트리거 정보를 블록 (302) 으로부터 수신할 수도 있다. 다른 예에서, 블록 (303) 은 어텐션이 변화된 것의 이진 (예 또는 아니오) 표시 및/또는 어텐션 변화의 타입 (예를 들어, 상실, 획득, 복귀) 을 수신할 수도 있다.
블록 (303) 은 미디어 제어 동작을 제안할지 여부를 결정하기 위해 분석을 수행할 수도 있다. 블록 (303) 은 어떤 미디어 콘텐츠 제어 동작이 제안되어야 하는지를 추가로 결정할 수도 있다. 일 예에서, 블록 (303) 은 미디어 제어 동작들을 언제 제안할지를 결정하기 위해 원하지 않는 중단들을 필터링할 수도 있다. 일 예에서, 블록 (303) 은 필터 어텐션 결정에 기초하여 미디어 제어 동작을 제안할지 여부를 결정할 수도 있다.
블록 (303) 은 필터 어텐션 결정들을 수행할 수도 있다. 블록 (303) 은 필터 어텐션 결정들에 기초하여 미디어 제어 동작을 제안할지 여부를 결정할 수도 있다. 일 예에서, 블록 (303) 은 어텐션 결정 (예를 들어, 다수의 미디어 콘텐츠 관찰자들의 그룹 중 하나 이상의 관찰자들의 어텐션의 상실, 획득 또는 복귀의 인식과 같은 어텐션 변화) 에 기초하여 결정들을 수행할 수도 있다. 블록 (303) 은 타임 스탬프 정보에 기초하여 필터 결정들을 수행할 수도 있다. 예를 들어, 블록 (303) 은 대응하는 미디어 콘텐츠와 함께 저장된 타임 스탬프들에 기초하여 결정들을 수행할 수도 있다. 타임 스탬프들은 미디어 제어 동작들과 함께 디스플레이될 수도 있다. 타임 스탬프들은 미디어 제어 동작이 미디어 콘텐츠를 조작해야하는 시간을 결정하기 위해 추가로 이용될 수도 있다. 예를 들어, 타임 스탬프는 비디오가 되감기될 수도 있는 시간을 표시할 수도 있다. 블록 (303) 은 관찰자가 미디어 콘텐츠로의 어텐션을 상실, 획득 및/또는 복귀하였을 때의 시간들 및 미디어 콘텐츠를 분류하기 위해 타임 스탬프 정보를 추가로 사용할 수도 있다. 이러한 시간들은 미디어 제어 동작들과 함께 사용하기 위해 블록 (303) 에 의해 분류될 수도 있는 트리거 포인트들로서 알려져 있을 수도 있다.
블록 (303) 은 블록 (305) 으로부터의 이벤트 기록 정보 (예를 들어, 로그) 및 블록 (306) 으로부터의 다른 메타데이터 (예를 들어, 어텐션 결정들과 독립적인 메타데이터) 에 기초하여 필터 어텐션 결정들을 수행할 수도 있다. 예를 들어, 블록 (303) 은 (i) 관찰자(들)이 미디어 콘텐츠를 관찰하지 않는 시간 지속기간; (ii) 미디어 콘텐츠를 관찰하거나 관찰하지 않는 관찰자(들)의 수; (iii) 미디어 콘텐츠를 관찰하는 관찰자들의 총 수; (iv) 관찰자(들)이 미디어 콘텐츠를 관찰하지 않는 동안 제공되고 있는 미디어 콘텐츠의 타입; (v) 시간 정보 (예를 들어, 요일, 하루중 시간); (vi) 지리적 정보 (예를 들어, 위치, 날씨); (vii) 관찰자 정보 (연령, 제스처들, 선호도들, 생체인식 정보); (viii) 관찰 영역 내의 보조 디바이스들 (예를 들어, 폰들, 태블릿들) 및 관찰자의 그러한 디바이스들과의 상호작용; (ix) 디스플레이 정보 (예를 들어, 사이즈); (x) 관찰 패턴 (예를 들어, 하루에 관찰되는 콘텐츠의 총 시간, 하루에 관찰된 평균 콘텐츠) 중 하나 이상을 평가할 수도 있다. 블록 (303) 은 도 3a 및 도 4 내지 도 7 과 관련하여 기술된 프로세스들에 기초하여 필터 결정들을 수행할 수도 있다.
블록 (305) 은 어텐션 이벤트 기록들의 로그를 블록 (303) 에 제공할 수도 있다. 이벤트 기록들은 어텐션 검출 이벤트에 대응하는 타임 스탬프들, 메타데이터 및 관찰자 식별 정보와 같은 다양한 정보에 기초할 수도 있다. 기록들은 해당 어텐션 이벤트 기록들이 함께 저장될 수도 있는 타임 스탬프들을 포함할 수도 있다. 이벤트 기록들은 장면 메타데이터를 추가로 포함할 수도 있다. 타임 스탬프들 및/또는 이벤트 기록들은 미디어 제어 동작 (예를 들어, 되감기 제안) 을 제안할지 여부를 결정하는 필터링 시스템에 대한 트리거로서 사용될 수도 있다. 이벤트 기록들은 어텐션 이벤트와 관련된 관찰자 식별 정보 (예를 들어, 어텐션이 획득된/상실된 관찰자에 관한 정보) 를 추가로 포함할 수도 있다.
블록 (306) 은 메타데이터 (예를 들어, 사용자 프로파일들, 미디어 콘텐츠 메타데이터) 를 제공할 수도 있다. 예를 들어, 블록 (303) 은 블록 (306) 으로부터의 메타데이터를 분석하여 특정 장면으로 복귀할지 여부를 결정할 수도 있다. 예를 들어, 메타데이터가 부재한 시청자가 플롯에 필수적인 정보를 놓친 것을 나타내면, 되감기 미디어 제어 동작이 제공될 수도 있다. 블록 (303) 은 미디어 제어 동작을 제공할지 여부를 결정하기 위해 메타데이터를 분석할 수도 있다. 이러한 메타데이터는 하루중 시간, 요일, 기상 조건, 시청자들의 연령 또는 성별, 시청중인 화면의 사이즈, 하루에 시청되는 TV 의 시간들, 지리적 위치 등을 포함할 수도 있다. 예를 들어, 되감기 미디어 제어 동작은 시청자가 늦은 시간 (예를 들어, 오후 9 시 이후) 동안 부재한다는 결정에 기초하여 제공될 수도 있다. (예를 들어, 시청자가 복귀할 때와 같은) 조건적 결정에 기초하여, 블록 (303) 은 임의의 높은 관심 이벤트들에 대한 메타데이터의 로그를 체크할 수도 있다. 높은 관심 이벤트들은 드라마에서의 플롯 트위스트들, 스포츠 콘텐츠에서의 플레이들 또는 스코어링 이벤트들 등을 포함할 수도 있다. 메타데이터 내의 높은 관심 이벤트 장면의 결정에 기초하여, 블록 (303) 은 높은 이벤트 이벤트 장면으로 복귀하기 위한 높은 가능성이 존재한다고 결정할 수도 있다.
다른 예에서, 메타데이터는 관찰자 프로파일들과 관련될 수도 있다. 프로파일은 선호도 정보 (예를 들어, 스포츠를 좋아함, 코미디를 싫어함) 를 포함할 수도 있다. 예를 들어, 되감기 옵션이 제공되는지 여부는 사용자의 선호도들에 의존할 수도 있다. 예를 들어, 콘텐츠가 스포츠와 관련되고 사용자 프로파일이 그러한 사용자가 스포츠를 좋아한다는 것을 나타내면, 시스템은 되감기 동작을 제공할 수도 있다. 그러나, 콘텐츠가 코미디와 관련되고 사용자 프로파일이 사용자가 코미디를 좋아하지 않는다고 나타내면, 미디어 제어 동작은 제안되지 않을 수도 있다.
일 예에서, 블록 (303) 은 관찰자 부재의 시간 지속기간에 기초하여 필터 결정들을 수행할 수도 있다. 시간 지속기간 정보는 블록 (305) 에 의해 제공될 수도 있다. 블록 (303) 은 부재가 짧은 경우 (예를 들어, 임계 이하인 경우), 미디어 제어 동작을 제안하지 않기로 결정할 수도 있다. 블록 (303) 은 부재가 긴 경우 (예를 들어, 임계 초과인 경우), 미디어 제어 동작 (예를 들어, 되감기 동작) 을 제안하지 않기로 결정할 수도 있다. 블록 (303) 은 부재중에 보여진 콘텐츠가 중요하지 않은 경우 (이러한 경우, 미디어 제어 동작을 제안하지 않는 것으로 결정될 수도 있음) 와 같이, 추가 정보를 더 고려할 수도 있다.
블록 (303) 은 미디어 콘텐츠의 관찰자들의 수에 기초하여 필터 결정들을 수행할 수도 있다. 관찰자들의 수는 블록 (305) 에 의해 제공될 수도 있다. 예를 들어, 블록 (303) 은 미디어 콘텐츠를 관찰하는 사람들의 수에 기초하여 제안되어야하는 미디어 콘텐츠 동작의 타입을 결정할 수도 있다. 예를 들어, 관찰자의 수가 적을 때 (예를 들어, 2 명), 블록 (303) 은 한 관찰자가 더 이상 미디어 콘텐츠를 관찰하지 않으면 일시정지 동작이 가장 적절하다고 결정할 수도 있다. 그러나, 관찰자들의 수가 임계 홀드 (예를 들어, 5 명) 초과일 때, 블록 (303) 은 사용자가 복귀할 때 되감기 동작이 제안되어야한다고 결정할 수도 있다. 예를 들어, 미디어 콘텐츠를 관찰하는 사람이 오직 2 명뿐일 때와 한 사람이 떠나고 복귀할 때, 일시정지 버튼은 원하는 것에 대한 불확실성을 처리하는 가장 좋은 방법을 제공한다. 그러나, 사람들의 큰 그룹에서, 떠나는 단 한 사람은 그 그룹에 불편을 주지 않아야한다. 다른 예에서, 블록 (303) 은 미디어 콘텐츠에 기초하여 필터 결정들을 수행할 수도 있다. 예를 들어, 블록 (303) 은 사람의 부재 중에 디스플레이되는 미디어 콘텐츠에 기초하여 필터 결정들을 수행할 수도 있다. 일 예에서, 블록 (303) 은 관찰자의 복귀 이전에 장면 또는 콘텐츠 타입이 종료하면 미디어 제어 동작이 제안되어서는 안되는 것으로 결정할 수도 있다. 사람의 복귀 전에 일 타입의 콘텐츠 및/또는 콘텐츠 장면이 종료하면, 블록 (303) 은 복귀하는 당사자가 콘텐츠에 대한 관심을 상실했다고 결정할 수도 있다. 미디어 콘텐츠가 변화되면 (예를 들어, 채널이 변화되면, 미디어 콘텐츠 타입이 변화되면, 입력 소스가 변화되면), 블록 (303) 은 또한, 미디어 콘텐츠 제어 동작이 제안되지 않을 수도 있다고 결정할 수도 있다. 블록 (303) 은 관찰자의 복귀 전에 수행된 그러한 변화가 원래의 콘텐츠가 관찰자에게 충분한 관심이 없음을 나타내는 것으로 결정할 수도 있다.
블록 (303) 은 시간 정보 (예를 들어, 요일, 하루중 시간), 지리적 정보 (예를 들어, 위치, 날씨), 관찰자 정보 (예를 들어, 연령, 제스처들, 선호도들, 생체인식 정보), 관찰 영역 내의 보조 디바이스들 (예를 들어, 폰들, 태블릿들) 과 관찰자의 이러한 디바이스들과의 상호작용, 디스플레이 정보 (예를 들어, 사이즈), 및 관찰 패턴들 (예를 들어, 하루에 관찰되는 콘텐츠의 총 시간들, 하루에 관찰되는 평균 콘텐츠, 등) 과 같은 추가의 검출된 정보에 기초하여 필터 결정들을 수행할 수도 있다. 블록 (303) 은 이러한 결정들을 수행하기 위해 블록 (306) 으로부터의 메타데이터를 검토할 수도 있다. 예를 들어, 블록 (303) 은 시간이 늦은 경우 (예를 들어, 오후 11 시 이후) 미디어 제어 동작이 제안되어서는 안되는 것으로 결정할 수도 있다. 그러나, 블록 (303) 은 미디어 콘텐츠가 프라임 타임 (예를 들어, 오후 8 시 내지 오후 10 시 사이) 동안 시청되고 있다면 미디어 제어 동작을 제안하는 것으로 결정할 수도 있다. 다른 예에서, 블록 (303) 은 지리적 정보에 기초하여 미디어 제어 동작이 제안되어야한다고 결정할 수도 있다. 예를 들어, 블록 (303) 은 미디어 콘텐츠가 관찰자들이 위치하는 지리적 영역과 특히 관련이 있다고 결정하면, 미디어 콘텐츠 되감기 동작을 제안할 수도 있다. 지리적 정보는 블록 (306) 에 의해 제공될 수도 있다.
일 예에서, 블록 (303) 은 관찰자 정보 (예를 들어, 연령, 제스처들, 선호도들, 생체인식 정보) 에 기초하여 미디어 제어 동작이 제안되어야 한다고 결정할 수도 있다. 관찰자 정보는 블록 (306) 에 의해 제공된 메타데이터의 일부일 수도 있다. 예를 들어, 블록 (303) 은 관찰자의 제스처들이 관찰자가 프로그램에 관여하고 있음을 나타내는 경우, 미디어 제어가 제안되어야한다고 결정할 수도 있다. 블록 (303) 은 프로그램이 관찰자의 연령 중 하나에 특정할 경우, 미디어 제어가 제안되어야한다고 결정할 수도 있다. 블록 (303) 은 관찰자의 선호도들이 관찰자가 프로그램에 특히 관심이 있음을 나타내는 경우 (예를 들어, 관찰자의 프로파일이 스포츠에 대한 선호도를 나타내고 미디어 콘텐츠가 스포츠 타입 프로그래밍인 경우), 미디어 제어가 제안되어야 한다고 결정할 수도 있다.
블록 (303) 은 관찰자의 생체인식이 (예를 들어, 증가된 맥박수를 통해) 관찰자가 프로그램에 관여하고 있음을 나타내는 경우, 미디어 제어가 제안되어야 한다고 결정할 수도 있다. 다른 예에서, 블록 (303) 은 관찰자의 종잡을 수 없는 (wandering) 관심의 결정에 기초하여 (예를 들어, 관찰자의 시선의 검출 및/또는 대화 레벨의 증가에 기초하여) 미디어 제어가 제안되어서는 안되는 것으로 결정할 수도 있다. 룸을 떠나는 사람이 낮은 관심을 가진 것으로 결정되면 (예를 들어, 생체인식 피드백이 사람이 잠들기 직전임을 나타냈다면), 사람이 복귀할 때 미디어 제어 동작들이 금지될 수도 있다. 또는, 생체인식 피드백이 시청자가 룸 밖에 있는 동안 높은 레벨의 시청자 (예를 들어, 빠른 펄스, 동공 확장) 관심을 나타낸 경우, 미디어 제어 동작 (예를 들어, 되감기 동작) 은 시청자가 복귀할 때 제안될 수도 있다.
일 예에서, 블록 (303) 은 미디어 제어 동작이 관찰 영역 내의 보조 디바이스들 (예를 들어, 폰들, 태블릿들) 및 관찰자의 그러한 디바이스들과의 상호작용에 기초하여 제안되어야 하는지 여부를 결정할 수도 있다. 예를 들어, 블록 (303) 은 관찰자가 보조 디바이스들과 광범위하게 상호작용하기 시작하면 미디어 제어 동작이 제안되어서는 안되는 것으로 결정할 수도 있다. 예를 들어, 블록 (303) 은 관찰자가 태블릿 상에서 추가의 미디어 콘텐츠를 재생하기 시작하면, 미디어 제어 동작을 제안하지 않을 수도 있다.
일 예에서, 블록 (303) 은 미디어 제어 동작이 관찰 패턴들 (예를 들어, 하루에 관찰된 총 시간들, 하루에 관찰된 평균 콘텐츠, 등) 에 기초하여 제안/활성화되어야한다고 결정할 수도 있다. 예를 들어, 블록 (303) 은 복귀한 사용자 및 하루에 관찰된 미디어 콘텐츠의 총 시간들이 대량이거나 또는 관찰된 미디어 콘텐츠의 평균 시간이 대량인 사용자에 대해 미디어 콘텐츠 제어 동작을 제안할 수도 있다.
블록 (303) 은 표 1 에 기초하여 미디어 제어 동작을 제안할지 여부를 결정할 수도 있다.
Figure pct00001
일 예에서, 표 1 의 "조건 결정" 컬럼은, 미디어 제어 동작 (예를 들어, 되감기, 일시정지, 시간 점프) 이 수행되는지 여부를 표시할 수도 있다.
또 다른 예에서, 블록 (303) 은 하기에 나타낸 표 2 내지 표 7 에서의 정보에 기초하여 미디어 제어 동작을 제안할지 여부를 결정할 수도 있다. 일 예에서, "어텐션 결정" 컬럼들은 어텐션 액션 또는 조건에 대응할 수도 있다. 어텐션 결정 정보는 블록 (302) 로부터, 블록 (305) 의 이벤트 기록 로그로부터, 및/또는 메타데이터 블록 (306) 으로부터 수신될 수도 있다. "승수" 컬럼은 대응 어텐션 결정을 착수하는 관찰자들의 수로 승산될 승수와 대응할 수도 있다. 일 예에서, 어텐션 결정의 수와 "승수" 를 승산하는 것으로부터 야기되는 값이 어텐션 변화값이다. 어텐션 변화값은 그 후 어텐션 변화가 발생했는지 여부를 결정하는데 사용된다. 블록 (303) 이 어텐션 변화가 발생했다고 결정하면, 블록 (304) 로 제어를 전달할 수도 있다.
Figure pct00002
Figure pct00003
Figure pct00004
Figure pct00005
Figure pct00006
Figure pct00007
블록 (303) 은 추가로 하나 이상의 필터 조건 결정들을 조합할 수도 있다. 예를 들어, 블록 (303) 은 추가로 상술한 하나 이상의 필터 조건 결정들의 조합을 평가할 수도 있다. 예를 들어, 블록 (303) 은 미디어 제어 동작이 다중 필터 조건 결정들의 평가에 의해 제안되어야 하는지 여부를 결정할 수도 있다. 예를 들어, 각각의 필터 조건 결정은 미디어 제어 동작에 대해 값을 제공받을 수도 있고, 값들은 함께 승산되어 총 필터 값을 결정할 수도 있다. 필터 값은 그 후 미디어 제어 동작을 제공할지 여부를 결정하기 위해 임계 값과 비교될 수도 있다. 또 다른 예에서, 소정의 필터 조건 결정들은 상위 우선순위를 부여받을 수도 있고 또는 다른 필터 조건 결정들을 오버라이드할 수도 있다. 예를 들어, 부재의 지속기간에 기초하여 미디어 제어 동작을 제안하지 않는다는 결정은 상위 우선순위를 가질 수도 있고 모순된 결정을 오버라이드하여 콘텐츠 기반 결정에 기초하여 미디어 제어 동작을 제안할 수도 있다.
블록 (304) 은 블록 (303) 으로부터 수신된 필터 조건(들) 결정들에 기초하여 미디어 콘텐츠 동작들을 디스플레이에 대해 제공할 수도 있다. 일 예에서, 블록 (304) 은 다음의 미디어 제어 동작 옵션들 중 하나 이상을 제공할 수도 있다: 되감기, 일시정지, 빨리감기, 특정 타임 스탬프에 대한 미디어 콘텐츠 설정, 특정 장면에 대한 미디어 콘텐츠 설정. 블록 (304) 은 수행될 미디어 제어 동작의 정보를 블록 (303) 으로부터 수신할 수도 있다. 다른 예에서, 블록 (304) 은 시스템과의 상호작용을 통해 선택에 대해 다중 미디어 제어 동작들을 제공할 수도 있다. 블록 (304) 은 미디어 제어 동작 이외의 부가 정보를 디스플레이에 대해 제공할 수도 있다. 예를 들어, 블록 (304) 은 디스플레이될 미디어 콘텐츠 (예를 들어, 장면의 스크린샷) 의 타임 스탬프에 대응하는 이미지를 디스플레이에 대해 제공할 수도 있다. 일 예에서, 블록 (304) 은 미디어 제어 동작을 제안하기로 결정할 수도 있다. 또 다른 예에서, 블록 (304) 은 임의의 미디어 제어 동작, 예컨대 일시정지, 볼륨 제한 (예를 들어, 볼륨을 낮추는 것), 및/또는 어텐션의 상실의 표시를 자동으로 수행하거나 활성화할 수도 있다.
도 3b 는 본 원리들에 따른 미디어 콘텐츠 제어 동작(들)을 제공하기 위한 방법 (350) 의 플로우 다이어그램을 도시한다. 방법 (350) 은 미디어 콘텐츠가 복수의 관찰자들 또는 사용자들에 제공되는 동안 수행될 수도 있다.
방법 (350) 은 어텐션 정보를 수신하기 위한 블록 (351) 을 포함할 수도 있다. 일 예에서, 블록 (351) 은 도 3a 의 블록 (301) 과 관련되어 기재된 원리들에 따른 어텐션 정보를 수신할 수도 있다.
방법 (350) 은 어텐션 결정들을 수행하기 위한 블록 (352) 을 더 포함할 수도 있다. 일 예에서, 블록 (352) 은 도 3a 의 블록 (302) 와 관련되어 기재된 원리들에 따른 어텐션 결정들을 수행할 수도 있다. 블록 (352) 은 그 후, 어텐션의 획득, 상실, 또는 복귀가 있는지를 결정할 수도 있다. 블록 (352) 이 어텐션 트리거가 있다고 결정하면 (예 결정), 블록 (353) 으로 제어를 전달할 수도 있다. 블록 (352) 이 어텐션 트리거가 없다고 결정하면, 블록 (351) 으로 제어를 역 전달할 수도 있다.
블록 (353) 은 공통 필터 결정들을 수행할 수도 있다. 일 예에서, 블록 (353) 의 공통 필터들은 도 3a 의 블록 (303) 과 관련되어 기재된 필터들 및 필터 조건들일 수도 있다. 일 예에서, 블록 (353) 은 공통 필터들이 적용되어야 하는지를 결정하기 위해 블록 (380) 으로부터의 이벤트 기록 로그 및/또는 메타데이터 정보를 검토할 수도 있다. 예를 들어, 블록 (353) 은 부재의 지속기간에 기초하여 필터 (예를 들어, 필터 A) 가 적용되어야 한다고 결정할 수도 있다. 블록 (353) 은 콘텐츠를 관찰하는 것을 정지한 관찰자들의 수에 기초하여 필터 (예를 들어, 필터 B) 와 같은, 부가 필터들이 적용되어야 하는지를 결정할 수도 있다. 블록 (353) 은 하나 보다 많은 필터가 적용되어야 하는 것을 결정할 수도 있다. 예를 들어, 블록 (353) 은 지리적 위치 도는 시각대에 기초하여 필터들과 같은, 부가 필터들이 적용되어야 하는 것을 결정할 수도 있다. 대안으로, 블록 (353) 은 하나의 필터만이 적용되어야 하는 것을 결정할 수도 있다. 블록 (353) 은 그 후, 블록 (360) 에서의 필터 세트 A 또는 블록 (370) 에서의 필터 세트 B, 필터들 A 및 B 양자 모두, 및/또는 다른 필터들 (C, D, ... 등) 과 같은, 결정된 필터 세트(들) 로 제어를 전달할 수도 있다.
블록 (360) 은 필터 세트 A 결정들을 수행할 수도 있다. 일 예에서, 블록 (360) 은 도 3a 와 관련되어 기재된 원리들에 따른 필터 세트 A 에 어텐션 값을 할당할 수도 있다. 블록 (360) 은 그 후 블록 (361) 로 제어를 전달할 수도 있다.
블록 (361) 은 블록 (360) 에서 결정된 값을 임계 A 와 비교할 수도 있다. 일 예에서, 임계 A 는 표 2 내지 표 7 에 따라 결정될 수도 있다. 블록 (360) 으로부터의 값이 긍정적인 (예) 조건 (예를 들어, 필터 세트 A 값이 임계 A 이상임) 을 결정하면, 블록 (361) 은 블록 (362) 로 제어를 전달할 수도 있다. 이와 달리, 블록 (360) 이 부정적인 (아니오) 조건 (예를 들어, 필터 세트 A 값이 임계 A 이상이 아님) 을 결정하면, 블록 (361) 은 블록 (351) 로 제어를 역 전달할 수도 있다.
블록 (362) 은 미디어 제어 동작 A 를 제공할 수도 있다. 일 예에서, 블록 (362) 은 도 3a 와 관련되어 기재된 원리들에 따른 미디어 제어 동작을 제공할 수도 있다.
블록 (370) 은 필터 세트 B 결정들을 수행할 수도 있다. 일 예에서, 블록 (370) 은 도 3a 와 관련되어 기재된 원리들에 따른 필터 세트 B 에 어텐션 값을 할당할 수도 있다. 블록 (307) 은 그 후 블록 (371) 로 제어를 전달할 수도 있다.
블록 (371) 은 블록 (370) 에서 결정된 값을 임계 B 와 비교할 수도 있다. 일 예에서, 임계 B 는 표 2 내지 표 7 에 따라 결정될 수도 있다. 블록 (370) 으로부터의 값이 긍정적인 (예) 값 (예를 들어, 필터 세트 B 값이 임계 B 이상임) 을 결정하면, 블록 (361) 은 블록 (372) 로 제어를 전달할 수도 있다. 이와 달리, 블록 (370) 이 부정적인 (아니오) 조건 (예를 들어, 필터 세트 B 값이 임계 B 이상이 아님) 을 결정하면, 블록 (371) 은 블록 (351) 으로 제어를 역 전달할 수도 있다.
블록 (372) 은 미디어 제어 동작 B 를 제공할 수도 있다. 일 예에서, 블록 (372) 은 도 3a 의 블록 (304) 와 관련되어 기재된 원리들에 따른 미디어 제어 동작을 제공할 수도 있다. 일 예에서, 미디어 제어 동작 B 은 블록 (362) 의 미디어 제어 동작 A 와 동일하거나 상이할 수도 있다. 일 예에서, 블록 (372) 은 미디어 제어 동작이 이미 또 다른 필터 세트에 의해 제안되었는지를 결정할 수도 있다. 미디어 제어 동작이 이미 제안되었다면, 블록 (372) 은 새롭게 결정된 필터 세트에 기초하여 임의의 부가 정보를 제안할지 여부 (예를 들어, 상이한 미디어 제어 동작을 제안할지 여부, 더 이른 미디어 제어 동작을 제안하는 것을 정지할지 여부, 또는 미디어 제어 동작을 다시 제안할지 여부) 를 결정할 수도 있다.
일 예에서, 블록들 (353, 360, 361, 362, 370, 371, 및 372) 의 결정들은 이벤트 기록 및/또는 메타데이터 블록 (380) 으로부터의 정보에 기초할 수도 있다. 블록 (380) 은 도면과 연계되어 기재된 블록 (305 및 306) 에 대응할 수도 있다.
도 4 는 본 원리들에 따른 방법 (400) 의 플로우 다이어그램을 도시한다. 방법 (400) 은 미디어 제어 동작을 제공할지 여부를 결정할 수도 있다. 방법 (400) 은 예를 들어, 방법 (300) 의 블록들 (303 및/또는 302) 에 의해서와 같은, 도 3a 의 방법 (300) 에 의해 수행될 수도 있다.
방법 (400) 은 미디어 콘텐츠의 관찰자들의 수를 모니터링하기 위한 블록 (401) 을 포함할 수도 있다. 블록 (401) 은 미디어 콘텐츠의 관찰자들의 수를 결정하기 위한 어텐션 정보를 수신할 수도 있다. 블록 (401) 은 관찰 영역에서 (예를 들어, 룸에서 또는 시청하거나 청취하는 영역에서) 관찰자들의 수를 모니터링할 수도 있다. 블록 (401) 에 의해 모니터링된 관찰자들의 수는 값 (N) 에 의해 식별될 수도 있다. 블록 (401) 은 N 의 값을 모니터링하고 그러한 N 의 값을 블록 (402) 에 제공할 수도 있다.
블록 (402) 은 N 의 값이 제 1 임계 이상인지를 결정할 수도 있다. 예를 들어, 블록 (402) 은 N (관찰자들의 수) 의 값이 2 명의 임계와 같은, 제 1 임계 값 이상인지를 결정할 수도 있다. 또 다른 예에서, 제 1 임계는 표 2 내지 표 7 에 따라 결정될 수도 있는 어텐션 값에 관련될 수도 있다. 이 제 1 임계값은 시스템을 활성화하는 어텐션 또는 관찰자들의 최소 수를 의미한다. 블록 (402) 은 N 의 값이 제 1 임계 이상이 아니라고 결정하면, N 의 값을 모니터링하는 것을 계속하기 위해 블록 (401) 로 제어를 복귀할 수도 있다. 이와 달리, 블록 (402) 은 N 의 값이 제 1 임계 이상이라고 결정하면, 블록 (403) 으로 제어를 전달할 수도 있다.
블록 (403) 은 상실된 관찰자들의 수를 결정할 수도 있다. 상실된 관찰자들의 수는 값 M 에 의해 식별될 수도 있다. 블록 (403) 은 미디어 콘텐츠의 상실된 관찰자들의 수를 결정하기 위해 어텐션 정보를 수신할 수도 있다. 블록 (403) 은 관찰 영역 (예를 들어, 룸 또는 시청하거나 청취하는 영역) 을 떠난 관찰자들의 수를 추적할 수도 있다. 대안으로, 블록 (403) 은 얼마나 많은 관찰자들이 어텐션을 상실했는지 (예를 들어, 시선을 돌렸는지, 보조 디바이스들 관찰을 시작했는지, 대화 레벨을 통해 어텐션의 변화를 표시했는지, 사람이 잠드는 것을 표시하는 펄스를 낮췄는지) 를 결정할 수도 있다. 블록 (403) 은 M 의 값을 결정하고 M 의 값을 블록 (404) 에 제공할 수도 있다.
블록 (404) 은 M 의 값이 제 2 임계 이상인지를 결정할 수도 있다. 예를 들어, 블록 (403) 은 M (어텐션을 상실한 관찰자들의 수) 의 값이 2 명의 사람과 같은, 제 2 임계값 이상인지를 결정할 수도 있다. 제 2 임계값은 시스템을 활성화하는 관찰자들의 어텐션 또는 관찰자들의 최소 수를 의미한다. 제 2 임계의 일 예는 2 명의 관찰자들이 룸을 떠난다는 것이다. 또 다른 예는 관찰자들의 절반이 떠난다는 것이다. 또 다른 예에서, 제 2 임계값은 표 2 내지 표 7 에 따라 결정될 수도 있는 어텐션 값에 관련될 수도 있다. 블록 (404) 은 M 의 값이 제 2 임계보다 크지 않다고 결정하면, 블록 (403) 으로 제어를 복귀할 수도 있다. 이와 달리, 블록 (404) 은 M 의 값이 제 2 임계 이상이라고 결정하면, 제어를 블록 (405) 로 전달할 수도 있다.
블록 (405) 은 미디어 제어 동작을 제공할지 여부를 결정할 수도 있다. 일 예에서, 블록 (405) 은 블록 (404) 에서의 어텐션의 상실의 결정에 기초하여 미디어 제어 동작을 제안하기로 결정할 수도 있다. 블록 (406) 은 일시정지, 볼륨 제한 (예를 들어, 볼륨을 낮추는 것), 및/또는 어텐션의 상실의 표시와 같은, 임의의 미디어 제어 동작을 자동으로 활성화할 수도 있다.
블록 (405) 은 블록 (404) 에서의 어텐션의 상실의 결정에 기초하여 미디어 제어 동작 (예를 들어, 일시정지 기능) 을 수행하기 위한 옵션을 디스플레이에 대해 제안할 수도 있다. 또 다른 예에서, 블록 (405) 은 블록 (404) 에서의 어텐션의 상실의 결정에 기초하여 미디어 제어 동작 (예를 들어, 일시정지) 을 자동으로 수행/활성화할 수도 있다. 블록 (405) 은 미디어 제어 동작을 제공하지 않기로 결정하면, 블록 (406) 으로 제어를 전달할 수도 있다. 블록 (405) 은 미디어 제어 동작을 제공하기로 결정하면, 방법 (400) 을 종료하는 종료 블록 (409) 에 제어를 제공할 수도 있다.
블록 (406) 은 획득된 관찰자들의 수를 모니터링할 수도 있다. 획득된 관찰자들의 수는 값 (P) 에 의해 식별될 수도 있다. 획득된 관찰자들의 수는 관찰 영역에 진입하거나 복귀한 및/또는 미디어 콘텐츠로 그 어텐션을 복귀한 관찰자들의 수와 대응할 수도 있다. 블록 (406) 은 미디어 콘텐츠의 획득된 관찰자들의 수를 결정하기 위한 어텐션 정보를 수신할 수도 있다. 블록 (406) 은 획득된 관찰자들의 수를 추적할 수도 있다. 블록 (406) 은 관찰자가 관찰 영역 (예를 들어, 룸 또는 시청하거나 청취하는 영역) 에 진입했는지를 결정할 수도 있다. 블록 (406) 은 그 후 획득된 관찰자가 관찰 영역을 이전에 떠났었는지를 결정할 수도 있다 (이로써 복귀된 관찰자로서 자격을 부여한다). 또 다른 예에서, 블록 (406) 은 관찰자가 미디어 콘텐츠에 주목하기 시작했는지 및/또는 이 관찰자가 그 또는 그녀의 어텐션을 미디어 콘텐츠로 복귀하고 있는지 여부를 결정할 수도 있다. 예를 들어, 블록 (406) 은 관찰자가 그 또는 그녀의 어텐션을 복귀했는지를 그들의 시선 및 다른 생체인식 정보의 분석에 기초하여 결정할 수도 있다. 블록 (406) 은 P 의 값을 모니터링하고 그러한 P 의 값을 블록 (407) 에 제공할 수도 있다.
블록 (407) 은 P 의 값이 제 3 임계 이상인지를 결정할 수도 있다. 예를 들어, 블록 (407) 은 P (어텐션을 획득한 관찰자들의 수) 의 값이 제 3 임계값 이상인지를 결정할 수도 있다. 제 3 임계값은 시스템을 활성화할 수도 있는 복귀된 관찰자들의 최소 수를 의미할 수도 있다. 또 다른 예에서, 제 3 임계값은 표 2 내지 표 7 에 따라 결정될 수도 있는 어텐션 값에 관련될 수도 있다. 블록 (407) 은 P 의 값이 제 3 임계 보다 크지 않다고 결정하면, 블록 (406) 으로 제어를 복귀할 수도 있다. 이와 달리, 블록 (407) 은 P 의 값이 제 3 임계 이상이라고 결정하면, 블록 (408) 로 제어를 전달할 수도 있다.
블록 (408) 은 미디어 제어 동작을 제공하여야 하는지를 결정할 수도 있다. 일 예에서, 블록 (408) 은 블록 (407) 에서의 어텐션의 획득의 결정에 기초하여 미디어 제어 동작을 디스플레이에 대해 제공할 수도 있다. 블록 (408) 은 블록 (407) 에서의 어텐션의 획득의 결정에 기초하여 미디어 제어 동작 (예를 들어, 되감기 기능, 일시정지 기능) 의 제의를 디스플레이에 대해 제안할 수도 있다. 또 다른 예에서, 블록 (408) 은 블록 (407) 에서의 어텐션의 획득의 결정에 기초하여 미디어 제어 동작 (예를 들어, 되감기) 을 자동으로 수행/활성화할 수도 있다. 예를 들어, 사용자가 미디어 콘텐츠로 어텐션을 복귀했다는 것 (예를 들어, 미디어 콘텐츠가 디스플레이되는 룸으로 복귀했다는 것) 이 결정되는 경우, 블록 (408) 은 사용자가 미디어 콘텐츠로의 어텐션을 상실한 시간으로 되감기 동작을 제안할 수도 있다. 블록 (408) 은 방법 (400) 을 종료하는 종료 블록 (409) 에 제어를 제공할 수도 있다.
도 5 는 본 원리들에 다른 방법 (500) 의 플로우 다이어그램을 도시한다. 방법 (500) 은 예를 들어, 블록들 (303 및/또는 302) 에 의해서와 같은, 도 3a 의 방법 (300) 에 의해 수행될 수도 있다.
방법 (500) 은 블록 (501) 을 포함할 수도 있다. 블록 (501) 은 어텐션 이벤트들을 검출할 수도 있다. 예를 들어, 블록 (501) 은 관찰자의 어텐션이 상실, 획득 또는 복귀했는지를 결정할 수도 있다. 예를 들어, 블록 (501) 은 (예를 들어, 관찰자 영역을 나가는 것에 의해 또는 시선 이동 (wandering gaze) 또는 잠드는 것과 같은 다른 표시들에 의해) 관찰자가 어텐션을 상실했는지를 결정할 수도 있다. 블록 (501) 은 도 3a 의 블록들 (301 및 302) 과 관련되어 기재된 원리들에 따라 어텐션 이벤트들을 검출할 수도 있다. 어텐션 이벤트가 하나 이사의 사용자들에 대해 검출되는 경우, 블록 (501) 은 블록 (502) 로 제어를 전달할 수도 있다.
블록 (502) 은 시간 지속기간이 필터 조건을 충족하는지를 결정할 수도 있다. 블록 (502) 은 획득된 또는 상실된 어텐션이 적어도 최소량의 시간 동안 발생했는지를 결정할 수도 있다. 블록 (502) 은 부재가 짧은 (예를 들어, 임계 이하) 경우 및/또는 부재 동안 보여진 콘텐츠가 거의 중요하지 않은 경우 미디어 콘텐츠 동작을 제안하지 않기로 결정할 수도 있다. 일 예에서, 블록 (502) 은 표 4 를 포함하여, 도 3a 와 관련되어 기재된 원리들에 기초하여 시간 지속기간 필터 조건들을 수행할 수도 있다. 블록 (502) 은 부재가 긴 (예를 들어, 임계 이상) 경우, 미디어 제어 동작 (예를 들어, 되감기 동작) 을 제안하기로 결정할 수도 있다. 블록 (502) 은 미디어 제어 동작을 제공하기로 결정하면 (예 조건), 블록 (503) 으로 제어를 전달한다. 이와 달리, 블록 (502) 은 미디어 제어 동작을 제안하지 않기로 결정하면 (아니오 조건), 블록 (501) 로 제어를 전달한다.
블록 (503) 은 미디어 제어 동작을 제공하여야 하는지를 결정할 수도 있다. 일 예에서, 블록 (503) 은 블록 (502) 의 결정에 기초하여 미디어 제어 동작을 디스플레이에 대해 제공할 수도 있다. 블록 (503) 은 블록 (502) 의 결정에 기초하여 미디어 제어 동작 (예를 들어, 되감기 기능, 일시정지 기능) 을 디스플레이에 대해 제안할 수도 있다. 또 다른 예에서, 블록 (503) 은 블록 (502) 의 결정들에 기초하여 미디어 제어 동작 (예를 들어, 일시정지, 되감기) 을 자동으로 수행/활성화할 수도 있다. 예를 들어, 블록 (502) 이 2 개의 시간 임계들 (예를 들어, 10 분 미만이지만 2 분 초과) 사이에 있는 시간 지속기간 후에 사용자가 복귀했다고 결정하는 경우, 블록 (503) 은 사용자가 관찰 영역을 떠났던 시간에 대응하는 미디어 콘텐츠의 타임 스탬프로 되감기 동작 또는 점프 백 동작을 제안할 수도 있다.
도 6 은 본 원리들에 따른 필터 동작들을 위한 방법 (600) 의 플로우 다이어그램을 도시한다. 방법 (600) 은 예를 들어, 블록 (303) 에 의해서와 같은, 도 3a 의 방법 (300) 에 의해 수행될 수도 있다.
방법 (600) 은 블록 (601) 을 포함할 수도 있다. 블록 (601) 은 어텐션 상실 이벤트들을 검출할 수도 있다. 블록 (601) 은 블록들 (301 및 302) 을 포함한, 도 3a 와 관련되어 기재된 원리들에 따라 어텐션 상실을 결정할 수도 있다. 예를 들어, 블록 (601) 은 관찰 영역을 나가는 것에 의해 또는 시선 이동 또는 잠드는 것과 같은 다른 표시들에 의해 관찰자가 어텐션을 상실했는지를 결정할 수도 있다. 어텐션 이벤트가 하나 이상의 사용자들에 대해 검출되는 경우, 블록 (601) 은 블록 (602) 로 제어를 전달할 수도 있다.
블록 (602) 은 검출 이벤트 후 미디어 콘텐츠를 모니터링할 수도 있다. 블록 (602) 은 미디어 콘텐츠에 관한 정보를 블록 (603) 에 제공할 수도 있다. 블록 (603) 은 미디어 콘텐츠 결정들을 수행할 수도 있다. 특히, 블록 (603) 은 미디어 콘텐츠 세그먼트 (예를 들어, 플롯 또는 장면) 가 종료했는지 또는 미디어 콘텐츠가 변경되었는지를 결정할 수도 있다. 블록 (603) 이 미디어 콘텐츠 세그먼트가 종료했다고 또는 미디어 콘텐츠가 변경되었다고 결정하면 (아니오 조건), 블록 (603) 은 블록 (604) 으로 제어를 전달할 수도 있다. 블록 (604) 은 미디어 제어 동작이 적절하지 않다는 것을 표시할 수도 있다.
하지만, 블록 (603) 이 미디어 콘텐츠 세그먼트가 종료되지 않았다고 또는 미디어 콘텐츠가 변경되지 않았다고 결정하면 (예 조건), 블록 (603) 은 블록 (605) 으로 제어를 전달할 수도 있다. 블록 (605) 은 관찰자의 어텐션이 복귀했는지를 결정할 수도 있다. 블록 (605) 은 어텐션 검출 복귀를 검출하면, 블록 (606) 으로 제어를 전달할 수도 있다.
블록 (606) 은 미디어 제어 동작을 제공하여야 할지를 결정할 수도 있다. 일 예에서, 블록 (606) 은 미디어 제어 동작을 디스플레이에 대해 제공할 수도 있다. 블록 (606) 은 미디어 제어 동작 (예를 들어, 되감기 기능, 일시정지 기능) 을 제안할 수도 있다. 또 다른 예에서, 블록 (606) 은 미디어 제어 동작 (예를 들어, 일시정지, 되감기) 을 자동으로 수행/활성화할 수도 있다.
도 7 은 본 원리들에 따른 필터 결정들을 위한 방법 (700) 의 플로우 다이어그램을 도시한다. 방법 (700) 은 도 3a 의 방법 (300) 에 의해 수행될 수도 있다.
방법 (700) 은 블록 (701) 을 포함할 수도 있다. 블록 (701) 은 어텐션 이벤트들을 검출할 수도 있다. 예를 들어, 블록 (701) 은 관찰자의 어텐션이 상실, 획득 또는 복귀되었는지를 결정할 수도 있다. 블록 (701) 은 블록들 (301 및 302) 를 포함한, 도 3a 와 관련되어 기재된 원리들에 따라 어텐션 이벤트들을 결정할 수도 있다. 어텐션 이벤트가 하나 이상의 사용자들에 대해 검출되는 경우, 블록 (701) 은 블록들 (702, 704, 및 706) 로 제어를 전달할 수도 있다.
블록 (702) 은 필터 1 결정을 수행할 수도 있다. 예를 들어, 블록 (702) 은 도 3a 의 블록 (303) 과 관련되어 기재된 원리들에 따라 필터 결정을 수행할 수도 있다. 대안으로, 블록 (702) 은 도 4 의 방법 (400), 도 5 의 방법 (500), 또는 도 6 의 방법 (600) 과 관련되어 기재된 원리들에 따라 필터 결정을 수행할 수도 있다. 블록 (702) 은 필터 1 조건이 충족되는지 여부를 결정하기 위해 블록 (703) 으로 제어를 전달할 수도 있다. 블록 (703) 은 필터 1 조건이 충족된다고 결정하는 경우 블록 (708) 으로 제어를 전달할 수도 있다.
블록 (704) 은 필터 2 결정을 수행할 수도 있다. 예를 들어, 블록 (704) 은 도 3a 의 블록 (303) 과 관련되어 기재된 원리들에 따라 필터 결정을 수행할 수도 있다. 대안으로, 블록 (704) 은 도 4 의 방법 (400), 도 5 의 방법 (500), 또는 도 6 의 방법 (600) 관 관련되어 기재된 원리들에 따라 필터 결정을 수행할 수도 있다. 블록 (704) 은 필터 2 조건이 충족되는지 여부를 결정하기 위해 블록 (705) 으로 제어를 전달할 수도 있다. 블록 (705) 은 필터 2 조건이 충족된다고 결정하는 경우 블록 (708) 으로 제어를 전달할 수도 있다.
블록 (706) 은 필터 3 결정을 수행할 수도 있다. 예를 들어, 블록 (706) 은 도 3a 의 블록 (303) 과 관련되어 기재된 원리들에 따라 필터 결정을 수행할 수도 있다. 대안으로, 블록 (706) 은 도 4 의 방법 (400), 도 5 의 방법 (500), 또는 도 6 의 방법 (600) 관 관련되어 기재된 원리들에 따라 필터 결정을 수행할 수도 있다. 블록 (706) 은 필터 3 조건이 충족되는지 여부를 결정하기 위해 블록 (707) 로 제어를 전달할 수도 있다. 블록 (707) 은 필터 3 조건이 충족된다고 결정하는 경우 블록 (708) 으로 제어를 전달할 수도 있다.
블록 (708) 은 하나 보다 많은 필터 조건이 충족했는지를 결정할 수도 있다. 일 예에서, 3 개 미만의 필터들이 있을 수도 있고 블록들 (702, 704 및 706) 에 의해 도시된 3 개 보다 많은 필터들이 있을 수도 있다. 블록 (708) 은 상이한 필터 조건들을 비교하는 것에 의해 필터 분해능 (filter resolution) 을 수행할 수도 있다. 예를 들어, 미디어 제어 동작을 활성화하기 위한 상이한 시나리오들이 있을 수도 있다. 블록 (708) 은 시나리오들 중 어느 것이 만족되는지를 식별할 수도 있다. 일 예에서, 블록 (708) 은 블록들 (702, 704 및 706) 의 필터들에 할당된 다양한 값들을 합산할 수도 있다. 예를 들어, 블록 (703) 은 도 3a 와 관련되어 논의된 값들을 합산할 수도 있다. 블록 (703) 은 총 값이 임계 보다 큰지를 결정할 수도 있다. 긍정적인 결정에 기초하여, 블록 (708) 은 블록 (709) 으로 제어를 전달할 수도 있다.
블록 (709) 은 블록 (709) 의 필터 분해능 결정에 기초하여 출력하도록 미디어 제어 동작을 결정할 수도 있다. 예를 들어, 블록 (709) 은 미디어 제어 동작이 제공되지 않아야 한다고 결정할 수도 있다. 대안으로, 블록 (709) 은 미디어 제어 동작을 디스플레이에 대해 제공할 수도 있다. 블록 (709) 은 미디어 제어 동작 (예를 들어, 되감기 기능, 일시정지 기능) 제안을 제공할 수도 있다. 또 다른 예에서, 블록 (709) 은 미디어 제어 동작 (예를 들어, 일시정지, 되감기) 을 자동으로 수행/활성화할 수도 있다.
도 8 은 본 원리들에 따른 미디어 콘텐츠 동작(들) 을 디스플레이하기 위한 사용자 인터페이스의 개략적인 다이어그램이다. 구체적으로, 도 8 은 본 원리들에 따른 예시적인 사용자 인터페이스 (800) 를 도시한다. 사용자 인터페이스 (800) 는 미디어 콘텐츠가 디스플레이될 수도 있는 배경 영역 (810) 을 포함한다. 사용자 인터페이스 (800) 는, 제의된 미디어 콘텐츠 제어 동작이 디스플레이될 수도 있고 제시된 본 원리들에 따라 제안되는 미디어 콘텐츠 제어 디스플레이 영역 (820) 을 더 포함할 수도 있다. 디스플레이 영역 (820) 은 제의된 미디어 콘텐츠 제어 동작을 도시할 수도 있는 버튼 (830) 을 디스플레이할 수도 있다. 일 예에서, 디스플레이 영역 (820) 은 제의된 미디어 콘텐츠 제어 동작의 시간에서 디스플레이되었던 장면의 이미지를 배경에 디스플레이할 수도 있다. 도시의 명료함을 위해 도 8 에서 영역들 (810 및 820) 이 블랭크로 나타나지만, 이들 영역들의 하나 이상에서 미디어 콘텐츠가 디스플레이될 수도 있음이 추정된다. 버튼 (830) 이 예시의 목적으로 나타나 있지만, 다른 제어 메커니즘들이 또한 본 원리들을 구현하는데 사용될 수 있음을 알아야 한다. 일 예에서, 제어 디스플레이 영역 (820) 은 본 원리들에 따라 자동으로 수행되는 미디어 제어 동작으로 취하는 그래픽을 디스플레이한다.
많은 특정 상세들이 본 발명의 철저한 이해를 제공하기 위해 본 명세서에 기술되었다. 하지만, 위의 예들은 이들 특정 상세들 없이도 실시될 수도 있음이 당업자에 의해 이해될 것이다. 다른 경우들에서, 잘 알려진 동작들, 컴포넌트들 및 회로들은 본 발명을 모호하게 하지 않도록 상세하게 기재되지 않는다. 본 명세서에 개시된 특정 구조적 및 기능적 상세들은 대표적인 것일 수도 있고 반드시 본 발명의 범위를 제한하지 않는다는 것을 알 수 있다.
본 발명의 다양한 예들은 하드웨어 엘리먼트들, 소프트웨어 엘리먼트들 또는 양자의 조합을 사용하여 구현될 수도 있다. 일부 예들은, 예를 들어 머신에 의해 실행되는 경우, 머신으로 하여금 실시형태들에 따른 방법 및/또는 동작들을 수행하게 할 수도 있는, 명령 또는 명령들의 세트를 저장할 수도 있는 컴퓨터 판독가능 매체 또는 물품을 사용하여 구현될 수도 있다. 그러한 머신은, 예를 들어 임의의 적절한 프로세싱 플랫폼, 컴퓨팅 플랫폼, 컴퓨팅 디바이스, 프로세싱 디바이스, 컴퓨팅 시스템, 프로세싱 시스템, 컴퓨터, 프로세서 등을 포함할 수도 있고, 하드웨어 및/또는 소프트웨어의 임의의 적절한 조합을 사용하여 구현될 수도 있다. 컴퓨터 판독가능 매체 또는 물품은, 예를 들어 임의의 적절한 타입의 메모리 유닛, 메모리 디바이스, 메모리 물품, 메모리 매체, 저장 디바이스, 저장 물품, 저장 매체 및/또는 저장 유닛을 포함할 수도 있다. 명령들은 임의의 적절한 하이 레벨, 로우 레벨, 오브젝트 배향된, 시각적, 컴플라이된 및/또는 해석된 프로그래밍 언어를 사용하여 구현된, 소스 코드, 컴플라이된 코드, 해석된 코드, 실행가능 코드, 정적 코드, 동적 코드, 암호화 코드 등과 같은, 임의의 적절한 타입의 코드를 포함할 수도 있다.

Claims (21)

  1. 적어도 하나의 미디어 제어 동작을 수행하는 방법으로서,
    제공된 미디어 콘텐츠 및 어텐션 정보를 모니터링하는 단계;
    상기 어텐션 정보에 기초하여 어텐션 검출을 결정하는 단계;
    상기 어텐션 검출 및 부가 어텐션 정보에 기초하여 필터 조건을 평가하는 단계; 및
    상기 필터 조건의 긍정적인 결정에 기초하여 상기 미디어 제어 동작을 제공하는 단계를 포함하는, 적어도 하나의 미디어 제어 동작을 수행하는 방법.
  2. 제 1 항에 있어서,
    상기 미디어 제어 동작을 디스플레이하는 단계를 더 포함하는, 적어도 하나의 미디어 제어 동작을 수행하는 방법.
  3. 제 1 항에 있어서,
    상기 부가 어텐션 정보는 메타데이터 및 이벤트 기록 정보의 그룹으로부터 선택된 적어도 하나인, 적어도 하나의 미디어 제어 동작을 수행하는 방법.
  4. 제 3 항에 있어서,
    상기 이벤트 기록 정보는, 시간 지속기간, 관찰자들의 수, 미디어 콘텐츠의 타입, 시간 정보, 생체인식 정보, 관찰 패턴, 시간 정보, 디스플레이 정보, 및 보조 디바이스들의 그룹으로부터 선택된 적어도 하나를 포함하는, 적어도 하나의 미디어 제어 동작을 수행하는 방법.
  5. 제 3 항에 있어서,
    상기 이벤트 기록 정보는, 상기 미디어 콘텐츠의 시간에 관한 타임 스탬프, 상기 미디어 콘텐츠의 시간에서의 미디어 콘텐츠 정보, 및 상기 미디어 콘텐츠의 시간에서의 적어도 관찰자의 적어도 어텐션 정보의 그룹으로부터 선택된 적어도 하나를 포함하는 적어도 이벤트 기록을 포함하는, 적어도 하나의 미디어 제어 동작을 수행하는 방법.
  6. 제 3 항에 있어서,
    상기 이벤트 기록 정보는 복수의 이벤트 기록들의 로그를 포함하고, 상기 로그는 상기 이벤트 기록들의 각각의 각 타임 스탬프와 동기화되는, 적어도 하나의 미디어 제어 동작을 수행하는 방법.
  7. 제 6 항에 있어서,
    상기 타임 스탬프들은 관찰자가 상기 미디어 콘텐츠에 대한 어텐션을 획득했거나 상실했을 때 상기 미디어 콘텐츠 동안의 시간들에 대응하는, 적어도 하나의 미디어 제어 동작을 수행하는 방법.
  8. 제 1 항에 있어서,
    상기 어텐션 검출은 관찰자가 임계 이상의 상기 미디어 콘텐츠에 대한 어텐션을 상실했다는 결정에 기초하는, 적어도 하나의 미디어 제어 동작을 수행하는 방법.
  9. 제 3 항에 있어서,
    상기 필터 조건은 메타데이터에 기초하여 결정되고, 상기 메타데이터는 시간 대, 요일, 기상 조건, 시청자의 연령 또는 성별, 시청 화면의 크기, 일일 TV 시청 시간, 지리적 위치, 및 선호도 프로파일들의 그룹으로부터 선택된 적어도 하나인, 적어도 하나의 미디어 제어 동작을 수행하는 방법.
  10. 제 1 항에 있어서,
    상기 미디어 제어 동작을 제공하는 것은, 상기 미디어 제어 동작을 제안하거나 활성화하는 것의 그룹으로부터 선택된 적어도 하나인, 적어도 하나의 미디어 제어 동작을 수행하는 방법.
  11. 적어도 하나의 미디어 제어 동작을 수행하는 시스템으로서,
    제공된 미디어 콘텐츠 및 어텐션 정보를 모니터링하도록 구성된 프로세싱 유닛으로서, 어텐션 검출 및 부가 어텐션 정보에 기초하여 필터 조건을 평가하도록 또한 구성된, 상기 프로세싱 유닛; 및
    상기 프로세싱 유닛에 의해 사용된 정보를 저장하도록 구성된 메모리를 포함하고,
    상기 어텐션 검출은 상기 어텐션 정보에 기초하여 결정되고;
    상기 프로세싱 유닛은 또한, 상기 필터 조건의 긍정적인 결정에 기초하여 상기 미디어 제어 동작을 제공하는, 적어도 하나의 미디어 제어 동작을 수행하는 시스템.
  12. 제 11 항에 있어서,
    상기 미디어 제어 동작을 디스플레이하는 디스플레이 프로세서를 더 포함하는, 적어도 하나의 미디어 제어 동작을 수행하는 시스템.
  13. 제 11 항에 있어서,
    상기 부가 어텐션 정보는 메타데이터 및 이벤트 기록 정보의 그룹으로부터 선택된 적어도 하나인, 적어도 하나의 미디어 제어 동작을 수행하는 시스템.
  14. 제 13 항에 있어서,
    상기 이벤트 기록 정보는, 시간 지속기간, 관찰자들의 수, 미디어 콘텐츠의 타입, 시간 정보, 생체인식 정보, 관찰 패턴, 시간 정보, 디스플레이 정보, 및 보조 디바이스들의 그룹으로부터 선택된 적어도 하나를 포함하는, 적어도 하나의 미디어 제어 동작을 수행하는 시스템.
  15. 제 13 항에 있어서,
    상기 이벤트 기록 정보는, 상기 미디어 콘텐츠의 시간에 관한 타임 스탬프, 상기 미디어 콘텐츠의 시간에서의 미디어 콘텐츠 정보, 및 상기 미디어 콘텐츠의 시간에서의 적어도 관찰자의 적어도 어텐션 정보의 그룹으로부터 선택된 적어도 하나를 포함하는 적어도 이벤트 기록을 포함하는, 적어도 하나의 미디어 제어 동작을 수행하는 시스템.
  16. 제 13 항에 있어서,
    상기 이벤트 기록 정보는 복수의 이벤트 기록들의 로그를 포함하고, 상기 로그는 상기 이벤트 기록들의 각각의 각 타임 스탬프와 동기화되는, 적어도 하나의 미디어 제어 동작을 수행하는 시스템.
  17. 제 16 항에 있어서,
    상기 타임 스탬프들은 관찰자가 상기 미디어 콘텐츠에 대한 어텐션을 획득했거나 상실했을 때 상기 미디어 콘텐츠 동안의 시간들에 대응하는, 적어도 하나의 미디어 제어 동작을 수행하는 시스템.
  18. 제 11 항에 있어서,
    상기 어텐션 검출은 관찰자가 임계 이상의 상기 미디어 콘텐츠에 대한 어텐션을 상실했다는 결정에 기초하는, 적어도 하나의 미디어 제어 동작을 수행하는 시스템.
  19. 제 13 항에 있어서,
    상기 필터 조건은 메타데이터에 기초하여 결정되고, 상기 메타데이터는 시간 대, 요일, 기상 조건, 시청자의 연령 또는 성별, 시청 화면의 크기, 일일 TV 시청 시간, 지리적 위치, 및 선호도 프로파일들의 그룹으로부터 선택된 적어도 하나인, 적어도 하나의 미디어 제어 동작을 수행하는 시스템.
  20. 제 11 항에 있어서,
    상기 미디어 제어 동작을 제공하는 것은, 상기 미디어 제어 동작을 제안하거나 활성화하는 것의 그룹으로부터 선택된 적어도 하나인, 적어도 하나의 미디어 제어 동작을 수행하는 시스템.
  21. 방법을 수행하는 컴퓨터 실행가능 코드가 저장된 비일시적인 유형의 컴퓨터 판독가능 저장 매체로서,
    상기 방법은,
    제공된 미디어 콘텐츠 및 어텐션 정보를 모니터링하는 단계;
    상기 어텐션 정보에 기초하여 어텐션 검출을 결정하는 단계;
    상기 어텐션 검출 및 부가 어텐션 정보에 기초하여 필터 조건을 평가하는 단계; 및
    상기 필터 조건의 긍정적인 결정에 기초하여 미디어 제어 동작을 제공하는 단계를 포함하는, 비일시적인 유형의 컴퓨터 판독가능 저장 매체.
KR1020187006065A 2015-09-01 2016-08-31 어텐션 검출에 기초한 미디어 콘텐츠 제어를 위한 방법들, 시스템들 및 장치 KR20180063051A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201562212668P 2015-09-01 2015-09-01
US62/212,668 2015-09-01
PCT/US2016/049786 WO2017040723A1 (en) 2015-09-01 2016-08-31 Methods, systems and apparatus for media content control based on attention detection

Publications (1)

Publication Number Publication Date
KR20180063051A true KR20180063051A (ko) 2018-06-11

Family

ID=56926306

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020187006065A KR20180063051A (ko) 2015-09-01 2016-08-31 어텐션 검출에 기초한 미디어 콘텐츠 제어를 위한 방법들, 시스템들 및 장치

Country Status (6)

Country Link
US (1) US20180295420A1 (ko)
EP (1) EP3345400A1 (ko)
JP (1) JP2018530277A (ko)
KR (1) KR20180063051A (ko)
CN (1) CN108353202A (ko)
WO (1) WO2017040723A1 (ko)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10939164B2 (en) 2016-05-10 2021-03-02 Rovi Guides, Inc. Method and system for transferring an interactive feature to another device
US10652614B2 (en) * 2018-03-06 2020-05-12 Shoppar, Ltd. System and method for content delivery optimization based on a combined captured facial landmarks and external datasets
US10440440B1 (en) * 2018-03-23 2019-10-08 Rovi Guides, Inc. Systems and methods for prompting a user to view an important event in a media asset presented on a first device when the user is viewing another media asset presented on a second device
GB201809388D0 (en) * 2018-06-07 2018-07-25 Realeyes Oue Computer-Implemented System And Method For Determining Attentiveness of User
US11610044B2 (en) * 2018-07-30 2023-03-21 Primer Technologies, Inc. Dynamic management of content in an electronic presentation
US10979769B2 (en) * 2019-02-25 2021-04-13 PreTechnology, Inc. Method and apparatus for monitoring and tracking consumption of digital content
EP3942440A1 (en) * 2019-05-06 2022-01-26 Google LLC Assigning priority for an automated assistant according to a dynamic user queue and/or multi-modality presence detection
CN110401872A (zh) * 2019-07-26 2019-11-01 青岛海尔科技有限公司 基于智能家居操作系统的事件提醒方法、装置及存储介质
US11632587B2 (en) * 2020-06-24 2023-04-18 The Nielsen Company (Us), Llc Mobile device attention detection
US11553247B2 (en) * 2020-08-20 2023-01-10 The Nielsen Company (Us), Llc Methods and apparatus to determine an audience composition based on thermal imaging and facial recognition
US11949948B2 (en) * 2021-05-11 2024-04-02 Sony Group Corporation Playback control based on image capture

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020144259A1 (en) * 2001-03-29 2002-10-03 Philips Electronics North America Corp. Method and apparatus for controlling a media player based on user activity
JP2008523684A (ja) * 2004-12-07 2008-07-03 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ インテリジェントポースボタン
US20070033607A1 (en) * 2005-08-08 2007-02-08 Bryan David A Presence and proximity responsive program display
WO2007113580A1 (en) * 2006-04-05 2007-10-11 British Telecommunications Public Limited Company Intelligent media content playing device with user attention detection, corresponding method and carrier medium
JP2010004118A (ja) * 2008-06-18 2010-01-07 Olympus Corp デジタルフォトフレーム、情報処理システム、制御方法、プログラム及び情報記憶媒体
US20110072452A1 (en) * 2009-09-23 2011-03-24 Rovi Technologies Corporation Systems and methods for providing automatic parental control activation when a restricted user is detected within range of a device
ES2431016T5 (es) * 2009-09-23 2022-02-24 Rovi Guides Inc Sistemas y métodos para detectar automáticamente usuarios con regiones de detección de dispositivos de medios
US8347325B2 (en) * 2009-12-22 2013-01-01 Vizio, Inc. System, method and apparatus for viewer detection and action
US20120324492A1 (en) * 2011-06-20 2012-12-20 Microsoft Corporation Video selection based on environmental sensing
US20140096152A1 (en) * 2012-09-28 2014-04-03 Ron Ferens Timing advertisement breaks based on viewer attention level

Also Published As

Publication number Publication date
CN108353202A (zh) 2018-07-31
US20180295420A1 (en) 2018-10-11
EP3345400A1 (en) 2018-07-11
JP2018530277A (ja) 2018-10-11
WO2017040723A1 (en) 2017-03-09

Similar Documents

Publication Publication Date Title
KR20180063051A (ko) 어텐션 검출에 기초한 미디어 콘텐츠 제어를 위한 방법들, 시스템들 및 장치
US9706235B2 (en) Time varying evaluation of multimedia content
EP3164802B1 (en) Method of collecting and processing computer user data during interaction with web-based content
KR101741352B1 (ko) 데이터 및 오디오/비디오 콘텐츠의 전달을 제어하는 관심도 평가
EP2972972B1 (en) Detecting user interest in presented media items by observing volume change events
KR101983322B1 (ko) 관심 기반 비디오 스트림 선택 기법
US20190259423A1 (en) Dynamic media recording
US20120324492A1 (en) Video selection based on environmental sensing
US20140028917A1 (en) Displaying multimedia
US20140331242A1 (en) Management of user media impressions
US20150110462A1 (en) Dynamic media viewing
US10453263B2 (en) Methods and systems for displaying augmented reality content associated with a media content instance
US20220312079A1 (en) Systems and methods to provide adaptive play settings
US11871081B2 (en) Leveraging emotional transitions in media to modulate emotional impact of secondary content
US11910061B2 (en) Leveraging emotional transitions in media to modulate emotional impact of secondary content
US11729480B2 (en) Systems and methods to enhance interactive program watching
US11570523B1 (en) Systems and methods to enhance interactive program watching
US11416128B2 (en) Virtual group laughing experience
CN105992065B (zh) 随选视讯社交互动方法和系统

Legal Events

Date Code Title Description
N231 Notification of change of applicant
WITB Written withdrawal of application