BRPI0917133B1 - dispositivo de exibição de imagem, método de controle, e, meio de armazenamento legível por computador - Google Patents

dispositivo de exibição de imagem, método de controle, e, meio de armazenamento legível por computador Download PDF

Info

Publication number
BRPI0917133B1
BRPI0917133B1 BRPI0917133-9A BRPI0917133A BRPI0917133B1 BR PI0917133 B1 BRPI0917133 B1 BR PI0917133B1 BR PI0917133 A BRPI0917133 A BR PI0917133A BR PI0917133 B1 BRPI0917133 B1 BR PI0917133B1
Authority
BR
Brazil
Prior art keywords
image
face
face detection
unit
image display
Prior art date
Application number
BRPI0917133-9A
Other languages
English (en)
Inventor
Haruo Oba
Yusuke Sakai
Tamaki Kojima
Kazumoto Kondo
Naoki Okamoto
Satou Inoue
Kazuyoshi Suzuki
Yasuhisa Nakajima
Masahiro Nakano
Takashi Tsurumoto
Original Assignee
Sony Corporation
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corporation filed Critical Sony Corporation
Publication of BRPI0917133A2 publication Critical patent/BRPI0917133A2/pt
Publication of BRPI0917133B1 publication Critical patent/BRPI0917133B1/pt

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26—Power supply means, e.g. regulation thereof
    • G06F1/32—Means for saving power
    • G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26—Power supply means, e.g. regulation thereof
    • G06F1/32—Means for saving power
    • G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3206—Monitoring of events, devices or parameters that trigger a change in power modality
    • G06F1/3231—Monitoring the presence, absence or movement of users
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26—Power supply means, e.g. regulation thereof
    • G06F1/32—Means for saving power
    • G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3234—Power saving characterised by the action undertaken
    • G06F1/325—Power saving in peripheral device
    • G06F1/3265—Power saving in display device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4436—Power management, e.g. shutting down unused components of the receiver
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/63—Generation or supply of power specially adapted for television receivers
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0626—Adjustment of display parameters for control of overall brightness
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2330/00—Aspects of power supply; Aspects of display protection and defect management
    • G09G2330/02—Details of power systems and of start or stop of display operation
    • G09G2330/021—Power management, e.g. power saving
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/3406—Control of illumination source
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42201—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] biosensors, e.g. heat sensor for presence detection, EEG sensors or any limb activity sensors worn by the user
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42202—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] environmental sensors, e.g. for detecting temperature, luminosity, pressure, earthquakes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/441—Acquiring end-user identification, e.g. using personal code sent by the remote control or by inserting a card
    • H04N21/4415—Acquiring end-user identification, e.g. using personal code sent by the remote control or by inserting a card using biometric characteristics of the user, e.g. by voice recognition or fingerprint scanning
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508—Management of client data or end-user data
    • H04N21/4532—Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/57—Control of contrast or brightness
    • H04N5/58—Control of contrast or brightness in dependence upon ambient light
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Abstract

DISPOSITIVO DE EXIBIÇÃO DE IMAGEM, MÉTODO DE CONTROLE, E, PROGRAMA DE COMPUTADOR. É provido um dispositivo de exibição de imagem provido com uma unidade de exibição de imagem para exibir um imagem estática ou uma imagem em movimento, uma unidade de captura de imagem para capturar a imagem em uma direção na qual a unidade de exibição de imagem exibe a imagem na unidade de exibição de imagem e uma unidade e uma unidade de detecção de face para realizar, em intervalos pré-determinados, processamento de detecção de face para detectar uma face incluída na imagem capturada pela unidade de captura de imagem, em que os intervalos pré-determinados são variáveis de acordo com a determinação se a face de um usuário está incluída na imagem capturada pela unidade de captura de imagem ou não, e, quando a posição da face detectada não mudar por um período de tempo pré-determinado no processamento de detecção de face, a unidade de detecção de face não detecta a face como a face do usuário.

Description

CAMPO DA INVENÇÃO
[001] A presente invenção diz respeito a um dispositivo de exibição de imagem, a um método de controle e a um programa de computador.
FUNDAMENTOS DA INVENÇÃO
[002] A pesquisa da Associação das Indústrias de Tecnologia da Informação e de Componentes Eletrônicos do Japão (JEITA) afirma que um tempo médio gasto assistindo televisão (TV) por um dia é de 4,5 horas. Entretanto, sabe-se que há mudanças nos estilos de vida ocorrendo recentemente, e que as 4,5 horas não são necessariamente gastas continuamente assistindo TV.
[003] Por exemplo, quando um espectador assiste TV ao mesmo tempo em que fica pronto para ir ao trabalho ou para a escolha de manhã ou ao mesmo tempo em que está comendo, ele não assiste continuamente a tela da TV, mas vira seu olhar ou fala com uma outra pessoa quando um programa, tal como uma previsão do tempo, para o qual a entrada do som é suficiente, está sendo difundido. Assim, palavras-chaves interessantes difundidas nas notícias atuais ou nas notícias de esportes são tomadas como marcas, mediante as quais o comportamento de assistir a tela da TV fica novamente frequente.
[004] Isto é, um modo típico de assistir TV envolve meramente ligar a TV no lugar de um relógio de manhã, ou ouvir o som da TV à noite, ao mesmo tempo em que opera-se um computador pessoal (PC), e a assim denominada “meia audiência” aumenta. Quando esta “meia audiência” for realizada, energia é desnecessariamente consumida no estado em que a tela da TV está ligada. Como tal, na tecnologia relacionada, para reduzir o consumo de energia, TVs têm um modo de desligar a tela e continuar a reproduzir apenas o áudio.
SUMÁRIO DA INVENÇÃO PROBLEMA TÉCNICO
[005] Entretanto, a TV convencional com o modo de continuar a reproduzir apenas o áudio tem um problema em que é impossível comutar automaticamente o modo. Em outras palavras, é necessário que o espectador esteja consciente para operar o controle remoto e comutar o modo a partir do menu, e a TV não é adequada para a frequente alteração do modo, e não é apta para o uso direcionado à conservação de energia. Em decorrência disto, a TV convencional com o modo de continuar a reproduzir apenas o áudio não é capaz de detectar a situação de audiência do espectador para comutar automaticamente o modo.
[006] A presente invenção é feita em vista do supramencionado problema, e objetiva prover um dispositivo de exibição de imagem, um método de controle e um programa de computador que são inéditos e melhores, e que são capazes de detectar a situação de audiência de uma pessoa a partir de uma imagem capturada e, assim, controlar automaticamente a operação do interior do dispositivo de acordo com a situação de audiência detectada.
SOLUÇÃO DO PROBLEMA
[007] De acordo com o primeiro aspecto da presente invenção, a fim de alcançar o supramencionado objetivo, é provido um dispositivo de exibição de imagem que inclui: uma unidade de exibição de imagem para exibir uma imagem estática ou uma imagem em movimento; uma unidade de captura de imagem para capturar a imagem em uma direção na qual a unidade de exibição de imagem exibe a imagem estática ou a imagem em movimento; e uma unidade de detecção de face para realizar processamento de detecção de face, no qual uma face de um usuário que está incluída na imagem capturada pela unidade de captura de imagem é detectada, em dados intervalos, em que os dados intervalos são variáveis de acordo com a determinação se a face do usuário está incluída na imagem capturada pela unidade de captura de imagem ou não, e quando a face detectada não passar por mudança na posição, no todo ou em parte, por um dado tempo no curso do processamento de detecção de face, a unidade de detecção de face não detecta a face como a face do usuário.
[008] Com esta configuração, a unidade de exibição de imagem exibe a imagem estática ou a imagem em movimento e a unidade de captura de imagem captura a imagem na direção na qual a unidade de exibição de imagem exibe a imagem estática ou a imagem em movimento. Adicionalmente, a unidade de detecção de face realiza o processamento de detecção de face, no qual a face do usuário incluída na imagem capturada pela unidade de captura de imagem é detectada, nos dados intervalos. Os dados intervalos são variáveis de acordo com a determinação se a face do usuário está incluída na imagem capturada pela unidade de captura de imagem ou não. Quando a face detectada não passar por mudança na posição, no todo ou em parte, por um dado tempo, no curso do processamento de detecção de face, a unidade de detecção de face não detecta a face como a face do usuário. Em decorrência disto, é possível detectar a situação de audiência de uma pessoa a partir da imagem capturada e controlar automaticamente uma situação de operação de acordo com a situação de audiência detectada. Adicionalmente, os intervalos do processamento de detecção de face da unidade de detecção de face mudam de acordo com a determinação se a face do usuário está incluída na imagem ou não e, desse modo, é possível reduzir um custo ou energia exigido para o processamento de detecção de face.
[009] O dispositivo de exibição de imagem pode incluir adicionalmente uma unidade de controle para realizar uma operação de controle na unidade de exibição de imagem de acordo com um resultado do processamento de detecção de face da unidade de detecção de face. Em decorrência do processamento de detecção de face da unidade de detecção de face, quando a face do usuário não estiver incluída na imagem capturada pela unidade de captura de imagem, a unidade de controle pode reduzir a luminância da unidade de exibição de imagem.
[0010] A unidade de controle pode reduzir a luminância da unidade de exibição de imagem depois que um dado tempo tiver decorrido, depois que for determinado que a face do usuário não está incluída na imagem capturada pela unidade de captura de imagem.
[0011] A unidade de controle pode detectar o brilho de um cômodo instalado usando a imagem capturada pela unidade de captura de imagem e pode não reduzir a luminância da unidade de exibição de imagem quando o brilho do cômodo não alcançar um dado valor.
[0012] Depois de reduzir a luminância da unidade de exibição de imagem, a unidade de controle pode elevar a luminância da unidade de exibição de imagem quando for adotado que a face do usuário está incluída na imagem capturada pela unidade de captura de imagem.
[0013] Quando um dado tempo tiver decorrido depois que a luminância da unidade de exibição de imagem for reduzida, a unidade de controle pode omitir parcial ou completamente o processamento de imagem da imagem exibida na unidade de exibição de imagem.
[0014] Quando for determinado que a face do usuário está incluída na imagem capturada pela unidade de captura de imagem, mas o usuário fecha seus olhos, a unidade de controle pode reduzir a luminância da unidade de exibição de imagem depois que um dado tempo tiver decorrido a partir da determinação.
[0015] O dispositivo de exibição de imagem pode incluir adicionalmente uma unidade de controle para realizar uma operação de controle na imagem estática ou na imagem em movimento de acordo com um resultado do processamento de detecção de face da unidade de detecção de face, e a unidade de controle pode mudar uma faixa da imagem a ser exibida na unidade de exibição de imagem de acordo com uma posição da face que a unidade de detecção de face detecta e uma distância da face em relação à unidade de captura de imagem.
[0016] O dispositivo de exibição de imagem pode incluir adicionalmente uma unidade de controle para realizar uma operação de controle na imagem estática ou na imagem em movimento de acordo com um resultado do processamento de detecção de face da unidade de detecção de face, e a unidade de controle pode selecionar a imagem a ser exibida na unidade de exibição de imagem de acordo com uma situação da face que a unidade de detecção de face detecta.
[0017] O dispositivo de exibição de imagem pode incluir adicionalmente uma unidade de controle para realizar uma operação de controle na imagem estática ou na imagem em movimento de acordo com um resultado do processamento de detecção de face da unidade de detecção de face, e a unidade de controle pode controlar se um processamento de conversão de alta resolução é realizado ou não na imagem a ser exibida na unidade de exibição de imagem de acordo com a determinação se a face que a unidade de detecção de face detecta está presente ou não.
[0018] O dispositivo de exibição de imagem pode incluir adicionalmente uma unidade de controle para realizar uma operação de controle na imagem estática ou na imagem em movimento de acordo com um resultado do processamento de detecção de face da unidade de detecção de face, e a unidade de controle pode comutar automática e sequencialmente os canais a serem exibidos na unidade de exibição de imagem de acordo com a determinação se a face que a unidade de detecção de face detecta está presente ou não.
[0019] O dispositivo de exibição de imagem pode incluir adicionalmente: uma unidade de saída de áudio para transmitir um áudio; e uma unidade de controle para realizar uma operação de controle no áudio de acordo com um resultado do processamento de detecção de face da unidade de detecção de face, e a unidade de controle pode controlar o volume da saída de áudio a partir da unidade de saída de áudio de acordo com uma situação da face que a unidade de detecção de face detecta.
[0020] A unidade de controle pode controlar o volume da saída de áudio a partir da unidade de saída de áudio de acordo com uma direção e a área da face que a unidade de detecção de face detecta.
[0021] A unidade de controle pode calcular a área da face a partir da direção e da área da face que a unidade de detecção de face detecta quando a face estiver direcionada para uma direção frontal, e pode controlar o volume da saída de áudio a partir da unidade de saída de áudio usando um resultado do cálculo.
[0022] O dispositivo de exibição de imagem pode incluir adicionalmente uma unidade de controle para realizar uma operação de controle na imagem estática ou na imagem em movimento de acordo com um resultado do processamento de detecção de face da unidade de detecção de face e, em decorrência do processamento de detecção de face da unidade de detecção de face, quando for determinado que a face do usuário não está incluída na imagem capturada pela unidade de captura de imagem, a unidade de controle pode interromper temporariamente a reprodução da imagem em movimento exibida na unidade de exibição de imagem.
[0023] O dispositivo de exibição de imagem pode incluir adicionalmente uma unidade de controle para realizar uma operação de controle na imagem estática ou na imagem em movimento de acordo com um resultado do processamento de detecção de face da unidade de detecção de face e, em decorrência do processamento de detecção de face da unidade de detecção de face, quando for determinado que a face detectada pela unidade de detecção de face mostra uma reação à imagem exibida na unidade de exibição de imagem, a unidade de controle pode definir uma marca para a imagem.
[0024] A unidade de controle pode definir um capítulo como a marca quando a imagem exibida na unidade de exibição de imagem for a imagem em movimento.
[0025] A unidade de controle pode definir o capítulo em um momento que volta um dado tempo a partir de um momento em que a face detectada pela unidade de detecção de face mostra a reação.
[0026] O dispositivo de exibição de imagem pode incluir adicionalmente uma unidade de controle para realizar uma operação de controle na imagem estática ou na imagem em movimento de acordo com um resultado do processamento de detecção de face da unidade de detecção de face, e a unidade de controle pode obter uma situação de apreciação da imagem exibida na unidade de exibição de imagem usando o resultado do processamento de detecção de face da unidade de detecção de face.
[0027] A unidade de controle pode selecionar a imagem a ser exibida na unidade de exibição de imagem de acordo com a situação de apreciação.
[0028] De acordo com o segundo aspecto da presente invenção, a fim de alcançar o supramencionado objetivo, é provido um método de controle que inclui as etapas de: capturar uma imagem em uma direção em que uma unidade de exibição de imagem para exibir uma imagem estática ou uma imagem em movimento exibe a imagem estática ou a imagem em movimento; e realizar o processamento de detecção de face, no qual uma face de um usuário que está incluída na imagem capturada na etapa de captura é detectada, em dados intervalos, para detectar a face, em que os dados intervalos são variáveis de acordo com a determinação se a face do usuário está incluída na imagem capturada na etapa de captura da imagem ou não, e em que a etapa de detecção da face não detecta a face como a face do usuário quando a face detectada não passar por mudança na posição, no todo ou em parte, por um dado tempo no curso do processamento de detecção de face.
[0029] De acordo com o terceiro aspecto da presente invenção, a fim de alcançar o supramencionado objetivo, é provido um programa de computador para fazer com que um computador execute as etapas de capturar uma imagem em uma direção em que uma unidade de exibição de imagem para exibir uma imagem estática ou uma imagem em movimento exibe a imagem estática ou a imagem em movimento e de realizar o processamento de detecção de face, no qual uma face de um usuário que está incluída na imagem capturada na etapa de captura é detectada, em dados intervalos, para detectar a face, em que os dados intervalos são variáveis de acordo com a determinação se a face do usuário está incluída na imagem capturada na etapa de captura da imagem ou não, e em que a etapa de detecção da face não detecta a face como a face do usuário quando a face detectada não passar por mudança na posição, no todo ou em parte, por um dado tempo no curso do processamento de detecção de face.
EFEITOS VANTAJOSOS DA INVENÇÃO
[0030] De acordo com a presente invenção supradescrita, o dispositivo de exibição de imagem, o método de controle e o programa de computador, que são inéditos e melhores, podem detectar a situação de audiência de uma pessoa a partir de uma imagem capturada e, assim, controlar automaticamente a operação do interior do dispositivo de acordo com a situação de audiência detectada.
DESCRIÇÃO RESUMIDA DOS DESENHOS
[0031] A figura 1 é um diagrama explicativo que explica o esboço de um dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção.
[0032] A figura 2 é um diagrama explicativo que mostra a configuração do dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção.
[0033] A figura 3 é um fluxograma que explica a operação do dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção.
[0034] A figura 4 é um fluxograma que explica um processo de transição para um modo de economia de energia no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção.
[0035] A figura 5 é um fluxograma que explica um processo de restauração de um modo de economia de energia no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção.
[0036] A figura 6 é um diagrama explicativo que mostra um exemplo da mudança na luminância de uma luz de fundo em um gráfico no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção.
[0037] A figura 7 é um diagrama explicativo que mostra um outro exemplo da mudança na luminância de uma luz de fundo em um gráfico no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção.
[0038] A figura 8 é um diagrama explicativo que mostra um exemplo da mudança no consumo de energia em um gráfico no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção.
[0039] A figura 9 é um fluxograma que explica uma modificação do processamento de detecção de face no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção.
[0040] A figura 10 é um diagrama explicativo que mostra uma outra modificação do processamento de detecção de face no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção.
[0041] A figura 11 é um fluxograma que explica uma outra modificação do processamento de detecção de face no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção.
[0042] A figura 12 é um fluxograma que explica uma outra modificação do processamento de detecção de face no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção.
[0043] A figura 13 é um fluxograma que explica uma outra modificação do processamento de detecção de face no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção.
[0044] A figura 14 é um fluxograma que explica uma outra modificação do processamento de detecção de face no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção.
[0045] A figura 15 é um fluxograma que explica uma outra modificação do processamento de detecção de face no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção.
[0046] A figura 16 é um fluxograma que explica uma outra modificação do processamento de detecção de face no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção. LISTA DOS SINAIS DE REFERÊNCIA 100 dispositivo de exibição de imagem 102 painel de exibição 104 unidade de entrada de imagem 106 unidade de detecção de face 108 energia unidade de controle 110 SDRAM 112 ROM flash 114 CPU 116 unidade de recepção de luz do controle remoto 118 I/F de rede 120 terminal de rede 122 sintonizador terrestre 124 sintonizador digital 126 circuito de conversão A/D de áudio 128 decodificador de vídeo 130 decodificador MPEG 132 circuito de processamento do sinal de áudio 134 circuito de processamento do sinal de vídeo 136 receptor HDMI 138 terminal HDMI 140 circuito de amplificação de áudio 142 alto-falante 144 circuito de geração de gráfico 146 circuito de acionamento de painel 200 controle remoto
DESCRIÇÃO DAS MODALIDADES
[0047] A seguir, modalidades preferidas da presente invenção serão descritas com detalhes em relação aos desenhos anexos. Note que, nesta especificação e nos desenhos, elementos que têm, substancialmente, as mesmas função e estrutura são denotados com os mesmos sinais de referência, e explicação repetida é omitida.
[0048] Adicionalmente, modalidades preferidas da presente invenção serão descritas na seguinte ordem. [1] Esboço de um dispositivo de exibição de imagem de acordo com uma modalidade da presente invenção [2] Operação do dispositivo de exibição de imagem de acordo com uma modalidade da presente invenção [2-1] Transição para um modo de economia de energia [2-2] Restauração de um modo de economia de energia [3] Modificação da operação do dispositivo de exibição de imagem de acordo com uma modalidade da presente invenção [3-1] Mudança na frequência de detecção [3-2] Pseudoexibição de uma imagem tridimensional [3-3] Alteração automática de um canal [3-4] Controle de volume correspondente a uma distância [3-5] Controle de reprodução do conteúdo [3-6] Definição de uma marca no conteúdo [3-7] Detecção da situação de audiência do conteúdo [4] Conclusão
[1] Esboço de um dispositivo de exibição de imagem de acordo com uma modalidade da presente invenção
[0049] Primeiro, o esboço de um dispositivo de exibição de imagem de acordo com uma modalidade da presente invenção será descrito. A figura 1 é um diagrama explicativo que explica o esboço de um dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção. A seguir, o esboço do dispositivo de exibição de imagem de acordo com uma modalidade da presente invenção será descrito usando a figura 1.
[0050] Da forma mostrada na figura 1, o dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção inclui uma unidade de entrada de imagem 104 em uma parte central superior de um painel de exibição 102, que exibe uma imagem estática ou uma imagem em movimento, que captura a imagem em movimento. A unidade de entrada de imagem 104 captura a imagem em movimento em uma direção em que o dispositivo de exibição de imagem 100 exibe a imagem estática ou a imagem em movimento no painel de exibição 102. O dispositivo de exibição de imagem 100 de acordo com a presente modalidade analisa a imagem capturada pela unidade de entrada de imagem 104 e detecta a face de um usuário projetada na imagem. Então, de acordo com a determinação se a face do usuário está contida na imagem em movimento que a unidade de exibição de imagem 104 captura, o dispositivo de exibição de imagem 100 é caracterizado em que ele muda um estado de operação interna.
[0051] Adicionalmente, na figura 1, o dispositivo de exibição de imagem 100 inclui a unidade de entrada de imagem 104 que captura a imagem em movimento na parte central superior do painel de exibição 102 para a imagem. Entretanto, na presente invenção, é desnecessário dizer que uma posição da entrada de imagem que captura a imagem em movimento não é limitada a um exemplo como este. Por exemplo, um dispositivo diferente do dispositivo de exibição de imagem 100 pode ser provido e conectado no dispositivo de exibição de imagem 100 e pode capturar a imagem em movimento. Adicionalmente, é desnecessário dizer que o número de unidades de entrada de imagem não é limitado a um, e duas ou mais unidades de entrada de imagem podem ser providas para capturar uma imagem.
[0052] A descrição exposta foi feita sobre o esboço do dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção. A seguir, a configuração do dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção será descrita.
[0053] A figura 2 é um diagrama explicativo que mostra a configuração do dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção. A seguir, a configuração do dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção será descrita usando a figura 2.
[0054] Da forma mostrada na figura 2, o dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção inclui um painel de exibição 102, uma unidade de entrada de imagem 104, uma unidade de detecção de face 106, uma unidade de controle de energia 108, uma Memória de Acesso Aleatório Dinâmica Síncrona (SDRAM) 110, uma ROM flash 112, uma CPU 114, uma unidade de recepção de luz do controle remoto 116, uma I/F de rede 118, um terminal de rede 120, um sintonizador terrestre 122, um sintonizador digital 124, um circuito de conversão A/D de áudio 126, um decodificador de vídeo 128, um decodificador MPEG 130, um circuito de processamento do sinal de áudio 132, um circuito de processamento do sinal de vídeo 134, uma receptor de interface multimídia de alta definição (HDMI) 136, um terminal HDMI 138, um circuito de amplificação de áudio 140, um alto-falante 142, um circuito de geração de gráfico 144 e um circuito de acionamento de painel 146.
[0055] O sintonizador terrestre 122 recebe um sinal de onda de difusão enviado a partir de uma antena terrestre (não mostrada), que recebe uma onda analógica do solo, e demodula um sinal de vídeo e um sinal de áudio, ambos os quais são incluídos no sinal de onda de difusão em sinais de banda base. Dos sinais de banda base demodulados pelo sintonizador terrestre 122, o sinal de áudio é enviado ao circuito de conversão A/D de áudio 126 e o sinal de vídeo é enviado ao decodificador de vídeo 128.
[0056] O sintonizador digital 124 recebe um sinal de onda de difusão enviado a partir de uma antena digital (não mostrada), que recebe a difusão digital, e converte o sinal de onda de difusão recebido em um fluxo contínuo de transporte MPEG2 (MPEG2-TS). Quando o sinal de onda de difusão for convertido no MPEG2-TS pelo sintonizador digital 124, o MPEG2-TS convertido é enviado ao decodificador MPEG 130.
[0057] O circuito de conversão A/D de áudio 126 recebe o sinal de áudio demodulado pelo sintonizador terrestre 122 e converte um sinal de áudio analógico em um sinal de áudio digital. Quando o sinal de áudio analógico for convertido no sinal de áudio digital pelo circuito de conversão A/D de áudio 126, o sinal de áudio digital convertido é enviado ao circuito de processamento do sinal de áudio 132.
[0058] O decodificador de vídeo 128 recebe o sinal de vídeo demodulado pelo sintonizador terrestre 122 e converte um sinal de vídeo analógico em um sinal componente digital. Quando o sinal de vídeo analógico for convertido no sinal componente digital pelo decodificador de vídeo 128, o sinal componente digital convertido é enviado ao circuito de processamento do sinal de vídeo 134.
[0059] O decodificador MPEG 130 recebe o MPEG2-TS enviado a partir do sintonizador digital 124 e converte o MPEG2-TS em um sinal de áudio digital em conexão com o áudio e em um sinal componente digital em conexão com o vídeo. Quando o MPEG2-TS for convertido no sinal de áudio digital ou no sinal componente digital pelo decodificador MPEG 130, o sinal de áudio digital convertido é enviado ao circuito de processamento do sinal de áudio 132 e o sinal componente digital convertido é enviado ao circuito de processamento do sinal de vídeo 134.
[0060] O circuito de processamento do sinal de áudio 132 recebe o sinal de áudio digital enviado a partir do circuito de conversão A/D de áudio 126 ou do decodificador MPEG 130 e realiza processamento de sinal no sinal de áudio digital. Quando o processamento de sinal for realizado no sinal de áudio digital pelo circuito de processamento do sinal de áudio 132, o sinal de áudio é enviado ao circuito de amplificação de áudio 140.
[0061] O circuito de processamento do sinal de vídeo 134 recebe o sinal componente digital enviado a partir do decodificador de vídeo 128 ou do decodificador MPEG 130, e realiza processamento de sinal no sinal componente digital. Quando o processamento de sinal for realizado no sinal componente digital pelo circuito de processamento do sinal de vídeo 134, o sinal componente digital é enviado ao circuito de geração de gráfico 144.
[0062] O receptor HDMI 136 recebe um sinal de banda base digital inserido a partir do terminal HDMI 138, que é um dos terminais de entrada externos. O sinal de banda base digital recebido pelo receptor HDMI 136 é enviado ao circuito de processamento do sinal de áudio 132 e ao circuito de processamento do sinal de vídeo 134, nos quais o processamento de sinal é realizado no sinal de áudio e no sinal componente digital, respectivamente. Pela conexão de um cabo no terminal HDMI 138, o dispositivo de exibição de imagem 100 pode ser conectado, por exemplo, em um dispositivo de gravação e reprodução que armazena conteúdo e em um outro servidor de conteúdo.
[0063] O circuito de amplificação de áudio 140 recebe o sinal de áudio transmitido a partir do circuito de processamento do sinal de áudio 132, o amplifica em uma dada quantidade e o transmite. No circuito de amplificação de áudio 140, a quantidade de amplificação é baseada em um volume indicado por um usuário do dispositivo de exibição de imagem 100. O sinal de áudio amplificado pelo circuito de amplificação de áudio 140 é enviado ao alto-falante 142. O alto-falante 142 transmite som com base no sinal de áudio enviado a partir do circuito de amplificação de áudio 140.
[0064] O circuito de geração de gráfico 144 gera uma tela gráfica exigida para operar o dispositivo de exibição de imagem 100. A tela gráfica exigida para operar o dispositivo de exibição de imagem 100 é diferentemente gerada por uma operação do usuário. A tela gráfica gerada pelo circuito de geração de gráfico 144 sobrepõe com o sinal de vídeo enviado a partir do circuito de processamento do sinal de vídeo 134 ou é substituída pelo sinal de vídeo e, então, é enviada ao circuito de acionamento de painel 146. Adicionalmente, quando a tela gráfica não for gerada, o sinal de vídeo enviado a partir do circuito de processamento do sinal de vídeo 134 pode ser enviado intacto ao circuito de acionamento de painel 146.
[0065] O circuito de acionamento de painel 146 gera um sinal de acionamento de painel, que é exigido para exibir uma imagem no painel de exibição 102 a partir do circuito de geração de gráfico 144, a partir do sinal de vídeo enviado pelo circuito de geração de gráfico 144. O sinal de acionamento de painel gerado pelo circuito de acionamento de painel 146 é enviado ao painel de exibição 102. O painel de exibição 102 é operado em resposta ao sinal de acionamento de painel, de forma que a imagem seja exibida no painel de exibição 102.
[0066] O painel de exibição 102 exibe uma imagem em movimento com base no sinal de acionamento de painel enviado a partir do circuito de acionamento de painel 146. Na presente modalidade, o painel de exibição 102 exibe a imagem em movimento por meio de cristal líquido.
[0067] Da forma supradescrita, a unidade de entrada de imagem 104 é instalada na parte central superior do painel de exibição 102 para imagens e captura a imagem em movimento na direção em que o dispositivo de exibição de imagem 100 exibe a imagem em movimento no painel de exibição 102 quando o sinal de acionamento de painel for suprido ao painel de exibição 102, e, assim, a imagem em movimento é exibida no painel de exibição 102. A unidade de entrada de imagem 104 pode capturar a imagem em movimento por meio de um sensor de imagem tipo dispositivo acoplado em carga (CCD) ou de um sensor de imagem tipo semicondutor de óxido de metal complementar (CMOS). A imagem em movimento capturada pela unidade de entrada de imagem 104 é enviada à unidade de detecção de face 106.
[0068] A unidade de detecção de face 106 insere a imagem em movimento enviada a partir da unidade de entrada de imagem 104 e detecta uma face do usuário que está contida na imagem em movimento. O resultado da detecção da face do usuário na unidade de detecção de face 106 é enviado à unidade de controle de energia 108, à CPU 114 ou congêneres, e é usado para controlar a operação do dispositivo de exibição de imagem 100. A operação do dispositivo de exibição de imagem 100 que usa o resultado da detecção da face do usuário na unidade de detecção de face 106 será descrita com detalhes a seguir.
[0069] A unidade de controle de energia 108 controla a operação de cada unidade do dispositivo de exibição de imagem 100 de acordo com o resultado da detecção da unidade de detecção de face 106, desse modo, controlando o consumo de energia do dispositivo de exibição de imagem 100. Embora a operação da unidade de controle de energia 108 seja descrita com detalhes a seguir, um exemplo desta é descrito. Por exemplo, em decorrência da detecção da unidade de detecção de face 106, quando a face do usuário não estiver completamente incluída na imagem em movimento enviada a partir da unidade de entrada de imagem 104, determina-se que ninguém está observando a imagem em movimento exibida no painel de exibição 102 do dispositivo de exibição de imagem 100 e, assim, a unidade de controle de energia 108 controla a luminância da luz de fundo do painel de exibição 102 a ser reduzido.
[0070] Desta maneira, a unidade de controle de energia 108 controla a operação de cada unidade do dispositivo de exibição de imagem 100 de acordo com o resultado da detecção da unidade de detecção de face 106. Desse modo, é possível controlar o consumo de energia do dispositivo de exibição de imagem 100 de acordo com a situação em que a imagem em movimento exibida no dispositivo de exibição de imagem 100 é assistida.
[0071] A SDRAM 110 é uma região de trabalho temporário quando a CPU 114 executa programas de computador para controlar cada unidade do dispositivo de exibição de imagem 100. A ROM flash 112 é uma ROM na qual a CPU 114 armazena programas de computador para controlar cada unidade do dispositivo de exibição de imagem 100. Assim, a CPU 114 lê os programas de computador que devem controlar cada unidade do dispositivo de exibição de imagem 100 e são armazenados na ROM flash 112, e executa os programas de computador em sequência.
[0072] A unidade de recepção de luz do controle remoto 116 recebe um sinal enviado a partir de um controle remoto 200. O sinal recebido pela unidade de recepção de luz do controle remoto 116 é inserido na CPU 114, e a CPU 114 decodifica um código de controle incluído no sinal. Quando o código de controle for decodificado pela CPU 114, a CPU 114 controla cada unidade do dispositivo de exibição de imagem 100 para realizar a operação (ajuste de volume, definição de um canal, exibição de uma tela de menu) correspondente ao código de controle.
[0073] A I/F de rede 118 recebe um sinal inserido a partir do terminal de rede 120, por meio de uma rede, e envia um sinal à rede através do terminal de rede 120. Quando o sinal inserido a partir do terminal de rede 120, por meio da rede, for recebido pela I/F de rede 118, o sinal recebido é enviado à CPU 114. A CPU 114 analisa o sinal que a I/F de rede 118 recebe e controla cada unidade do dispositivo de exibição de imagem 100 para realizar a operação correspondente ao sinal.
[0074] Adicionalmente, as unidades do dispositivo de exibição de imagem 100 são conectadas uma na outra por um barramento interno 121 e são configuradas para poder ser controladas pela CPU 114.
[0075] A configuração do dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção foi supradescrita. A seguir, a operação do dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção será descrita.
[2] Operação do dispositivo de exibição de imagem de acordo com uma modalidade da presente invenção [2-1] Transição para um modo de economia de energia
[0076] A figura 3 é um fluxograma que explica a operação do dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção. A seguir, a operação do dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção será descrita usando a figura 3.
[0077] Na figura 3, quando um sinal de acionamento de painel for suprido do circuito de acionamento de painel 146 ao painel de exibição 102 e uma imagem em movimento for exibida no painel de exibição 102, a operação de determinação se a face de um usuário está contida em uma imagem capturada pela unidade de entrada de imagem 104 é descrita. A determinação é feita pela unidade de detecção de face 106, e a unidade de controle de energia 108 controla a operação do dispositivo de exibição de imagem 100 de acordo com a determinação se a face do usuário está contida na imagem capturada pela unidade de entrada de imagem 104 e controla o consumo de energia do dispositivo de exibição de imagem 100.
[0078] Quando a imagem em movimento for capturada pela unidade de entrada de imagem 104, a imagem em movimento que a unidade de entrada de imagem 104 captura é analisada pela unidade de detecção de face 106 e uma distância entre o dispositivo de exibição de imagem 100 e um ser humano é medida a partir de uma área da face do usuário que ocupa a imagem em movimento que a unidade de entrada de imagem 104 captura. Em decorrência da medição, a unidade de detecção de face 106 determina se a distância medida é menor que uma distância pré-determinada (etapa S101). Adicionalmente, a distância entre o dispositivo de exibição de imagem 100 e o espectador pode não ser estritamente medida, e pode ser medida em uma faixa aproximada (por exemplo, a posição da face é de 2,5 m até 3 m da unidade de entrada de imagem 104).
[0079] Em decorrência da determinação da unidade de detecção de face 106 na etapa S101, se a distância medida for menor que a distância pré- determinada, esta não é controlada pela unidade de controle de energia 108. O processo retorna até a etapa S101, e o processamento de determinação da unidade de detecção de face 106 é repetido. Por outro lado, em decorrência da determinação da unidade de detecção de face 106 na etapa S101, se a distância medida for maior que a distância pré-determinada, detecta-se subsequentemente se o brilho da imagem capturada alcança um dado brilho, isto é, se o brilho de um cômodo em que o dispositivo de exibição de imagem 100 está instalado alcança um dado brilho (etapa S102). Na determinação se o dado brilho é alcançado, um valor médio da imagem é obtido por um sensor de imagem CCD, por exemplo, quando a unidade de entrada de imagem 104 for constituída pelo sensor de imagem CCD. Assim, a CPU 114 pode determinar se o valor médio da imagem obtido é maior que um dado valor.
[0080] Na presente modalidade, em decorrência do brilho do cômodo, na etapa S102, quando se determinar que o brilho do cômodo em que o dispositivo de exibição de imagem 100 está instalado não alcança o dado brilho, um processo de abaixar a luminância de uma luz de fundo do painel de exibição 102 não é realizado. Isto é em virtude de, se o processo de abaixar a luminância da luz de fundo do painel de exibição 102 for realizado em um cômodo escuro em que o brilho do cômodo em que o dispositivo de exibição de imagem 100 está instalado não alcança o dado brilho, todo o cômodo ficar muito escuro e haver uma chance de ocasionar inconveniência quando a luz do dispositivo de exibição de imagem 100 estiver iluminando o cômodo. Certamente, é desnecessário dizer que a presente invenção não é limitada ao exemplo relevante. Mesmo quando o brilho do cômodo em que o dispositivo de exibição de imagem 100 está instalado não alcançar o dado brilho, o processo de abaixar a luminância da luz de fundo do painel de exibição 102 pode ser realizado. Adicionalmente, a presente invenção pode omitir o processo de detecção do brilho do cômodo por conta própria.
[0081] Durante o processo de detectar se o brilho do cômodo alcança o dado brilho, na etapa S102, a imagem proveniente da unidade de entrada de imagem 104 é subsequentemente inserida na unidade de detecção de face 106 (etapa S103) e a unidade de detecção de face 106 realiza um processo de detecção da face de um usuário.
[0082] O processo de detecção da face do usuário (a seguir, simplesmente referido como “processamento de detecção de face”) na unidade de detecção de face 106 pode usar tecnologia divulgada, por exemplo, nos Pedidos de Publicação de Patente Japonês 2007-65766 ou 200544330. A seguir, o processamento de detecção de face será descrito em resumo.
[0083] Para detectar a face do usuário a partir da imagem, a posição, o tamanho e a direção da face são detectados, primeiro, a partir da imagem suprida. Pela detecção da posição e do tamanho da face, uma parte da imagem da face pode ser cortada da imagem. Assim, partes características da face (posições de característica da face), por exemplo, partes características de sobrancelhas, olhos, nariz e boca, são detectadas a partir da imagem da face cortada e da informação sobre a direção da face. As posições de característica da face podem ser detectadas, por exemplo, pela aplicação de um método chamado de modelos de aparência ativos (AAM). AAM é divulgado na seguinte literatura.
[0084] T.F. Cootes, G.J. Edwards e C.J. Taylor, “Active Appearance Models”, Proc. Fifth European Conf. Computer Vision, H. Burkhardt e B. Neumann, eds, vol.2, pp.484-498, 1998.
[0085] Quando as posições de característica da face forem detectadas, uma quantidade de característica local é calculada para cada uma das posições de característica da face detectada. Pelo cálculo das quantidades de característica local e armazenamento das quantidades de característica local calculadas juntamente com a imagem da face, é possível discriminar a face da imagem inserida a partir da unidade de entrada de imagem 104. Já que o método de discriminar a face pode usar tecnologia divulgada, por exemplo, nos Pedidos de Publicação de Patente Japonês 2007-65766 2005-44330, uma descrição detalhada deste será aqui omitida. Adicionalmente, a imagem da face ou as posições de característica da face podem determinar se a face projetada na imagem suprida é um homem ou uma mulher e, também, um adulto ou uma criança.
[0086] Desta maneira, a imagem, que é capturada pela unidade de entrada de imagem 104 e é inserida a partir da unidade de entrada de imagem 104, pode ser sujeita ao processamento de detecção de face pela unidade de detecção de face 106. Aqui, quando a unidade de detecção de face 106 realizar o processo de detecção da face do usuário, um erro de detecção de face, isto é, se nenhuma face do usuário estiver presente na imagem inserida a partir da unidade de entrada de imagem 104, é determinado (etapa S104). Em decorrência da determinação da etapa S104, quando nenhuma face do usuário estiver presente na imagem inserida a partir da unidade de entrada de imagem 104 e o erro de detecção de face for gerado a partir da unidade de detecção de face 106, determina-se subsequentemente se o erro de detecção de face dura por um dado tempo (por exemplo, 1 minuto) (etapa S105).
[0087] Em decorrência da determinação da etapa S105, quando o erro de detecção de face durar pelo dado tempo, a transição de um modo de operação do dispositivo de exibição de imagem 100 para um modo de economia de energia é feita pela unidade de controle de energia 108 (etapa S106). Quando a transição do modo de operação do dispositivo de exibição de imagem 100 para o modo de economia de energia for feita pela unidade de controle de energia 108, o processo retorna para a etapa S101 para determinar a distância.
[0088] Aqui, o modo de economia de energia da presente modalidade será descrito. O modo de economia de energia da presente modalidade diz respeito a um modo de operação de abaixar a luminância da imagem exibida no painel de exibição 102 para reduzir o consumo de energia do dispositivo de exibição de imagem 100 pela redução das partes de operação do dispositivo de exibição de imagem 100, abaixar a luminância da luz de fundo do painel de exibição 102 quando o painel de exibição 102 incluir a luz de fundo ou reduzir uma quantidade de corrente quando o painel de exibição 102 for provido com um dispositivo emissor de luz que emite espontaneamente luz em resposta à quantidade de corrente. Adicionalmente, embora descrito a seguir, o modo de economia de energia pode ser provido em múltiplas etapas. Por exemplo, um processo de abaixar a luminância da luz de fundo do painel de exibição 102 pode ser realizado como uma primeira etapa e um processo de interromper a operação de um circuito para alcançar alta resolução da imagem em movimento ou de um circuito que eleva uma taxa de quadro pode ser realizado como a etapa seguinte. Por outro lado, em decorrência da determinação da etapa S105, quando o erro de detecção de face não durar pelo dado tempo na unidade de detecção de face 106, o processo retorna para a etapa S101 para determinar a distância.
[0089] A seguinte descrição é feita usando o caso em que o painel de exibição 102 inclui a luz de fundo como um exemplo. Quando a transição para o modo de economia de energia for feita, a luminância da imagem exibida no painel de exibição 102 é reduzida abaixando a luminância da luz de fundo do painel de exibição 102, e o consumo de energia do dispositivo de exibição de imagem 100 é reduzido.
[0090] Adicionalmente, mesmo quando ninguém estiver observando a imagem em movimento exibida pelo painel de exibição 102, há uma possibilidade de ouvir som emanado pelo alto-falante 142 e, assim, a operação de um circuito relacionado ao som pode continuar no modo de economia de energia sem ser interrompida. Além do mais, quando o modo de economia de energia permanecer por um longo tempo (por exemplo, 30 minutos a 1 hora) depois da transição para o modo de economia de energia, determina-se que o som emanado pelo alto-falante 142 não seja ouvido, e o som emanado pelo alto-falante 142 é interrompido de ser transmitido. Para este fim, a operação do circuito relacionado ao som pode ser interrompida, ou uma própria fonte de alimentação do dispositivo de exibição de imagem 100 pode ser interrompida.
[0091] Adicionalmente, mesmo no caso em que uma ou mais faces do usuário estiverem presentes na imagem inserida a partir da unidade de entrada de imagem 104, em decorrência do processamento de detecção de face da unidade de detecção de face 106, quando se determinar que os olhos da pessoa permanecem fechados por um dado tempo, pode-se determinar que a pessoa está adormecida e não está assistindo a imagem exibida no painel de exibição 102, e a transição para o modo de economia de energia pode ser feita pela unidade de controle de energia 108.
[0092] Em decorrência da determinação da etapa S105, quando uma ou mais faces do usuário estiverem presentes na imagem inserida a partir da unidade de entrada de imagem 104 e o erro de detecção de face não for gerado a partir da unidade de detecção de face 106, isto é, quando alguém estiver observando a imagem em movimento exibida no painel de exibição 102, determina-se, por exemplo, pela unidade de controle de energia 108, se o modo de operação do dispositivo de exibição de imagem 100 é o modo de economia de energia naquele momento (etapa S107). Em decorrência da determinação da etapa S107, quando se determinar que o modo de operação do dispositivo de exibição de imagem 100 não é o modo de economia de energia, o processo retorna para a etapa S101 para determinar a distância. Por outro lado, em decorrência da determinação da etapa S107, quando se determinar que o modo de operação do dispositivo de exibição de imagem 100 é o modo de economia de energia, um processo de restauração do modo de economia de energia é realizado (etapa S108). O processo de restauração do modo de economia de energia diz respeito, por exemplo, a um processo de elevar novamente a luminância diminuída da luz de fundo do painel de exibição 102 ou a um processo de aumentar novamente as partes de operação reduzidas do dispositivo de exibição de imagem 100. Assim, quando o processo de restauração do modo de economia de energia for realizado, o processo retorna para a etapa S101 para determinar a distância.
[0093] A operação do dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção foi supradescrita usando a figura 3. A seguir, o processo de transição para o modo de economia de energia da etapa S106 da figura 3 será descrito com mais detalhes.
[0094] A figura 4 é um fluxograma que explica um processo de transição para um modo de economia de energia no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção. A seguir, no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção, o processo de transição para o modo de economia de energia será descrito com mais detalhes.
[0095] No dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção, para fazer a transição para o modo de economia de energia, primeiro, a unidade de controle de energia 108 controla a luminância da luz de fundo do painel de exibição 102 para começar a ser abaixada (etapa S111). Subsequentemente, quando o processo de abaixar a luminância da luz de fundo do painel de exibição 102 for realizado, a unidade de controle de energia 108 determina se um dado tempo T1 decorreu depois que a luminância da luz de fundo do painel de exibição 102 começou a ser abaixada (etapa S112).
[0096] Em decorrência da determinação da unidade de controle de energia 108, na etapa S112, se o dado tempo T1 ainda não tiver decorrido depois que a luminância da luz de fundo do painel de exibição 102 começou a ser abaixada, o processo retorna para a etapa S111, e o controla de diminuição da luminância da luz de fundo do painel de exibição 102 continua. Por outro lado, em decorrência da determinação da unidade de controle de energia 108, na etapa S112, se o dado tempo T1 tiver decorrido depois que a luminância da luz de fundo do painel de exibição 102 começou a ser abaixada, o modo de operação do dispositivo de exibição de imagem 100 é transicionado para o modo de economia de energia (1) pela unidade de controle de energia 108 (etapa S113). Na presente modalidade, o modo de economia de energia (1) diz respeito a um modo de operação de redução do consumo de energia, por exemplo, fazendo com que a operação do circuito de processamento do sinal de vídeo 134, que converte a qualidade da imagem em movimento a ser exibida no painel de exibição 102 em alta qualidade, seja interrompida, no todo ou em parte, pela unidade de controle de energia 108.
[0097] Na etapa S113, quando o modo de operação do dispositivo de exibição de imagem 100 for transicionado para o modo de economia de energia (1) pela unidade de controle de energia 108, a unidade de controle de energia 108 determina a seguir se um dado tempo T2 decorreu depois que o modo de operação do dispositivo de exibição de imagem 100 transicionou para o modo de economia de energia (1) (etapa S114).
[0098] Em decorrência da determinação da unidade de controle de energia 108, na etapa S114, se o dado tempo T2 ainda não tiver decorrido depois que o modo de operação do dispositivo de exibição de imagem 100 transicionou para o modo de economia de energia (1), a unidade de controle de energia 108 continua a determinação da etapa S114 até que o dado tempo T2 tenha decorrido. Por outro lado, em decorrência da determinação da unidade de controle de energia 108, na etapa S114, se o dado tempo T2 tiver decorrido depois que o modo de operação do dispositivo de exibição de imagem 100 transicionou para o modo de economia de energia (1), o modo de operação do dispositivo de exibição de imagem 100 é transicionado para um modo de economia de energia (2) pela unidade de controle de energia 108 (etapa S115). Na presente modalidade, o modo de economia de energia (2) diz respeito a um modo de operação de redução do consumo de energia, por exemplo, fazendo com que a operação do circuito de processamento do sinal de vídeo 134 para converter uma taxa de quadro da imagem em movimento a ser exibida no painel de exibição 102 seja interrompida, no todo ou em parte, pela unidade de controle de energia 108.
[0099] Desta maneira, a unidade de controle de energia 108 controla a operação interna do dispositivo de exibição de imagem 100 com base no tempo decorrido e, desse modo, é possível mudar o consumo de energia do dispositivo de exibição de imagem 100 etapa por etapa. O processo de transição para o modo de economia de energia no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção foi supradescrito. A seguir, o processo de restauração do modo de economia de energia no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção será descrito com mais detalhes.
[2-2] Restauração de um modo de economia de energia
[00100] A figura 5 é um fluxograma que explica um processo de restauração de um modo de economia de energia no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção. A seguir, o processo de restauração do modo de economia de energia no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção será descrito com mais detalhes usando a figura 5.
[00101] No dispositivo de exibição de imagem 100 transicionado para o modo de economia de energia de acordo com uma modalidade da presente invenção, para restaurar do modo de economia de energia, primeiro, a unidade de controle de energia 108 controla a luminância da luz de fundo do painel de exibição 102, que foi abaixada no curso da transição para o modo de economia de energia, para começar a ser novamente elevada (etapa S121).
[00102] Na etapa S121, quando a unidade de controle de energia 108 controlar a luminância da luz de fundo do painel de exibição 102 para começar a ser novamente elevada e, subsequentemente, quando a operação de um circuito de alta resolução (por exemplo, o circuito de processamento do sinal de vídeo 134 para realizar processamento de sinal na imagem em movimento a ser exibida no painel de exibição 102) foi interrompida no modo de economia de energia, a unidade de controle de energia 108 controla a operação interrompida do circuito de alta resolução para ser novamente disparada (etapa S122).
[00103] Na etapa S122, quando a unidade de controle de energia 108 controlar a operação do circuito de alta resolução, que foi interrompida no modo de economia de energia, para ser novamente disparada e, subsequentemente, quando um processo de redução da taxa de quadro for realizado no modo de economia de energia (por exemplo, pela unidade de controle de energia 108 que controla a operação do circuito de processamento do sinal de vídeo 134), a unidade de controle de energia 108 controla a taxa de quadro a ser restaurada (etapa S123).
[00104] Adicionalmente, no processo de restauração do modo de economia de energia no dispositivo de exibição de imagem 100 mostrado na figura 5 de acordo com uma modalidade da presente invenção, a restauração do modo de economia de energia ocorre na ordem da elevação da luminância da luz de fundo, do redisparo da operação do circuito de alta resolução e da restauração da taxa de quadro. Entretanto, na presente invenção, é desnecessário dizer que a restauração do modo de economia de energia não é limitada a uma ordem como esta.
[00105] O processo de restauração do modo de economia de energia no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção foi supradescrito usando a figura 5. A seguir, as figuras 6 até 8 explicam o processo de transição para o modo de economia de energia e o processo de restauração do modo de economia de energia no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção por meio de alguns exemplos.
[00106] As figuras 6 até 8 são diagramas explicativos que mostram um exemplo de uma mudança na luminância ou no consumo de energia da luz de fundo do painel de exibição 102 quando o processo de transição para o modo de economia de energia e o processo de restauração do modo de economia de energia forem realizados no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção.
[00107] A figura 6 mostra um exemplo de uma mudança na luminância da luz de fundo do painel de exibição 102 em um gráfico quando o processo de transição para o modo de economia de energia e o processo de restauração do modo de economia de energia forem realizados no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção. No gráfico mostrado na figura 6, o eixo geométrico longitudinal mostra a luminância da luz de fundo do painel de exibição 102 e o eixo geométrico transversal mostra o tempo.
[00108] Em decorrência do processamento de detecção de face da unidade de detecção de face 106, quando uma ou mais faces do usuário estiverem incluídas na imagem que a unidade de entrada de imagem 104 insere, a luminância da luz de fundo do painel de exibição 102 não é abaixada. Entretanto, em decorrência do processamento de detecção de face da unidade de detecção de face 106, quando um dado tempo tiver decorrido depois que nenhuma face do usuário estiver contida na imagem que a unidade de entrada de imagem 104 insere, a luminância da luz de fundo do painel de exibição 102 é gradualmente reduzida pela unidade de controle de energia 108.
[00109] Posteriormente, em decorrência do processamento de detecção de face da unidade de detecção de face 106, quando uma ou mais faces do usuário forem adotadas como novamente incluídas na imagem que a unidade de entrada de imagem 104 insere, a luminância da luz de fundo do painel de exibição 102 retorna instantaneamente para a luminância original. Desta maneira, em decorrência do processamento de detecção de face da unidade de detecção de face 106, quando um dado tempo tiver decorrido depois que nenhuma face do usuário estiver contida na imagem que a unidade de entrada de imagem 104 insere, a luminância da luz de fundo do painel de exibição 102 é reduzida já que ninguém assiste o vídeo e, desse modo, é possível reduzir o consumo de energia.
[00110] Adicionalmente, na figura 6, quando a luminância da luz de fundo do painel de exibição 102 retornar para a luminância original por meio da unidade de controle de energia 108, a luminância da luz de fundo do painel de exibição 102 retorna instantaneamente para a luminância original por meio da unidade de controle de energia 108. É desnecessário dizer que a presente invenção não é limitada a um exemplo como este. A figura 7 mostra um outro exemplo de uma mudança na luminância da luz de fundo do painel de exibição 102 em um gráfico quando o processo de transição para o modo de economia de energia e o processo de restauração do modo de economia de energia forem realizados no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção.
[00111] Em decorrência do processamento de detecção de face da unidade de detecção de face 106, quando uma ou mais faces do usuário estiverem incluídas na imagem que a unidade de entrada de imagem 104 insere, a luminância da luz de fundo do painel de exibição 102 não é abaixada. Entretanto, em decorrência do processamento de detecção de face da unidade de detecção de face 106, quando um dado tempo tiver decorrido depois que nenhuma face do usuário estiver contida na imagem que a unidade de entrada de imagem 104 insere, a luminância da luz de fundo do painel de exibição 102 é gradualmente reduzida pela unidade de controle de energia 108.
[00112] A descrição até aqui foi a mesma do exemplo mostrado na figura 6, mas a descrição a partir daqui é diferente do exemplo mostrado na figura 6. Posteriormente, em decorrência do processamento de detecção de face da unidade de detecção de face 106, quando uma ou mais faces do usuário forem adotadas como novamente incluídas na imagem que a unidade de entrada de imagem 104 insere, a luminância da luz de fundo do painel de exibição 102 retorna para a luminância original pela unidade de controle de energia 108. A luminância da luz de fundo do painel de exibição 102 pode retornar instantaneamente para a luminância original ou pode retornar gradualmente para a luminância original. A luminância da luz de fundo do painel de exibição 102 retorna suavemente para a luminância original, de forma que seja possível ajustar espontaneamente o brilho quando alguém começar a assistir o vídeo.
[00113] A figura 8 mostra um exemplo de uma mudança no consumo de energia do dispositivo de exibição de imagem 100 em um gráfico quando o processo de transição para o modo de economia de energia e o processo de restauração do modo de economia de energia forem realizados no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção. No gráfico mostrado na figura 8, o eixo geométrico longitudinal mostra o consumo de energia do dispositivo de exibição de imagem 100 e o eixo geométrico transversal mostra o tempo.
[00114] Em decorrência do processamento de detecção de face da unidade de detecção de face 106, quando uma ou mais faces do usuário estiverem incluídas na imagem que a unidade de entrada de imagem 104 insere, a luminância da luz de fundo do painel de exibição 102 não é abaixada. Entretanto, em decorrência do processamento de detecção de face da unidade de detecção de face 106, quando um dado tempo tiver decorrido depois que nenhuma face do usuário estiver contida na imagem que a unidade de entrada de imagem 104 insere, a luminância da luz de fundo do painel de exibição 102 é gradualmente reduzida pela unidade de controle de energia 108.
[00115] Posteriormente, quando um dado tempo T1 tiver decorrido depois que a luminância da luz de fundo do painel de exibição 102 começar a ser gradualmente reduzida pela unidade de controle de energia 108, subsequentemente, a operação de um circuito para alcançar alta resolução da imagem em movimento é interrompida pela unidade de controle de energia 108 e, assim, o consumo de energia é reduzido por uma etapa. Assim, quando um dado tempo T2 tiver decorrido adicionalmente depois que a operação do circuito para alcançar alta resolução da imagem em movimento for interrompida pela unidade de controle de energia 108, a taxa de quadro é subsequentemente reduzida pela unidade de controle de energia 108, de forma que o consumo de energia seja adicionalmente reduzido por uma etapa.
[00116] Adicionalmente, no gráfico mostrado na figura 8, é mostrado o caso em que, depois que um tempo T3 tiver decorrido depois que a taxa de quadro for reduzida pela unidade de controle de energia 108, em decorrência do processamento de detecção de face da unidade de detecção de face 106, uma ou mais faces do usuário são adotadas como incluídas na imagem que a unidade de entrada de imagem 104 insere. Assim, é mostrado o caso em que, já que uma ou mais faces do usuário são adotadas como incluídas na imagem, a unidade de controle de energia 108 eleva a luminância da luz de fundo do painel de exibição 102, redispara a operação do circuito para alcançar a alta resolução e restaura a taxa de quadro, de forma que o consumo de energia seja restaurado.
[00117] Adicionalmente, há o caso em que leva tempo para restaurar do estado de menor taxa de quadro. Neste caso, uma mensagem que indica o estado de um sistema, por exemplo, se referindo a “restaurando do modo de economia de energia” pode ser adotada para ser exibida no painel de exibição 102 no curso da restauração. Pela exibição de uma mensagem como esta, o espectador é notificado sobre a situação do sistema e, assim, é possível mostrar que não há falha.
[00118] Além do mais, se algo, tal como um pôster no qual uma face humana é mostrada, estiver contido na imagem capturada pela unidade de entrada de imagem 104, há uma chance de realizar a detecção de face mesmo a partir de um pôster como este. Como tal, no curso do processamento de detecção de face da unidade de detecção de face 106, uma função de cancelamento pode ser provida para uma imagem estática. Com detalhes, no curso do processamento de detecção de face da unidade de detecção de face 106, tanto a íntegra de uma face quanto uma face em que as posições dos olhos, nariz, boca, ouvidos e as outras partes da face não se movem por um dado tempo ou mais podem ser processadas como uma imagem estática para não serem reconhecidas como a face do usuário. Além do mais, no curso do processamento de detecção de face da unidade de detecção de face 106, quando determina-se, a partir do ângulo inclinado de uma linha visual, que a imagem em movimento exibida no painel de exibição 102 está sendo assistida em um estado de olhos erguidos, uma mensagem que impele uma mudança na posição de assistir pode ser exibida, a fim de impedir, por exemplo, olhos secos.
[00119] Além do mais, o processamento de detecção de face da unidade de detecção de face 106 pode ser combinado com um sensor de detecção humana. Se sabe-se que uma pessoa está presente em um cômodo, o painel de exibição 102 pode exibir a imagem em movimento normalmente mesmo quando uma pessoa estiver além do ângulo de visualização de uma câmera. Adicionalmente, se o dispositivo de exibição de imagem 100 for conectado em um dispositivo de gravação e reprodução ou congêneres, a reprodução pode continuar. Além do mais, no curso da restauração do modo de economia de energia, se o sensor de detecção humana puder detectar uma pessoa antes de a pessoa entrar em um ângulo de visualização da unidade de entrada de imagem 104, a restauração do modo de economia de energia pode ser realizada quando o sensor de detecção humana detectar a pessoa antes da entrada a partir da unidade de entrada de imagem 104. Já que a restauração pode ser previamente iniciada antes de a pessoa entrar no ângulo de visualização da unidade de entrada de imagem 104, a restauração do modo de economia de energia pode ser realizada em alta velocidade.
[00120] Desta maneira, de acordo com o dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção, a unidade de entrada de imagem 104 captura a imagem e a unidade de detecção de face 106 realiza o processamento de detecção de face para detectar a face do usuário incluída na imagem. Assim, usando o resultado do processamento de detecção de face, a luminância da imagem exibida no painel de exibição 102 é reduzida ou o processamento de imagem é omitido, em parte ou no todo, de forma que seja possível reduzir o consumo de energia do dispositivo de exibição de imagem 100. Na tecnologia relacionada, entende-se se transiciona-se para o modo de economia de energia com base no tempo decorrido a partir do estado em que o usuário não faz nada ou usando um sensor com base em infravermelho ou ultrassom. Entretanto, é difícil ampliar ou estreitar a faixa que o sensor cobre com base no ambiente de uso do usuário e, além do mais, é impossível definir o tempo decorrido para cada uma das várias situações em que o usuário fica localizado em frente do dispositivo de exibição de imagem e em que o usuário está assistindo a imagem exibida pelo dispositivo de exibição de imagem. Na presente modalidade, se o usuário está localizado na frente do dispositivo de exibição de imagem 100 ou não torna-se o critério de determinação e, além do mais, é desnecessário que o usuário faça alguma coisa depois do modo de economia de energia.
[00121] Adicionalmente, na tecnologia relacionada, para restaurar do modo de economia de energia, é necessário que o usuário faça algo. Ao contrário, na presente modalidade, já que se o usuário está localizado na frente do dispositivo de exibição de imagem 100 ou não se torna o critério de determinação, é desnecessário que o usuário faça algo para restaurar do modo de economia de energia.
[3] Modificação da operação do dispositivo de exibição de imagem de acordo com uma modalidade da presente invenção
[00122] É possível aplicar várias modificações ao processamento de detecção de face da unidade de detecção de face 106. A seguir, as várias modificações aplicadas no processamento de detecção de face da unidade de detecção de face 106 serão descritas.
[3-1] Mudança na frequência de detecção
[00123] A figura 9 é um fluxograma que explica uma modificação do processamento de detecção de face da unidade de detecção de face 106 no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção. A seguir, a modificação do processamento de detecção de face da unidade de detecção de face 106 no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção será descrita usando a figura 9.
[00124] O fluxograma mostrado na figura 9 é um digrama no qual a frequência do processamento de detecção de face muda dependendo se a face do usuário está contida ou não na imagem inserida pela unidade de entrada de imagem 104 no curso do processamento de detecção de face da unidade de detecção de face 106. O processamento de detecção de face é processamento no qual uma quantidade de computação aumenta. Quando o processamento de detecção de face for realizado em todos os quadros da imagem inserida pela unidade de entrada de imagem 104, um sistema de operação de alto desempenho é exigido e, além do mais, o consumo de energia aumenta. Como tal, o processamento de detecção de face é realizado nos quadros amostrados em algum grau, em vez de em todos os quadros, de forma que seja possível impedir que o consumo de energia aumente.
[00125] Primeiro, a unidade de detecção de face 106 determina se a face do usuário está contida na imagem inserida pela unidade de entrada de imagem 104 e se pelo menos uma pessoa está assistindo a imagem exibida no painel de exibição 102 (etapa S131).
[00126] Em decorrência da determinação da etapa S131, quando a unidade de detecção de face 106 determinar que a face do usuário está contida na imagem inserida pela unidade de entrada de imagem 104 e que pelo menos uma pessoa está assistindo a imagem exibida no painel de exibição 102, a unidade de detecção de face 106 realiza o processamento de detecção de face em uma taxa de 15 quadros por vez (etapa S132). Por outro lado, quando a unidade de detecção de face 106 determinar que ninguém está assistindo a imagem exibida no painel de exibição 102, a unidade de detecção de face 106 realiza o processamento de detecção de face em uma taxa de 2 quadros por vez (etapa S133).
[00127] Desta maneira, já que a quantidade de computação da CPU pode ser reduzida pela mudança da frequência do processamento de detecção de face com base em uma situação de audiência, o sistema de operação de alto desempenho não é exigido. Além do mais, já que a quantidade de computação da CPU pode ser reduzida pela mudança da frequência do processamento de detecção de face com base em uma situação de audiência, é possível impedir o aumento do consumo de energia do dispositivo de exibição de imagem 100. Adicionalmente, na presente invenção, é desnecessário dizer que a frequência do processamento de detecção de face não é limitada a um exemplo como este. Além do mais, na presente modalidade da presente invenção, adota-se que o intervalo do processamento de detecção de face do caso em que determina-se que pelo menos uma pessoa está assistindo a imagem exibida no painel de exibição 102 fica maior. Entretanto, na presente invenção, pode-se adotar que o intervalo do processamento de detecção de face do caso em que determina-se que pelo menos uma pessoa está assistindo a imagem exibida no painel de exibição 102 fica menor.
[00128] Adicionalmente, no supramencionado exemplo, a frequência do processamento de detecção de face da imagem que a unidade de entrada de imagem 104 captura muda pela presença da detecção de face. Entretanto, a presente invenção não é limitada a um exemplo como este. Simplesmente tornando a frequência de processamento, bem como uma região em que a face é buscada, variáveis, é possível otimizar adicionalmente o processamento de detecção de face. Por exemplo, em decorrência do processamento de detecção de face em um certo momento, se a face for detectada, o processamento de detecção de face pode ser realizado de uma maneira tal que a face fique limitada em uma dada faixa de frente, costas, direita e esquerda da posição na qual a face é detectada, e, então, a frequência do processamento de detecção de face da imagem que a unidade de entrada de imagem 104 captura é elevada (por exemplo, a frequência de 2 até 3 quadros por vez). Adicionalmente, em decorrência do processamento de detecção de face em um certo momento, quando a face não for detectada, o processamento de detecção de face pode ser realizado na íntegra de uma região da imagem que a unidade de entrada de imagem 104 captura em uma frequência (por exemplo, de 10 a 15 quadros por vez) menor que a frequência na qual a face é detectada. Desta maneira, a frequência e o alvo do processamento de detecção de face mudam pela presença da detecção de face e, desse modo, é possível realizar o processamento de detecção de face que é eficiente e tem alta responsividade imediata.
[3-2] Pseudoexibição de uma imagem tridimensional
[00129] A figura 10 é um diagrama explicativo que mostra uma outra modificação do processamento de detecção de face da unidade de detecção de face 106 no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção. O diagrama explicativo mostrado na figura 10 mostra o caso em que uma pseudoimagem tridimensional é exibida usando o dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção. Na tecnologia relacionada, para exibir a imagem tridimensional, um dispositivo de exibição de imagem para exibir uma imagem em movimento (conteúdo), que é feita como a imagem tridimensional, como a imagem tridimensional foi exigido. Entretanto, a provisão deste conteúdo ou dispositivo de exibição de imagem fez com que um limite para apreciar a imagem tridimensional ficasse alto, de forma que era impossível apreciar a imagem tridimensional com facilidade. Desta maneira, a face do usuário contida na imagem inserida pela unidade de entrada de imagem 104 é detectada pela unidade de detecção de face 106 e uma região visível da imagem a ser exibida no painel de exibição 102 é trocada por uma posição da face detectada. Desse modo, a pseudoimagem tridimensional é exibida.
[00130] No exemplo mostrado na figura 10, no caso em que uma face fica localizada em uma posição indicada por um símbolo 160a e no caso em que uma outra face fica localizada em uma posição indicada por um símbolo 160b, quando o painel de exibição 102 for considerado como uma janela, faixas visualizadas através do painel de exibição 102 são diferentes umas das outras. Assim, a unidade de detecção de face 106 realiza o processamento de detecção de face e o processamento de medição de distância, e a região visível da imagem a ser exibida no painel de exibição 102 muda, dependendo tanto de uma posição da face quanto de uma posição ou de uma distância entre o painel de exibição e um espectador. Desse modo, é possível exibir a pseudoimagem tridimensional no painel de exibição 102.
[00131] Para exibir a pseudoimagem tridimensional no painel de exibição 102, apenas a imagem correspondente a uma parte diferente de uma parte vizinha da imagem exibida pelo sinal de acionamento de painel suprido ao painel de exibição 102 pode ser adotada como exibida no painel de exibição 102. Por exemplo, apenas a imagem correspondente a uma faixa de cerca de 80 % das direções horizontal e vertical da imagem exibida pelo sinal de acionamento de painel suprido ao painel de exibição 102 pode ser adotada como exibida no painel de exibição 102. A região a ser exibida muda dependendo de uma mudança na posição da face do espectador e, desse modo, é possível mudar a região visível da imagem. Em decorrência disto, é possível exibir a pseudoimagem tridimensional no painel de exibição 102.
[00132] Por exemplo, no caso em que a imagem é exibida no painel de exibição 102, quando o espectador abaixa sua face em relação a uma certa posição, a imagem exibida no painel de exibição 102 se move para cima. Desse modo, é possível observar a pseudoimagem tridimensional. Similarmente, quando o espectador eleva sua face em relação a uma certa posição, a imagem exibida no painel de exibição 102 se move para baixo. Quando o espectador vira sua face de uma certa posição para a esquerda, a imagem exibida no painel de exibição 102 se move para a direita. Quando o espectador vira sua face de uma certa posição para a direita, a imagem exibida no painel de exibição 102 se move para a esquerda. Desse modo, é possível ver a pseudoimagem tridimensional.
[00133] Desta maneira, a unidade de detecção de face 106 realiza o processamento de detecção de face e o processamento de medição de distância. A faixa da imagem a ser exibida no painel de exibição 102 é controlada usando os resultados do processamento de detecção de face e do processamento de medição de distância, e a faixa da imagem exibida no painel de exibição 102 muda dependendo de uma mudança na distância entre a posição da face e o painel de exibição 102. Estes controle e mudança habilitam o espectador a perceber como se a imagem fosse exibida no interior do painel de exibição 102, embora a imagem não seja feita para exibir a imagem tridimensional, e permitem que o dispositivo de exibição de imagem 100 proveja a imagem ao espectador para ser vista de uma forma tridimensional.
[3-3] Alteração automática de um canal
[00134] A figura 11 é um fluxograma que explica uma outra modificação do processamento de detecção de face da unidade de detecção de face 106 no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção. A seguir, uma outra modificação do processamento de detecção de face da unidade de detecção de face 106 no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção será descrita usando a figura 11.
[00135] O fluxograma mostrado na figura 11 serve para determinar se um canal da imagem em movimento a ser exibida no painel de exibição 102 é automaticamente alterado de acordo com a determinação se a face do usuário está contida na imagem inserida pela unidade de entrada de imagem 104 no curso do processamento de detecção de face da unidade de detecção de face 106 ou não. Na tecnologia relacionada, a alteração do canal (zapeamento) foi realizada pelo usuário que opera diretamente um corpo do dispositivo de exibição de imagem ou um controle remoto. Na modificação aqui mostrada, pelo processamento de detecção de face da unidade de detecção de face 106, o canal não muda se a face do usuário estiver contida na imagem inserida pela unidade de entrada de imagem 104, e o canal é sequencialmente alterado se a face do usuário não estiver contida na imagem inserida pela unidade de entrada de imagem 104, isto é, quando determina-se que ninguém está assistindo a imagem em movimento.
[00136] Primeiro, a unidade de detecção de face 106 determina se a face do usuário está contida na imagem inserida pela unidade de entrada de imagem 104 e alguém está assistindo a imagem em movimento exibida no painel de exibição 102 (etapa S141).
[00137] Em decorrência da determinação da etapa S141, quando a unidade de detecção de face 106 determinar que a face do usuário está contida na imagem inserida pela unidade de entrada de imagem 104 e que alguém está assistindo a imagem em movimento exibida no painel de exibição 102, o canal é deixado como está (etapa S142). Por outro lado, quando a unidade de detecção de face 106 determinar que ninguém está assistindo a imagem em movimento exibida no painel de exibição 102, por sua vez, o canal muda depois que um tempo pré-determinado tiver decorrido (etapa S143). Por exemplo, um método de mudança do canal pode subir o número do canal ou pode descer o número do canal. Adicionalmente, quando o canal mudar de um lugar para outro, a alteração para uma outra difusão (por exemplo, na ordem de difusão analógica, difusão digital terrestre, difusão digital via satélite de difusão (BS) e difusão digital via satélite de comunicação (CS)) pode ser realizada para, por sua vez, mudar o canal.
[00138] Desta maneira, o processamento de zapping é realizado usando o resultado do processamento de detecção de face da unidade de detecção de face 106, de forma que seja possível proporcionar mais oportunidades de audiência de conteúdo ao usuário de uma maneira fácil e simples. Adicionalmente, no supramencionado exemplo, foi descrito o caso em que mais oportunidades de audiência de conteúdo são proporcionadas pela alteração do canal. Entretanto, a presente invenção não é limitada a um exemplo como este. Por exemplo, o caso em que um dispositivo de gravação e reprodução que armazena conteúdo e um outro servidor de conteúdo são conectados no dispositivo de exibição de imagem 100 é levado em consideração. Em um caso como este, em decorrência do processamento de detecção de face da unidade de detecção de face 106, quando determina-se que o conteúdo em reprodução não está sendo assistido, o conteúdo pode ser controlado para interromper a reprodução do conteúdo que está sendo exibido no painel de exibição 102 e, então, reproduzir outro conteúdo.
[3-4] Controle de volume correspondente a uma distância
[00139] A figura 12 é um fluxograma que explica uma outra modificação do processamento de detecção de face da unidade de detecção de face 106 no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção. A seguir, uma outra modificação do processamento de detecção de face da unidade de detecção de face 106 no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção será descrita usando a figura 12.
[00140] O fluxograma mostrado na figura 12 mostra um método de estimativa de uma distância entre o usuário e o dispositivo de exibição de imagem 100 no curso do processamento de detecção de face da unidade de detecção de face 106 e de ajuste de um volume com base na distância estimada. Na tecnologia relacionada, quando um usuário fica distante de uma tela ou próximo da tela, era necessário operar um controle remoto para ajustar o volume, a fim de tornar o volume adequado. Adicionalmente, o volume adequado era diferenciado por um usuário, mas havia um problema em que o volume devia ser ajustado para cada usuário. Assim, a unidade de detecção de face 106 realiza o processamento de detecção de face e realiza detecção de um usuário e medição de uma distância entre o usuário e o dispositivo de exibição de imagem 100 por meio da face detectada e da área de uma face ocupada na imagem. Então, o controle do volume adequado é realizado pelo usuário detectado e pela distância medida.
[00141] Primeiro, o volume é controlado pelo usuário do dispositivo de exibição de imagem 100 (etapa S151). Quando o volume for controlado pelo usuário, o dispositivo de exibição de imagem 100 captura uma face do usuário que controlou o volume por meio da unidade de entrada de imagem 104 e reconhece simultaneamente a face do usuário que controlou o volume por meio da unidade de detecção de face 106 e, além do mais, armazena informação sobre o volume controlado pelo usuário (etapa S152). Quando a informação de volume for armazenada, uma distância entre o usuário e o dispositivo de exibição de imagem 100 é medida pela unidade de detecção de face 106, e é desejado armazenar informação sobre a distância medida em conjunto com a informação de volume ou informação sobre o usuário.
[00142] Posteriormente, quando o processamento de detecção de face for iniciado no dispositivo de exibição de imagem 100 (etapa S153), a face do usuário do dispositivo de exibição de imagem 100 é capturada pela unidade de entrada de imagem 104. Quando a face do usuário do dispositivo de exibição de imagem 100 for capturada, a unidade de detecção de face 106 realiza o processamento de detecção de face para reconhecer o usuário usando a imagem capturada e mede simultaneamente a distância entre o usuário e o dispositivo de exibição de imagem 100 (etapa S154).
[00143] Então, pelo usuário reconhecido e pela distância medida entre o usuário e o dispositivo de exibição de imagem 100, na etapa S154, a informação de volume do usuário é lida e um volume do som transmitido a partir do alto-falante 142 é definido (etapa S155). Adicionalmente, a leitura da informação de volume do usuário e a definição do volume do som transmitido a partir do alto-falante 142 podem ser realizadas, por exemplo, pela CPU 114.
[00144] Desta maneira, a face do usuário do dispositivo de exibição de imagem 100 é capturada pela unidade de entrada de imagem 104, e a unidade de detecção de face 106 realiza o processamento de detecção de face para reconhecer o usuário usando a imagem capturada e mede simultaneamente a distância entre o usuário e o dispositivo de exibição de imagem 100, de forma que seja possível ser automaticamente definido o volume adequado para o usuário. Adicionalmente, o reconhecimento do usuário e a medição de distância são realizados usando o ajuste de volume do usuário como um circuito de disparo, de forma que seja possível armazenar a informação de volume no interior do dispositivo de exibição de imagem 100 sem uma operação pesada.
[00145] A figura 13 é um fluxograma que explica uma outra modificação do processamento de detecção de face da unidade de detecção de face 106 no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção. A seguir, uma outra modificação do processamento de detecção de face da unidade de detecção de face 106 no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção será descrita usando a figura 13.
[00146] Como o fluxograma mostrado na figura 12, o fluxograma mostrado na figura 13 mostra um método de estimativa de uma distância entre o usuário e o dispositivo de exibição de imagem 100 no curso do processamento de detecção de face da unidade de detecção de face 106 e de ajuste de volume com base na distância estimada. Na figura 13, usando informação sobre uma área da face detectada pela unidade de detecção de face 106 e sobre a direção de uma linha visual quando a unidade de detecção de face 106 realizar o processamento de detecção de face, a área da face é calculada aproximadamente quando o usuário for direcionado à frente do painel de exibição 102 e, então, a informação sobre a área da face calculada e a informação sobre o volume são armazenadas, e a informação da área da face armazenada e a informação de volume são usadas para controlar o volume.
[00147] Primeiro, o volume é controlado pelo usuário do dispositivo de exibição de imagem 100 (etapa S161). Quando o volume for controlado pelo usuário, o dispositivo de exibição de imagem 100 captura uma face do usuário que controlou o volume por meio da unidade de entrada de imagem 104 e reconhece simultaneamente a face do usuário que controlou o volume por meio da unidade de detecção de face 106 e, além do mais, armazena informação sobre o volume controlado pelo usuário (etapa S162). Quando a informação de volume for armazenada, a unidade de detecção de face 106 calcula aproximadamente uma área da face a partir da área da face ocupada na imagem inserida pela unidade de entrada de imagem 104 e a partir da direção de uma linha visual quando o usuário for direcionado à frente do painel de exibição 102. Adicionalmente, para tornar um relacionamento entre a área da face e o volume um relacionamento linear, reconhecimento de usuário, medição de área da face e armazenamento de informação de volume podem ser realizados no mesmo usuário pelo menos duas vezes.
[00148] Posteriormente, quando o processamento de detecção de face for iniciado no dispositivo de exibição de imagem 100 (etapa S163), a face do usuário do dispositivo de exibição de imagem 100 é capturada pela unidade de entrada de imagem 104. Quando a face do usuário do dispositivo de exibição de imagem 100 for capturada, a unidade de detecção de face 106 realiza o processamento de detecção de face para reconhecer o usuário usando a imagem capturada e calcula aproximadamente a área da face a partir da área da face ocupada na imagem inserida pela unidade de entrada de imagem 104 e a partir da direção da linha visual quando o usuário for direcionado à frente do painel de exibição 102 (etapa S164).
[00149] Quando o reconhecimento de usuário, a medição de área da face e o cálculo aproximado forem concluídos, na etapa S164, a leitura da informação de volume do usuário e a definição do volume são realizadas (etapa S165). Adicionalmente, quando uma pluralidade de usuários for detectada pela unidade de detecção de face 106 na etapa S164, a leitura da informação de volume do usuário cuja face tem a maior área e a definição do volume podem ser realizadas. Adicionalmente, quando uma pluralidade de partes de informação de volume ou de informação de área da face forem armazenadas, na etapa S162, o volume pode ser definido usando a área da face mais próxima.
[00150] Desta maneira, a face do usuário do dispositivo de exibição de imagem 100 é capturada pela unidade de entrada de imagem 104, e a unidade de detecção de face 106 realiza o processamento de detecção de face para reconhecer o usuário usando a imagem capturada e calcula simultaneamente a área da face do usuário, de forma que possa ser automaticamente definido o volume adequado para o usuário. Adicionalmente, o reconhecimento do usuário e o cálculo da área da face são realizados usando o ajuste de volume do usuário como um circuito de disparo, de forma que seja possível armazenar a informação de volume no interior do dispositivo de exibição de imagem 100 sem uma operação pesada.
[3-5] Controle de reprodução do conteúdo
[00151] A figura 14 é um fluxograma que explica uma outra modificação do processamento de detecção de face da unidade de detecção de face 106 no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção. A seguir, uma outra modificação do processamento de detecção de face da unidade de detecção de face 106 no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção será descrita usando a figura 14.
[00152] O fluxograma mostrado na figura 14 mostra um método em que a unidade de detecção de face 106 realiza o processamento de detecção de face na imagem capturada pela unidade de entrada de imagem 104 e, em decorrência do processamento de detecção de face, de acordo com a determinação se há uma pessoa assistindo o vídeo exibido no painel de exibição 102, a reprodução do conteúdo é controlada. Na tecnologia relacionada, quando um usuário deixa temporariamente a frente da TV, ainda assistindo o conteúdo, tal como um drama, em virtude de uma chamada telefônica ou do uso do toalete, era necessário que o usuário pressionasse um botão, tal como um botão de pausa, usando um controle remoto pessoalmente e, desse modo, interrompendo a reprodução do conteúdo. Assim, quando o usuário retornava à frente da TV para assistir novamente o conteúdo, era necessário que o usuário pressionasse um botão de reprodução diretamente usando o controle remoto e, desse modo, iniciando novamente a reprodução do conteúdo. Por este motivo, a modificação mostrada na figura 14 é caracterizada em que é desnecessário que o usuário realize qualquer operação, é determinado a partir do processamento de detecção de face se há uma pessoa assistindo o vídeo exibido no painel de exibição 102 e a reprodução do conteúdo é controlada usando um resultado da determinação.
[00153] Quando uma imagem em movimento for capturada pela unidade de entrada de imagem 104, a imagem em movimento capturada pela unidade de entrada de imagem 104 é analisada pela unidade de detecção de face 106 e uma distância entre o usuário e o dispositivo de exibição de imagem 100 é medida a partir da área da face do usuário ocupada na imagem em movimento capturada pela unidade de entrada de imagem 104. Em decorrência da medição, a unidade de detecção de face 106 determina se a distância medida é menor que uma distância pré-determinada (etapa S171). Adicionalmente, a distância entre o dispositivo de exibição de imagem 100 e o espectador pode não ser estritamente medida, e pode ser medida em uma faixa aproximada (por exemplo, a posição da face é de 2,5 m até 3 m de distância da unidade de entrada de imagem 104).
[00154] Em decorrência da determinação da unidade de detecção de face 106, na etapa S171, se a distância medida for menor que a distância pré- determinada, esta não é controlada pela unidade de controle de energia 108. O processo retorna para a etapa S171 e o processamento de determinação da unidade de detecção de face 106 é repetido. Por outro lado, em decorrência da determinação da unidade de detecção de face 106, na etapa S171, se a distância medida for maior que a distância pré-determinada, detecta-se subsequentemente se o brilho da imagem capturada alcança um dado brilho, isto é, se o brilho de um cômodo em que o dispositivo de exibição de imagem 100 está instalado alcança um dado brilho (etapa S172). Como exposto, na determinação se o dado brilho é alcançado, um valor médio da imagem é obtido por um sensor de imagem CCD, por exemplo, quando a unidade de entrada de imagem 104 for constituída pelo sensor de imagem CCD. Assim, a CPU 114 pode determinar se o valor médio da imagem obtido é maior que um dado valor.
[00155] Quando o processo de detectar se o brilho do cômodo alcança o dado brilho for realizado, na etapa S172, a imagem proveniente da unidade de entrada de imagem 104 é subsequentemente inserida na unidade de detecção de face 106 (etapa S173) e a unidade de detecção de face 106 realiza um processo de detecção da face de um usuário.
[00156] Aqui, quando a unidade de detecção de face 106 realizar o processo de detecção da face do usuário, um erro de detecção de face, isto é, se nenhuma face do usuário estiver presente na imagem inserida a partir da unidade de entrada de imagem 104, é determinado (etapa S174). Em decorrência da determinação da etapa S174, quando nenhuma face do usuário estiver presente na imagem inserida a partir da unidade de entrada de imagem 104 e o erro de detecção de face for gerado a partir da unidade de detecção de face 106, determina-se subsequentemente se o erro de detecção de face dura por um dado tempo (por exemplo, 1 minuto) (etapa S175).
[00157] Em decorrência da determinação da etapa S175, quando o erro de detecção de face durar pelo dado tempo, a transição de um modo de operação do dispositivo de exibição de imagem 100 para um modo de mudança de tempo é feita pela unidade de controle de energia 108 (etapa S176). Quando a transição do modo de operação do dispositivo de exibição de imagem 100 para o modo de mudança de tempo for feita pela unidade de controle de energia 108, o processo retorna para a etapa S171 para determinar a distância.
[00158] Aqui, o modo de mudança de tempo da presente modalidade foi descrito. O modo de mudança de tempo da presente modalidade diz respeito a um modo que realiza o controle de interrupção da reprodução do conteúdo que o usuário estava assistindo, abaixa a luminância da luz de fundo do painel de exibição 102 e ofusca a exibição do painel de exibição 102.
[00159] Em decorrência da determinação da etapa S175, quando uma ou mais faces do usuário estiverem presentes na imagem inserida a partir da unidade de entrada de imagem 104 e o erro de detecção de face não for gerado a partir da unidade de detecção de face 106, isto é, quando alguém estiver observando a imagem em movimento exibida no painel de exibição 102, determina-se, por exemplo, pela unidade de controle de energia 108 se o modo de operação do dispositivo de exibição de imagem 100 é o modo de mudança de tempo naquele momento (etapa S177). Em decorrência da determinação da etapa S177, quando determina-se que o modo de operação do dispositivo de exibição de imagem 100 não é o modo de economia de energia, o processo retorna para a etapa S171 para determinar a distância. Por outro lado, em decorrência da determinação da etapa S177, quando determina-se que o modo de operação do dispositivo de exibição de imagem 100 é o modo de mudança de tempo, um processo de restauração do modo de mudança de tempo e início da reprodução do conteúdo cuja reprodução foi interrompida na etapa S176 é realizado (etapa S178). No curso da restauração do modo de mudança de tempo, o processo de restauração da luminância diminuída da luz de fundo do painel de exibição 102 também é realizado ao mesmo tempo.
[00160] Desta maneira, a reprodução do conteúdo é controlada por um resultado do processamento de detecção de face, de forma que seja possível interromper a reprodução do conteúdo sem nenhuma operação quando o usuário se mover para ficar distante da frente da tela e, além do mais, é possível reiniciar a reprodução do conteúdo a partir da posição interrompida sem nenhuma operação quando o usuário retornar para a frente da tela. Adicionalmente, quando o usuário se mover para ficar distante da frente da tela, a luminância da luz de fundo do painel de exibição 102 é abaixada, de forma que seja possível contribuir para reduzir o consumo de energia.
[3-6] Definição de uma marca no conteúdo
[00161] A figura 15 é um fluxograma que explica uma outra modificação do processamento de detecção de face da unidade de detecção de face 106 no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção. A seguir, uma outra modificação do processamento de detecção de face da unidade de detecção de face 106 no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção será descrita usando a figura 15.
[00162] O fluxograma mostrado na figura 15 é um diagrama em que a unidade de detecção de face 106 realiza o processamento de detecção de face na imagem capturada pela unidade de entrada de imagem 104 e, em decorrência do processamento de detecção de face, de acordo com a determinação se a face detectada é uma face sorridente, uma marca (capítulo) é colocada no conteúdo que está sendo assistido. Na tecnologia relacionada, já que os comportamentos de um ser humano que riu ou produziu um som enquanto assistia o conteúdo não eram guardados, não havia alternativa a não ser reproduzir o conteúdo a partir do início, a fim de especificar um local ao qual ele mostrou alguma reação quando assistia o mesmo conteúdo novamente, e levava tempo para encontrar uma cena desejada. Por este motivo, a modificação mostrada na figura 15 é caracterizada em que, em decorrência do processamento de detecção de face, de acordo com a determinação se a face detectada é a face sorridente, a marca (capítulo) é colocada no conteúdo que está sendo assistido e, desse modo, a cena desejada é configurada para ser facilmente encontrada, se comparada com a tecnologia relacionada.
[00163] Primeiro, quando conteúdo for reproduzido, e o conteúdo que está sendo reproduzido for exibido no painel de exibição 102, detecta-se se o brilho da imagem capturada alcança um dado brilho, isto é, se o brilho de um cômodo em que o dispositivo de exibição de imagem 100 está instalado alcança um dado brilho (etapa S181). Como exposto, na determinação se o brilho do cômodo alcança o dado brilho, um valor médio da imagem é obtido por um sensor de imagem CCD, por exemplo, quando a unidade de entrada de imagem 104 for constituída pelo sensor de imagem CCD. Assim, a CPU 114 pode determinar se o valor médio da imagem obtido é maior que um dado valor.
[00164] Quando o processo de detectar se o brilho do cômodo alcança o dado brilho for realizado, na etapa S181, a imagem proveniente da unidade de entrada de imagem 104 é subsequentemente inserida na unidade de detecção de face 106 (etapa S182) e a unidade de detecção de face 106 realiza um processo de detecção da face de um usuário. Assim, em decorrência da detecção da face do usuário na unidade de detecção de face 106, a unidade de detecção de face 106 determina se a face detectada é uma face sorridente (etapa S183).
[00165] Em decorrência da determinação da etapa S183, quando a unidade de detecção de face 106 determinar que a face detectada é a face sorridente, a unidade de detecção de face 106 determina subsequentemente se a face sorridente é maior que uma dada intensidade (etapa S184). Em decorrência da determinação da etapa S184, quando a unidade de detecção de face 106 determinar que a face sorridente é maior que a dada intensidade, processamento de autocapítulo, em que um capítulo é definido para o conteúdo que está sendo reproduzido, é realizado (etapa S185). Adicionalmente, um local em que um capítulo é definido pode ser o momento em que a face sorridente começa ou um pouco antes de a face sorridente começar (por exemplo, 15 segundos antes). Pela definição do capítulo no momento um pouco antes de a face sorridente começar, é possível apreciar o conteúdo do momento um pouco antes de a face sorridente começar. Por outro lado, em decorrência da determinação da etapa S184, quando determina-se que a face sorridente não é maior que a dada intensidade, o processo retorna para a etapa S181 para detectar o brilho do cômodo.
[00166] Por outro lado, em decorrência da determinação da etapa S183, quando a unidade de detecção de face 106 determinar que a face detectada não é a face sorridente, um processo de medição de um tempo acumulado de momentos sem sorriso é realizado, por exemplo, pela CPU 114 (etapa S186). Quando o processo de medição do tempo acumulado dos momentos sem sorriso for realizado, o processo retorna para a etapa S181 para detectar o brilho do cômodo.
[00167] Desta maneira, em decorrência do processamento de detecção de face, de acordo com a determinação se a face detectada é a face sorridente, a marca (capítulo) é colocada no conteúdo apreciado, de forma que seja possível encontrar facilmente a cena desejada. Adicionalmente, a marca (capítulo) é colocada no momento em que uma gargalhada, em vez de sorriso, for dada, de forma que seja possível reduzir o número de marcas (capítulos). Além do mais, o tempo acumulado dos momentos sem sorriso é medido, de forma que seja possível detectar um percentual do tempo de sorriso ou do tempo sem sorriso na unidade do conteúdo e seja possível verificar se o conteúdo é interessante depois de apreciar o conteúdo. Adicionalmente, embora o tempo acumulado dos momentos sem sorriso seja medido na modificação mostrada na figura 15, o tempo acumulado dos momentos de sorriso pode ser medido ao mesmo tempo.
[00168] Adicionalmente, no supramencionado exemplo, em decorrência do processamento de detecção de face, a marca é colocada no conteúdo de acordo com a determinação se a face detectada é a face sorridente. Entretanto, na presente invenção, um tipo da face quando a marca é colocada no conteúdo não é limitado a um exemplo como este. Adicionalmente, o conteúdo que define que define a marca não é limitado a uma imagem em movimento. Por exemplo, quando imagens estáticas forem sequencialmente exibidas no painel de exibição 102 (quando um assim denominado processamento de exibição de slide for realizado), a marca pode ser definida para a imagem à qual o usuário mostra reação.
[3-7] Detecção da situação de audiência do conteúdo
[00169] A figura 16 é um fluxograma que explica uma outra modificação do processamento de detecção de face da unidade de detecção de face 106 no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção. A seguir, uma outra modificação do processamento de detecção de face da unidade de detecção de face 106 no dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção será descrita usando a figura 16.
[00170] O fluxograma mostrado na figura 16 é um diagrama em que a unidade de detecção de face 106 realiza o processamento de detecção de face na imagem capturada pela unidade de entrada de imagem 104 e, em decorrência do processamento de detecção de face, com base no número de pessoas que assistem ou na situação de reação das pessoas que assistem, a detecção da situação de audiência ou o controle de audiência do conteúdo são realizados. Na tecnologia relacionada, a situação de audiência de um usuário era detectada apenas pela situação de seleção de um canal. Entretanto, determinava-se a partir apenas da situação de seleção do canal que conteúdo estava sendo assistido, apesar de não estar sendo realmente assistido. Adicionalmente, era impossível detectar informação sobre quanto tempo o conteúdo foi assistido. Por este motivo, a modificação mostrada na figura 16 é caracterizada em que, em decorrência do processamento de detecção de face, com base no número de pessoas que assistem ou na situação de reação das pessoas que assistem, a detecção da situação de audiência ou o controle audiência do conteúdo são realizados.
[00171] Quando uma imagem em movimento for capturada pela unidade de entrada de imagem 104, a imagem em movimento capturada pela unidade de entrada de imagem 104 é analisada pela unidade de detecção de face 106 e uma distância entre o usuário e o dispositivo de exibição de imagem 100 é medida a partir da área de uma face do usuário ocupada na imagem em movimento capturada pela unidade de entrada de imagem 104. Em decorrência da medição, a unidade de detecção de face 106 determina se a distância medida é menor que uma distância pré-determinada (etapa S191). Adicionalmente, a distância entre o dispositivo de exibição de imagem 100 e o espectador pode não ser estritamente medida, e pode ser medida em uma faixa aproximada (por exemplo, a posição da face é de 2,5 m até 3 m de distância da unidade de entrada de imagem 104).
[00172] Em decorrência da determinação da unidade de detecção de face 106, na etapa S191, se a distância medida for menor que a distância pré- determinada, esta não é controlada pela unidade de controle de energia 108. O processo retorna para a etapa S191, e o processamento de determinação da unidade de detecção de face 106 é repetido. Por outro lado, em decorrência da determinação da unidade de detecção de face 106, na etapa S191, se a distância medida for maior que a distância pré-determinada, detecta-se subsequentemente se o brilho de um cômodo em que o dispositivo de exibição de imagem 100 está instalado alcança um dado brilho (etapa S192). Como exposto, na determinação se o dado brilho é alcançado, um valor médio da imagem é obtido por um sensor de imagem CCD, por exemplo, quando a unidade de entrada de imagem 104 for constituída pelo sensor de imagem CCD. Assim, a CPU 114 pode determinar se o valor médio da imagem obtido é maior que um dado valor.
[00173] Quando o processo de detectar se o brilho do cômodo alcança o dado brilho for realizado, na etapa S192, a imagem proveniente da unidade de entrada de imagem 104 é subsequentemente inserida na unidade de detecção de face 106 (etapa S193) e a unidade de detecção de face 106 realiza um processo de detecção da face de um usuário.
[00174] Aqui, a unidade de detecção de face 106 realiza o processo de detecção da face do usuário, e determina-se se a face do usuário pode ser detectada na imagem inserida a partir da unidade de entrada de imagem 104 (etapa S194). Em decorrência da determinação da etapa S194, quando a face do usuário puder ser detectada na imagem inserida a partir da unidade de entrada de imagem 104, determina-se se a face do usuário, que pode ser detectada na etapa S194, está na faixa de um dado ângulo em relação à unidade de entrada de imagem 104 (etapa S195).
[00175] Em decorrência da determinação da etapa S195, quando determina-se que a face do usuário não está na faixa do dado ângulo em relação à unidade de entrada de imagem 104, o processo retorna para a etapa S191 para realizar novamente o processamento de medição de distância. Por outro lado, em decorrência da determinação da etapa S195, quando determina-se que a face do usuário está na faixa do dado ângulo em relação à unidade de entrada de imagem 104, um processo de análise da concentração no conteúdo é realizado (etapa S196). A análise da concentração no conteúdo diz respeito a uma análise se estão se concentrando no conteúdo e o assistindo pela análise da direção de uma linha visual da face do usuário detectada, por exemplo, pela unidade de detecção de face 106. Como um exemplo de um método para calcular a concentração, a concentração pode ser calculada pela divisão de um tempo pelo qual a linha visual da face do usuário é direcionada à unidade de entrada de imagem 104 por um tempo de reprodução do conteúdo. Quando a concentração for calculada por um método como este, quanto maior o tempo pelo qual a direção da linha visual é direcionada à unidade de entrada de imagem 104, mais alta a concentração, enquanto que, quanto menor o tempo pelo qual a direção da linha visual é direcionada à unidade de entrada de imagem 104, mais baixa a concentração. Adicionalmente, como a análise da concentração no conteúdo, pode ser realizado um processo de análise do movimento de uma direção vertical (direção de arfagem) da face do usuário detectado, por exemplo, pela unidade de detecção de face 106, e de determinação da presença de assentimento ou do local do assentimento e da frequência de assentimento de um espectador em relação aos detalhes do conteúdo. Quando a concentração for analisada por um método como este, a concentração pode se tornar alta à medida que a frequência de assentimento aumenta.
[00176] Então, em decorrência da análise da concentração no conteúdo, quando a concentração no conteúdo que é atualmente exibido for baixa, isto é, quando determina-se que nenhum grande interesse é mostrado ao conteúdo que está sendo atualmente exibido, pode-se recomendar que outro conteúdo seja assistido, ou o conteúdo exibido pode ser alterado.
[00177] Adicionalmente, no curso da recomendação do conteúdo, o conteúdo recomendado pode ser decidido com base na informação sobre o número de pessoas, sexo, etc., que é obtida pelo processamento de detecção de face da unidade de detecção de face 106 que é realizado na imagem inserida a partir da unidade de entrada de imagem 104.
[00178] Por outro lado, em decorrência da determinação da etapa S194, quando a face do usuário não puder ser detectada na imagem inserida a partir da unidade de entrada de imagem 104, determina-se que o conteúdo é exibido, mas não assistido, e um processo de medição de um tempo de não audiência do conteúdo é realizado, por exemplo, pela CPU 114 (etapa S197). Quando o processo de medição do tempo de não audiência do conteúdo for realizado, o processo retorna para a etapa S191 para realizar novamente o processamento de medição de distância.
[00179] Desta maneira, a unidade de detecção de face 106 realiza o processo de detecção da face do usuário, e o processo de análise da concentração no conteúdo é realizado usando um resultado da detecção. Desse modo, é possível detectar situações de audiência detalhadas do conteúdo que está sendo atualmente exibido ou realizar o controle de reprodução do conteúdo com base na concentração obtida pela análise.
[4] Conclusão
[00180] Uma variedade de modificações aplicadas ao processamento de detecção de face da unidade de detecção de face 106 foi supradescrita. Como exposto, o dispositivo de exibição de imagem 100 de acordo com uma modalidade da presente invenção inclui a unidade de entrada de imagem 104, que captura a imagem a partir da mesma direção em que o painel de exibição 102 exibe a imagem em movimento, e a unidade de detecção de face 106, que realiza o processamento de detecção de face na imagem que a unidade de entrada de imagem 104 captura. Assim, a presença da detecção da face do usuário pela unidade de detecção de face 106 pode controlar a operação do interior do dispositivo de exibição de imagem 100 e contribuir para reduzir o consumo de energia. Adicionalmente, é possível analisar a situação de audiência do conteúdo exibido pelo painel de exibição 102 e controlar a reprodução do conteúdo exibido pelo painel de exibição 102 usando a informação sobre o tamanho ou a direção da linha visual, etc. da face detectada pela unidade de detecção de face 106.
[00181] As modalidades preferidas da presente invenção foram supradescritas em relação aos desenhos anexos, embora, certamente, a presente invenção não seja limitada aos exemplos expostos. Versados na técnica podem encontrar várias alternativas e modificações no escopo das reivindicações anexas, e entende-se que elas cairão naturalmente sob o escopo técnico da presente invenção.
[00182] Por exemplo, em decorrência do processamento de detecção de face da unidade de detecção de face 106, quando uma criança for projetada na imagem suprida a partir da unidade de entrada de imagem 104 ou quando for detectado que a distância entre a unidade de entrada de imagem 104 e a face está em uma dada distância, efeitos, tais como sombreamento, mensagens ou sons, podem ser produzidos para a imagem em movimento exibida no painel de exibição 102, e pode-se chamar atenção, de maneira tal que o usuário se mova para a frente do painel de exibição 102.

Claims (15)

1. Dispositivo de exibição de imagem, compreendendo: uma unidade de exibição de imagem (102) para exibir uma imagem estática ou uma imagem em movimento; uma unidade de captura de imagem (104) para capturar a imagem em uma direção na qual a unidade de exibição de imagem (102) exibe a imagem estática ou a imagem em movimento; e uma unidade de detecção de face (106) para realizar processamento de detecção de face, no qual uma face de um usuário que está incluída na imagem capturada pela unidade de captura de imagem (104) é detectada em dados intervalos, caracterizado pelo fato de que os dados intervalos são variáveis de acordo com a determinação se a face do usuário está incluída na imagem capturada pela unidade de captura de imagem (104) ou não, e quando a face detectada não passar por mudança na posição, no todo ou em parte, por um dado tempo, no curso do processamento de detecção de face, a unidade de detecção de face (106) não detecta a face como a face do usuário.
2. Dispositivo de exibição de imagem, de acordo com a reivindicação 1, caracterizado pelo fato de que compreende adicionalmente uma unidade de controle (114) para realizar uma operação de controle na unidade de exibição de imagem (102) de acordo com um resultado do processamento de detecção de face da unidade de detecção de face (106), em que a unidade de controle (114) é configurada para reduzir a luminância da unidade de exibição de imagem (12) quando o resultado do processamento de detecção de face da unidade de detecção de face (106) indica que a face do usuário não estiver incluída na imagem capturada pela unidade de captura de imagem (104).
3. Dispositivo de exibição de imagem, de acordo com a reivindicação 2, caracterizado pelo fato de que a unidade de detecção de face (106) é configurada para, quando a face do usuário não estiver incluída na imagem capturada pela unidade de captura de imagem (104), aumentar os dados intervalos, se comparados a quando a face do usuário está incluída.
4. Dispositivo de exibição de imagem, de acordo com a reivindicação 2, caracterizado pelo fato de que a unidade de controle (114) é configurada para, após reduzir a luminância da unidade de exibição de imagem (102), aumentar a luminância da unidade de exibição de imagem (102) depois que a face do usuário é adotada para ser incluída na imagem capturada pela unidade de captura de imagem (104).
5. Dispositivo de exibição de imagem, de acordo com a reivindicação 2, caracterizado pelo fato de que a unidade de controle (114) é configurada para, quando um dado tempo tiver decorrido após a luminância da unidade de exibição de imagem (102) é reduzido, para parcial ou inteiramente omitir o processamento de imagem da imagem exibida na unidade de exibição de imagem (102).
6. Dispositivo de exibição de imagem, de acordo com a reivindicação 1, caracterizado pelo fato de que compreende adicionalmente uma unidade de controle (114) para realizar uma operação de controle na imagem estática ou na imagem em movimento de acordo com um resultado do processamento de detecção de face da unidade de detecção de face (106), em que a unidade de controle (114) é configurada para mudar uma faixa da imagem a ser exibida na unidade de exibição de imagem (102) de acordo com uma posição da face que a unidade de detecção de face (106) detecta e uma distância da face a partir da unidade de captura de imagem (104).
7. Dispositivo de exibição de imagem, de acordo com a reivindicação 1, caracterizado pelo fato de que compreende adicionalmente uma unidade de controle (114) para realizar uma operação de controle na imagem estática ou na imagem em movimento de acordo com um resultado do processamento de detecção de face da unidade de detecção de face (106), em que a unidade de controle (114) é configurada para controlar se ou não um processamento de conversão de alta resolução é realizado na imagem a ser exibida na unidade de exibição de imagem (102) de acordo com se ou não a face que a unidade de detecção de face (106) detecta está presente.
8. Dispositivo de exibição de imagem, de acordo com a reivindicação 1, caracterizado pelo fato de que compreende adicionalmente uma unidade de controle (114) para realizar uma operação de controle na imagem estática ou na imagem em movimento de acordo com um resultado do processamento de detecção de face da unidade de detecção de face (106), em que a unidade de controle (114) é configurada para alterar automática e sequencialmente canais a serem exibidos na unidade de exibição de imagem (102) de acordo com a determinação se a face que a unidade de detecção de face (106) detecta está presente ou não.
9. Dispositivo de exibição de imagem, de acordo com a reivindicação 1, caracterizado pelo fato de que compreende adicionalmente uma unidade de saída de áudio (142) para transmitir um áudio; e uma unidade de controle (114) para realizar uma operação de controle no áudio de acordo com um resultado do processamento de detecção de face da unidade de detecção de face (106), em que a unidade de controle (114) é configurada para controla o volume da saída de áudio a partir da unidade de saída de áudio (142) de acordo com uma situação da face que a unidade de detecção de face (106) detecta.
10. Dispositivo de exibição de imagem, de acordo com a reivindicação 9, caracterizado pelo fato de que a unidade de controle (114) é configurada para controlar o volume da saída de áudio a partir da unidade de saída de áudio (142) de acordo com uma direção e a área da face que a unidade de detecção de face (106) detecta; em que a unidade de controle (114) é configurada calcular a área da face a partir da direção e da área da face que a unidade de detecção de face (106) detecta quando a face estiver voltada para uma direção frontal, e para controlar o volume da saída de áudio a partir da unidade de saída de áudio (142) usando um resultado do cálculo.
11. Dispositivo de exibição de imagem, de acordo com a reivindicação 1, caracterizado pelo fato de que compreende adicionalmente uma unidade de controle (114) para realizar uma operação de controle na imagem estática ou na imagem em movimento de acordo com um resultado do processamento de detecção de face da unidade de detecção de face (106), em que a unidade de controle (114) é configurada para, em decorrência do processamento de detecção de face da unidade de detecção de face (106), quando for determinado que a face do usuário não está incluída na imagem capturada pela unidade de captura de imagem (104), interromper temporariamente a reprodução da imagem em movimento exibida na unidade de exibição de imagem (102).
12. Dispositivo de exibição de imagem, de acordo com a reivindicação 1, caracterizado pelo fato de que compreende adicionalmente uma unidade de controle (114) para realizar uma operação de controle em uma exibição de SLIDE da imagem estática ou na imagem em movimento de acordo com um resultado do processamento de detecção de face da unidade de detecção de face (106), em que a unidade de controle (114) é configurada para, em decorrência do processamento de detecção de face da unidade de detecção de face (106), determinar que a face detectada pela unidade de detecção de face (106) mostra uma reação a uma imagem exibida na unidade de exibição de imagem (102), para gerar uma marca associada à imagem dentro da imagem em movimento ou dentro da exibição de SLIDE.
13. Dispositivo de exibição de imagem, de acordo com a reivindicação 12, caracterizado pelo fato de que a unidade de controle (114) é configurada para definir um capítulo como a marca quando a imagem exibida na unidade de exibição de imagem (102) for a imagem em movimento, e em que a unidade de controle (114) é configurada para definir o capítulo em um momento que volta um dado tempo a partir de um momento em que a face detectada pela unidade de detecção de face (106) mostra a reação.
14. Método de controle, compreendendo as etapas de: capturar uma imagem em uma direção em que uma unidade de exibição de imagem (102), para exibir uma imagem estática ou uma imagem em movimento, exibe a imagem estática ou a imagem em movimento; e realizar o processamento de detecção de face, no qual uma face de um usuário que é incluída na imagem capturada na etapa de captura é detectada, em dados intervalos, para detectar a face, caracterizado pelo fato de que os dados intervalos são variáveis de acordo com a determinação se a face do usuário está incluída ou não na imagem capturada na etapa de captura da imagem, e a etapa de detecção da face não detecta a face como a face do usuário quando a face detectada não passar por mudança na posição, no todo ou em parte, por um dado tempo no curso do processamento de detecção de face.
15. Meio de armazenamento legível por computador, compreendendo instruções legíveis por computador que, quando lidas por um computador, fazem com que o mesmo execute as etapas de capturar uma imagem em uma direção em que uma unidade de exibição de imagem (102), para exibir uma imagem estática ou uma imagem em movimento, exibe a imagem estática ou a imagem em movimento; e realizar o processamento de detecção de face, no qual uma face de um usuário que é incluída na imagem capturada na etapa de captura é detectada, em dados intervalos, para detectar a face, caracterizado pelo fato de que os dados intervalos são variáveis de acordo com a determinação se a face do usuário está incluída ou não na imagem capturada na etapa de captura da imagem, e em que a etapa de detecção da face não detecta a face como a face do usuário quando a face detectada não passar por mudança na posição, no todo ou em parte, por um dado tempo no curso do processamento de detecção de face.
BRPI0917133-9A 2008-08-22 2009-08-21 dispositivo de exibição de imagem, método de controle, e, meio de armazenamento legível por computador BRPI0917133B1 (pt)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2008-214618 2008-08-22
JP2008214618 2008-08-22
PCT/JP2009/064625 WO2010021373A1 (ja) 2008-08-22 2009-08-21 画像表示装置、制御方法およびコンピュータプログラム

Publications (2)

Publication Number Publication Date
BRPI0917133A2 BRPI0917133A2 (pt) 2015-11-10
BRPI0917133B1 true BRPI0917133B1 (pt) 2021-03-02

Family

ID=41707247

Family Applications (1)

Application Number Title Priority Date Filing Date
BRPI0917133-9A BRPI0917133B1 (pt) 2008-08-22 2009-08-21 dispositivo de exibição de imagem, método de controle, e, meio de armazenamento legível por computador

Country Status (7)

Country Link
US (1) US9104408B2 (pt)
EP (1) EP2315439B1 (pt)
JP (2) JP5553022B2 (pt)
CN (2) CN102119530B (pt)
BR (1) BRPI0917133B1 (pt)
RU (1) RU2493613C2 (pt)
WO (1) WO2010021373A1 (pt)

Families Citing this family (69)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5556098B2 (ja) * 2009-09-11 2014-07-23 ソニー株式会社 表示方法及び表示装置
JP5418093B2 (ja) 2009-09-11 2014-02-19 ソニー株式会社 表示装置および制御方法
JP5568929B2 (ja) 2009-09-15 2014-08-13 ソニー株式会社 表示装置および制御方法
JP2011259384A (ja) * 2010-06-11 2011-12-22 Sharp Corp 撮像装置、表示装置、プログラム及び記録媒体
US8760517B2 (en) 2010-09-27 2014-06-24 Apple Inc. Polarized images for security
JP5724283B2 (ja) * 2010-10-15 2015-05-27 ソニー株式会社 情報処理装置、同期方法およびプログラム
US9241195B2 (en) * 2010-11-05 2016-01-19 Verizon Patent And Licensing Inc. Searching recorded or viewed content
JP2012109810A (ja) * 2010-11-17 2012-06-07 Panasonic Corp 表示装置、表示制御方法、携帯電話及び半導体装置
JP5715534B2 (ja) * 2011-09-26 2015-05-07 日立マクセル株式会社 立体映像処理装置および映像表示装置
US20120154351A1 (en) * 2010-12-21 2012-06-21 Hicks Michael A Methods and apparatus to detect an operating state of a display based on visible light
JP2015039066A (ja) * 2010-12-24 2015-02-26 株式会社東芝 立体視映像表示システム、立体視映像表示装置および出力制御方法
JP2012181054A (ja) * 2011-02-28 2012-09-20 Toshiba Corp 情報出力装置及び情報出力方法
JP5772069B2 (ja) * 2011-03-04 2015-09-02 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
CN102761645B (zh) * 2011-04-26 2016-05-18 富泰华工业（深圳）有限公司 电子设备及其控制方法
CN103534664B (zh) * 2011-05-12 2016-08-31 苹果公司 存在感测
US20120287031A1 (en) 2011-05-12 2012-11-15 Apple Inc. Presence sensing
JP5869236B2 (ja) * 2011-06-03 2016-02-24 任天堂株式会社 情報処理プログラム、情報処理装置、情報処理システム、および情報処理方法
FR2978267A1 (fr) * 2011-07-18 2013-01-25 St Microelectronics Rousset Procede et dispositif de controle d'un appareil en fonction de la detection de personnes a proximite de l'appareil
JP2013055424A (ja) * 2011-09-01 2013-03-21 Sony Corp 撮影装置、パターン検出装置、および電子機器
CN103037153A (zh) * 2011-09-30 2013-04-10 联想(北京)有限公司 一种基于摄像头的监测方法及具有摄像头的电子设备
CN103123537B (zh) * 2011-11-21 2016-04-20 国基电子（上海）有限公司 电子显示设备及其省电方法
US20120092248A1 (en) 2011-12-23 2012-04-19 Sasanka Prabhala method, apparatus, and system for energy efficiency and energy conservation including dynamic user interface based on viewing conditions
KR20130078676A (ko) * 2011-12-30 2013-07-10 삼성전자주식회사 디스플레이장치 및 그 제어방법
JP5957893B2 (ja) * 2012-01-13 2016-07-27 ソニー株式会社 情報処理装置及び情報処理方法、並びにコンピューター・プログラム
JP5911168B2 (ja) * 2012-01-16 2016-04-27 シャープ株式会社 表示装置、表示方法及び表示プログラム
US20130194172A1 (en) * 2012-01-30 2013-08-01 Cellco Partnership D/B/A Verizon Wireless Disabling automatic display shutoff function using face detection
JP5696071B2 (ja) * 2012-03-02 2015-04-08 株式会社東芝 電子機器、電子機器の制御方法、制御プログラム及び記録媒体
JP5204323B1 (ja) * 2012-03-02 2013-06-05 株式会社東芝 電子機器、電子機器の制御方法、制御プログラム及び記録媒体
JP2015121567A (ja) * 2012-04-11 2015-07-02 シャープ株式会社 表示制御装置及び表示装置
US9633186B2 (en) 2012-04-23 2017-04-25 Apple Inc. Systems and methods for controlling output of content based on human recognition data detection
JPWO2013175735A1 (ja) * 2012-05-22 2016-01-12 パナソニックＩｐマネジメント株式会社 表示制御装置及び表示制御方法
JP6101438B2 (ja) * 2012-06-15 2017-03-22 サターン ライセンシング エルエルシーＳａｔｕｒｎ Ｌｉｃｅｎｓｉｎｇ ＬＬＣ 情報処理装置及び情報処理方法、コンピューター・プログラム、並びに情報通信システム
US20140096169A1 (en) * 2012-09-28 2014-04-03 Joseph Dodson Playback synchronization in a group viewing a media title
US9769512B2 (en) 2012-11-08 2017-09-19 Time Warner Cable Enterprises Llc System and method for delivering media based on viewer behavior
DE102013224590B4 (de) 2012-12-03 2019-07-18 Canon Kabushiki Kaisha Anzeigevorrichtung und deren steuerverfahren
KR20140093513A (ko) * 2013-01-18 2014-07-28 삼성전자주식회사 휴대 단말기의 디스플레이 제어 장치 및 방법
WO2014199666A1 (ja) * 2013-06-13 2014-12-18 シャープ株式会社 表示装置
JP6024617B2 (ja) * 2013-08-15 2016-11-16 富士ゼロックス株式会社 情報処理装置及び情報処理プログラム
CN104375628B (zh) * 2013-08-16 2018-08-07 联想(北京)有限公司 一种信息处理方法及电子设备
CN103780970B (zh) * 2013-08-20 2018-03-16 华为终端（东莞）有限公司 一种媒体播放的方法、装置和系统
CN103686286A (zh) * 2013-12-19 2014-03-26 小米科技有限责任公司 一种进行开关控制的方法和装置
US10667007B2 (en) * 2014-01-22 2020-05-26 Lenovo (Singapore) Pte. Ltd. Automated video content display control using eye detection
KR102163850B1 (ko) * 2014-01-29 2020-10-12 삼성전자 주식회사 디스플레이장치 및 그 제어방법
US10234928B2 (en) 2014-02-05 2019-03-19 Fujitsu Technology Solutions Intellectual Property Gmbh Display device, computer system and method of managing the operating states of a computer system
CN105094261B (zh) * 2014-05-12 2018-06-29 联想(北京)有限公司 电源管理方法、系统及电子设备
KR101598771B1 (ko) * 2014-06-11 2016-03-02 주식회사 슈프리마에이치큐 얼굴 인식 생체 인증 방법 및 장치
JP6586956B2 (ja) * 2014-09-03 2019-10-09 ソニー株式会社 検出機能付き投射型表示装置
CN104394461A (zh) * 2014-11-12 2015-03-04 无锡科思电子科技有限公司 一种电视自适应关机控制方法
US11405688B2 (en) * 2015-09-15 2022-08-02 Interdigital Madison Patent Holdings, Sas Method and apparatus for providing power saving media content
KR102485453B1 (ko) * 2015-11-24 2023-01-06 엘지디스플레이 주식회사 표시장치와 이의 구동방법
CN106817580B (zh) * 2015-11-30 2019-05-21 深圳超多维科技有限公司 一种设备控制方法、装置及系统
JP6055535B1 (ja) * 2015-12-04 2016-12-27 株式会社ガイア・システム・ソリューション 集中度処理システム
CN106937135A (zh) * 2015-12-31 2017-07-07 幸福在线（北京）网络技术有限公司 一种游戏场景的实时播放方法及相关装置和系统
CN107221303A (zh) * 2016-03-22 2017-09-29 中兴通讯股份有限公司 一种调节屏幕亮度的方法、装置及智能终端
CN105827872A (zh) * 2016-06-07 2016-08-03 维沃移动通信有限公司 一种移动终端的控制方法及移动终端
WO2018076172A1 (zh) * 2016-10-25 2018-05-03 华为技术有限公司 一种图像显示方法及终端
KR20180050052A (ko) * 2016-11-04 2018-05-14 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
US10565671B2 (en) * 2017-04-24 2020-02-18 Intel Corporation Reduce power by frame skipping
CN107632708B (zh) * 2017-09-22 2021-08-17 京东方科技集团股份有限公司 一种屏幕可视角度的控制方法、控制装置及柔性显示装置
US10817594B2 (en) 2017-09-28 2020-10-27 Apple Inc. Wearable electronic device having a light field camera usable to perform bioauthentication from a dorsal side of a forearm near a wrist
US11030438B2 (en) * 2018-03-20 2021-06-08 Johnson & Johnson Vision Care, Inc. Devices having system for reducing the impact of near distance viewing on myopia onset and/or myopia progression
DE112019001950T5 (de) 2018-04-13 2021-01-21 Sony Corporation Rauminformationen-sharing-vorrichtung, rauminformationen-sharing-verfahren und programm
CN108882032A (zh) * 2018-06-08 2018-11-23 百度在线网络技术（北京）有限公司 用于输出信息的方法和装置
US10923045B1 (en) 2019-11-26 2021-02-16 Himax Technologies Limited Backlight control device and method
TWI717928B (zh) * 2019-12-09 2021-02-01 奇景光電股份有限公司 背光控制裝置
JP2021107886A (ja) * 2019-12-27 2021-07-29 富士フイルムビジネスイノベーション株式会社 制御装置およびプログラム
CN113395389B (zh) * 2020-03-13 2022-12-02 北京小米移动软件有限公司 一种防止屏幕误触的方法、装置及存储介质
US11244654B2 (en) * 2020-06-19 2022-02-08 Intel Corporation Display control apparatus and method for a display based on information indicating presence or engagement of the user of the display
CN113408347B (zh) * 2021-05-14 2022-03-15 桂林电子科技大学 监控摄像头远距离建筑物变化检测的方法

Family Cites Families (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0784062A (ja) * 1993-09-14 1995-03-31 Hitachi Commun Syst Inc テレビジョン受像機
JPH07325639A (ja) * 1994-05-31 1995-12-12 Sharp Corp カメラ内蔵コンピュータシステム
JPH0944772A (ja) * 1995-05-22 1997-02-14 Mk Seiko Co Ltd テレビ画面接近防止装置
JPH0916296A (ja) * 1995-07-04 1997-01-17 Fujitsu Ltd 情報処理機器
JPH09120323A (ja) 1995-10-25 1997-05-06 Canon Inc 電源制御方法及び装置及び電子機器
JPH09190245A (ja) * 1996-01-12 1997-07-22 Canon Inc 情報処理装置及び該装置における省電力制御方法
JPH11288259A (ja) 1998-02-06 1999-10-19 Sanyo Electric Co Ltd 省電力制御方法及びその装置
JPH11242733A (ja) 1998-02-24 1999-09-07 Sanyo Electric Co Ltd 省電力制御装置
EP1580684B1 (en) * 1998-04-13 2008-12-31 Google Inc. Face recognition from video images
JP2000221953A (ja) 1999-01-29 2000-08-11 Sony Corp 映像表示装置、映像処理方法及びこれらを応用した映像表示システム
JP3603674B2 (ja) 1999-06-22 2004-12-22 日本電気株式会社 コンピュータシステムの電源制御システム
US6754389B1 (en) * 1999-12-01 2004-06-22 Koninklijke Philips Electronics N.V. Program classification using object tracking
US6665805B1 (en) * 1999-12-27 2003-12-16 Intel Corporation Method and apparatus for real time monitoring of user presence to prolong a portable computer battery operation time
JP4281338B2 (ja) * 2002-11-22 2009-06-17 ソニー株式会社 画像検出装置及び画像検出方法
EP1426919A1 (en) * 2002-12-02 2004-06-09 Sony International (Europe) GmbH Method for operating a display device
JP2004213486A (ja) 2003-01-07 2004-07-29 Sony Corp 画像処理装置および方法、記録媒体、並びにプログラム
JP2005044330A (ja) 2003-07-24 2005-02-17 Univ Of California San Diego 弱仮説生成装置及び方法、学習装置及び方法、検出装置及び方法、表情学習装置及び方法、表情認識装置及び方法、並びにロボット装置
JP2005115521A (ja) 2003-10-06 2005-04-28 Toshiba Corp 機器制御システムおよび機器制御方法
JP2007520110A (ja) * 2003-12-22 2007-07-19 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 視聴者のムードを監視するコンテンツ処理システム、方法及びコンピュータプログラムプロダクト
GB2410359A (en) * 2004-01-23 2005-07-27 Sony Uk Ltd Display
EP1566788A3 (en) * 2004-01-23 2017-11-22 Sony United Kingdom Limited Display
JP2005221907A (ja) * 2004-02-09 2005-08-18 Sanyo Electric Co Ltd 表示装置
JP2005266061A (ja) * 2004-03-17 2005-09-29 Olympus Corp 再生装置
JP4371024B2 (ja) 2004-09-28 2009-11-25 ソニー株式会社 記録再生装置、記録再生方法および記録再生システム
US7315631B1 (en) * 2006-08-11 2008-01-01 Fotonation Vision Limited Real-time face tracking in a digital image acquisition device
JP3862027B2 (ja) * 2005-01-25 2006-12-27 船井電機株式会社 放送信号受信システム
JP2006236244A (ja) * 2005-02-28 2006-09-07 Toshiba Corp 顔認証装置および入退場管理装置
JP4114676B2 (ja) * 2005-05-16 2008-07-09 船井電機株式会社 映像再生装置
JP2007036702A (ja) * 2005-07-27 2007-02-08 Casio Comput Co Ltd 携帯情報端末及び表示制御方法
JP4350725B2 (ja) * 2005-08-05 2009-10-21 キヤノン株式会社 画像処理方法、画像処理装置、及び、画像処理方法をコンピュータに実行させるためのプログラム
JP4595750B2 (ja) 2005-08-29 2010-12-08 ソニー株式会社 画像処理装置および方法、並びにプログラム
US8218080B2 (en) * 2005-12-05 2012-07-10 Samsung Electronics Co., Ltd. Personal settings, parental control, and energy saving control of television with digital video camera
RU2309454C1 (ru) * 2006-03-23 2007-10-27 Государственное образовательное учреждение высшего профессионального образования "Пермский государственный университет" Устройство управления компьютером
JP4175390B2 (ja) 2006-06-09 2008-11-05 ソニー株式会社 情報処理装置、および情報処理方法、並びにコンピュータ・プログラム
JP5303824B2 (ja) 2006-06-16 2013-10-02 セイコーエプソン株式会社 プロジェクタ及びその制御方法
CN200953604Y (zh) * 2006-09-05 2007-09-26 康佳集团股份有限公司 节能电视机
JP5044321B2 (ja) * 2006-09-13 2012-10-10 株式会社リコー 撮像装置および被写体検出方法
JP2008111886A (ja) 2006-10-27 2008-05-15 Digital Electronics Corp 自動ドア、画面表示装置、画面表示制御プログラムおよびそのプログラムを記録したコンピュータ読み取り可能な記録媒体
US8005768B2 (en) * 2006-11-28 2011-08-23 Samsung Electronics Co., Ltd. Multimedia file reproducing apparatus and method
US7903166B2 (en) * 2007-02-21 2011-03-08 Sharp Laboratories Of America, Inc. Methods and systems for display viewer motion compensation based on user image data
JP2008148297A (ja) * 2007-11-22 2008-06-26 Sharp Corp 電子機器
JP5160293B2 (ja) * 2008-04-23 2013-03-13 ソニーモバイルコミュニケーションズ， エービー 携帯端末、その表示制御方法および表示制御プログラム

Also Published As

Publication number Publication date
CN103379300B (zh) 2017-03-01
WO2010021373A1 (ja) 2010-02-25
CN102119530B (zh) 2013-08-21
JP5976035B2 (ja) 2016-08-23
EP2315439B1 (en) 2018-10-17
JPWO2010021373A1 (ja) 2012-01-26
CN102119530A (zh) 2011-07-06
BRPI0917133A2 (pt) 2015-11-10
RU2493613C2 (ru) 2013-09-20
CN103379300A (zh) 2013-10-30
JP5553022B2 (ja) 2014-07-16
RU2011104474A (ru) 2012-08-20
EP2315439A4 (en) 2017-04-12
US9104408B2 (en) 2015-08-11
EP2315439A1 (en) 2011-04-27
JP2014209739A (ja) 2014-11-06
US20110135114A1 (en) 2011-06-09

Similar Documents

Publication Publication Date Title
BRPI0917133B1 (pt) dispositivo de exibição de imagem, método de controle, e, meio de armazenamento legível por computador
US10290281B2 (en) Display device and control method
CN109168034B (zh) 商品信息显示方法、装置、电子设备和可读存储介质
US9628844B2 (en) Determining audience state or interest using passive sensor data
US8774592B2 (en) Media reproduction for audio visual entertainment
US9781379B2 (en) Media recording for audio visual entertainment
US20120020641A1 (en) Content reproduction apparatus
JP5528318B2 (ja) 表示装置
US20120254909A1 (en) System and method for adjusting presentation characteristics of audio/video content in response to detection of user sleeping patterns
WO2017166972A1 (zh) 一种视频播放控制方法、装置及机顶盒、存储介质
WO2019085980A1 (zh) 视频字幕自动调整方法及装置、终端及可读存储介质
CN101169897A (zh) 多媒体系统的脸部检测的遥控系统及其方法及多媒体系统
TWI698117B (zh) 多媒體檔案的產生方法與播放方法、多媒體檔案產生裝置與多媒體檔案播放裝置
JP2011239029A (ja) 映像表示装置、省電力制御装置、及び省電力方法
US20150271465A1 (en) Audio/video system with user analysis and methods for use therewith
CN108540839B (zh) 一种基于与儿童友好互动的电视息屏方法
KR20110004596A (ko) 사용자를 인식하여 기능을 선택하는 방송 수신기의 동작 방법 및 그 방법을 채용한 방송 수신기
TWI669960B (zh) 電視節目過濾方法及電視機
CN117459757A (zh) 视频播放方法、装置、设备和存储介质

Legal Events

Date Code Title Description
B06F Objections, documents and/or translations needed after an examination request according [chapter 6.6 patent gazette]
B06U Preliminary requirement: requests with searches performed by other patent offices: procedure suspended [chapter 6.21 patent gazette]
B15K Others concerning applications: alteration of classification

Free format text: AS CLASSIFICACOES ANTERIORES ERAM: H04N 5/66 , G09G 5/00 , G09G 5/10 , G09G 5/36 , H04N 5/225 , H04N 5/232 , H04N 5/63

Ipc: H04N 5/63 (1985.01), H04N 21/422 (2011.01), H04N 2

B15K Others concerning applications: alteration of classification

Free format text: AS CLASSIFICACOES ANTERIORES ERAM: H04N 5/63 , H04N 21/422 , H04N 21/4223 , H04N 21/4415 , H04N 21/442 , H04N 21/443 , H04N 21/45 , G06F 1/3203 , G06F 1/3231 , G06F 1/3234 , G09G 3/34

Ipc: H04N 21/422 (2011.01), H04N 21/4223 (2011.01), H04

B09A Decision: intention to grant [chapter 9.1 patent gazette]
B16A Patent or certificate of addition of invention granted

Free format text: PRAZO DE VALIDADE: 10 (DEZ) ANOS CONTADOS A PARTIR DE 02/03/2021, OBSERVADAS AS CONDICOES LEGAIS.