RU2549165C2 - Устройство отображения и способ управления - Google Patents

Устройство отображения и способ управления Download PDF

Info

Publication number
RU2549165C2
RU2549165C2 RU2012108121/08A RU2012108121A RU2549165C2 RU 2549165 C2 RU2549165 C2 RU 2549165C2 RU 2012108121/08 A RU2012108121/08 A RU 2012108121/08A RU 2012108121 A RU2012108121 A RU 2012108121A RU 2549165 C2 RU2549165 C2 RU 2549165C2
Authority
RU
Russia
Prior art keywords
user
image
child
display device
display
Prior art date
Application number
RU2012108121/08A
Other languages
English (en)
Other versions
RU2012108121A (ru
Inventor
Харуо ОБА
Юсуке САКАЙ
Эйдзиро МОРИ
Кэнити ОКАДА
Кацунори ТАНАКА
Синити ХАЯСИ
Томохико ГОТО
Синго ЦУРУМИ
Асако ТАДЕНУМА
Original Assignee
Сони Корпорейшн
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Сони Корпорейшн filed Critical Сони Корпорейшн
Publication of RU2012108121A publication Critical patent/RU2012108121A/ru
Application granted granted Critical
Publication of RU2549165C2 publication Critical patent/RU2549165C2/ru

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223Cameras
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005Input arrangements through a video camera
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/22Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of characters or indicia using display control signals derived from coded signals representing the characters or indicia, e.g. with a character-code memory
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/441Acquiring end-user identification, e.g. using personal code sent by the remote control or by inserting a card
    • H04N21/4415Acquiring end-user identification, e.g. using personal code sent by the remote control or by inserting a card using biometric characteristics of the user, e.g. by voice recognition or fingerprint scanning
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/488Data services, e.g. news ticker
    • H04N21/4882Data services, e.g. news ticker for displaying messages, e.g. warnings, reminders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/144Movement detection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/16Analogue secrecy systems; Analogue subscription systems
    • H04N7/173Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/02Improving the quality of display appearance
    • G09G2320/0261Improving the quality of display appearance in the context of movement of objects on the screen or movement of the observer relative to the screen
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/02Improving the quality of display appearance
    • G09G2320/028Improving the quality of display appearance by changing the viewing angle properties, e.g. widening the viewing angle, adapting the viewing angle to the view direction
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • User Interface Of Digital Computer (AREA)
  • Studio Devices (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)

Abstract

Изобретение относится к вычислительной технике, а именно к устройствам и способам отображения движущихся изображений. Техническим результатом является обеспечение безопасности использования устройства отображения детьми за счет определения и корректировки надлежащего положения просмотра ребенка. Предложено устройство отображения. Устройство содержит блок получения изображения, анализатор изображения, контроллер отображения. Блок получения выполнен с возможностью получать движущееся изображение, находящееся в заданной области относительно направления отображения изображения. Анализатор изображения осуществляет анализ движущегося изображения для обнаружения лица пользователя и вычисления положения пользователя, подлежащего направлению в надлежащее положение просмотра. Устройство отображения выполнено с возможностью определения, является ли пользователь ребенком или взрослым на основе лица, и определения, что пользователь подлежит направлению в надлежащее положение просмотра, когда пользователь является ребенком. 2 н. и 6 з.п. ф-лы, 12 ил.

Description

Область техники, к которой относится изобретение
Настоящее изобретение относится к устройству отображения и способу управления.
Уровень техники
За последнее время, в связи с расширением рынка телевизоров с плоским экраном, возрос спрос на устройства отображения изображений, такие как телевизоры с большим экраном для установки в гостиной. В такой ситуации было предложено устройство отображения изображений, содержащее различные функции.
Раскрытие изобретения
Техническая проблема
Поскольку пользователь может просматривать изображение, отображаемое на устройстве отображения изображений из любого положения, иногда пользователь просматривает изображение, отображаемое на устройстве отображения изображения, находясь в неподходящем месте.
Например, иногда ребенок приближается к телевизионному экрану, потому что дети имеют тенденцию слишком легко увлекаться содержанием широковещательной передачи. Когда ребенок непрерывно смотрит изображение, приближаясь к телевизионному экрану, внимание концентрируется, что вызывает риск ухудшения зрения или развития эпилепсии. Когда ребенок чрезмерно приближается к телевизионному экрану, телевизор может упасть, травмируя ребенка. Поскольку дети плохо ощущают такие риски, необходимо держать их подальше от телевизионного экрана. Кроме того, они могут приближаться к телевизионному экрану настолько, что могут разбить участок отображения телевизора, и тогда они могут пораниться частью отображения разбитого телевизора, поэтому необходимо держать их подальше от телевизионного экрана.
В свете вышесказанного, задача настоящего изобретения состоит в обеспечении новых и улучшенных устройств отображения и способа управления, способных предотвращать просмотр пользователем изображений, находящимся в неподходящем для просмотра месте.
Решение проблемы
В соответствии с вариантом настоящего изобретения для решения упомянутой выше задачи, обеспечивается устройство отображения, содержащее: блок получения изображения, получающий движущееся изображение в заданном диапазоне относительно направления отображения изображения; анализатор изображения, анализирующий движущееся изображение, полученное блоком получения изображения и вычисляющий положение цели, которая должна направляться в подходящее положение просмотра; и контроллер отображения, вызывающий выполнение отображение блоком отображения для направления цели к подходящему положению просмотра, когда положение цели, вычисленное анализатором изображения, является неподходящим для просмотра положением.
Контроллер отображения выполнен с возможностью вызывать отображение блоком отображения сообщения, направляющего цель в подходящее положение просмотра.
Контроллер отображения выполнен с возможностью вызова отображения блоком отображения графика, показывающего расстояние между целью и блоком отображения.
Контроллер отображения может понизить яркость устройства отображения.
Устройство отображения может дополнительно содержать контроллер звука, заставляющий блок вывода звука выдавать звуковой сигнал, чтобы направлять цель к подходящему положению просмотра, когда положение цели, обнаруженное анализатором изображения, находится в неподходящем положении просмотра.
Когда при анализе движущегося движения, полученного блоком получения изображения, принимается решение, должна ли цель направляться в подходящее положение просмотра, анализатор изображения может принять решение, определяемое комбинацией определения того, должна ли цель направляться к подходящему положению просмотра, и определения того, нуждается ли цель в направлении к подходящему положению просмотра.
Когда определение, должна ли цель направляться в подходящее положение просмотра, делается в процессе анализа движущегося изображения, полученного блоком получения изображения, анализатор изображения может принять решение, используя историю прежних определений.
Когда положение цели, которая должна направляться к подходящему положению просмотра, вычисляется в процессе анализа движущегося изображения, полученного блоком получения изображения, анализатор изображения может вычислять положение, используя историю прежних вычислений.
В соответствии с другим вариантом настоящего изобретения, чтобы решить упомянутую выше задачу, обеспечивается способ управления, содержащий этапы, на которых: получают движущееся изображение в заданном диапазоне в отношении направления отображения изображения; анализируют полученное движущееся изображение для вычисления положения цели, которая должна направляться в подходящее положение просмотра; и вызывают выполнение блоком отображения для направления цели в подходящее положение просмотра, когда вычисленное положение цели является неподходящим положением просмотра.
Полезные эффекты изобретения
Как описано выше, в соответствии с настоящим изобретением могут быть обеспечены новые и улучшенные устройство отображения и способ управления, способные предотвращать просмотр пользователем изображения при его расположении в неподходящем положении просмотра.
Краткое описание чертежей
Фиг.1 - внешний вид устройства 100 отображения изображения, соответствующего варианту осуществления настоящего изобретения.
Фиг.2 - конфигурация устройства 100 отображения изображения, соответствующего варианту осуществления настоящего изобретения.
Фиг.3 - конфигурация контроллера 110.
Фиг.4(А) - случай, когда пользователь 1 и пользователь 2 находятся в области получения изображения блока 104 получения изображения, и фиг.4(В) - положение [а1, b1] обнаружения лица и размера [w1, h1] лица пользователя 1, и положение [а2, b2] обнаружения лица и размер [w2, h2] лица пользователя 2, которые содержатся в изображении, полученном блоком 104 получения изображения.
Фиг.5(А) - случай, когда пользователь присутствует на эталонном расстоянии d0 и расстоянии d1 в области получения изображения блока 104 получения изображения, фиг.5 (В) - размер лица [w1, h1] пользователя на расстоянии d1 в изображении, полученном блоком 104 получения изображения, и фиг.5(С) - размер эталонного лица [w0, h0] пользователя на эталонном расстоянии d0 в изображении, полученном блоком 104 получения изображения.
Фиг.6 - блок-схема примера процесса предотвращения приближения ребенка, выполняемого устройством 100 получения изображения, соответствующего варианту осуществления настоящего изобретения.
Фиг.7(A)-7(D) - способ направления ребенка к оптимальному положению просмотра.
Фиг.8(А)-8(С) - способ коррекции размера [w0, h0] эталонного лица на эталонном расстоянии d0 при вычислении расстояния до пользователя.
Фиг.9 - флюктуация во времени информации об атрибутах пользователя.
Фиг.10(А) и 10(В) - случай, в котором лицо пользователя выходит из угла зрения блока 104 получения изображения, поскольку пользователь приближается слишком близко к блоку 104 получения изображения.
Фиг.11 - результат определения того, является ли пользователь ребенком.
Фиг.12 - способ определения, является ли пользователь ребенком.
Осуществление изобретения
Далее, предпочтительные варианты осуществления настоящего изобретения будут описаны подробно со ссылкой на приложенные чертежи. Заметим, что в этом описании и чертежах элементы, обладающие, по существу, одной и той же функцией и структурой, обозначаются одними и теми же ссылочными позициями и повторное объяснение опускается.
Объяснение будет сделано в следующем порядке.
1. Вариант осуществления изобретения
1-1. Структура устройства отображения изображения
1-2. Конфигурация контроллера
1-3. Процесс предотвращения приближения ребенка
1. Вариант осуществления изобретения
1-1. Структура устройства отображения изображения
Ниже будет описана конфигурация устройства отображения изображения, соответствующего варианту осуществления настоящего изобретения. На фиг.1 представлен внешний вид устройства 100 отображения изображения, соответствующий варианту осуществления. На фиг.1 показан вид спереди устройства 100 отображения изображения при просмотре изображения с передней стороны. Внешний вид устройства 100 отображения изображения, соответствующего варианту осуществления, будет описан ниже со ссылкой на фиг.1.
Как показано на фиг.1, устройство 100 отображения изображения, подходящее варианту осуществления настоящего изобретения, содержит блоки 104 получения изображения, получающие движущееся изображение на верхнем центральном участке и на правом и левом центральных участках панели 102 отображения, которая отображает неподвижное изображение или движущееся изображение. Блок 104 получения изображения получает движущееся изображение относительно направления, в котором устройство 100 отображения изображения отображает неподвижное изображение или движущееся изображение на панели 102 отображения. Устройство 100 отображения изображения, подходящее варианту осуществления, анализируют изображение, полученное блоком 104 получения изображения, и обнаруживают лицо пользователя в изображении. Устройство 100 отображения изображения анализирует изображение обнаруженного лица пользователя, чтобы вычислить другие фрагменты информации атрибутов, таких как возраст, пол и т.п. Основываясь на вычисленных фрагментах информации атрибутов, устройство 100 отображения изображения определяет, является ли пользователь ребенком или взрослым. Устройство 100 отображения изображения также анализирует изображение обнаруженного лица пользователя, чтобы обнаружить положение обнаружения лица и размер лица. Устройство 100 отображения изображения вычисляет положение пользователя, основываясь на результате определения, является ли пользователь ребенком или взрослым, и результате обнаружения положения обнаружения лица и размера лица пользователя. Одной из характеристик для устройства 100 отображения изображения, соответствующего настоящему варианту осуществления, является то, что когда пользователь, являющийся ребенком, располагающимся в неподходящем положении относительно устройства 100 отображения изображения, например, в пределах 1 метра от панели 102 отображения, изображение или звук выводятся таким образом, чтобы направить ребенка к оптимальному положению просмотра, которое составляет, например, расстояние не менее 1 метра от панели 102 отображения.
Устройство 100 отображения изображения, подходящее варианту осуществления настоящего изобретения, содержит датчик 106 на нижнем центральном участке панели 102 отображения. Датчик 106 обнаруживает присутствие или отсутствие человека перед устройством 100 отображения изображения.
На фиг.1 устройство 100 отображения изображения содержит блоки 104 получения изображения, которые получают движущееся изображение, расположенные в трех точках вокруг панели 102 отображения. Само собой разумеется, что в настоящем изобретении место, в котором блок 104 получения изображения получает движущееся изображение, не ограничивается упомянутыми выше тремя точками. Например, другое устройство обеспечивается независимым от устройства 100 отображения изображения и устройство может быть соединено с устройством 100 отображения изображения для получения движущегося изображения. Количество блоков 104 получения изображения, конечно, не ограничивается тремя и для получения движущегося изображения могут обеспечиваться один, или два, или по меньшей мере четыре блока 104 получения изображения. Количество датчиков 106 не ограничивается одним и могут обеспечиваться два или более датчиков.
Хотя на фиг.1 не показано, устройство 100 отображения изображения может дополнительно содержать блок приема сигнала, который может принимать управляющий сигнал от удаленного контроллера (не показан) инфракрасным или беспроводным способом.
Внешний вид устройства 100 отображения изображения был описан выше со ссылкой на фиг.1. Ниже будет описана конфигурация устройства 100 отображения изображения, соответствующего настоящему изобретению.
На фиг.2 представлена конфигурация устройства 100 отображения изображения, соответствующего варианту осуществления настоящего изобретения. Конфигурация устройства 100 отображения изображения, соответствующая варианту осуществления, будет описана ниже со ссылкой на фиг.2.
Как показано на фиг.2, устройство 100 отображения изображения, подходящее варианту осуществления, содержит панель 102 отображения, блоки 104 получения изображения, датчик 106, громкоговоритель 108 и контроллер 110.
Контроллер 110 выполнен с возможностью наличия в его составе блока 112 ввода изображения, процессора 114 изображения, анализатора 116 состояния просмотра, регистратора 118 состояния просмотра, процессора 120 оптимизации системы и контроллера 122.
Панель 102 отображения является примером блока отображения, соответствующего настоящему изобретению, и отображает неподвижное изображение или движущееся изображение, основываясь на сигнале управления панелью. В варианте осуществления, в качестве панели 102 отображения для отображения неподвижного изображения или движущегося изображения используется жидкокристаллическая панель. Само собой разумеется, панель 102 отображения не ограничивается жидкокристаллической панелью. Панель 102 отображения может отображать неподвижное изображение или движущееся изображение, используя устройство самосветящегося отображения, такое как органический EL-дисплей (электролюминесцентный).
Как описано выше, блоки 104 получения изображения содержатся в верхнем центральном участке и в правом и левом центральных участках панели 102 отображения, которая отображает неподвижное изображение или движущееся изображение. Блоки 104 получения изображения получают движущееся изображение относительно направления, в котором устройство 100 отображения изображения отображает движущееся изображение на панели 102 отображения, когда сигнал управления панелью подается на панель 102 отображения и движущееся изображение отображается на панели 102 отображения. Блок 104 получения изображения может получать движущееся изображение, используя датчик изображения на CCD (устройство с зарядовой связью) или на CMOS (комплементарная МОП-структура). Движущееся изображение, полученное блоком 104 получения изображения, передается на контроллер 110.
Как описано выше, датчик 106 находится на нижнем центральном участке панели 102 отображения, которая отображает неподвижное изображение или движущееся изображение. Например, датчик 106 обнаруживает присутствие или отсутствие человека перед устройством 100 отображения изображения. Датчик 106 может обнаруживать расстояние между устройством 100 отображения изображения и человеком, когда человек присутствует перед устройством 100 отображения изображения. Результат обнаружения и информация о расстоянии от датчика 106 передаются на контроллер 110. Громкоговоритель 108 является примером блока вывода звука, соответствующего изобретению, и выводит звук, основываясь на сигнале вывода звука.
Контроллер 110 управляет работой устройства 100 отображения изображения. Каждый блок контроллера 110 будет описан ниже.
Блок 112 ввода изображения принимает движущееся изображение, полученное блоком 104 получения изображения. Движущееся изображение, принятое блоком 112 ввода изображения, передается на процессор 114 изображения и используется при обработке изображений, выполняемой процессором 114 изображения.
Процессор 114 изображения является примером анализатора изображения, соответствующего настоящему изобретению. Процессор 114 изображения выполняет различные фрагменты обработки изображений для движущегося изображения, которое получается блоком 104 получения изображения и передается от блока 112 ввода изображения. Фрагменты обработки изображений, выполняемые процессором 114 изображения, содержат обработку обнаружения динамического тела, содержащегося в движущемся изображении, полученном блоком 104 получения изображения, обработку обнаружения количества людей, содержащихся в движущемся изображении, и обработку обнаружения лица и выражения лица, которые содержатся в движущемся изображении. Результаты различных фрагментов процесса обработки изображений, выполняемой процессором 114 изображения, передаются на анализатор 116 состояния просмотра, и используются для анализа присутствия или отсутствия человека, который смотрит на устройство 100 отображения изображения, и состояния просмотра и положения просмотра человека, который смотрит на устройство 100 отображения изображения.
В процессоре 114 изображения, например, технология, раскрытая в японской выложенной патентной заявке 2007-65766 (JP-A) или JP-A 2005-44330 может использоваться в качестве процесса обнаружения лица, содержащегося в изображении.
Ниже будет кратко описан процесс обнаружения лица.
Чтобы обнаружить лицо пользователя в изображении, в полученном изображении обнаруживаются положение лица, размер лица и направление лица. Когда положение и размер лица обнаружены, часть изображения лица может быть исключена из изображения. Характерные участки лица (характеристические положения лица), такие как бровь, глаз, нос и рот обнаруживаются в изображении лица с исключениями и в информации о направлении лица. Чтобы обнаружить характеристические положения лица, может быть, например, использован способ под названием ААМ (Активные модели внешнего вида), пригодный для обнаружения характеристического положения.
Когда характеристические положения лица обнаружены, в отношении каждого характеристического положения лица вычисляется локальная характеристическая величина. Локальная характеристическая величина вычисляется и вычисленная локальная характеристическая величина запоминается вместе с изображением лица, что позволяет идентифицировать лицо в изображении, полученном блоком 104 получения изображения. Например, технология, раскрытая в JP-A 2007-65766 или JP-A 2005-44330, может быть использована в способе идентификации лица. Поэтому подробное описание здесь опущено. Является ли лицо в предоставленном изображении мужским или женским или каков возраст человека, может быть определено по изображению лица и характеристическому положению лица. Когда информация о лице ранее зарегистрирована, человек, присутствующий в предоставленном изображении, ищется среди хранящихся в числе зарегистрированных и может быть идентифицирован.
Анализатор 116 состояния просмотра является примером анализатора изображения, соответствующего настоящему изобретению. Анализатор 116 состояния просмотра принимает результаты различных фрагментов процесса обработки изображения, выполняемого процессором 114 изображения, а также результат обнаружения и информацию о расстоянии, определенную датчиком 106, и анализирует, является ли человек, который просматривает изображение, отображаемое устройством 100 отображения изображения, ребенком или взрослым, а также состояние просмотра и положение просмотра человека, который смотрит изображение, используя результаты различных фрагментов обработки изображения, выполняемого процессором 114 изображения, а также результат обнаружения и информацию о расстоянии, определенную датчиком 106. Анализатор 116 состояния просмотра анализирует, является ли человек, который смотрит на изображение, отображаемое устройством 100 отображения изображения, ребенком или взрослым, и состояние просмотра и положение просмотра для человека, который смотрит на изображение, что позволяет устройству 100 отображения изображения понижать яркость панели 102 отображения, управлять отображением содержания на панели 102 отображения, и управлять звуковым содержанием, основываясь на том, является ли человек, который смотрит на устройство 100 отображения изображения, ребенком или взрослым, и на положении человека при просмотре. Результат анализа, полученного в процессе анализа, выполняемого анализатором 116 состояния просмотра, передается на регистратор 118 состояния просмотра и процессор 120 оптимизации системы.
Анализатор 116 состояния просмотра может обнаружить динамическое тело из результата обнаружения и информации о расстоянии, обнаруженной датчиком 106. Альтернативно, динамическое тело может быть представлено целью обнаружения, когда расстояние между датчиком 106 и динамическим телом больше заданного расстояния.
Регистратор 118 состояния просмотра записывает результат анализа, полученный в процессе анализа, выполняемого анализатором 116 состояния просмотра. Результат анализа, полученный анализатором 116 состояния просмотра, записанный в регистраторе 118 состояния просмотра, используется в процессе оптимизации системы, выполняемом процессором 120 оптимизации системы. Результат анализа, полученный анализатором 116 состояния просмотра, записанный регистратором 118 состояния просмотра, может быть передан на внешний сервер 200 сбора информации.
Процессор 120 оптимизации системы является примером анализатора изображения, соответствующего настоящему изобретению. Используя результат анализа, полученный в процессе анализа, выполняемого анализатором 116 состояния просмотра, процессор 120 оптимизации системы вычисляет информацию управления системой, чтобы выполнить процесс оптимизации системы в каждом блоке устройства 100 отображения изображения. Примерами процесса оптимизации системы, выполняемого в каждом блоке устройства 100 отображения изображения, являются управление яркостью панели 102 отображения, управление содержанием отображения на панели 102 отображения, управление звуковым содержанием с выхода громкоговорителя 108 и управление громкостью звука.
Устройство 100 отображения изображения может выполнить процесс предотвращения приближения ребенка, основываясь на информации управления системой, вычисленной процессором 120 оптимизации системы. Информация управления системой, вычисленная процессором 120 оптимизации системы, передается на контроллер 122 системы.
Контроллер 122 системы является примером контроллера отображения и контроллера звука, соответствующих настоящему изобретению, и выполняет процесс оптимизации системы в каждом блоке устройства 100 отображения изображения, основываясь на информации управления системой, вычисленной процессором 120 оптимизации системы. Конкретно, основываясь на информации управления системой, вычисленной системным процессором 120 оптимизации, контроллер 122 системы выполняет управление яркостью панели 102 отображения, управление содержанием отображения на панели 102 отображения, управление звуковым содержанием с выхода громкоговорителя 108, управление громкостью звука и т.п.
Конфигурация устройства 100 отображения изображения, соответствующего варианту осуществления настоящего изобретения, была описана выше со ссылкой на фиг.2. Ниже будет описана подробно структура контроллера 110, содержащегося в устройстве 100 отображения изображения, соответствующего варианту осуществления.
1-2. Конфигурация контроллера
На фиг.3 представлено схематическое изображение конфигурации контроллера 110, содержащегося в устройстве 100 отображения изображения, соответствующем варианту осуществления настоящего изобретения. На фиг.3 конкретно показана конфигурация анализатора 116 состояния просмотра, содержащегося в контроллере 110. Конфигурация анализатора 116 состояния просмотра будет описана ниже со ссылкой на фиг.3.
Как показано на фиг.3, анализатор 116 состояния просмотра выполнен с возможностью использования в его составе устройства 132 вычисления направления/расстояния до пользователя и устройства 134 вычисления атрибутов пользователя.
Устройство 132 вычисления направления/расстояния до пользователя принимает результаты различных фрагментов процесса обработки изображений, выполняемого процессором 114 изображения, а также фрагменты оптической информации, такие как угол зрения и разрешающая способность блока 104 получения изображения, и вычисляет относительное положение (направление [φ1, θ1] и расстояние d1) до пользователя относительно оптической оси блока 104 получения изображения, используя результаты различных фрагментов процесса обработки изображений, выполняемого процессором 114 изображения, а также фрагменты оптической информации о блоке 104 получения изображения. На фиг.4(А) представлено схематическое изображение для случая, в котором в области получения изображения блока 104 получения изображения присутствуют пользователь 1 и пользователь 2, и на фиг.4(В) представлено схематическое изображение положения [а1, b1] обнаружения лица и лица пользователя 1 размером [w1, h1] и положения [а2, b2] обнаружения лица и лица пользователя 2 размером [w2, h2], которые содержатся в изображении, полученном блоком 104 получения изображения. На фиг.5(А) представлено схематическое изображение случая, в котором пользователь находится на эталонном расстоянии d0 и на расстоянии d1 в области получения изображения блока 104 получения изображения, и на фиг.5(В) представлено схематическое изображение лица пользователя размером [w1, h1], находящегося на расстоянии d1 в изображении, полученном блоком 104 получения изображения, и на фиг.5(С) представлено схематическое изображение лица пользователя эталонного размера [w0, h0], находящегося на эталонном расстоянии d0 в изображении, полученном блоком 104 получения изображения.
В отношении направления [φ1, θ1], горизонтальное направление: φ1=φ0*а1 и вертикальное направление: θ1=-θ0*b1 вычисляются для положения [a1, b1] обнаружения лица, нормализованного к полученному размеру изображения [xmax, ymax], и угла [φ0, θ0] зрения блока 104 получения изображения. В отношении расстояния d1, расстояния: d1=d0*(w0/w1) вычисляется для эталонного лица размером [w0, h0] при эталонном расстоянии d0.
Устройство 134 вычисления атрибутов пользователя принимает результаты различных фрагментов процесса обработки изображений, выполняемого процессором 114 изображения, и фрагменты информации об атрибутах, таких как возраст пользователя, которые получает процессор 114 изображения. Устройство 134 вычисления атрибутов пользователя определяет, является ли пользователь ребенком или взрослым, используя результаты различных фрагментов процесса обработки изображений, выполняемого процессором 114 изображения и фрагменты информации об атрибутах, полученной процессором 114 изображения.
На этом этапе процессор 114 изображения передает полученное изображение и информацию об обнаружении лица (такую как положение [a1, b1] обнаружения лица, размер [w1, h1] лица и другие фрагменты информации об атрибутах, таких как возраст и пол) по каждому пользователю, использующего устройство 100 отображения изображения в полученном изображении, на устройство 132 вычисления направления/расстояния до пользователя и на устройство 134 вычисления атрибутов пользователя анализатора 116 состояния просмотра. В анализаторе 116 состояния просмотра устройство 132 вычисления направления/расстояния до пользователя выполняет процесс анализа положения просмотра человека, который смотрит на устройство 100 отображения изображения, используя фрагменты информации, переданные от процессора 114 изображения. Устройство 134 вычисления атрибутов выполняет процесс анализа, является ли человек, который смотрит на устройство 100 отображения изображения, ребенком или взрослым, используя фрагменты информации, переданные от процессора 114 изображения.
Когда ребенок располагается в неподходящем месте просмотра устройства 100 отображения изображения, процессор 120 оптимизации системы вычисляет информацию управления системой для процесса (процесса осуществления направления ребенка) направления ребенка к подходящему положению просмотра устройства 100 отображения изображения, используя результаты фрагментов процесса анализа, выполняемого устройством 132 вычисления направления/расстояния до пользования и устройством 134 вычисления атрибутов пользователя. Примерами процесса, способного направлять ребенка в подходящее положение просмотра устройства 100 отображения изображения, являются процесс отображения сообщения, направляющего в оптимальное положение просмотра, на панели 102 отображения, снижая при этом яркость панели 102 отображения, и процесс отображения графика расстояния приближения и предупреждающего сообщения на панели 102 отображения. Примерами процесса, способного направлять ребенка в подходящее положение просмотра устройства 100 отображения изображения, также являются процесс отображения сообщения, направляющего в оптимальное положение просмотра, на панели 102 отображения с затемнением при этом панели 102 отображения и процесс подачи предупреждающего звукового сигнала через громкоговоритель 108. Информация управления системой для процесса осуществления направления ребенка, которая была вычислена процессором 120 оптимизации системы, передается на контроллер 122 системы и используется в процессе предотвращения приближения ребенка.
Структура контроллера 110, содержащегося в устройстве 100 отображения изображения, соответствующем варианту осуществления настоящего изобретения, была описана выше со ссылкой на фиг.3. Далее будет описан процесс предотвращения приближения ребенка, выполняемый устройством 100 отображения изображения, соответствующим варианту осуществления.
1-3. Процесс предотвращения приближения ребенка
На фиг.6 представлена блок-схема последовательности выполнения операций процесса предотвращения приближения ребенка, выполняемого устройством 100 отображения изображения, соответствующим варианту осуществления настоящего изобретения. Процесс предотвращения приближения ребенка, выполняемый устройством 100 отображения изображения, соответствующего варианта осуществления, будет описан ниже со ссылкой на фиг.6.
Со ссылкой на фиг.6, когда блок 104 получения изображения устройства 100 отображения изображения начинает получать изображение, процессор 114 изображения устройства 100 отображения изображения выполняет процесс обнаружения лица, содержащегося в изображении, полученном блоком 104 получения изображения, и распознает лицо человека, который смотрит на изображение, отображаемое устройством 100 отображения изображения (этап S602).
Затем, используя фрагменты информации, переданные от процессора 114 изображения, анализатор 116 состояния просмотра устройства 100 отображения изображения выполняет процесс анализа положения просмотра человека, который смотрит на устройство 100 отображения изображения, и процесс анализа того, является ли человек ребенком или взрослым. Используя результат процесса анализа, выполняемого анализатором 116 состояния просмотра, процессор 120 оптимизации системы устройства 100 отображения изображения определяет, находится ли ребенок в несоответствующем положении просмотра устройства 100 отображения изображения, а именно, приближается ли ребенок к устройству 100 отображения изображения. Конкретно, процессор 120 оптимизации системы определяет, обнаруживается ли лицо ребенка, и определяет, равен ли размер лица, а именно, размер лица ребенка, заданному или большему значению (этап S604). Предполагается, что эталонный размер лица ребенка в эталонном положении заранее зарегистрирован в устройстве 100 отображения изображения. Заданное значение является размером лица ребенка в несоответствующем положении просмотра устройства 100 отображения изображения.
В результате определения на этапе S604, когда обнаружено лицо ребенка и когда размер лица ребенка равен или больше заданного значения (YES на этапе S604), процессор 120 оптимизации системы определяет, равно ли количество приближений ребенка, обнаруженных в прежнее заданное время, или больше, чем заданное значение (этап S606). Когда количество приближений ребенка, обнаруженных в прежнее заданное время, меньше заданного значения (NO на этапе S606), последовательность выполнения операций возвращается к процессу на этапе S602. Заданное время может быть должным образом быть установлено. Заданное значение может должным образом изменяться в соответствии с установленным заданным временем.
Как результат определения на этапе S606, когда количество приближений ребенка, обнаруженных в прежнее заданное время, равно или больше заданного значения (YES на этапе S606), процессор 120 оптимизации системы принимает решение, что ребенок приближается к устройству 100 отображения изображения (этап S608).
Затем процессор 120 оптимизации системы вычисляет информацию управления системой для процесса осуществления направления ребенка, описанного выше, и передает вычисленную информацию управления системой на контроллер 122 системы. На основе информации управления системой, полученной от процессора 120 оптимизации системы, контроллер 122 системы выполняет управление яркостью панели 102 отображения, управление содержанием отображения на панели 102 отображения, управление звуковым содержанием с выхода громкоговорителя 108, управление громкостью звука и т.п. (этап S610). Как показано на фиг.7(А), сообщение для направления ребенка к оптимальному положению просмотра отображается на панели 102 отображения, и яркость панели 102 отображения в это время снижается. Как показано на фиг.7(В), сообщение для направления ребенка к оптимальному положению просмотра отображается на панели 102 отображения, в то время как панель 102 отображения темнеет. Как показано на фиг.7(С), на панели 102 отображения отображаются график расстояния приближения между устройством 100 отображения изображения и пользователем и предупреждающее сообщение, и при этом яркость панели 102 отображения снижается. Как показано на фиг.7(D), через громкоговоритель 108 выдается предупреждающий звуковой сигнал, и панель 102 отображения при этом темнеет. Удаленный контроллер (не показан) может работать совместно с другими фрагментами процесса. Последовательность выполнения операций возвращается к процессу на этапе S602.
Как результат определения на этапе S604, когда обнаруживается лицо ребенка и когда размер лица ребенка меньше заданного значения (NO на этапе S604), процессор 120 оптимизации системы определяет, был ли обнаружен ребенок, имеющий размер лица, меньший, чем заданное значение, или какое-либо лицо кроме лица ребенка (этап S612). Когда ребенок, имеющий размер лица, меньший, чем заданное значение, или другое лицо, кроме лица ребенка, не были обнаружены (NO на этапе S612), последовательность выполнения операций возвращается к процессу на этапе S602.
Как результат определения на этапе S612, когда обнаруживается ребенок, имеющий размер лица, меньший, чем заданное значение, или другое лицо, кроме лица ребенка, (YES на этапе S612), процессор 120 оптимизации системы определяет, равно ли или меньше количество приближений ребенка, обнаруженных в прежнее заданное время, чем заданное значение (этап S614). Когда количество приближений ребенка, обнаруженных в прежнее заданное время, больше, чем заданное значение (NO на этапе S614), последовательность выполнения операций возвращается к процессу на этапе S602.
Как результат определения на этапе S614, когда количество приближений ребенка, обнаруженных в прежнее заданное время, равно или меньше, чем заданное значение (YES на этапе S614), процессор 120 оптимизации системы принимает решение, что ребенок не приближается к устройству 100 отображения изображения (этап S616).
Впоследствии того, что контроллер 122 системы выполняет управление яркостью панели 102 отображения, управление содержанием отображения на панели 102 отображения, управление звуковым содержанием с выхода громкоговорителя, управление громкостью звука и т.п., основываясь на информации управления системой для процесса осуществления направления ребенка, процессор 120 оптимизации системы вычисляет информацию управления системой, чтобы вернуться к обычному процессу отображения, и передает вычисленную информацию управления системой на контроллер 122 системы. Основываясь на информации управления системой, принятой от процессора 120 оптимизации системы, контроллер 122 системы выполняет процесс возвращения яркости и содержания отображения панели 102 отображения и звукового содержания с выхода громкоговорителя 108 в нормальное состояние (этап S618). Затем последовательность выполнения операций возвращается к процессу на этапе S602.
В соответствии с процессом предотвращения приближения ребенка, показанным на фиг.6, когда количество приближений ребенка, обнаруженных в прежнее заданное время, равно или больше заданного значения, процессор 120 оптимизации системы принимает решение, что ребенок приближается к устройству 100 отображения изображения. Контроллер 122 системы выполняет процесс направления ребенка к подходящему положению просмотра устройства 100 отображения изображения, например, процесс, в котором направляющее сообщение отображается на панели 102 отображения, и при этом яркость панели 102 отображения снижается, как показано на фиг.7(А). Поэтому можно препятствовать приближению ребенка к устройству 100 отображения изображения и просмотру и слушанию им в неподходящем положении для устройства 100 отображения изображения. Соответственно, можно предотвратить ухудшение зрения и развитие эпилепсии, связанные с тем фактом, что внимание ребенка фиксируется, когда ребенок непрерывно смотрит на изображение, приближаясь к устройству 100 отображения изображения. Падение устройства 100 отображения изображения, которое вызывается чрезмерно близким приближением ребенка к устройству 100 отображения изображения, может быть предотвращено. Риск, что приближение ребенка к устройству 100 отображения изображения может привести к тому, что блок отображения устройства 100 отображения изображения разобьется, или риск, что ребенок поранится разбитым блоком отображения устройства 100 отображения устройства, может быть исключен.
В варианте осуществления, показанном на фиг.8(А)-8(С), при вычислении положения просмотра пользователя, вариация размера [w0, h0] эталонного лица на эталонном расстоянии d0 может корректироваться с использованием следующей корректировочной таблицы. Например, таблица данных среднего размера лица в возрасте пользователя запоминается заранее, исходя из информации об атрибуте возраста пользователя, размер [w0, h0] эталонного лица устанавливается равным размеру [w0C, h0C] лица, меньшему, чем размер эталонного лица, как показано на фиг.8(С), когда пользователь является ребенком, и размер [w0, h0] эталонного лица устанавливается равным размеру [w0A, h0A] лица, большему, чем размер эталонного лица, как показано на фиг.8(В), когда пользователь является взрослым.
В варианте осуществления, при вычислении положения просмотра пользователя, когда пользователь, использующий устройство 100 отображения изображения, например, семья в месте установки устройства 100 отображения изображения, заранее регистрируется в устройстве 100 отображения изображения, размер лица каждого пользователя может быть зарегистрирован в таблице данных. Поэтому размер эталонного лица может изменяться для каждого пользователя. Способ регистрации размера лица каждого пользователя может осуществляться таким способом, что изображение пользователя получают вместе с информацией о расстоянии в сочетании с другим датчиком расстояния (не показан), так что изображение пользователя получается после того, как пользователь направляется к заданному расстоянию, или так, что изображение пользователя получают на одном и том же расстоянии по шкале, которая служит для отсчета.
Как показано на фиг.9, даже для одного и того же пользователя информация об атрибутах пользователя изменяется во времени. Поэтому в варианте осуществления, когда процессор 120 оптимизации системы определяет, является ли пользователь ребенком или взрослым, определение делается, основываясь на тенденции временной последовательности, а именно, используя прежнюю историю определений. Например, как показано на фиг.9, предполагается, что информация об атрибутах пользователя является информацией об атрибутах ребенка в момент времени t1, что информация об атрибутах пользователя является информацией об атрибутах взрослого в момент времени t2, что информация об атрибутах пользователя является информацией об атрибутах ребенка в момент времени t3. В этом случае, в течение заданного времени между моментом времени t1 и моментом времени t3 может быть сделано определение, что пользователем является ребенок, потому что определение, что пользователем является ребенок, было сделано заданное количество раз, например, по меньшей мере два раза.
В варианте осуществления определение приближения ребенка, когда количество приближений ребенка, обнаруженных в прежнее заданное время, равно или больше заданного значения. Однако, как показано на фиг.10(А) и 10 (В), пользователь может иногда чрезмерно близко приблизиться к блоку 104 получения изображения, как показано в момент времени t3, и лицо пользователя выходит из угла зрения блока 104 получения изображения, за счет чего лицо обнаруживается с трудом. Поэтому, в варианте осуществления, использующем фрагменты информации в моменты времени t1 и t2 непосредственно перед моментом времени t3, в который лицо пользователя не может больше обнаруживаться, а именно, историю вычисления прежних положений, определение того, что пользователь приближается к устройству 100 отображения изображения в области получения изображения блока 104 получения изображения, может быть сделано, вычисляя или предполагая положение в момент времени t3. Когда часть тела пользователя закрывает блок 104 получения изображения, точность определения того, приближается ли упомянутый выше пользователь к устройству 100 отображения изображения в области получения изображения блока 104 получения изображения может быть улучшена, например, за счет определения разности с общим фоном или обнаружения динамического тела (размера области движения).
В варианте осуществления, когда определение того, является ли пользователь ребенком или взрослым, делается, используя информацию об атрибутах возраста пользователя и т.п., показатель ложного определения снижается при определении ребенка путем объединения определения того, является ли пользователь ребенком, и определения того, является ли пользователь взрослым. Способ снижения показателя ложного определения при определении ребенка будет конкретно описан ниже.
Как показано на фиг.11, как результаты определения того, является ли пользователь ребенком, возможны следующие четыре случая.
Случай A: TruePositive (определение, что пользователь - ребенок, было сделано правильно),
Случай В: FalseNegative (определение, что пользователь - ребенок, не было сделано, когда такое определение должно было бы быть сделано),
Случай С: FalsePositive (определение, что пользователь - ребенок, было сделано, когда такое определение не должно было быть сделано),
Случай D: TrueNegative (определение, что пользователь - не ребенок, было сделано правильно).
В варианте осуществления, чтобы определение, что ребенок приближается к устройству 100 отображения изображения, было сделано правильно, случай С, в котором сделано определение, что пользователь - ребенок, когда такое определение должно было быть сделано, должен быть исключен при определении, является ли пользователь ребенком. Например, предполагается, что 85% при FPR10% является точностью определения для определения того, является ли пользователь ребенком. Здесь предполагается, что FPR (показатель ошибочного определения)=Случай С/(Случай С+Случай D), и точность=Случай А/(Случай А+Случай С).
В случае, когда определение того, является ли пользователь ребенком, сделано по 100 человекам, которые действительно являются детьми, и по 150 человекам, которые действительно являются взрослыми, при приведенной выше точности, когда определяется, что 100 человек являются детьми, 85 человек подпадают под случай А, 15 человек подпадают под случай В, 15 человек подпадают под случай С и 135 человек подпадают под случай D. Соответственно, 85 человек определяются правильно как дети из числа 100 человек, которые в действительности являются детьми, и 15 человек определяются ложно как дети из числа 150 человек, которые в действительности являются взрослыми.
В варианте осуществления, как показано на фиг.12, определение того, является ли пользователь взрослым, делается после определения того, является ли пользователь ребенком. Например, как описано выше, 85 фактических детей были определены как дети, и 15 фактических взрослых были определены как дети при определении того, является ли пользователь ребенком. В случае, когда они затем подвергаются определению, в котором пользователь является взрослым, потому что ожидается, что человек, который в действительности является взрослым, более вероятно, должен определяться как взрослый по сравнению с человеком, который в действительности является ребенком, например, можно ожидать, что 10 человек ложно определяются как взрослые среди 85 фактических детей и что 10 человек правильно определяются как взрослые среди 15 фактических взрослых. Соответственно, 75 человек правильно определяются как невзрослые среди 85 фактических детей, и 5 человек ложно определяются как невзрослые из 15 фактических взрослых. Таким образом, в варианте осуществления, определение того, является ли пользователь ребенком, делается путем объединения определения того, является ли пользователь ребенком, и определением того, является ли пользователь взрослым. Поэтому, как показано на фиг.12, точность определения при определении того, является ли пользователь ребенком, может быть улучшена относительно точности определения 85% с определением исключительно того, является ли пользователь ребенком, до точности определения 93,75% при объединении определения того, является ли пользователь ребенком, и определения того, является ли пользователь взрослым.
Приведенная выше последовательность фрагментов процесса может выполняться посредством аппаратурного обеспечения или программного обеспечения. В случае, когда ряд последовательность фрагментов процесса может выполняться с помощью программного обеспечения, программа, составляющая программное обеспечение устанавливается с носителя данных программы в компьютер, входящий в состав специализированного аппаратурного обеспечения. Альтернативно, программа устанавливается с универсального персонального компьютера, который может выполнять различные функции, устанавливая различные программы.
Предпочтительные варианты осуществления настоящего изобретения были описаны выше со ссылкой на сопроводительные чертежи, однако настоящее изобретение, конечно, не ограничивается упомянутыми выше примерами. Специалист в данной области техники может найти различные альтернативы и изменения в пределах объема прилагаемой формулы изобретения и следует понимать, что они, естественно, будут попадать в рамки объема настоящего изобретения.
Перечень ссылочных позиций
100 Устройство отображения изображения
102 Панель отображения
104 Блок получения изображения
106 Датчик
108 Громкоговоритель
110 Контроллер
112 Блок ввода изображения
114 Процессор изображения
116 Анализатор состояния просмотра
118 Регистратор состояния просмотра
120 Процессор оптимизации системы
122 Контроллер системы
132 Устройство вычисления направления/расстояния до пользователя
134 Устройство вычисления атрибутов пользователя

Claims (8)

1. Устройство отображения, содержащее:
блок получения изображения, выполненный с возможностью получения движущегося изображения, находящегося в заданной области относительно направления отображения изображения;
анализатор изображения, выполненный с возможностью анализа движущегося изображения, полученного блоком получения изображения, для обнаружения лица пользователя в движущемся изображении и вычисления положения пользователя, подлежащего направлению в надлежащее положение просмотра; и
контроллер отображения, выполненный с возможностью вызова отображения блоком отображения для направления пользователя в надлежащее положение просмотра, если положение пользователя, вычисленное анализатором изображения, находится в ненадлежащем положении просмотра,
при этом указанное устройство отображения характеризуется тем, что выполнено с возможностью определения, является ли пользователь ребенком или взрослым на основе лица и определения, что пользователь подлежит направлению в надлежащее положение просмотра, когда пользователь является ребенком.
2. Устройство отображения по п. 1, в котором контроллер отображения выполнен с возможностью вызова отображения блоком отображения сообщения, направляющего цель в надлежащее положение просмотра.
3. Устройство отображения по п. 1, в котором контроллер отображения выполнен с возможностью вызова отображения блоком отображения графика, показывающего расстояние между пользователем и блоком отображения.
4. Устройство отображения по п. 1, в котором контроллер отображения выполнен с возможностью понижения яркости блока отображения.
5. Устройство отображения по п. 1, дополнительно содержащее контроллер звука, выполненный с возможностью вызова вывода звукового сигнала блоком вывода звука, направляющего пользователя в подходящее положение просмотра, если положение пользователя, обнаруженное анализатором изображения, находится в ненадлежащем положении просмотра, когда пользователем является ребенок.
6. Устройство отображения по п. 1, в котором анализатор изображения выполнен с возможностью определять на основании истории прежних определений необходимость направления пользователя в надлежащее положение просмотра при анализе движущегося изображения, полученного блоком получения изображения.
7. Устройство отображения по п. 1, в котором анализатор изображения выполнен с возможностью на основании истории прежних вычислений вычислять положение при определении необходимости направления пользователя в надлежащее положение просмотра при анализе движущегося изображения, полученного блоком получения изображения.
8. Способ управления устройством отображения, содержащий этапы, на которых:
получают движущееся изображение в заданной области относительно направления отображения изображения;
анализируют полученное движущееся изображение для обнаружения лица пользователя в движущемся изображении;
вычисляют позицию пользователя подлежащего направлению в надлежащее положение просмотра; и
вызывают отображение блоком отображения для направления пользователя в надлежащее положение просмотра, если вычисленное положение пользователя находится в ненадлежащем положении просмотра,
при этом этап вычисления содержит подэтапы, на которых определяют, является ли пользователь ребенком или взрослым на основе лица и определения, что пользователь подлежит направлению в надлежащее положение просмотра, когда пользователем является ребенок.
RU2012108121/08A 2009-09-11 2010-07-22 Устройство отображения и способ управления RU2549165C2 (ru)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2009-210988 2009-09-11
JP2009210988A JP5418093B2 (ja) 2009-09-11 2009-09-11 表示装置および制御方法
PCT/JP2010/062310 WO2011030624A1 (ja) 2009-09-11 2010-07-22 表示装置および制御方法

Publications (2)

Publication Number Publication Date
RU2012108121A RU2012108121A (ru) 2013-09-10
RU2549165C2 true RU2549165C2 (ru) 2015-04-20

Family

ID=43732298

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2012108121/08A RU2549165C2 (ru) 2009-09-11 2010-07-22 Устройство отображения и способ управления

Country Status (9)

Country Link
US (2) US8913007B2 (ru)
EP (1) EP2477183B1 (ru)
JP (1) JP5418093B2 (ru)
KR (1) KR101719845B1 (ru)
CN (2) CN102577425B (ru)
BR (1) BR112012004830B8 (ru)
IN (1) IN2012DN01889A (ru)
RU (1) RU2549165C2 (ru)
WO (1) WO2011030624A1 (ru)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU195746U1 (ru) * 2017-01-03 2020-02-05 Бюн Чхул МУН Устройство управления просмотром телевизора

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012028884A1 (en) * 2010-09-02 2012-03-08 Elliptic Laboratories As Motion feedback
JP5011431B2 (ja) * 2010-12-21 2012-08-29 株式会社東芝 映像信号処理装置および処理方法ならびに映像表示装置
JP5810590B2 (ja) * 2011-04-01 2015-11-11 セイコーエプソン株式会社 プロジェクターおよび投写方法
JP2015200682A (ja) * 2012-08-30 2015-11-12 シャープ株式会社 表示装置及びその制御方法
JP6058978B2 (ja) * 2012-11-19 2017-01-11 サターン ライセンシング エルエルシーSaturn Licensing LLC 画像処理装置及び画像処理方法、撮影装置、並びにコンピューター・プログラム
KR102121592B1 (ko) * 2013-05-31 2020-06-10 삼성전자주식회사 시력 보호 방법 및 장치
CN104244053A (zh) * 2013-06-18 2014-12-24 联想(北京)有限公司 一种输出控制方法和电子设备
JP2015082753A (ja) * 2013-10-23 2015-04-27 キヤノン株式会社 情報処理システム、撮影装置及びその制御方法、並びにプログラム
KR20150104711A (ko) * 2014-03-06 2015-09-16 엘지전자 주식회사 디스플레이 장치 및 그의 동작 방법
KR101658629B1 (ko) * 2014-05-02 2016-09-22 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
KR102151206B1 (ko) * 2014-07-07 2020-09-03 삼성디스플레이 주식회사 이동 단말기 및 그 제어방법
CN106469036B (zh) * 2015-08-14 2021-02-05 腾讯科技(深圳)有限公司 信息显示方法及客户端
CN105549967A (zh) * 2015-12-09 2016-05-04 北京用友政务软件有限公司 一种智能电子设备预防近视的方法
EP3493533B1 (en) 2016-08-01 2024-04-03 Sony Group Corporation Information processing device, information processing method, and program
IT201700044945A1 (it) * 2017-04-26 2018-10-26 Sebastiano Borrelli television hight interactive sistem
JP7312598B2 (ja) * 2019-04-24 2023-07-21 セコム株式会社 監視表示装置
JP2021107886A (ja) * 2019-12-27 2021-07-29 富士フイルムビジネスイノベーション株式会社 制御装置およびプログラム
JP7041211B2 (ja) * 2020-08-03 2022-03-23 パラマウントベッド株式会社 画像表示制御装置、画像表示システム及びプログラム
JP7011762B1 (ja) 2021-08-17 2022-01-27 株式会社アップリーチ 情報処理装置、情報処理方法及びプログラム
CN113992954A (zh) * 2021-10-25 2022-01-28 深圳Tcl数字技术有限公司 观看距离提示方法、装置、电视设备和存储介质
TW202332246A (zh) * 2021-12-20 2023-08-01 日商索尼集團公司 顯示裝置、顯示方法及顯示程式

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6076928A (en) * 1998-06-15 2000-06-20 Fateh; Sina Ideal visual ergonomic system for computer users
RU2004123248A (ru) * 2004-07-29 2006-02-27 Самсунг Электроникс Ко., Лтд. (KR) Система и способ отслеживания объекта
RU2347274C2 (ru) * 2003-03-25 2009-02-20 Ай Джи Ти Способы и аппарат для ограничения доступа к играм с использованием биометрических данных

Family Cites Families (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07118008B2 (ja) 1989-08-18 1995-12-18 松下電器産業株式会社 画像変形方法と画像変形装置
ATE192275T1 (de) * 1993-12-03 2000-05-15 Terumo Corp Stereoskopisches bildanzeigesystem
JPH07303195A (ja) 1994-05-09 1995-11-14 Kazuo Matsumura 画像表示装置の制御装置
JP3350721B2 (ja) 1994-10-07 2002-11-25 シャープ株式会社 着衣量測定装置および着衣量計測方法
GB2306826A (en) * 1995-10-18 1997-05-07 Sharp Kk Display, method of calibrating an observer tracking display and observer tracking autostereoscopic 3D display
JP3075971B2 (ja) 1995-12-28 2000-08-14 三洋電機株式会社 ラジオ受信機
JP3968477B2 (ja) * 1997-07-07 2007-08-29 ソニー株式会社 情報入力装置及び情報入力方法
JP2000152109A (ja) * 1998-11-11 2000-05-30 Matsushita Electric Ind Co Ltd テレビ受像機
JP2001016514A (ja) * 1999-06-30 2001-01-19 Matsushita Electric Ind Co Ltd 認識機能付表示装置
TW455769B (en) * 1999-08-18 2001-09-21 Jian Huei Jiuan Eye-protection method and apparatus set up for monitor screen
JP3788394B2 (ja) * 2002-06-13 2006-06-21 ソニー株式会社 撮像装置および撮像方法、並びに表示装置および表示方法
JP2005044330A (ja) 2003-07-24 2005-02-17 Univ Of California San Diego 弱仮説生成装置及び方法、学習装置及び方法、検出装置及び方法、表情学習装置及び方法、表情認識装置及び方法、並びにロボット装置
JP3781028B2 (ja) * 2003-10-01 2006-05-31 松下電器産業株式会社 目画像撮像装置
US7176888B2 (en) * 2004-03-23 2007-02-13 Fujitsu Limited Selective engagement of motion detection
JP3918854B2 (ja) * 2004-09-06 2007-05-23 オムロン株式会社 基板検査方法および基板検査装置
US20090058845A1 (en) * 2004-10-20 2009-03-05 Yasuhiro Fukuda Display device
JP4013943B2 (ja) 2004-11-22 2007-11-28 船井電機株式会社 放送信号受信システム
WO2006136958A2 (en) * 2005-01-25 2006-12-28 Dspv, Ltd. System and method of improving the legibility and applicability of document pictures using form based image enhancement
EP1851727A4 (en) * 2005-02-23 2008-12-03 Craig Summers AUTOMATIC SCENES MODELING FOR 3D CAMERA AND 3D VIDEO
JP2007006165A (ja) * 2005-06-24 2007-01-11 Fujifilm Holdings Corp 撮像装置、撮像方法、及び撮像プログラム
JP4165540B2 (ja) * 2005-06-27 2008-10-15 セイコーエプソン株式会社 投写画像の位置調整方法
JP4595750B2 (ja) 2005-08-29 2010-12-08 ソニー株式会社 画像処理装置および方法、並びにプログラム
JP4225307B2 (ja) * 2005-09-13 2009-02-18 船井電機株式会社 テレビジョン受信装置
US8218080B2 (en) * 2005-12-05 2012-07-10 Samsung Electronics Co., Ltd. Personal settings, parental control, and energy saving control of television with digital video camera
JP2007158787A (ja) * 2005-12-06 2007-06-21 Sharp Corp 表示装置及び表示制御方法
JP2007236668A (ja) * 2006-03-09 2007-09-20 Matsushita Electric Ind Co Ltd 撮影装置および認証装置ならびに撮影方法
US8340365B2 (en) * 2006-11-20 2012-12-25 Sony Mobile Communications Ab Using image recognition for controlling display lighting
JP5045136B2 (ja) * 2007-02-14 2012-10-10 三菱電機株式会社 大画面表示装置
US20080316372A1 (en) 2007-06-20 2008-12-25 Ning Xu Video display enhancement based on viewer characteristics
CN101409784A (zh) * 2007-10-10 2009-04-15 联想(北京)有限公司 摄像装置及信息提示装置
US9986293B2 (en) * 2007-11-21 2018-05-29 Qualcomm Incorporated Device access control
NO331839B1 (no) * 2008-05-30 2012-04-16 Cisco Systems Int Sarl Fremgangsmate for a fremvise et bilde pa et display
RU2493613C2 (ru) 2008-08-22 2013-09-20 Сони Корпорейшн Устройство воспроизведения изображений и способ управления
US20100295782A1 (en) * 2009-05-21 2010-11-25 Yehuda Binder System and method for control based on face ore hand gesture detection
CN102804786A (zh) * 2009-06-16 2012-11-28 Lg电子株式会社 观看范围通知方法以及用于实现该方法的电视接收器
JP5263092B2 (ja) * 2009-09-07 2013-08-14 ソニー株式会社 表示装置および制御方法
JP5568929B2 (ja) * 2009-09-15 2014-08-13 ソニー株式会社 表示装置および制御方法
WO2011036813A1 (ja) * 2009-09-28 2011-03-31 株式会社 東芝 立体映像表示方法及び立体映像表示装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6076928A (en) * 1998-06-15 2000-06-20 Fateh; Sina Ideal visual ergonomic system for computer users
RU2347274C2 (ru) * 2003-03-25 2009-02-20 Ай Джи Ти Способы и аппарат для ограничения доступа к играм с использованием биометрических данных
RU2004123248A (ru) * 2004-07-29 2006-02-27 Самсунг Электроникс Ко., Лтд. (KR) Система и способ отслеживания объекта

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU195746U1 (ru) * 2017-01-03 2020-02-05 Бюн Чхул МУН Устройство управления просмотром телевизора

Also Published As

Publication number Publication date
JP2011059528A (ja) 2011-03-24
WO2011030624A1 (ja) 2011-03-17
EP2477183A4 (en) 2013-09-11
RU2012108121A (ru) 2013-09-10
US9298258B2 (en) 2016-03-29
BR112012004830B8 (pt) 2020-11-24
KR20120064070A (ko) 2012-06-18
CN102577425B (zh) 2015-02-04
US20150054738A1 (en) 2015-02-26
JP5418093B2 (ja) 2014-02-19
CN104602120A (zh) 2015-05-06
EP2477183A1 (en) 2012-07-18
CN102577425A (zh) 2012-07-11
KR101719845B1 (ko) 2017-03-24
US8913007B2 (en) 2014-12-16
IN2012DN01889A (ru) 2015-07-24
CN104602120B (zh) 2019-01-15
EP2477183B1 (en) 2018-03-28
BR112012004830B1 (pt) 2020-10-27
BR112012004830A2 (pt) 2016-03-15
US20120218179A1 (en) 2012-08-30

Similar Documents

Publication Publication Date Title
RU2549165C2 (ru) Устройство отображения и способ управления
US10290281B2 (en) Display device and control method
EP3143477B1 (en) System and method for providing haptic feedback to assist in capturing images
US9489043B2 (en) Display device and controlling method
US7835551B2 (en) Television set and authentication device
KR101922589B1 (ko) 디스플레이장치 및 그 시선추적방법
US20120206340A1 (en) Display method and display apparatus
US20120076428A1 (en) Information processing device, information processing method, and program
CN101540052B (zh) 图像信号处理器和图像信号处理方法
KR20170001430A (ko) 디스플레이 장치 및 이의 영상 보정 방법
JPH1124603A (ja) 情報表示装置及び情報収集装置
US20120038744A1 (en) Automatic 3d content detection
US20220004748A1 (en) Video display method, device and system, and video camera
JP2000278626A (ja) マルチ画面音声出力制御装置
JP5720758B2 (ja) 表示装置および制御方法
CN112004151A (zh) 电视设备的控制方法、电视设备及可读存储介质
US20140247393A1 (en) Television and method for displaying program images and video images simultaneously
CN114845165A (zh) 界面显示方法、装置、设备及可读存储介质
CN116048251A (zh) Vr显示方法、装置、电子设备及可读存储介质
CN116797984A (zh) 信息处理方法及装置、电子设备及存储介质
CN113971220A (zh) 一种基于人眼识别关注度的方法及多媒体终端
KR20160073812A (ko) 표시장치 및 그의 구동방법
JP2015038537A (ja) 映像表示装置およびその制御方法