KR20120048530A - 표시 장치 및 제어 방법 - Google Patents

Abstract

본 발명의 과제는, 유저의 동체 검출과 얼굴 검출을 조합함으로써, 전력 절약 제어를 고정밀도로, 또한 효과적으로 실행하는 것이 가능한, 표시 장치 및 제어 방법을 제공하는 것이다.
화상 표시 방향에 대한 소정의 범위의 동화상을 촬상하는 촬상부와, 화상 표시 방향에 대한 소정의 범위의 동체의 존재의 유무를 검출하는 동체 검출부와, 촬상부가 촬상한 동화상을 해석하여 얼굴의 존재의 유무를 검출하는 화상 해석부와, 화상 해석부가 검출한 얼굴의 존재의 유무와, 검출부가 검출한 동체의 존재의 유무를 조합함으로써 설정되는 복수의 모드에 의해 각각 다른 패턴으로 소비 전력을 제어하는 전력 제어부를 구비하는 표시 장치가 제공된다.

Description

표시 장치 및 제어 방법{DISPLAY DEVICE AND METHOD FOR CONTROLLING SAME}

본 발명은 표시 장치 및 제어 방법에 관한 것이다.

JEITA(Japan Electronics and Information Technology Industries Association; 사단 법인 전자 정보 기술 산업 협회)의 조사에 따르면, 하루 동안의 텔레비전의 평균 시청 시간은 4.5시간이다. 그러나, 요즘에는 라이프 스타일의 변화도 있고, 그 4.5시간 동안, 항상 텔레비전을 계속해서 보고 있는 것이 아닌 것을 알고 있다.

예를 들어, 아침에 회사나 학교에 갈 준비를 하면서 또는 식사를 하면서 텔레비전을 시청하는 등에서는, 텔레비전의 화면을 계속 보고 있는 상태가 아닌, 일기예보 등의 음성으로부터의 입력으로 충분한 프로그램이 방송되고 있을 때에는 시선을 떼고 있거나, 다른 사람과 이야기를 하고 있거나 하는 경우가 있다. 그리고, 시사 뉴스나 스포츠 뉴스 등에서 흘러나오는 흥미있는 키워드를 계기로 하여, 다시 텔레비전의 화면을 보기 시작하는 등의 행동을 하는 경우가 많다.

즉, 대표적인 텔레비전의 시청 형태로서, 아침에는 시계 대신에 텔레비전이 켜져 있을 뿐이고, 또한 최근에는, 밤에 PC(퍼스널 컴퓨터)를 조작하면서 텔레비전의 소리를 듣고 있는, 소위 『병행 시청』이 증가하고 있는 상황에 있다. 이와 같은 『병행 시청』이 행해지고 있는 경우에는, 텔레비전의 화면이 켜진 상태에서는 불필요하게 전력을 소비하고 있게 된다. 따라서, 텔레비전 화면의 주변부에 촬상 소자를 설치하여, 이 촬상 소자에 의해 얼굴 검출을 행함으로써, 유저의 시청 상태를 해석하여 시청 상태에 최적인 전력 절약 제어를 실행하는 표시 장치가 제안되고 있다.

그러나, 얼굴 검출만으로의 전력 절약 제어에서는, 텔레비전의 설치 환경에 따라 유저의 얼굴을 검출하기 어려운 경우, 혹은 일정 시간 한눈 팔고 있는 경우 등, 표시 장치를 계속 이용하고 싶어하는 경우에 있어서도, 시청, 다시 말해 얼굴이 존재하지 않는다고 판단하여 표시가 꺼져 버릴지 모른다는 문제가 있었다. 또한, 얼굴 검출 처리는 동체 검출과 비교하여 상대적으로 화상 처리 시간이 길어지기 때문에, 계산 속도나 리소스에 제한이 있는 환경에서는, 유저가 시청을 위하여 표시 장치 앞으로 온 후 화상이 표시될 때까지의 반응에 지연이 발생한다는 문제가 있었다.

또한, 촬상 소자나 초전형 적외선 소자(pyroelectric infrared element)에 의해 동체 또는 유저의 동작 검출을 행하여, 유저의 시청 상태를 해석하고, 전력 절약 제어를 행하는 표시 장치도 있지만, 유저가 움직이지 않고 시청을 계속하는 경우, 잘못해서 유저가 존재하지 않는다고 판단되어, 화면 표시가 꺼져 버리는 문제도 있었다. 이와 같은 오동작을 피하기 위하여, 결과적으로 전력 절약 제어를 개시할 때까지의 시간을 늘이게 되어, 전력 절약 효과가 떨어지고 있었다.

따라서, 본 발명은, 상기 문제를 감안하여 이루어진 것이며, 본 발명의 목적으로 하는 바는, 유저의 동체 검출과 얼굴 검출을 조합함으로써, 전력 절약 제어를 고정밀도로, 또한 효과적으로 실행하는 것이 가능한, 신규 또한 개량된 표시 장치 및 제어 방법을 제공하는 것에 있다.

상기 과제를 해결하기 위하여, 본 발명의 어느 관점에 따르면, 화상 표시 방향에 대한 소정의 범위의 동화상을 촬상하는 촬상부와, 화상 표시 방향에 대한 소정의 범위의 동체의 존재의 유무를 검출하는 동체 검출부와, 상기 촬상부가 촬상한 동화상을 해석하여 얼굴의 존재의 유무를 검출하는 화상 해석부와, 상기 화상 해석부가 검출한 얼굴의 존재의 유무와, 상기 검출부가 검출한 동체의 존재의 유무를 조합함으로써 설정되는 복수의 모드에 의해 각각 다른 패턴으로 소비 전력을 제어하는 전력 제어부를 구비하는, 표시 장치가 제공된다.

상기 전력 제어부는, 상기 화상 해석부가 검출한 얼굴의 존재의 유무에 의해서만 표시 장치의 소비 전력을 제어하고, 상기 화상 해석부가 얼굴의 존재를 소정 시간 검출할 수 없었던 경우에 소비 전력을 저하시키는 제1 모드를 갖고 있어도 된다.

상기 전력 제어부는, 상기 화상 해석부가 검출한 얼굴의 존재의 유무와, 상기 동체 검출부가 검출한 동체의 존재의 유무를 이용하여 표시 장치의 소비 전력을 제어하고, 상기 화상 해석부가 얼굴의 존재를 제1 소정의 시간 검출할 수 없었던 경우에 소정의 레벨까지 소비 전력을 저하시키고, 상기 저하 후, 상기 동체 검출부가 동체의 존재를 제2 소정의 시간 검출할 수 없었던 경우에 더욱 소비 전력을 저하시키는 제2 모드를 가져도 된다.

상기 전력 제어부는, 상기 화상 해석부가 검출한 얼굴의 존재의 유무와, 상기 동체 검출부가 검출한 동체의 존재의 유무를 이용하여 표시 장치의 소비 전력을 제어하고, 상기 화상 해석부가 얼굴의 존재를 소정 시간 검출할 수 없고, 또한 상기 동체 검출부가 동체의 존재를 상기 소정 시간 검출할 수 없었던 경우에 소비 전력을 저하시키는 제3 모드를 가져도 된다.

상기 전력 제어부는, 화상을 표시하는 표시 패널의 휘도를 높이거나 낮춤으로써 표시 장치의 소비 전력을 제어해도 된다.

상기 전력 제어부는, 음성을 표시하는 스피커의 음량을 높이거나 낮춤으로써 표시 장치의 소비 전력을 제어해도 된다.

상기 전력 제어부는, 표시 화상을 고화질화하기 위한 회로의 동작을 제어함으로써 소비 전력을 제어해도 된다.

상기 전력 제어부가 표시 장치의 소비 전력의 제어를 정지하는 경우에, 소비 전력의 제어를 정지하고 있는 것을 통지하는 통지부를 더 구비하고 있어도 된다.

상기 화상 해석부는, 상기 촬상부가 촬상한 동화상의 해석에 따라 개인을 특정하고, 상기 전력 제어부는 상기 화상 해석부가 특정한 개인에 따라서 상기 모드를 자동적으로 선택해도 된다.

상기 전력 제어부는, 표시되는 콘텐츠의 내용에 따라서 상기 모드를 자동적으로 선택해도 된다.

상기 전력 제어부는, 전원이 투입된 후 최초로 얼굴 또는 동체가 검출될 때까지는, 표시 장치의 소비 전력의 제어를 개시하지 않도록 해도 된다.

또한, 상기 과제를 해결하기 위하여, 본 발명의 다른 관점에 따르면, 화상 표시 방향에 대한 소정의 범위의 동화상을 촬상하는 촬상 스텝과, 화상 표시 방향에 대한 소정의 범위의 동체의 존재의 유무를 검출하는 동체 검출 스텝과, 상기 촬상된 동화상을 해석하여 얼굴의 존재의 유무를 검출하는 얼굴 검출 스텝과, 얼굴의 존재의 유무와, 동체의 존재의 유무를 조합함으로써 복수의 모드에 의해 각각 다른 패턴으로 소비 전력을 제어하는 전력 제어 스텝을 포함하는, 제어 방법이 제공된다.

이상 설명한 바와 같이 본 발명에 따르면, 유저의 동체 검출과 얼굴 검출을 조합함으로써, 전력 절약 제어를 고정밀도로, 또한 효과적으로 실행하는 것이 가능한, 신규 또한 개량된 표시 장치 및 제어 방법을 제공할 수 있다.

도 1은 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)의 외관에 대하여 설명하는 설명도이다.
도 2는 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)의 구성에 대하여 도시하는 설명도이다.
도 3은 제어부(110)의 구성에 대하여 설명하는 설명도이다.
도 4는 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)에 의한 전력 절약 처리의 일례에 대하여 나타내는 흐름도이다.
도 5는 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)에 있어서의 각 전력 절약 모드에서의 전력 절약 동작을 도시하는 설명도이다.
도 6은 화상 표시 장치(100)에서의 전력 절약 동작을 나타내는 흐름도이다.
도 7은 화상 표시 장치(100)에서의 전력 절약 동작을 나타내는 흐름도이다.
도 8은 화상 표시 장치(100)에서의 전력 절약 동작을 나타내는 흐름도이다.
도 9는 전력 모드를 의도적으로 억제하고 있는 경우의 화상 표시 장치(100)의 동작예를 도시하는 설명도이다.
도 10은 전력 모드를 의도적으로 억제하고 있는 경우의 화상 표시 장치(100)의 동작예를 도시하는 설명도이다.

이하에 첨부 도면을 참조하면서, 본 발명의 적합한 실시 형태에 대하여 상세하게 설명한다. 또한, 본 명세서 및 도면에 있어서, 실질적으로 동일한 기능 구성을 갖는 구성 요소에 대해서는, 동일한 번호를 부여함으로써 중복 설명을 생략한다.

또한, 설명은 이하의 순서로 행하는 것으로 한다.

<1. 본 발명의 일 실시 형태>

[1-1. 화상 표시 장치의 구성]

[1-2. 제어부의 구성]

[1-3. 전력 절약 처리]

<2. 정리>

<1. 본 발명의 일 실시 형태>

[1-1. 화상 표시 장치의 구성]

우선, 본 발명의 일 실시 형태에 관한 화상 표시 장치의 구성에 대하여 설명한다. 도 1은, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)의 외관에 대하여 설명하는 설명도이다. 도 1은, 화상 표시 장치(100)를 정면에서 본 경우의 정면도이다. 이하, 도 1을 사용하여 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)의 외관에 대하여 설명한다.

도 1에 도시한 바와 같이, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)는, 정지 화상 또는 동화상을 표시하는 표시 패널(102)의 상방 중앙부 및 좌우 중앙부에, 동화상을 촬상하는 촬상부(104)가 구비되어 있다. 촬상부(104)는, 화상 표시 장치(100)가 표시 패널(102)에서 정지 화상 또는 동화상을 표시하는 방향에 대하여, 동화상의 촬상을 행하는 것이다. 본 실시 형태에 관한 화상 표시 장치(100)는, 촬상부(104)에서 촬상된 화상을 해석하여, 화상에 찍히고 있는 유저의 얼굴을 검출한다. 그리고, 촬상부(104)가 촬상한 동화상에 유저의 얼굴이 포함되어 있는지 여부로, 화상 표시 장치(100)는 내부의 동작 상태를 변화시키는 것을 특징으로 하고 있다.

또한, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)는, 표시 패널(102)의 하방 중앙부에 센서(106)를 구비하고 있다. 센서(106)는, 화상 표시 장치(100)의 전방의 사람의 유무를 검지하는 것이다. 화상 표시 장치(100)는, 화상 표시 장치(100)의 전방에 사람이 존재하고 있는지 여부에 따라서도, 내부의 동작 상태를 변화시키는 것을 특징으로 하고 있다.

또한, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)는, LED(109)를 구비하고 있다. LED(109)는, 점등 상태에 의해, 또한 발광색에 의해 화상 표시 장치(100)의 상태를 유저에게 통지하는 것이다.

또한, 도 1에서는, 화상 표시 장치(100)는, 화상의 표시 패널(102)의 주위의 3군데에 동화상을 촬상하는 촬상부(104)를 구비하고 있었지만, 본 발명에 있어서는 동화상을 촬영하는 화상 입력의 장소는 이러한 예에 한정되지 않는 것은 물론이고, 예를 들어, 화상 표시 장치(100)와는 다른 장치를 설치하여, 화상 표시 장치(100)에 당해 장치를 접속하여, 당해 장치에 있어서 동화상을 촬영해도 된다. 또한, 화상 입력부의 수도 3개로 한정되지 않는 것은 물론이고, 2개 이하 또는 4개 이상의 화상 입력부를 설치하여 촬상해도 된다. 또한, 센서(106)의 수도 1개로 한정되지 않는 것은 물론이고, 2개 이상의 센서를 설치하여 사람의 유무를 검지해도 된다.

또한, 도 1에는 도시하지 않지만, 화상 표시 장치(100)는, 리모트 컨트롤러(도시하지 않음)로부터의 적외선이나 무선 등에 의한 제어 신호를 수신할 수 있는 신호 수신부를 더 구비하고 있어도 된다.

이상, 도 1을 사용하여 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)의 외관에 대하여 설명하였다. 다음에, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)의 구성에 대하여 설명한다.

도 2는, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)의 구성에 대하여 도시하는 설명도이다. 이하, 도 2를 사용하여 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)의 구성에 대하여 설명한다.

도 2에 도시한 바와 같이, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)는, 표시 패널(102)과, 촬상부(104)와, 센서(106)와, 스피커(108)와, 제어부(110)를 포함하여 구성된다.

그리고 제어부(110)는, 화상 입력부(112)와, 화상 처리부(114)와, 시청 상태 해석부(116)와, 시청 상태 기록부(118)와, 시스템 최적화 처리부(120)와, 시스템 제어부(122)를 포함하여 구성된다.

표시 패널(102)은, 패널 구동 신호에 기초하여 정지 화상 또는 동화상을 표시하는 것이다. 본 실시 형태에 있어서는, 표시 패널(102)은 액정에 의해 정지 화상 또는 동화상을 표시한다. 물론 발명에 있어서는, 표시 패널(102)은 이러한 예에 한정되지 않는 것은 물론이다. 표시 패널(102)은, 유기 EL(일렉트로루미네센스)과 같은 자발광형의 표시 디바이스에 의해 정지 화상 또는 동화상을 표시하는 것이어도 된다.

촬상부(104)는, 상술한 바와 같이, 정지 화상 또는 동화상을 표시하는 표시 패널(102)의 상방 중앙부 및 좌우 중앙부에 구비되는 것이며, 표시 패널(102)에 패널 구동 신호가 공급되고, 표시 패널(102)에 있어서 동화상을 표시하고 있을 때에, 화상 표시 장치(100)가 표시 패널(102)에서 동화상을 표시하는 방향에 대하여 동화상의 촬상을 행하는 것이다. 촬상부(104)는, CCD(Charge Coupled Device) 이미지 센서에 의해 동화상의 촬상을 행하는 것이어도 되고, CMOS(Complementary Metal Oxide Semiconductor) 이미지 센서에 의해 동화상의 촬상을 행하는 것이어도 된다. 촬상부(104)에서 촬상된 동화상은 제어부(110)에 보내진다.

센서(106)는, 상술한 바와 같이, 정지 화상 또는 동화상을 표시하는 표시 패널(102)의 하방 중앙부에 구비되는 것이며, 화상 표시 장치(100)의 전방의 사람의 유무를 검지하는 것이다. 또한, 센서(106)는, 화상 표시 장치(100)의 전방에 사람이 존재하고 있는 경우에는, 화상 표시 장치(100)와 그 사람 사이의 거리를 검출할 수 있다. 센서(106)에 의한 검지 결과 및 거리 정보는 제어부(110)에 보내진다. 스피커(108)는 음성 출력 신호에 기초하여 음성을 출력하는 것이다.

제어부(110)는, 화상 표시 장치(100)의 각 부의 동작을 제어하는 것이다. 이하에서 제어부(110)의 각 부에 대하여 설명한다.

화상 입력부(112)는, 촬상부(104)에서 촬상된 동화상을 수취하는 것이다. 화상 입력부(112)가 수취한 동화상은 화상 처리부(114)에 보내지고, 화상 처리부(114)에서의 화상 처리에 사용된다.

화상 처리부(114)는, 본 발명의 화상 해석부의 일례이며, 화상 입력부(112)로부터 보내져 온, 촬상부(104)에서 촬상된 동화상에 대한 각종 화상 처리를 실행하는 것이다. 화상 처리부(114)가 실행하는 화상 처리에는, 촬상부(104)에서 촬상된 동화상에 포함되어 있는 동체의 검출 처리, 동화상에 포함되어 있는 사람의 인원수의 검출 처리, 동화상에 포함되어 있는 얼굴 및 얼굴의 표정의 검출 처리가 포함된다. 화상 처리부(114)에 의한 각종 화상 처리의 결과는 시청 상태 해석부(116)에 보내져, 화상 표시 장치(100)를 시청하고 있는 인물의 유무나 시청하고 있는 인물의 상태의 해석에 사용된다.

화상 처리부(114)에 있어서의, 화상 중에 포함되는 얼굴을 검출하는 얼굴 검출 처리에 대해서는, 예를 들어 일본 특허 공개 제2007-65766호 공보나, 일본 특허 공개 제2005-44330호 공보에 게재되어 있는 기술을 사용할 수 있다. 이하, 얼굴 검출 처리에 대하여 간단하게 설명한다.

화상으로부터 유저의 얼굴을 검출하기 위해서는, 우선 공급된 화상에 있어서의 얼굴의 위치, 얼굴의 크기, 얼굴의 방향을 각각 검출한다. 얼굴의 위치와 크기가 검출됨으로써, 얼굴 화상 부분을 화상으로부터 잘라낼 수 있다. 그리고 잘라낸 얼굴 화상과, 얼굴 방향의 정보로부터, 얼굴의 특징적인 부분(얼굴 특징 위치), 예를 들어, 눈썹, 눈, 코, 입과 같은 특징적인 부분을 검출한다. 얼굴 특징 위치의 검출에는, 예를 들어, AAM(Active Appearance Models)이라고 불리는 방법을 적용하여, 특징 위치를 검출하도록 하는 것이 가능하다.

얼굴 특징 위치를 검출하면, 검출한 얼굴 특징 위치의 각각에 대하여 국소 특징량을 산출한다. 국소 특징량을 산출하고, 산출한 국소 특징량을 얼굴 화상과 함께 기억해 둠으로써, 촬상부(104)에서 촬영된 화상으로부터 얼굴의 식별이 가능하게 된다. 얼굴의 식별 방법에 대해서는, 예를 들어 일본 특허 공개 제2007-65766호 공보나, 일본 특허 공개 제2005-44330호 공보에 게재되어 있는 기술을 사용할 수 있으므로, 여기서는 상세한 설명은 생략한다. 또한, 얼굴 화상이나 얼굴 특징 위치에 의해, 공급된 화상에 찍히고 있는 얼굴이 남성인지 여성인지, 또한 어른인지 아이인지를 판별하는 것도 가능하다. 또한, 미리 얼굴의 정보를 기록해 둠으로써, 공급된 화상에 찍히고 있는 인물을 기록된 얼굴 중에서 찾아내어, 개인을 특정하는 것이 가능하다.

시청 상태 해석부(116)는, 화상 처리부(114)에 의한 각종 화상 처리의 결과, 및 센서(106)의 검지에 의한 검지 결과 및 거리 정보를 수취하고, 화상 처리부(114)에 의한 각종 화상 처리의 결과, 및 센서(106)의 검지에 의한 검지 결과 및 거리 정보를 사용하여, 화상 표시 장치(100)가 표시하고 있는 화상을 시청하고 있는 인물의 유무나 시청하고 있는 인물의 상태의 해석을 실행하는 것이다. 시청 상태 해석부(116)가 인물의 유무나 시청하고 있는 인물의 상태를 해석함으로써, 화상 표시 장치(100)는 화상 표시 장치(100)를 시청하고 있는 사람의 유무에 따라 표시 패널(102)의 휘도를 저하시키거나, 표시 패널(102)의 방향을 제어할 수 있다. 시청 상태 해석부(116)에서의 해석 처리에 의한 해석 결과는, 시청 상태 기록부(118) 및 시스템 최적화 처리부(120)에 보내진다.

또한, 시청 상태 해석부(116)는, 센서(106)의 검지에 의한 검지 결과 및 거리 정보로부터, 동체는 검지할 수 있지만, 센서(106)와 그 동체와의 거리가 소정 거리 이상 이격되어 있는 경우에는, 그 동체는 검출 대상 외로 해도 된다.

시청 상태 기록부(118)는, 시청 상태 해석부(116)의 해석 처리에 의해 얻어지는 해석 결과를 기록하는 것이다. 시청 상태 기록부(118)가 기록한 시청 상태 해석부(116)에서의 해석 결과는, 시스템 최적화 처리부(120)에 있어서의 시스템 최적화 처리에 사용된다. 또한, 시청 상태 기록부(118)가 기록한 시청 상태 해석부(116)에서의 해석 결과는, 외부의 정보 수집 서버(200)에 보내지도록 해도 된다.

시스템 최적화 처리부(120)는, 본 발명의 전력 제어부의 일례이며, 시청 상태 해석부(116)의 해석 처리에 의해 얻어지는 해석 결과를 사용하여, 화상 표시 장치(100)의 각 부에 대한 시스템 최적화 처리를 실행하기 위한 시스템 제어 정보를 산출하는 것이다. 화상 표시 장치(100)의 각 부에 대한 시스템 최적화 처리에는, 화상 표시 장치(100)의 전원 제어, 표시 패널(102)의 휘도 제어, 표시 패널(102)의 방향 제어, 표시 패널(102)의 표시 내용의 제어, 스피커(108)로부터 출력되는 음성의 음량 제어, 표시 패널(102)에 표시하는 동화상을 고화질화하기 위한 회로(도시하지 않음)의 동작 제어 등이 있다.

표시 패널(102)에 표시하는 동화상을 고화질화하기 위한 회로로서는, 예를 들어 프레임 레이트를 2배, 3배 등으로 향상시키는 배속화 회로가 있다. 이와 같은 배속화 회로 등의 동화상을 고화질화하기 위한 회로에 대해서는, 회로 동작의 일부 또는 전부를 정지함으로써, 화상 표시 장치(100)의 전력 소비를 제어해도 된다.

화상 표시 장치(100)는, 시스템 최적화 처리부(120)가 산출한 시스템 제어 정보에 기초하여, 전력 절약 처리를 실행할 수 있다. 시스템 최적화 처리부(120)가 산출한 시스템 제어 정보는 시스템 제어부(122)에 보내진다.

또한, 본 실시 형태에 관한 화상 표시 장치(100)는, 이후에 설명한 바와 같이 복수의 전력 절약 모드에 의해 전력 절약 동작을 실행한다. 그리고 각 전력 절약 모드는, 시청 상태 해석부(116)의 해석 결과에 따라서 시스템 최적화 처리부(120)가 다른 패턴으로 작성하는 시스템 제어 정보에 기초하여 전력 절약 동작을 실행하는 것이다.

시스템 제어부(122)는, 시스템 최적화 처리부(120)가 산출한 시스템 제어 정보에 기초하여, 화상 표시 장치(100)의 각 부에 대한 시스템 최적화 처리를 실행하는 것이다. 구체적으로는, 시스템 제어부(122)는, 시스템 최적화 처리부(120)가 산출한 시스템 제어 정보에 기초하여, 표시 패널(102)의 휘도 제어, 표시 패널(102)의 방향 제어, 표시 패널(102)의 표시 내용의 제어, 스피커(108)로부터 출력되는 음성의 음량 제어 등을 실행한다.

이상, 도 2를 사용하여 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)의 구성에 대하여 설명하였다. 이와 같이, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)는, 촬상부(104) 및 센서(106)에 의해 유저의 시청 상태를 해석한다. 종래에 있어서는, 촬상부(104)에서 촬상 처리를 행하고, 촬상부(104)가 촬상한 화상에 얼굴이 포함되어 있는지 여부를 판단하는 얼굴 검출 처리에 의해서만, 유저의 시청 상태를 해석하고 있었다. 그러나, 얼굴 검출 처리에 의해서만 유저의 시청 상태를 해석하면, 유저의 얼굴을 검출하기 어려운 경우, 혹은 일정 시간 한눈 팔고 있는 경우 등, 표시 장치를 계속 이용하고 싶어하는 경우에 있어서도 시청, 다시 말해 존재하지 않는다고 판단하여 표시가 꺼져 버리는 문제가 발생하고 있었다. 또한, 얼굴 검출 처리는, 센서 등에 의한 동체 검출 처리와 비교하여, 상대적으로 화상 처리 시간이 길어지기 때문에, 계산 속도나 리소스에 제한이 있는 환경에서는, 유저가 시청을 위하여 표시 장치 앞으로 온 후 화상이 표시될 때까지의 반응에 지연이 발생하고 있었다.

한편, 초전형 적외선 소자 그 밖의 센서에 의해, 동체 또는 유저의 동작 검출을 행하여 유저의 시청 상태를 해석하여, 전력 절약 제어를 행하는 장치도 존재하지만, 유저가 움직이지 않고 시청을 계속하는 경우 등에, 유저가 존재하고 있지 않다고 하여 표시가 꺼지는 등의 문제가 있었다. 오동작을 피하기 위하여, 전력 절약 제어를 개시할 때까지의 시간을 늘이게 되어, 결과적으로 전력 절약 효과가 떨어지고 있었다.

따라서, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)는, 촬상부(104)가 촬상한 화상에 대한 얼굴 검출 처리와, 센서(106)에 의한 동체 검출 처리를 조합함으로써, 보다 효과적으로 유저의 시청 상태를 해석하는 것을 가능하게 하고 있다.

다음에, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)에 포함되는 제어부(110)의 구성에 대하여, 보다 상세하게 설명한다.

[1-2. 제어부의 구성]

도 3은, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)에 포함되는 제어부(110)의 구성에 대하여 설명하는 설명도이다. 도 3은, 제어부(110) 중에서도, 제어부(110)에 포함되는 시청 상태 해석부(116)와, 시스템 최적화 처리부(120)의 구성에 대하여 설명하는 것이다. 이하, 도 3을 사용하여, 시청 상태 해석부(116)와, 시스템 최적화 처리부(120)의 구성에 대하여 설명한다.

도 3에 도시한 바와 같이, 시청 상태 해석부(116)는, 유저 시청 유무 해석부(132)와, 유저 동작 해석부(134)를 포함하여 구성된다. 그리고, 시스템 최적화 처리부(120)는, 패널 최적화 처리 산출부(142)와, 스피커 최적화 처리 산출부(144)를 포함하여 구성된다.

유저 시청 유무 해석부(132)는, 화상 처리부(114)에 의한 각종 화상 처리의 결과, 및 센서(106)의 검지에 의한 검지 결과 및 거리 정보를 수취하고, 화상 처리부(114)에 의한 각종 화상 처리의 결과, 및 센서(106)의 검지에 의한 검지 결과 및 거리 정보를 사용하여, 화상 표시 장치(100)를 시청하고 있는 사람의 유무, 화상 표시 장치(100)를 시청하고 있는 사람의 얼굴의 방향이나 크기를 검출하는 것이다.

유저 동작 해석부(134)는, 화상 처리부(114)에 의한 각종 화상 처리의 결과, 및 센서(106)의 검지에 의한 검지 결과 및 거리 정보를 수취하고, 화상 처리부(114)에 의한 각종 화상 처리의 결과, 및 센서(106)의 검지에 의한 검지 결과 및 거리 정보를 사용하여, 유저의 동작의 시계열적ㆍ공간적인 상태ㆍ이력으로부터, 화상 표시 장치(100)를 시청하고 있는 사람의 유무를 해석하는 것이다.

여기서, 화상 처리부(114)로부터는, 촬상 화상과, 촬상 화상 내에 있어서의, 화상 표시 장치(100)를 이용하고 있는 유저마다의 얼굴 검출 정보(예를 들어, 중심 좌표 [a1, b1], 얼굴의 크기 [w1, h1], 얼굴의 방향 [i1] 등의 정보) 및 동체 검출 정보(예를 들어, 중심 좌표 [c1, d1], 얼굴 영역의 크기 [s1] 등의 정보)가, 시청 상태 해석부(116)에 보내진다. 시청 상태 해석부(116)에서는, 유저 시청 유무 해석부(132) 및 유저 동작 해석부(134)에 있어서, 화상 처리부(114)로부터 보내져 오는 정보를 사용한, 화상 표시 장치(100)를 시청하고 있는 사람의 유무의 해석 처리가 행해진다.

패널 최적화 처리 산출부(142)는, 유저 시청 유무 해석부(132) 및 유저 동작 해석부(134)에 의한 해석 처리의 결과를 사용하여, 표시 패널(102)에 있어서 최적인 전력 절약화를 실현할 수 있는 처리(전력 절약화 실현 처리)를 산출하는 것이다. 표시 패널(102)에 있어서 최적인 전력 절약화를 실현할 수 있는 처리라 함은, 예를 들어, 화상 표시 장치(100)를 시청하고 있는 사람의 유무, 및 화상 표시 장치(100)를 시청하고 있는 사람이 존재하고 있지 않은 시간에 따른 표시 패널(102)의 휘도를 높이거나 낮춤으로써 전력 소비를 제어하거나, 스피커(106)로부터 출력하는 음성의 음량을 높이거나 낮춤으로써 전력 소비를 제어하는 처리가 있다. 패널 최적화 처리 산출부(142)가 산출한 전력 절약화 실현 처리는 시스템 제어부(122)에 보내져, 표시 패널(102)의 전력 절약 처리에 사용된다.

스피커 최적화 처리 산출부(144)는, 유저 시청 유무 해석부(132) 및 유저 동작 해석부(134)에 의한 해석 처리의 결과를 사용하여, 스피커(108)에 있어서 최적인 전력 절약화가 실현 가능한 처리(전력 절약화 실현 처리)를 산출하는 것이다. 스피커(108)에 있어서 최적인 전력 절약화를 실현할 수 있는 처리라 함은, 예를 들어, 화상 표시 장치(100)를 시청하고 있는 사람의 유무, 및 화상 표시 장치(100)를 시청하고 있는 사람이 존재하고 있지 않은 시간에 따른 스피커(108)의 음량을 제어하는 처리가 있다. 스피커 최적화 처리 산출부(144)가 산출한 전력 절약화 실현 처리는 시스템 제어부(122)에 보내져, 스피커(108)의 전력 절약 처리에 사용된다.

또한, 시스템 최적화 처리부(120)에 있어서의 전력 절약화 실현 처리의 산출시에는, 최적화 처리 효과 산출부(152)를 사용해도 된다. 최적화 처리 효과 산출부(152)는, 시청 상태 해석부(116)에서의 해석 결과를 사용하여, 또한 시스템 최적화 처리부(120)에서의 전력 절약화 실현 처리의 산출 결과를 사용하여, 유저의 시청 상황에 따른 최적인 전력 절약 처리를 위한 제어 정보를 산출한다.

이상, 도 3을 사용하여 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)에 포함되는 제어부(110)의 구성에 대하여 설명하였다. 다음에, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)에 의한 전력 절약 처리에 대하여 설명한다.

[1-3. 전력 절약 처리]

도 4는, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)에 의한 전력 절약 처리의 일례에 대하여 나타내는 흐름도이다. 이하, 도 4를 사용하여 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)에 의한 전력 절약 처리에 대하여 설명한다.

도 4에 도시한 흐름도는, 화상 표시 장치(100)의 소비 전력을 억제하는 모드(전력 절약 모드)로의 이행 처리의 일례를 나타낸 것이다. 이하, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)에 의한 전력 절약 모드로의 이행 처리에 대하여 상세하게 설명한다. 화상 표시 장치(100)의 전원이 투입되면, 시스템 최적화 처리부(120)에 의해 억제 플래그에 1이 세트된다(스텝 S101). 이 억제 플래그는, 화상 표시 장치(100)에 있어서 전력 절약 모드가 실행되는지 여부를 정하는 플래그이다. 플래그가 1인 경우에는, 전력 절약 모드는 실행되지 않고, 플래그가 0인 경우에는, 전력 절약 모드는 실행된다. 그리고, 시청 상태 해석부(116)에 의해 얼굴 검출 처리 및 동체 검출 처리가 행해지고, 화상 표시 장치(100)를 시청하고 있는 인물이 있는지 여부를 판단한다(스텝 S102).

상기 스텝 S102의 얼굴 검출 처리 및 동체 검출 처리의 결과, 화상 표시 장치(100)를 시청하고 있는 인물의 존재를 검출할 수 있었는지 여부를 시청 상태 해석부(116)에서 판정한다(스텝 S103). 스텝 S103의 판정의 결과, 화상 표시 장치(100)를 시청하고 있는 인물의 존재를 시청 상태 해석부(116)에서 검출할 수 있었던 경우에는, 시스템 최적화 처리부(120)에 의해 억제 플래그를 0으로 세트한다(스텝 S104). 한편, 스텝 S103의 판정의 결과, 화상 표시 장치(100)를 시청하고 있는 인물의 존재를 시청 상태 해석부(116)에서 검출할 수 없었던 경우에는, 억제 플래그는 1의 상태로 한다.

계속해서, 화상 표시 장치(100)를 조작하기 위한 리모트 컨트롤러에 의한, 화상 표시 장치(100)에 대한 조작이 유저로부터 행해지는지 여부를 판정한다(스텝 S105). 이러한 조작 판정은 시청 상태 해석부(116)에서 실행해도 된다.

상기 스텝 S105의 판정의 결과, 리모트 컨트롤러에 의한 화상 표시 장치(100)에 대한 조작이 유저로부터 행해졌다고 판단한 경우에는, 화상 표시 장치(100)의 내부에서 유지하는 최종 조작 시각의 정보를 현재 시각으로 설정한다(스텝 S106). 최종 조작 시각의 정보의 현재 시각에의 설정은, 예를 들어 시청 상태 해석부(116)에서 실행해도 된다.

상기 스텝 S106에서, 화상 표시 장치(100)의 내부에서 유지하는 최종 조작 시각의 정보를 현재 시각으로 설정하면, 계속해서 시스템 최적화 처리부(120)는 전력 절약 모드를 해제한다(스텝 S107).

한편, 상기 스텝 S105의 판정의 결과, 리모트 컨트롤러에 의한 화상 표시 장치(100)에 대한 조작이 유저로부터 행해지고 있지 않다고 판단한 경우에는, 상기 스텝 S106 및 스텝 S107은 스킵한다.

계속해서, 시스템 최적화 처리부(120)는 전력 절약 모드 개시 조건을 충족하고 있는지 여부를 판단한다(스텝 S108). 전력 절약 모드 개시 조건은, 유저에 의해 지정된 전력 절약 모드에 따라 다른 것이다. 이하에 있어서, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)에 있어서의 전력 절약 모드 개시 조건의 일례를 나타내지만, 본 발명에 있어서는, 전력 절약 모드의 수, 및 각 전력 절약 모드에 있어서의 전력 절약 모드 개시 조건은 이러한 예에 한정되지 않는 것은 물론이다.

본 발명의 일 실시 형태에 관한 화상 표시 장치(100)는, 전력 절약 모드로서 「High」, 「Middle」, 「Low」의 3종류를 갖고 있다. 시스템 최적화 처리부(120)는, 각 전력 절약 모드에 따른 시스템 제어 정보를 산출하고, 산출한 시스템 제어 정보에 기초하여 시스템 제어부(122)가 각종 제어를 실행함으로써, 화상 표시 장치(100)의 각 부의 소비 전력을 다른 패턴으로 컨트롤할 수 있다.

「High」는, 일정 시간, 시청 상태 해석부(116)에서 얼굴을 인식할 수 없었던 경우에 소비 전력을 억제하는 전력 절약 동작으로 이행하는 전력 절약 모드이다.

「Middle」은, 일정 시간, 시청 상태 해석부(116)에서 얼굴을 인식할 수 없었던 경우에 소비 전력을 억제하고, 또한 일정 시간, 시청 상태 해석부(116)에서 얼굴 및 동체를 인식할 수 없었던 경우에, 또한 소비 전력을 억제하는 전력 절약 동작으로 이행하는 전력 절약 모드이다.

「Low」는, 일정 시간, 시청 상태 해석부(116)에서 얼굴 및 동체를 인식할 수 없었던 경우에, 소비 전력을 억제하는 전력 절약 동작으로 이행하는 전력 절약 모드이다.

도 5는, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)에 있어서의 각 전력 절약 모드에서의 전력 절약 동작을 도시하는 설명도이다. 도 5의 최상행에 나타낸 그래프는, 얼굴 검출 및 동체 검출의 모습을 시계열로 나타낸 것이며, 도 5의 그 밖의 각 그래프는, 횡축이 시간을 나타내고 있고, 종축이 소비 전력을 나타내고 있다.

도 5에 도시한 바와 같이, 전력 절약 모드가 「High」인 경우에는, 일정 시간(예를 들어 3초 내지 10초 동안), 시청 상태 해석부(116)에서 얼굴을 인식할 수 없으면, 표시 패널(102)의 휘도를 떨어뜨리거나, 스피커(108)의 음량을 낮추거나 하여, 서서히 소비 전력을 억제해 간다. 그리고, 시청 상태 해석부(116)에서 얼굴을 인식할 수 있고, 리모트 컨트롤러에 의한 화상 표시 장치(100)에 대한 조작이 행해진 경우에는, 전력 절약 모드를 해제한다.

또한, 전력 절약 모드가 「Middle」인 경우에는, 일정 시간(예를 들어 10초 내지 30초 동안), 시청 상태 해석부(116)에서 얼굴을 인식할 수 없으면, 표시 패널(102)의 휘도를 떨어뜨리거나, 스피커(108)의 음량을 낮추거나 하여, 절반 정도까지 서서히 소비 전력을 억제해 간다. 그리고, 또한 일정 시간(예를 들어 1분 내지 3분 동안), 시청 상태 해석부(116)에서 얼굴 및 동체를 인식할 수 없으면, 표시 패널(102)의 휘도를 더욱 떨어뜨리거나, 스피커(108)의 음량을 더욱 낮추거나 하여, 더욱 소비 전력을 억제해 간다. 그리고, 시청 상태 해석부(116)에서 얼굴을 인식할 수 있고, 리모트 컨트롤러에 의한 화상 표시 장치(100)에 대한 조작이 행해진 경우에는, 전력 절약 모드를 해제한다.

그리고, 전력 절약 모드가 「Low」인 경우에는, 일정 시간(예를 들어 3분 내지 10분 동안), 시청 상태 해석부(116)에서 얼굴 및 동체를 인식할 수 없으면, 표시 패널(102)의 휘도를 떨어뜨리거나, 스피커(108)의 음량을 낮추거나 하여, 서서히 소비 전력을 억제해 간다. 그리고, 시청 상태 해석부(116)에서 얼굴을 인식할 수 있고, 리모트 컨트롤러에 의한 화상 표시 장치(100)에 대한 조작이 행해진 경우에는, 전력 절약 모드를 해제한다.

도 5에서는, 2가지의 얼굴 검출ㆍ동체 검출의 패턴을 사용하여, 각 전력 절약 모드에 있어서의 전력 절약 동작을 나타내고 있다. 도 5의 중앙의 열에서 나타낸 패턴은, 얼굴이 검출되지 않게 된 후에 동체가 검출되지 않게 되고, 그 후 동체가 검출되어, 상기 검출 후에 얼굴이 검출되는 경우를 나타내고 있다. 이 패턴을 「패턴 1」이라고 칭한다. 또한 도 5의 우측의 열에서 나타낸 패턴은, 얼굴이 검출되지 않게 된 후에 다시 얼굴이 검출되고, 그 후 다시 얼굴이 검출되지 않게 되고, 그 후에 동체가 검출되지 않게 되고, 또한 그 후에 먼저 얼굴이 검출되고, 계속해서 동체가 검출되는 경우를 나타내고 있다. 이 패턴을 「패턴 2」라고 칭한다.

전력 절약 모드가 「High」인 경우에는, 얼굴의 유무에 의해서만 전력 절약 모드로 이행하므로, 패턴 1의 경우, 패턴 2의 경우의 각각에 대하여, 도 5의 상부로부터 2단째의 그래프에 나타낸 바와 같은 전력 절약 동작이 행해진다. 전력 절약 모드가 「Middle」인 경우에는, 우선 얼굴의 유무에 따라 전력 절약 모드로 이행하여 소비 전력을 억제하고, 계속해서 동체의 유무에 따라 더욱 소비 전력을 억제하고 있으므로, 패턴 1의 경우, 패턴 2의 경우의 각각에 대하여, 도 5의 상부로부터 3단째의 그래프에 나타낸 바와 같은 전력 절약 동작이 행해진다. 전력 절약 모드가 「Low」인 경우에는, 얼굴의 유무 및 동체의 유무에 따라 전력 절약 모드로 이행하여 소비 전력을 억제하고 있으므로, 패턴 1의 경우, 패턴 2의 경우의 각각에 대하여, 도 5 상부로부터 4단째에 나타낸 바와 같은 전력 절약 동작이 행해진다.

상기 스텝 S108에 있어서, 시스템 최적화 처리부(120)가 전력 절약 모드 개시 조건을 만족하고 있다고 판단하면, 계속해서 시스템 최적화 처리부(120)는, 억제 플래그가 0으로 세트되어 있는지 여부를 판단한다(스텝 S109).

상기 스텝 S109에 있어서, 시스템 최적화 처리부(120)가, 억제 플래그가 0으로 세트되어 있다고 판단하면, 계속해서 현재 시각으로부터, 상기 스텝 S106에서 설정된 최종 조작 시각을 뺀 시간이 어느 일정 시간을 상회하고 있는지 여부를 시스템 최적화 처리부(120)에서 판단한다(스텝 S110). 예를 들어, 화상 표시 장치(100)의 전력 절약 모드가 「High」로 설정되어 있는 경우에는, 현재 시각으로부터, 상기 스텝 S106에서 설정된 최종 조작 시각을 뺀 시간이 10초를 초과하고 있는 것인지 여부를 시스템 최적화 처리부(120)에서 판단한다.

상기 스텝 S110에 있어서, 현재 시각으로부터 최종 조작 시각을 뺀 시간이 어느 일정 시간을 상회하고 있다고 시스템 최적화 처리부(120)가 판단한 경우에는, 화상 표시 장치(100)는 전력 절약 모드를 개시한다(스텝 S111). 예를 들어, 화상 표시 장치(100)의 전력 절약 모드가 「High」로 설정되어 있는 경우에는, 현재 시각으로부터, 상기 스텝 S106에서 설정된 최종 조작 시각을 뺀 시간이 10초를 초과하고 있었던 경우에는, 화상 표시 장치(100)는 전력 절약 모드를 개시하여, 표시 패널(102)의 휘도를 떨어뜨리거나, 스피커(108)의 음량을 낮추거나 하여, 서서히 소비 전력을 억제해 간다.

상기 스텝 S111에서 전력 절약 모드를 개시한 후에, 또는 상기 스텝 S108에 있어서, 시스템 최적화 처리부(120)가 전력 절약 모드 개시 조건을 만족하고 있지 않다고 판단한 경우, 상기 스텝 S109에 있어서, 억제 플래그가 0으로 세트되어 있지 않다고 시스템 최적화 처리부(120)가 판단한 경우, 및 상기 스텝 S110에 있어서, 현재 시각으로부터 최종 조작 시각을 인용한 시간이 어느 일정 시간을 상회하고 있지 않다고 시스템 최적화 처리부(120)가 판단한 경우에는, 계속해서, 전원의 오프 등에 의해, 화상 표시 장치(100)의 동작이 종료하였는지 여부를 판단한다(스텝 S112). 화상 표시 장치(100)의 동작이 종료되어 있으면 그대로 처리를 종료한다. 한편, 화상 표시 장치(100)의 동작이 종료되어 있지 않으면, 상기 스텝 S102로 복귀하여, 시청 상태 해석부(116)에 의한 얼굴 검출 처리 및 동체 검출 처리의 실행을 계속한다.

이상, 도 4를 사용하여 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)에 의한 전력 절약 처리에 대하여 설명하였다. 다음에, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)에 있어서의 각 전력 절약 모드에서의 전력 절약 동작에 대하여 설명한다.

도 6은, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)에 있어서의 전력 절약 모드가 「High」인 경우에 있어서의 전력 절약 동작을 나타내는 흐름도이다. 이하, 도 6을 사용하여, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)에 있어서의 전력 절약 모드가 「High」인 경우에 있어서의 전력 절약 동작에 대하여 설명한다.

우선, 전력 절약 동작에 들어가기 전에 미리, 화상 표시 장치(100)의 내부에서 유지하고 있는 타이머를 리셋해 둔다(스텝 S121). 스텝 S121에서의 타이머의 리셋은, 예를 들어 시청 상태 해석부(116)가 실행해도 된다.

계속해서, 시청 상태 해석부(116)에서 얼굴 검출 처리를 실행한다(스텝 S122). 그리고, 시청 상태 해석부(116)에서 얼굴 검출 처리를 실행한 결과, 화상 입력부(112)에 보내져 온 화상에 사람의 얼굴이 포함되어 있는지 여부를 시청 상태 해석부(116)에서 판단한다(스텝 S123).

상기 스텝 S123에 있어서, 화상 입력부(112)로 보내져 온 화상에 사람의 얼굴이 포함되어 있다고 시청 상태 해석부(116)가 판단한 경우에는, 다시 화상 표시 장치(100)의 내부에서 유지하고 있는 타이머를 리셋한다(스텝 S124). 이 스텝 S124에서의 타이머의 리셋은, 스텝 S121에서의 타이머의 리셋과 마찬가지로, 예를 들어 시청 상태 해석부(116)가 실행해도 된다.

상기 스텝 S124에서 타이머를 리셋하면, 계속해서 시스템 최적화 처리부(120)에서, 표시 패널(102)의 밝기를 표준 밝기(통상 사용시의 밝기)로 설정한다(스텝 S125).

한편, 상기 스텝 S123에 있어서, 화상 입력부(112)에 보내져 온 화상에 사람의 얼굴이 포함되어 있지 않았다고 시청 상태 해석부(116)가 판단한 경우에는, 계속해서, 타이머가 T1초(예를 들어, 10초) 경과하였는지 여부를 시스템 최적화 처리부(120)에서 판단한다(스텝 S126).

상기 스텝 S126에서, 타이머가 T1초 경과하였다고 시스템 최적화 처리부(120)가 판단하면, 시스템 최적화 처리부(120)는, 표시 패널(102)의 밝기를 어둡게 하거나, 또는 0이 되도록 설정한다(스텝 S127).

상기 스텝 S127에서 시스템 최적화 처리부(120)가 표시 패널(102)의 밝기를 0, 또는 가장 어두워지게 설정하면, 또는 상기 스텝 S126에서, 타이머가 아직 T1초 경과하고 있지 않다고 시스템 최적화 처리부(120)가 판단하면, 계속해서, 타이머가 T2초(단, T2＞T1) 경과하였는지 여부를 시스템 최적화 처리부(120)에서 판단한다(스텝 S128).

상기 스텝 S128에서, 타이머가 T2초 경과하였다고 시스템 최적화 처리부(120)가 판단하면, 시스템 최적화 처리부(120)는 화상 표시 장치(100)의 주 전원을 오프하는 처리를 실행한다(스텝 S129). 한편, 상기 스텝 S128에서, 타이머가 아직 T2초 경과하고 있지 않다고 시스템 최적화 처리부(120)가 판단하면, 상기 스텝 S122로 복귀하여 시청 상태 해석부(116)에서의 얼굴 검출 처리를 계속한다.

이상, 도 6을 사용하여, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)에 있어서의 전력 절약 모드가 「High」인 경우에 있어서의 전력 절약 동작에 대하여 설명하였다. 다음에, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)에 있어서의 전력 절약 모드가 「Middle」인 경우에 있어서의 전력 절약 동작에 대하여 설명한다.

도 7은, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)에 있어서의 전력 절약 모드가 「Middle」인 경우에 있어서의 전력 절약 동작에 대하여 나타내는 흐름도이다. 이하, 도 7을 사용하여, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)에 있어서의 전력 절약 모드가 「Middle」인 경우에 있어서의 전력 절약 동작에 대하여 설명한다.

우선, 전력 절약 동작으로 들어가기 전에 미리, 화상 표시 장치(100)의 내부에서 유지하고 있는 2개의 타이머(이하에서는, 설명의 편의상, 2개의 타이머를 각각 타이머 1, 2라고 함)를 각각 리셋해 둔다(스텝 S131). 이 스텝 S131에서의 타이머 1, 2의 리셋은, 예를 들어 시청 상태 해석부(116)가 실행해도 된다. 타이머 1은, 시청 상태 해석부(116)가 얼굴을 검출할 수 없었던 시간을 계측하기 위한 것이고, 타이머 2는, 시청 상태 해석부(116)가 동체의 존재를 검출할 수 없었던 시간을 계측하기 위한 것이다.

계속해서, 시청 상태 해석부(116)에서 얼굴 검출 처리 및 동체 검출 처리를 실행한다(스텝 S132). 그리고, 시청 상태 해석부(116)에서 얼굴 검출 처리를 실행한 결과, 화상 입력부(112)에 보내져 온 화상에 사람의 얼굴이 포함되어 있는지 여부를 시청 상태 해석부(116)에서 판단한다(스텝 S133).

상기 스텝 S133에 있어서, 화상 입력부(112)에 보내져 온 화상에 사람의 얼굴이 포함되어 있었다고 시청 상태 해석부(116)가 판단한 경우에는, 다시 화상 표시 장치(100)의 내부에서 유지하고 있는 타이머 1, 2를 각각 리셋한다(스텝 S134). 이 스텝 S134에서의 타이머의 리셋은, 스텝 S131에서의 타이머의 리셋과 마찬가지로, 예를 들어 시청 상태 해석부(116)가 실행해도 된다.

상기 스텝 S134에서 타이머를 리셋하면, 계속해서 시스템 최적화 처리부(120)에서, 표시 패널(102)의 밝기를 표준의 밝기(통상 사용시의 밝기)로 설정한다(스텝 S135).

한편, 상기 스텝 S133에 있어서, 화상 입력부(112)에 보내져 온 화상에 사람의 얼굴이 포함되어 있지 않았다고 시청 상태 해석부(116)가 판단한 경우에는, 계속해서, 센서(106)가 동체를 검출하였는지 여부를 시청 상태 해석부(116)에서 판단한다(스텝 S136).

상기 스텝 S136에 있어서, 센서(106)가 동체를 검출하였다고 시청 상태 해석부(116)가 판단하면, 계속해서 타이머 2를 리셋한다(스텝 S137). 이 스텝 S137에서의 타이머 2의 리셋은, 스텝 S131, 스텝 S134에서의 타이머의 리셋과 마찬가지로, 예를 들어 시청 상태 해석부(116)가 실행해도 된다.

상기 스텝 S137에서 타이머 2를 리셋하면, 계속해서 표시 패널(102)의 밝기가 0인지 여부를 판단한다(스텝 S138). 이 표시 패널(102)의 밝기의 판단은, 예를 들어 시스템 최적화 처리부(120)가 실행해도 된다.

상기 스텝 S138에 있어서, 표시 패널(102)의 밝기가 0이라고 시스템 최적화 처리부(120)가 판단하면, 화상 표시 장치(100) 앞에 유저는 있지만, 그 유저의 얼굴은 표시 패널의 방향을 향하고 있지 않은 것으로 간주하여, 시스템 최적화 처리부(120)는 표시 패널(102)의 밝기를 어둡게 하도록 제어하기 위한 시스템 제어 정보를 산출하고, 표시 패널(102)의 밝기를 어둡게 한다(스텝 S139).

계속해서, 타이머 1이 T3초(예를 들어, 30초)를 경과하고, 또한 타이머 2가 T3초보다도 긴 T4초(예를 들어, 180초)를 아직 경과하고 있지 않은지 여부를 시스템 최적화 처리부(120)에서 판단한다(스텝 S140).

상기 스텝 S140에 있어서, 타이머 1은 T3초를 경과하고, 또한 타이머 2가 T4초를 아직 경과하고 있지 않다고 시스템 최적화 처리부(120)가 판단하면, 화상 표시 장치(100) 앞에 유저는 있지만, 그 유저의 얼굴은 표시 패널의 방향을 향하고 있지 않은 것으로 간주하여, 시스템 최적화 처리부(120)는 표시 패널(102)의 밝기를 어둡게 하도록 제어하기 위한 시스템 제어 정보를 산출하고, 표시 패널(102)의 밝기를 어둡게 한다(스텝 S141).

한편, 상기 스텝 S140에 있어서, 타이머 1은 T3초를 아직 경과하고 있지 않다고 시스템 최적화 처리부(120)가 판단하면, 시스템 최적화 처리부(120)는 상기 스텝 S141을 스킵한다.

계속해서, 타이머 2가 T4초를 경과하였는지 여부를 시스템 최적화 처리부(120)에서 판단한다(스텝 S142). 스텝 S142에 있어서, 타이머 2가 T4초를 경과하였다고 시스템 최적화 처리부(120)가 판단하면, 화상 표시 장치(100) 앞에 유저가 없는 것으로 간주하여, 시스템 최적화 처리부(120)는, 표시 패널(102)의 밝기를 0으로 하도록 제어하기 위한 시스템 제어 정보를 산출하고, 표시 패널(102)의 밝기를 0으로 한다(스텝 S143).

한편, 상기 스텝 S142에 있어서, 타이머 2는 T4초를 아직 경과하고 있지 않다고 시스템 최적화 처리부(120)가 판단하면, 시스템 최적화 처리부(120)는 상기 스텝 S142를 스킵한다.

계속해서, 타이머 2가 T4초보다 긴 T5초를 경과하였는지 여부를 시스템 최적화 처리부(120)에서 판단한다(스텝 S144). 스텝 S144에 있어서, 타이머 2가 T5초를 경과하였다고 시스템 최적화 처리부(120)가 판단하면, 화상 표시 장치(100) 앞에 유저가 없는 것으로 간주하고, 시스템 최적화 처리부(120)는, 화상 표시 장치(100)의 주 전원을 오프하는 처리를 실행한다(스텝 S145). 한편, 스텝 S144에 있어서, 타이머 2가 T5초를 경과하고 있지 않다고 시스템 최적화 처리부(120)가 판단하면, 상기 스텝 S132로 복귀하여, 시청 상태 해석부(116)에서 얼굴 검출 처리 및 동체 검출 처리를 계속한다.

이상, 도 7을 사용하여, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)에 있어서의 전력 절약 모드가 「Middle」인 경우에 있어서의 전력 절약 동작에 대하여 설명하였다. 다음에, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)에 있어서의 전력 절약 모드가 「Low」인 경우에 있어서의 전력 절약 동작에 대하여 설명한다.

도 8은, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)에 있어서의 전력 절약 모드가 「Low」인 경우에 있어서의 전력 절약 동작에 대하여 나타내는 흐름도이다. 이하, 도 8을 사용하여, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)에 있어서의 전력 절약 모드가 「Low」인 경우에 있어서의 전력 절약 동작에 대하여 설명한다.

우선, 전력 절약 동작으로 들어가기 전에 미리, 화상 표시 장치(100)의 내부에서 유지하고 있는 타이머를 리셋해 둔다(스텝 S151). 스텝 S151에서의 타이머의 리셋은, 예를 들어 시청 상태 해석부(116)가 실행해도 된다.

계속해서, 시청 상태 해석부(116)에서 얼굴 검출 처리 및 동체 검출 처리를 실행한다(스텝 S152). 그리고, 시청 상태 해석부(116)에서 얼굴 검출 처리 및 동체 검출 처리를 실행한 결과, 얼굴 또는 동체를 검출하여, 화상 표시 장치(100)의 전방에 사람이 존재하고 있는지를 시청 상태 해석부(116)에서 판단한다(스텝 S153).

상기 스텝 S153에 있어서, 얼굴 또는 동체를 검출하였다고 시청 상태 해석부(116)가 판단한 경우에는, 다시 화상 표시 장치(100)의 내부에서 유지하고 있는 타이머를 리셋한다(스텝 S154). 이 스텝 S154에서의 타이머의 리셋은, 스텝 S151에서의 타이머의 리셋과 마찬가지로, 예를 들어 시청 상태 해석부(116)가 실행해도 된다.

상기 스텝 S154에서, 화상 표시 장치(100)의 내부에서 유지하고 있는 타이머를 리셋하면, 계속해서 시스템 최적화 처리부(120)에서, 표시 패널(102)의 밝기를 표준의 밝기(통상 사용시의 밝기)로 설정한다(스텝 S155).

한편, 상기 스텝 S153에 있어서, 얼굴 및 동체를 검출할 수 없었다고 시청 상태 해석부(116)가 판단한 경우에는, 계속해서, 타이머가 T6초(예를 들어, 600초) 경과하였는지 여부를 시스템 최적화 처리부(120)에서 판단한다(스텝 S156).

상기 스텝 S156에서, 타이머가 T6초 경과하였다고 시스템 최적화 처리부(120)가 판단하면, 시스템 최적화 처리부(120)는, 표시 패널(102)의 밝기를 어둡게 하거나, 또는 0이 되도록 설정한다(스텝 S157).

상기 스텝 S157에서 시스템 최적화 처리부(120)가 표시 패널(102)의 밝기를 0 또는 가장 어두워지도록 설정하면, 또는 상기 스텝 S156에서 타이머가 아직 T7초 경과하고 있지 않다고 시스템 최적화 처리부(120)가 판단하면, 계속해서, 타이머가 T7초(단, T7＞T6) 경과하였는지 여부를 시스템 최적화 처리부(120)에서 판단한다(스텝 S158).

상기 스텝 S158에서, 타이머가 T7초 경과하였다고 시스템 최적화 처리부(120)가 판단하면, 시스템 최적화 처리부(120)는 화상 표시 장치(100)의 주 전원을 오프하는 처리를 실행한다(스텝 S159). 한편, 상기 스텝 S158에서, 타이머가 아직 T7초 경과하고 있지 않다고 시스템 최적화 처리부(120)가 판단하면, 상기 스텝 S152로 복귀하여 시청 상태 해석부(116)에서의 얼굴 검출 처리 및 동체 검출 처리를 계속한다.

이상, 도 8을 사용하여, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)에 있어서의 전력 절약 모드가 「Low」인 경우에 있어서의 전력 절약 동작에 대하여 설명하였다.

<2. 정리>

이상 설명한 바와 같이 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)에 따르면, 촬상부(104)에서 촬상한 화상에 사람의 얼굴이 포함되어 있었는지에 의해, 및 센서(106)에 의해 동체의 존재를 검지하였는지에 의해, 화상 표시 장치(100) 앞에 유저가 있는지 여부를 판단한다. 이와 같이, 얼굴 검출 처리와 동체 검출 처리를 조합함으로써, 화상 표시 장치(100) 앞에 있는 유저의 존재를 고정밀도로 검출할 수 있다.

그리고, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)에 따르면, 얼굴 검출 처리와 동체 검출 처리를 조합함으로써 복수의 전력 절약 모드를 실현할 수 있다. 즉, 본 발명의 일 실시 형태에 관한 화상 표시 장치(100)는, 얼굴 검출 처리만을 사용한 전력 절약 모드를 실행할 수도 있고, 얼굴 검출 처리와 동체 검출 처리를 조합한 전력 절약 모드를 실행할 수도 있다. 이와 같이 복수의 전력 절약 모드를 실현 가능하게 함으로써, 화상 표시 장치(100)의 유저의 이용 상황에 적합한 전력 절약 모드를 실행할 수 있다.

또한, 상술한 일련의 처리는, 하드웨어에 의해 실행시킬 수도 있고, 소프트웨어에 의해 실행시킬 수도 있다. 일련의 처리를 소프트웨어에 의해 실행시키는 경우에는, 그 소프트웨어를 구성하는 프로그램이, 전용의 하드웨어에 내장되어 있는 컴퓨터, 또는 각종 프로그램을 인스톨함으로써, 각종 기능을 실행하는 것이 가능한, 예를 들어 범용의 퍼스널 컴퓨터 등에, 프로그램 기록 매체로부터 인스톨된다.

이상, 첨부 도면을 참조하면서 본 발명의 적합한 실시 형태에 대하여 상세하게 설명하였지만, 본 발명은 이러한 예에 한정되지 않는다. 본 발명이 속하는 기술 분야에 있어서의 통상의 지식을 갖는 자이면, 특허청구범위에 기재된 기술적 사상의 범주 내에 있어서, 각종 변경예 또는 수정예에 상도할 수 있는 것은 명백하며, 이들에 대해서도, 당연히 본 발명의 기술적 범위에 속하는 것이라고 이해된다.

예를 들어, 유저의 이용 상황을 화상 표시 장치(100)의 내부에 순서대로 기록하고, 기록한 유저의 이용 상황을 학습한 결과를 이용하여, 복수의 전력 절약 모드 중에서 자동적으로 전력 절약 모드를 시스템 최적화 처리부(120)가 선택하도록 해도 된다. 이하에 있어서, 전력 절약 모드의 자동 선택 처리의 예에 대하여 설명한다.

예를 들어, 촬상부(104)에서 촬영한 화상에 대한 얼굴 인식 처리에 의해 유저를 특정하고, 특정한 유저마다 전력 절약 모드를 시스템 최적화 처리부(120)가 자동 선택해도 된다. 일례를 들면, 아버지는 그다지 화면 오프하지 않지만 전력 절약 효과가 낮은 전력 절약 모드, 어머니는 빈번하게 화면 오프하는 전력 절약 효과가 낮은 전력 절약 모드를 사전에 화상 표시 장치(100)에 설정해 두고, 촬상부(104)에서 촬영한 화상에 포함되어 있는 인물이 아버지인지 어머니인지에 따라서, 전력 절약 모드를 시스템 최적화 처리부(120)가 자동 선택해도 된다.

또한 예를 들어, 특정 개인의 시청 스타일을 분석하여, 최적인 전력 절약 모드를 시스템 최적화 처리부(120)가 자동 선택해도 된다. 일례를 들면, 장시간 텔레비전을 켠 상태로 하여 그다지 텔레비전을 보고 있지 않은 경향이 강한 유저의 경우 화면 오프로 이행하기 쉽게 한다. 한편 단시간의 프로그램을 주시하며 시청하는 경향이 강한 유저의 경우, 화면 오프로 이행하기 어렵게 하는 등 한다. 시청 스타일의 분석에 있어서는, 일정 기간 유저의 시청 형태를 기록할 필요가 있기 때문에 처음 사용에 있어서는 자동 설정을 사용할 수 없지만, 필요한 데이터가 취득되는 대로, 자동 설정의 선택지가 유효해져 사용할 수 있게 된다.

또한 예를 들어, 화상 표시 장치(100)에서 시청되고 있는 콘텐츠에 의해 자동적으로 모드를 선택한다. 예를 들어, 화상 표시 장치(100)에서 영화 등의 콘텐츠를 시청할 때에는, 시청 계속을 우선하여 화면 오프까지의 시간을 길게 하거나, 일정 간격으로 커머셜 등의 콘텐츠와 다른 정보가 제시되는 경우에는, 콘텐츠 부분과 그 이외의 부분에서 화면 오프까지의 시간을 길게 하거나 짧게 해도 된다. 또한, 화상 표시 장치(100)에서 어떤 콘텐츠를 시청하고 있는지의 정보는, 예를 들어, 전자 프로그램표(EPG)의 데이터로부터 취득해도 되고, 화상 표시 장치(100)의 유저가 화상 표시 장치(100)에 대하여 설정한 현재 시청 중인 콘텐츠의 장르로부터 취득해도 된다.

또한 예를 들어, 역광이나 차폐 등에 의해 정상인 화상 처리를 할 수 없거나, 유저가 화각 외로부터 장치를 시청하고 있는 등의 환경에 있어서, 유저가 시청을 하고 있음에도 불구하고 전력 절약 모드가 개시되어 오작동이 발생해 버리는 상황을 고려하여, 시스템 최적화 처리부(120)는, 전력 절약 처리를 개시한 후 최초로 적어도 하나의 얼굴이 검출될 때까지는, 얼굴이나 동체 검출이 없더라도 전력 절약 모드를 개시하지 않도록 해도 된다.

그리고, 얼굴이 적어도 한번 검출되어, 화상 표시 장치(100)가 전력 절약 모드를 개시한 후, 유저가 리모트 컨트롤러 등에 의해 화상 표시 장치(100)의 전원의 투입이나, 표시 패널(102)에 표시되는 내용 전환 등의 능동적인 조작을 실행하고 있다고 생각되는 기간(또는 그 후 일정 기간)에 있어서는, 오동작을 피하기 위하여, 시스템 최적화 처리부(120)는, 얼굴이나 동체 검출이 없어도 전력 절약 모드를 개시하지 않도록 해도 된다.

또한, 상술한 바와 같이 전력 절약 모드를 의도적으로 억제하고 있는 경우에 있어서는, 화상 표시 장치(100)가 구비하고 있는 상태 통지 수단(예를 들어, LED나 화면 내에서의 UI 표시)에 의해, 전력 절약 모드의 억제 상태를 유저에게 통지하도록 해도 된다. 도 9 및 도 10은, 전력 절약 모드를 의도적으로 억제하고 있는 경우의 화상 표시 장치(100)의 동작예를 도시하는 설명도이다. 도 9는, 전력 절약 모드를 의도적으로 억제하고 있는 경우에, 전력 절약 모드가 억제되고 있는 것을 나타내는 인디케이터로서 LED(109)를 소정의 색으로 발광시키는 예를 나타내고 있다. 도 10은, 전력 절약 모드를 의도적으로 억제하고 있는 경우에, 전력 절약 모드가 억제되고 있는 것을 나타내는 GUI 인디케이터(103)를 표시 패널(102)에 표시하는 예를 나타내고 있다.

100: 화상 표시 장치
102: 표시 패널
104: 촬상부
106: 센서
108: 스피커
109: LED
110: 제어부
112: 화상 입력부
114: 화상 처리부
116: 시청 상태 해석부
118: 시청 상태 기록부
120: 시스템 최적화 처리부
122: 시스템 제어부
132: 유저 시청 유무 해석부
134: 유저 동작 해석부
142: 패널 최적화 처리 산출부
144: 스피커 최적화 처리 산출부
152: 최적화 처리 효과 산출부

Claims (12)

1. 화상 표시 방향에 대한 소정의 범위의 동화상을 촬상하는 촬상부와,
   화상 표시 방향에 대한 소정의 범위의 동체의 존재의 유무를 검출하는 동체 검출부와,
   상기 촬상부가 촬상한 동화상을 해석하여 얼굴의 존재의 유무를 검출하는 화상 해석부와,
   상기 화상 해석부가 검출한 얼굴의 존재의 유무와, 상기 검출부가 검출한 동체의 존재의 유무를 조합함으로써 설정되는 복수의 모드에 의해 각각 다른 패턴으로 소비 전력을 제어하는 전력 제어부를 구비하는, 표시 장치.
2. 제1항에 있어서, 상기 전력 제어부는, 상기 화상 해석부가 검출한 얼굴의 존재의 유무에 의해서만 소비 전력을 제어하고, 상기 화상 해석부가 얼굴의 존재를 소정 시간 검출할 수 없었던 경우에 소비 전력을 저하시키는 제1 모드를 갖는, 표시 장치.
3. 제1항에 있어서, 상기 전력 제어부는, 상기 화상 해석부가 검출한 얼굴의 존재의 유무와, 상기 동체 검출부가 검출한 동체의 존재의 유무를 사용하여 소비 전력을 제어하고, 상기 화상 해석부가 얼굴의 존재를 제1 소정의 시간 검출할 수 없었던 경우에 소정의 레벨까지 소비 전력을 저하시키고, 상기 저하 후, 상기 동체 검출부가 동체의 존재를 제2 소정의 시간 검출할 수 없었던 경우에 더욱 소비 전력을 저하시키는 제2 모드를 갖는, 표시 장치.
4. 제1항에 있어서, 상기 전력 제어부는, 상기 화상 해석부가 검출한 얼굴의 존재의 유무와, 상기 동체 검출부가 검출한 동체의 존재의 유무를 사용하여 소비 전력을 제어하고, 상기 화상 해석부가 얼굴의 존재를 소정 시간 검출할 수 없고, 또한 상기 동체 검출부가 동체의 존재를 상기 소정 시간 검출할 수 없었던 경우에 소비 전력을 저하시키는 제3 모드를 갖는, 표시 장치.
5. 제1항에 있어서, 상기 전력 제어부는, 화상을 표시하는 표시 패널의 휘도를 높이거나 낮춤으로써 소비 전력을 제어하는, 표시 장치.
6. 제1항에 있어서, 상기 전력 제어부는, 음성을 표시하는 스피커의 음량을 높이거나 낮춤으로써 소비 전력을 제어하는, 표시 장치.
7. 제1항에 있어서, 상기 전력 제어부는, 표시 화상을 고화질화하기 위한 회로의 동작을 제어함으로써 소비 전력을 제어하는, 표시 장치.
8. 제1항에 있어서, 상기 전력 제어부가 소비 전력의 제어를 정지하는 경우에, 소비 전력의 제어를 정지하고 있는 것을 통지하는 통지부를 더 구비하는, 표시 장치.
9. 제1항에 있어서, 상기 화상 해석부는, 상기 촬상부가 촬상한 동화상의 해석에 따라 개인을 특정하고, 상기 전력 제어부는 상기 화상 해석부가 특정한 개인에 따라서 상기 모드를 자동적으로 선택하는, 표시 장치.
10. 제1항에 있어서, 상기 전력 제어부는, 표시되는 콘텐츠의 내용에 따라서 상기 모드를 자동적으로 선택하는, 표시 장치.
11. 제1항에 있어서, 상기 전력 제어부는, 전원이 투입된 후 최초로 얼굴 또는 동체가 검출될 때까지는 소비 전력의 제어를 개시하지 않는, 표시 장치.
12. 화상 표시 방향에 대한 소정의 범위의 동화상을 촬상하는 촬상 스텝과,
    화상 표시 방향에 대한 소정의 범위의 동체의 존재의 유무를 검출하는 동체 검출 스텝과,
    상기 촬상된 동화상을 해석하여 얼굴의 존재의 유무를 검출하는 얼굴 검출 스텝과,
    얼굴의 존재의 유무와, 동체의 존재의 유무를 조합함으로써 복수의 모드에 의해 각각 다른 패턴으로 소비 전력을 제어하는 전력 제어 스텝을 포함하는, 제어 방법.

Images