JP2020177584A - 電子機器、制御方法、及びプログラム - Google Patents

電子機器、制御方法、及びプログラム Download PDF

Info

Publication number
JP2020177584A
JP2020177584A JP2019081236A JP2019081236A JP2020177584A JP 2020177584 A JP2020177584 A JP 2020177584A JP 2019081236 A JP2019081236 A JP 2019081236A JP 2019081236 A JP2019081236 A JP 2019081236A JP 2020177584 A JP2020177584 A JP 2020177584A
Authority
JP
Japan
Prior art keywords
state
person
detection
unit
electronic device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2019081236A
Other languages
English (en)
Inventor
和宏 小杉
Kazuhiro Kosugi
和宏 小杉
匡史 西尾
Tadashi Nishio
匡史 西尾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Singapore Pte Ltd
Original Assignee
Lenovo Singapore Pte Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Singapore Pte Ltd filed Critical Lenovo Singapore Pte Ltd
Priority to JP2019081236A priority Critical patent/JP2020177584A/ja
Priority to US16/506,080 priority patent/US10834461B1/en
Publication of JP2020177584A publication Critical patent/JP2020177584A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42201Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] biosensors, e.g. heat sensor for presence detection, EEG sensors or any limb activity sensors worn by the user
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/29Arrangements for monitoring broadcast services or broadcast-related services
    • H04H60/33Arrangements for monitoring the users' behaviour or opinions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25866Management of end-user data
    • H04N21/25875Management of end-user data involving end-user authentication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/4143Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a Personal Computer [PC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4436Power management, e.g. shutting down unused components of the receiver
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/658Transmission by the client directed to the server
    • H04N21/6587Control parameters, e.g. trick play commands, viewpoint selection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4333Processing operations in response to a pause request

Abstract

【課題】人物の存在の有無に応じて適切に電子機器の動作状態を制御すること。【解決手段】電子機器は、システムに基づくシステム処理を実行するシステム処理部と、所定の検出範囲内に人物が存在している第1検出状態から存在しない第2検出状態への変化を検出する人物検出部と、人物検出部により第1検出状態から第2検出状態への変化が検出された場合、システムの動作状態をシステム処理の少なくとも一部が制限された第1動作状態へ遷移させる指示をシステム処理部へ行う動作制御部と、前記人物検出部により第1検出状態から第2検出状態への変化が検出された場合、第1動作状態への遷移を禁止する指示を動作制御部に行うとともに、システム処理上で実行される特定の処理の処理状態に基づいて第1動作状態への遷移の禁止を解除する禁止制御部と、を備える。【選択図】図16

Description

本発明は、電子機器、制御方法、及びプログラムに関する。
人物が近づくと使用可能な状態に遷移し、人物が離れると一部の機能を除いて停止した待機状態に遷移する電子機器がある(例えば、特許文献1)。
特開2016−148895号公報
しかしながら、人物が離れたときに強制的に待機状態に遷移させてしまうと、電子機器で動作中の処理によっては、ユーザの意図に反して処理が中断されてしまうことがある。また、電子機器で動作中の処理によっては、当該処理が優先されて待機状態へ遷移できないことや、待機状態に遷移したとしても、待機状態によっては当該処理が継続的または断続的に実行されてしまうことがある。
本発明は、上記した事情に鑑みてなされたもので、人物の存在の有無に応じて適切に動作状態を制御する電子機器、制御方法、及びプログラムを提供することを目的の一つとする。
本発明は上記の課題を解決するためになされたものであり、本発明の第1態様に係る電子機器は、システムに基づくシステム処理を実行するシステム処理部と、所定の検出範囲内に人物が存在している第1検出状態から存在しない第2検出状態への変化を検出する人物検出部と、前記人物検出部により前記第1検出状態から前記第2検出状態への変化が検出された場合、前記システムの動作状態を前記システム処理の少なくとも一部が制限された第1動作状態へ遷移させる指示を前記システム処理部へ行う動作制御部と、前記人物検出部により前記第1検出状態から前記第2検出状態への変化が検出された場合、前記第1動作状態への遷移を禁止する指示を前記動作制御部に行うとともに、前記システム処理上で実行される特定の処理の処理状態に基づいて前記第1動作状態への遷移の禁止を解除する禁止制御部と、を備える。
上記電子機器は、前記システム処理上で実行される前記特定の処理として動画の再生処理を実行する再生処理部と、前記人物検出部により前記第1検出状態から前記第2検出状態への変化が検出された場合、且つ前記禁止制御部により前記第1動作状態への遷移を禁止する指示が行われている場合、前記動画の再生を停止させる指示を前記再生処理部へ行う再生制御部と、を備え、前記禁止制御部は、前記再生処理部による前記動画の再生処理の処理状態として前記動画の再生が停止状態であることを条件として、前記第1動作状態への遷移の禁止を解除してもよい。
上記電子機器において、前記禁止制御部は、前記人物検出部により前記第1検出状態から前記第2検出状態への変化が検出された場合、前記特定の処理が第1処理状態である場合に前記第1動作状態への遷移を禁止する指示を前記動作制御部に行い、前記特定の処理が前記第1処理状態から第2処理状態に変化したことを条件として、前記第1動作状態への遷移の禁止を解除してもよい。
上記電子機器において、前記動作制御部は、前記人物検出部により前記第1検出状態から前記第2検出状態への変化が検出された場合、表示部に表示される表示画像の少なくとも一部が視認できないように制御し、その後、前記禁止制御部により前記第1動作状態への遷移の禁止が解除された場合、第1動作状態へ遷移させる指示を前記システム処理部へ行ってもよい。
また、本発明の第2態様に係る、システムに基づくシステム処理を実行するシステム処理部を備えた電子機器における制御方法は、人物検出部が、所定の検出範囲内に人物が存在している第1検出状態から存在しない第2検出状態への変化を検出する人物検出ステップと、動作制御部が、前記人物検出ステップにより前記第1検出状態から前記第2検出状態への変化が検出された場合、前記システムの動作状態を前記システム処理の少なくとも一部が制限された第1動作状態へ遷移させる指示を前記システム処理部へ行う動作制御ステップと、禁止制御部が、前記人物検出部により前記第1検出状態から前記第2検出状態への変化が検出された場合、前記第1動作状態への遷移を禁止する指示を前記動作制御部に行うとともに、前記システム処理上で実行される特定の処理の処理状態に基づいて前記第1動作状態への遷移の禁止を解除する禁止制御ステップと、を有する。
また、本発明の第3態様に係るプログラムは、システムに基づくシステム処理を実行するシステム処理部を備えた電子機器としてのコンピュータに、所定の検出範囲内に人物が存在している第1検出状態から存在しない第2検出状態への変化を検出する人物検出ステップと、前記人物検出ステップにより前記第1検出状態から前記第2検出状態への変化が検出された場合、前記システムの動作状態を前記システム処理の少なくとも一部が制限された第1動作状態へ遷移させる指示を前記システム処理部へ行う動作制御ステップと、前記人物検出ステップにより前記第1検出状態から前記第2検出状態への変化が検出された場合、前記第1動作状態への遷移を禁止する指示を行うとともに、前記システム処理上で実行される特定の処理の処理状態に基づいて前記第1動作状態への遷移の禁止を解除する禁止制御ステップと、を実行させる。
本発明の上記態様によれば、人物の存在の有無に応じて適切に電子機器の動作状態を制御することができる。
第1の実施形態に係る電子機器のHPD処理の概要を説明する図。 第1の実施形態に係る再生制御の概要を示す図。 第1の実施形態に係る電子機器の外観の構成例を示す斜視図。 近接センサのセンサ検出範囲を示す模式図。 第1の実施形態に係る電子機器の構成例を示す概略ブロック図。 人物の呼吸に伴う距離変動の一例を示す図。 人物の離脱を検出するアルゴリズムを示す図。 第1の実施形態に係るシステム処理部の機能構成例を示す概略ブロック図。 第1の実施形態に係る起動制御の一例を示すフローチャート。 第1の実施形態に係る待機状態遷移処理の一例を示すフローチャート。 第1の実施形態に係る離脱検出時間計測処理の一例を示すフローチャート。 第1の実施形態に係るログイン処理時間計測処理の一例を示すフローチャート。 第1の実施形態に係る再生停止処理の一例を示すフローチャート。 第1の実施形態に係る再生再開処理の一例を示すフローチャート。 第2の実施形態に係るシステム処理部の機能構成例を示す概略ブロック図。 第2の実施形態に係る待機状態遷移処理の一例を示すフローチャート。
以下、図面を参照して、本発明の実施形態について説明する。
<第1の実施形態>
[概要]
まず、第1の実施形態に係る電子機器1の概要について説明する。本実施形態に係る電子機器1は、例えば、ノートブック型のPC(Personal Computer;パーソナルコンピュータ)である。なお、電子機器1は、デスクトップ型PC、タブレット端末装置、スマートフォンなど、いずれの形態の電子機器であってもよい。
電子機器1は、システムの動作状態として少なくとも通常動作状態(パワーオン状態)と待機状態との間を遷移可能である。通常動作状態とは、特に制限なく処理の実行が可能な動作状態であり、例えば、ACPI(Advanced Configuration and Power Interface)で規定されているS0状態に相当する。待機状態とは、システム処理の少なくとも一部が制限されている状態である。例えば、待機状態は、少なくとも表示部の表示がOFF(画面OFF)となる状態、または画面ロックとなる状態を含む。画面ロックとは、処理中の内容が視認できないように予め設定された画像(例えば、画面ロック用の画像)が表示部に表示され、ロックを解除(例えば、ユーザ認証)するまで、使用できない状態である。例えば、待機状態は、スタンバイ状態、スリープ状態等であってもよく、Windows(登録商標)におけるモダンスタンバイや、ACPIで規定されているS3状態(スリープ状態)等に相当する状態であってもよい。例えば、待機状態は、通常動作状態よりも電力の消費量が低い動作状態である。
以下では、システムの動作状態が待機状態から通常動作状態へ遷移することを起動と呼ぶことがある。待機状態では、一般的に通常動作状態よりも動作の活性度が低いため、電子機器1のシステムを起動させることは、電子機器1におけるシステムの動作を活性化させることになる。
図1は、本実施形態に係る電子機器1のHPD処理の概要を説明する図である。電子機器1は、後述する近接センサを備えており、電子機器1の近傍に存在する人物を検出する。この人物の存在を検出する処理のことを、HPD(Human Presence Detection)処理とも呼ぶことがある。電子機器1は、電子機器1の近傍に存在する人物を検出し、検出結果に基づいて電子機器1のシステムの動作状態を制御する。例えば、電子機器1は、図1(A)に示すように、電子機器1へ人物が接近したこと(Approach)を検出した場合、自動でシステムを起動して通常動作状態へ遷移させる。また、電子機器1は、図1(B)に示すように、電子機器1の前に人物が存在している状態(Presence)では、システムを待機状態へ遷移させないように制限し、通常動作状態を継続させる。そして、電子機器1は、図1(C)に示すように、電子機器1から人物が離脱したこと(Leave)を検出した場合には、システムを待機状態へ遷移させる。
また、電子機器1は、HPD処理により、システムの動作状態の制御に加えて、システム処理上で動作する動画の再生についても制御する。例えば、電子機器1は、動画の再生中に人物の離脱を検出した場合、再生中の動画を停止させてからシステムを待機状態へ遷移させる。動画の停止とは、再生中の動画の再生を止めて、その再生位置に留まらせること(所謂、一時停止(Pause))を指している。また、電子機器1は、その後人物の接近を検出した場合、システムを待機状態から通常動作状態へ遷移させた後、停止させた動画の再生を開始する。
ここで、実際に人物が電子機器1から離れてから電子機器1が人物の離脱を検出するまでにある程度のタイムラグ(例えば、最大で40秒程度)が生じることがある。この場合、人物の離脱を検出したことに応じて再生中の動画を停止させたとしても、このタイムラグの間はユーザが見ていないのに動画の再生が継続されてしまう。そのため、次に動画を再生するときに停止させた位置から再生してしまうと、ユーザにとっては前回見ていた動画の続きではなく、タイムラグの分進んだところから動画を見ることになってしまう。そこで、電子機器1は、動画の再生中にユーザが一旦離れた後に再び近づいた場合に、ユーザが離れたと推測されるタイミングでの再生位置に戻してから動画の再生を開始する。例えば、電子機器1は、人物の離脱検出におけるタイムラグによって再生されてしまった分を戻してから動画の再生を開始する。
なお、電子機器1は、人物の接近を検出した場合、システムを起動してから認証処理(例えば、ログイン処理)が完了するまで(動画の再生をユーザが見ることができるようになるまで)も、ある程度のタイムラグ(例えば、2〜10秒程度)が生じる。このタイムラグの間、ユーザは動画の再生を見ることができないが、電子機器1は、ログイン処理が完了する前から、バックグラウンドで動画の再生を開始してしまうことがある。そのため、電子機器1は、このログイン処理におけるタイムラグによって再生されてしまった分も更に戻してから動画の再生を開始してもよい。
これにより、電子機器1は、動画再生中にユーザが一旦離れて戻ってきたときに、人物の離脱を検出する際のタイムラグ(例えば、最大で40秒程度)と人物の接近を検出してからログイン処理が完了するまでのタイムラグ(例えば、2〜10秒程度)とによりユーザが見ることができないにもかかわらず再生が進んでしまった分を、戻した再生位置(ユーザが離れたと推測されるタイミングでの再生位置)から再生を開始することができる。
図2は、本実施形態に係る再生制御の概要を示す図である。この図では、横軸を時間tとして、HPD処理による動画の再生制御の一例を示している。動画とは、例えば、電子機器1のOS(Operating System)上で動作するアプリケーションプログラムで再生が可能なストリーミング動画やMP4等のファイル形式で保存されている動画等である。時刻t10において、ユーザが電子機器1から離れた場合(User Leave)、電子機器1は、近接センサの出力に基づいて、人物(ユーザ)の離脱を検出する(Detect Leave)。例えば、電子機器1は、時刻t10から時刻t15までの検出時間T1(Detect time)をかけて離脱を検出したとすると、時刻t15で動画の再生を停止(一時停止:Pause)させてから、システムを待機状態に遷移させる。よって、電子機器1は、ユーザが電子機器1から離れた時刻t10の後はユーザが見ていないのに、動画の再生(Playback)を時刻t15まで継続してから待機状態に移行することになる。即ち、ユーザが動画を見なくなったあとも動画の再生が検出時間T1の分だけ進むことになる。
また、時刻t20において、ユーザが電子機器1へ接近したことにより(User Approach)、電子機器1が人物(ユーザ)の接近を検出したとする(Detect Approach)。電子機器1は、人物(ユーザ)の接近を検出したことに応じて、システムを待機状態から起動し、ログイン処理を実行する。この時、システムの起動とともに、待機状態に遷移する前に動画を再生していたアプリケーションプログラムが、動画の再生を開始することがある。最大で、人物(ユーザ)の接近を検出した時刻t20からログイン処理が完了(Login comp)する時刻t25までのログイン処理時間T2(Login time)の間、ユーザは見ることができないが動画の再生が進む。そこで、電子機器1は、ログイン処理が完了したことに応じて、検出時間T1で再生された再生時間の分とログイン処理時間T2で再生された再生時間の分とを戻してから(Revers)、時刻t30において動画の再生を開始させる。即ち、電子機器1は、ログイン処理が完了したことに応じて、ユーザが離れたと推測されるタイミングでの再生位置から動画の再生を開始させる。なお、戻すのにかかる時間(時刻t25から時刻t30)は、戻す分の動画の長さと、戻す際の速度(アプリケーションプログラムによる再生の早戻しの速度)によって変化する。これにより、動画の再生中に一旦離れたユーザが戻ってきたときに、特に操作をしなくても、離れる前に見ていた再生位置の続きから見ることができる。なお、電子機器1は、検出時間T1とログイン処理時間T2との合計にさらに所定の時間をマージンとして加えた分の再生時間を戻してから再生してもよい。
次に、本実施形態に係る電子機器1の構成について詳しく説明する。
[電子機器の外観構成]
図3は、本実施形態に係る電子機器1の外観の構成例を示す斜視図である。
電子機器1は、第1筐体10、第2筐体20、及びヒンジ機構15を備える。第1筐体10と第2筐体20は、ヒンジ機構15を用いて結合されている。第1筐体10は、第2筐体20に対して、ヒンジ機構15がなす回転軸の周りに相対的に回動可能である。回転軸の方向は、ヒンジ機構15が設置されている側面10c、20cに対して平行である。
第1筐体10は、Aカバー、ディスプレイ筐体とも呼ばれる。第2筐体20は、Cカバー、システム筐体とも呼ばれる。以下の説明では、第1筐体10と第2筐体20の側面のうち、ヒンジ機構15が備わる面を、それぞれ側面10c、20cと呼ぶ。第1筐体10と第2筐体20の側面のうち、側面10c、20cとは反対側の面を、それぞれ側面10a、20aと呼ぶ。図示において、側面20aから側面20cに向かう方向を「後」と呼び、側面20cから側面20aに向かう方向を「前」と呼ぶ。後方に対して右方、左方を、それぞれ「右」、「左」と呼ぶ。第1筐体10、第2筐体20の左側面をそれぞれ側面10b、20bと呼び、右側面をそれぞれ側面10d、20dと呼ぶ。また、第1筐体10と第2筐体20とが重なり合って完全に閉じた状態(開き角θ=0°の状態)を「閉状態」と呼ぶ。閉状態において第1筐体10と第2筐体20との互いに対面する側の面を、それぞれの「内面」と呼び、内面に対して反対側の面を「外面」と呼ぶ。また、閉状態に対して第1筐体10と第2筐体20とが開いた状態のことを「開状態」と呼ぶ。
図3に示す電子機器1の外観は開状態の例を示している。開状態は、第1筐体10の側面10aと側2筐体20の側面20aとが離れた状態である。開状態では、第1筐体10と第2筐体20とのそれぞれの内面が表れ、電子機器1は通常の動作を実行可能とすることが期待される。開状態は、第1筐体10の内面と第2筐体20の内面とがなす開き角θが所定の角度以上になった状態であり、典型的には100〜130°程度となる。なお、開状態となる開き角θの範囲は、ヒンジ機構15よって回動可能な角度の範囲等に応じて任意に定めることができる。
第1筐体10の内面には、表示部110が設けられている。表示部110は、液晶ディスプレイ(LCD:Liquid Crystal Display)や有機EL(Electro Luminescence)ディスプレイなどを含んで構成されている。また、第1筐体10の内面のうち表示部110の周縁の領域に、撮像部120と近接センサ130とが設けられている。撮像部120は、表示部110の周縁の領域のうち側面20a側に配置されている。近接センサ130は、表示部110の周縁の領域のうち側面20c側に配置されている。
撮像部120は、開状態において、第1筐体10の内面に対面する方向(前方)の所定の画角内の物体の像を撮像する。所定の画角とは、撮像部120が有する撮像素子と撮像素子の撮像面の前方に設けられた光学レンズとによって定める撮像画角である。
近接センサ130は、電子機器1の近傍に存在する物体(例えば、人物)を検出する。例えば、近接センサ130は、赤外線を発光する発光部と、発光した赤外線が物体の表面に反射して戻ってくる反射光を受光する受光部とを含んで構成される赤外線距離センサである。近接センサ130は、所定のサンプリング周期(例えば、1Hz)で、受光部が受光した光を検出し、受光した結像位置に基づいて距離を算出する三角測距方式や、発光から受光までの時間差等を距離に換算するToF(Time of Flight)方式等を用いて、物体(例えば、人物)との距離に応じて検出信号を出力する。
図4は、近接センサ130のセンサ検出範囲を示す模式図である。開状態において、第1筐体10の内面に配置されている近接センサ130は、第1筐体10の内面に対面する方向(前方)における物体(例えば、人物)を検出する。検出視野角FoV(Field of View)は、近接センサ130が検出可能な角度を示す。検出限界距離KLaは、近接センサ130が検出可能な限界距離を示す。この検出視野角FoV(例えば、25°〜30°)と検出限界距離KLa(例えば、120cm)とによる範囲が、近接センサ130が検出可能なセンサ検出範囲である。
なお、近接センサ130は、発光ダイオードが発光する赤外線を用いたセンサであってもよいし、発光ダイオードが発光する赤外線よりも波長帯域が狭い光線を発光する赤外線レーザを用いたセンサであってもよい。また、近接センサ130は、赤外線距離センサに限定されるものでなく、物体との距離を検出するセンサであれば、超音波センサまたはUWB(Ultra Wide Band)レーダを用いたセンサ等の他の方式を用いたセンサであってもよい。
図3に戻り、第2筐体20の側面20bには、電源ボタン140が設けられている。電源ボタン140は、システムの起動(待機状態から通常動作状態へ遷移)や通常動作状態から待機状態への遷移をユーザが指示するための操作子である。また、第2筐体20の内面には、キーボード151及びタッチパッド153が入力デバイスとして設けられている。なお、入力デバイスとして、キーボード151及びタッチパッド153に代えて、または加えて、タッチセンサが含まれてもよいし、マウスや外付けのキーボードが接続されてもよい。タッチセンサが設けられた構成の場合、表示部110の表示面に対応する領域が操作を受け付けるタッチパネルとして構成されてもよい。また、入力デバイスには、音声が入力されるマイクが含まれてもよい。
なお、第1筐体10と第2筐体20とが閉じた閉状態では、第1筐体10の内面に設けられている表示部110、撮像部120、及び近接センサ130は、第2筐体20の内面に覆われて、機能を発揮できない状態である。第1筐体10と第2筐体20とが完全に閉じた状態では、開き角θは0°となる。
[電子機器の構成]
図5は、本実施形態に係る電子機器1の構成例を示す概略ブロック図である。電子機器1は、表示部110、撮像部120、近接センサ130、電源ボタン140、入力デバイス150、EC(Embedded Controller)200、システム処理部300、通信部350、記憶部360、及び電源部400を含んで構成される。表示部110は、システム処理部300により実行されるシステム処理及びシステム処理上で動作するアプリケーションプログラムの処理等に基づいて生成された表示データ(画像)を表示する。
撮像部120は、第1筐体10の内面に対面する方向(前方)の所定の画角内の物体の像を撮像し、撮像した画像をシステム処理部300へ出力する。例えば、電子機器1に接近した人物の顔面が撮像部120の画角内に含まれるとき、撮像部120は、人物の顔画像を撮像し、撮像した顔画像をシステム処理部300へ出力する。撮像部120は、赤外線カメラであってもよいし、通常のカメラであってもよい。赤外線カメラは、撮像素子として赤外線センサを備えるカメラである。通常のカメラは、撮像素子として可視光線を受光する可視光センサを備えるカメラである。
近接センサ130は、第1筐体10の内面に対面する方向(前方)に存在する物体(例えば、人物)を検出し、検出結果を示す検出信号をEC200へ出力する。電源ボタン140は、ユーザの操作に応じて操作信号をEC200へ出力する。
入力デバイス150は、ユーザの入力を受け付ける入力部であり、例えばキーボード151及びタッチパッド153を含んで構成されている。入力デバイス150は、キーボード151及びタッチパッド153に対する操作を受け付けることに応じて、操作内容を示す操作信号をEC200へ出力する。
電源部400は、電子機器1の各部の動作状態に応じて各部へ電力を供給するための電源系統を介して電力を供給する。電源部400は、DC(Direct Current)/DCコンバータを備える。DC/DCコンバータは、AC(Alternate Current)/DCアダプタもしくは電池パックから供給される直流電力の電圧を、各部で要求される電圧に変換する。DC/DCコンバータで電圧が変換された電力が各電源系統を介して各部へ供給される。例えば、電源部400は、EC200から入力される各部の動作状態に応じて制御信号に基づいて各電源系統を介して各部に電力を供給する。
EC200は、CPU(Central Processing Unit)、RAM(Random Access Memory)、ROM(Read Only Memory)およびI/O(Input/Output)ロジック回路などを含んで構成されたマイクロコンピュータである。EC200のCPUは、自部のROMに予め記憶した制御プログラムを読み出し、読み出した制御プログラムを実行して、その機能を発揮する。EC200は、システム処理部300とは独立に動作し、システム処理部300の動作を制御し、その動作状態を管理する。また、EC200は、近接センサ130と、入力デバイス150と電源部400に接続されている。
例えば、EC200は、電源部400と通信を行うことにより、バッテリーの状態(残容量など)の情報を電源部400から取得するとともに、電子機器1の各部の動作状態に応じた電力の供給を制御するための制御信号などを電源部400へ出力する。また、EC200は、入力デバイス150から操作信号を取得し、取得した操作信号のうちシステム処理部300の処理に関連する操作信号についてはシステム処理部300へ出力する。また、EC200は、近接センサ130から検出結果を示す検出信号を取得し、検出結果に基づいてHPD処理を実行する。例えば、EC200は、HPD処理に関する機能構成として、人物検出部210、動作制御部220、及び再生制御部230とを備えている。
人物検出部210は、近接センサ130から取得する検出信号に基づいて、所定の検出範囲内に存在する人物(より詳しくは、人物と推測される物体)を検出する。例えば、近接センサ130から取得する検出信号に基づいて、電子機器1の前方(正面)の所定の検出範囲内に存在する人物との距離を検出する。所定の検出範囲とは、電子機器1の前方(正面)における人物を検出するために予め設定された範囲であり、以下では人物検出範囲という。この人物検出範囲は、検出対象とする視野角を示す検出視野角と、検出対象とする距離を示す最大検出距離とにより定まる範囲である。例えば、人物検出範囲は、近接センサ130のセンサ検出範囲に相当する。具体的には、人物検出範囲における検出視野角は、例えば、近接センサ130の検出視野角FoV(図4参照)に相当する。また、人物検出範囲における最大検出距離は、例えば近接センサ130の検出限界距離KLa(図4参照)に相当する。なお、人物検出範囲は、近接センサ130のセンサ検出範囲のうちの一部の範囲として、最大検出距離または最短検出距離に制限を設けてもよい。つまり、人物検出部210は、近接センサ130のセンサ検出範囲のうち予め設定された範囲を人物検出範囲として人物(人物との距離)を検出してもよい。
例えば、人物検出部210は、近接センサ130から取得する人物との距離に応じた検出信号を取得した場合には、人物検出範囲内に人物が存在すること、及び人物までの距離を検出する。一方、人物検出部210は、近接センサ130から人物との距離に応じた検出信号を取得できなかった場合には、人物検出範囲内に人物が存在しないことを検出する。
また、人物検出部210は、人物検出範囲内に人物を検出しない状態から人物を検出した場合、電子機器1の前方に人物が接近したものと判定し、電子機器1への人物の接近を検出する。また、人物検出部210は、人物検出範囲内に人物を検出した後、継続して人物を検出している場合には、電子機器1の前方に人物が存在しているものと判定する。また、人物検出部210は、人物検出範囲内に人物を検出している状態から人物を検出しなくなった場合、電子機器1の前方に存在していた人物が離れたものと判定し、電子機器1からの人物の離脱を検出する。
ここで、近接センサ130から取得する人物との距離に応じた検出信号は、人物以外の物体であっても取得される。人物検出範囲内に存在していた物体が検出されなくなった場合、または人物検出範囲内に存在していなかった物体が検出されるようになった場合、その物体は移動する物体であって状況的に概ね人物と推測できる。一方、狭い部屋やボックス席等で電子機器1を使用している場合、ユーザが電子機器1から離れても壁や椅子の背もたれが近距離(人物検出範囲内)に存在することがある。この場合、人物検出部210は、人物検出範囲内に壁や椅子の背もたれ等の物体の存在を検出し続け、ユーザの離脱を正しく検出できない懸念がある。そのため、人物検出部210は、検出範囲内に人物が存在するか否かを、人物の呼吸に伴う胸部の動きを利用して検出する。
例えば、人物検出部210は、人物検出範囲内に存在する物体が人物であるか人物以外の物体であるかを、近接センサ130が検出する物体との距離に基づいて、人物の呼吸により生じる微細な距離の変動があるか否かによって判定する。
図6は、人物の呼吸(Human bresthing)に伴う距離変動の一例を示す図である。この図は、正対する人物の胸部との距離を5kHzのサンプリング周期で測定した測定結果の一例を示している。人物の呼吸により肺が膨張/収縮を繰り返すことにより胸部が動くため、胸部との距離に呼吸の周期に応じて数mm程度の微細な変動が生じる。人物検出部210は、近接センサ130から取得する検出信号に基づいて、人物の呼吸の周期に応じて発生する数mm程度の微細な距離の変動の有無を検出する。電子機器1の前方(正面)に存在するのが人物(正対する人物)である場合には、この人物の呼吸の周期に応じて発生する微細な距離の変動が検出され、電子機器1の前方(正面)に存在するのが人物以外の物体(例えば、壁や椅子の背もたれ等)である場合には、この微細な距離の変動が検出されない。人物検出部210は、この微細な距離の変動が検出された場合には人物であると判定し、この微細な距離の変動が検出されない場合には人物以外の物体であると判定する。例えば、人物検出部210は、人物検出範囲内に人物が存在している状態(Presence)から存在しない状態への変化(即ち、人物が離脱したこと(Leave))を、上記の微細な距離の変動の有無に基づいて検出する。
図7は、人物の離脱を検出するアルゴリズムを示す図である。この図において、符号L1が示す線は、近接センサ130により検出された検出距離(mm)を示す。符号L2が示す線は、人物の存在確率(HOP:Human Occupancy Probability)(%)を示す。人物検出部210は、人物の呼吸による距離の変動が微細であるため、人物の存在を検出している状態(例えば、人物の存在確率100%)から微細な距離の変動が検出されなくなると、予め設定された値(バジェット)から引き算を開始し、所定の値まで減少した時点(時刻t15)で、人物が離脱したこと(Leave)を検出する。この予め設定された値(バジェット)から引き算を開始してから人物が離脱したことを検出する(人物が離脱したと判定する)までの時間は、前述したように最大で40秒程度(図2の検出時間T1)かかることがある。なお、この図7に示す時刻t15が、図2に示す時刻t15に対応する。このように、人物検出部210は、人物検出範囲内に人物が存在している状態(Presence)から存在しない状態への変化(即ち、人物が離脱したこと(Leave))を、検出時間T1(図2参照)をかけて検出する。
図5に戻り、動作制御部220は、待機状態において、人物検出部210により人物検出範囲内に人物が検出された場合、待機状態のシステムを起動させる。具体的には、動作制御部220は、人物検出部210が人物検出範囲内に人物を検出しない状態から人物を検出した場合(即ち、電子機器1への人物の接近を検出した場合)、システムを起動させる指示をシステム処理部300へ行う。より具体的には、動作制御部220は、システムを起動させる場合、電源部400に対して、電子機器1の各部の動作に必要な電力を供給するための制御信号を出力する。その後、動作制御部220は、システム処理部300にシステムの起動を指示するための起動信号を出力する。システム処理部300は、起動信号を取得すると、システムを起動して待機状態から通常動作状態へ遷移させる。
また、動作制御部220は、人物検出部210が人物検出範囲内に人物を継続して検出している場合、システム処理部300によりシステムを待機状態に遷移させないように制限し、通常動作状態を継続させる。なお、動作制御部220は、人物検出部210が人物検出範囲内に人物を継続して検出している場合であっても、所定の条件(例えば、無操作の時間が予め設定された時間継続した場合、且つ動画の再生中でない場合)によって、通常動作状態から待機状態へ遷移させてもよい。
また、動作制御部220は、人物検出部210が人物検出範囲内に人物を検出している状態から人物を検出しなくなった場合(即ち、電子機器1からの人物の離脱を検出した場合)、システムを通常動作状態から待機状態へ遷移させる指示をシステム処理部300へ行う。より具体的には、動作制御部220は、システム処理部300にシステムを通常動作状態から待機状態へ遷移させる指示をするための待機信号を出力する。システム処理部300は、待機信号を取得すると、システムを通常動作状態から待機状態へ遷移させる。その後、動作制御部220は、電源部400に対して、待機状態では不要な電力の供給を停止させるための制御信号を出力する。
なお、動作制御部220は、HPD処理の他に、電源ボタン140に対する操作や、OSで用意されている動作制御メニュー(ログアウト(サインアウト)、スリープ、シャットダウン、再起動等)を選択するための入力デバイス150に対する操作に基づいて、システムの動作状態を制御する。例えば、動作制御部220は、電源ボタン140から操作信号を取得し、取得した操作信号に基づいてシステムの動作状態を通常動作状態または待機状態に遷移させる指示をシステム処理部300へ行う。例えば、動作制御部220は、待機状態において、電源ボタン140が押下されたことを示す操作信号を取得した場合、システムを起動させるための制御信号(起動信号)をシステム処理部300へ出力する。また、動作制御部220は、通常動作状態において、電源ボタン140が押下されたことを示す操作信号を取得した場合、システムの動作状態を通常動作状態から待機状態へ遷移させる制御信号をシステム処理部300へ出力する。より具体的には、動作制御部220は、例えば通常動作状態において、電源ボタン140が所定の時間より短い時間押下されたことを示す操作信号を取得した場合にはシステムの動作状態をスリープ状態へ遷移させる制御信号を出力し、電源ボタン140が所定の時間より長い時間押下(長押し操作)されたことを示す操作信号を取得した場合にはシステムの動作状態をシャットダウンした状態へ遷移させる制御信号を出力してもよい。
再生制御部230は、システム処理部300で実行される動画の再生処理に対する制御を行う。例えば、再生制御部230は、人物検出部210が人物の離脱を検出する際の検出時間T1(図2参照)の最初のタイミングで動画が再生中であった場合、この検出時間T1の最後のタイミング(即ち、人物の離脱が検出されたタイミング)に応じて、再生中の動画を停止させる指示をシステム処理部300へ行う。具体的には、再生制御部230は、動画の再生を停止させる指示をする「停止コマンド」をシステム処理部300へ送信する。また、再生制御部230は、人物検出部210による検出状況に基づいて、検出時間T1をタイマ(離脱検出タイマ)で計測する。
また、再生制御部230は、人物検出部210により人物の接近が検出された場合、人物の接近を検出してからログイン処理が完了するまでのログイン処理時間T2(図2参照)をタイマ(ログイン処理タイマ)で計測する。そして、再生制御部230は、ログイン処理が完了したタイミングに応じて、検出時間T1(図2参照)の最初のタイミングにおける再生位置を基準に動画の再生を開始(再開)させる指示をシステム処理部300へ行う。例えば、再生制御部230は、検出時間T1とログイン処理時間T2とで再生された時間分を戻した再生位置(即ち、検出時間T1の最初のタイミングにおける再生位置)を基準に動画の再生を開始させる指示をシステム処理部300へ行う。具体的には、再生制御部230は、ログイン処理が完了したタイミングに応じて、再生位置を前に戻す指示をする「早戻しコマンド」をシステム処理部300へ送信した後、検出時間T1とログイン処理時間T2とで再生された時間分を戻すのに必要な時間が経過したタイミングで、再生を開始させる指示をする「再生コマンド」をシステム処理部300へ送信する。なお、再生制御部230は、「早戻しコマンド」及び「再生コマンド」を送信する際に、先に「停止コマンド」を送信してから「早戻しコマンド」及び「再生コマンド」を送信してもよい。
なお、再生制御部230は、検出時間T1とログイン処理時間T2とで再生された時間分を戻した再生位置(即ち、検出時間T1の最初のタイミングにおける再生位置)からさらに所定の時間分(例えば、10秒、1分等)を戻した再生位置から動画の再生を開始させる指示をシステム処理部300へ行ってもよい。
システム処理部300は、CPU(Central Processing Unit)302、GPU(Graphic Processing Unit)304、メモリコントローラ306、I/O(Input−Output)コントローラ308、システムメモリ310、及び認証処理部321を含んで構成され、OS(Operating System)に基づくシステム処理によって、OS上で各種のアプリケーションプログラムの処理が実行可能である。CPU302とGPU304をプロセッサと総称することがある。
CPU302は、OSによる処理や、OS上で動作するアプリケーションプログラムによる処理を実行する。また、CPU302は、EC200が近接センサ130の検出結果に基づいて行うHPD処理によりシステムの動作状態を遷移させる。例えば、CPU302は、動作状態が待機状態であって、EC200から起動信号が入力された場合、待機状態から通常動作状態に遷移させる起動処理を実行する。例えば、動作状態がスリープ状態、ハイバネーション状態またはパワーオフ状態であるとき、電源部400から電力の供給を受け、かつEC200から起動信号が入力されると、CPU302は、起動処理を開始する。CPU302は、起動処理において、システムメモリ310、記憶部360などの最小限のデバイスの検出と初期化を行う(プリブート)。CPU302は、記憶部360からシステムファームウェアをシステムメモリ310にロードし、通信部350、表示部110などその他のデバイスの検出と初期化を行う(ポスト処理)。初期化には、初期パラメータの設定などの処理が含まれる。なお、スリープ状態から通常動作状態への遷移(レジューム)においては、ポスト処理の一部が省略されることがある。CPU302は、起動処理が完了した後、OSに基づくシステム処理の実行を開始する(起動)。例えば、CPU302は、動作状態がスタンバイ状態であって、EC200から起動信号が入力されると、実行を停止していたアプリケーションプログラムの実行を再開する。
CPU302は、起動処理において、OSの利用を許可するか否かを判定するログイン処理を実行する。CPU302は、OSによる起動処理を開始すると、OSの利用を許可する前にログイン処理を実行し、ログイン処理でログインを許可するまで、通常動作状態への遷移を一旦停止する。ログイン処理では、電子機器1を使用する人物が予め登録された正規のユーザであるか否かを判定するユーザ認証処理が行われる。認証には、パスワード認証、顔認証、指紋認証などがある。本実施形態では、顔認証処理を用いる例を説明する。具体的には、図8を参照して後述する。
また、CPU302は、上述したHPD処理によって動作状態を遷移させる他に、OSの処理としても動作状態を遷移させる。例えば、CPU302は、通常動作状態において無操作の時間が予め設定された時間継続した場合に、OSの処理により通常動作状態から待機状態へ遷移させる。予め設定された時間とは、無操作の時間が継続した場合に待機状態に遷移させることを判定するための閾値であり、OSのシステム設定の中で設定可能である。例えば、無操作の時間が継続した場合に、表示部110の表示がOFF(画面OFF)となる状態へ遷移させることを判定する「画面OFF時間」や、スリープ状態へ遷移させることを判定する「スリープ時間」などがあり、それぞれ選択肢の中からユーザが任意に選択して設定できる。選択肢には、時間の選択肢(例えば、「1分」、「2分」、「4分」、「10分」、「30分」、「1時間」、・・・など)に加えて、画面OFFへの遷移を禁止する設定またはスリープ状態への遷移を禁止する設定(例えば、「なし」)なども含まれる。
GPU304は、表示部110に接続されている。GPU304は、CPU302の制御に基づいて画像処理を実行して表示データを生成する。GPU304は、生成した表示データを表示部110に出力する。なお、CPU302とGPU304は、一体化して1個のコアとして形成されてもよいし、個々のコアとして形成されたCPU302とGPU304の相互間で負荷が分担されてもよい。プロセッサの数は、1個に限られず、複数個であってもよい。
メモリコントローラ306は、CPU302とGPU304によるシステムメモリ310、記憶部360などからのデータの読出し、書込みを制御する。
I/Oコントローラ308は、通信部350、表示部110およびEC200からのデータの入出力を制御する。
システムメモリ310は、プロセッサの実行プログラムの読み込み領域ならびに処理データを書き込む作業領域として用いられる。
通信部350は、無線または有線による通信ネットワークを介して他の機器と通信可能に接続し、各種のデータの送信および受信を行う。例えば、通信部350は、イーサネット(登録商標)等の有線LANインターフェースやWi−Fi(登録商標)等の無線LANインターフェース等を含んで構成されている。
記憶部360は、HDD(Hard Disk Drive)、セキュアNVRAM(Non−Volatile RAM)、ROM(Read Only Memory)などの記憶媒体を含んで構成される。HDDは、OS、デバイスドライバ、アプリケーションなどの各種のプログラム、その他、プログラムの動作により取得した各種のデータを記憶する。セキュアNVRAMには、各ユーザの認証に用いる認証データを記憶する。認証データには、各ユーザの識別情報と、認証情報とを対応付けて記憶する。セキュアNVRAMには、I/Oコントローラ308から経由したOSの動作環境からはアクセスできないように保護(ロック)される。但し、CPU302のパワーオン、リセット時にロックを解除し、プリブートの終了時にシステムファームウェアを実行してロックを開始する。
次に、システム処理部300で実行されるログイン処理及び再生処理の機能構成について説明する。
図8は、本実施形態に係るシステム処理部300の機能構成の一例を示すブロック図である。システム処理部300は、CPU302が実行する機能構成のうちログイン処理に関係する構成の一例として、認証処理部321と、ログイン処理部322と、ログオフ処理部323とを備えている。また、システム処理部300は、CPU302が実行する機能構成のうち動画の再生処理に関係する構成の一例として、再生処理部324を備えている。
認証処理部321は、撮像部120から出力される撮像画像に基づいて顔認証処理を実行する。顔認証処理は、顔検出処理と顔照合処理とを含む。顔検出処理は、撮像部120から出力される撮像画像の画像データから顔画像の領域である顔領域を定める処理である。顔画像とは、電子機器1の前方に存在する人物の顔の画像である。なお、顔検出処理認証処理部おいて、撮像部120が取得する深度情報を利用してもよい。顔照合処理は、顔領域から顔の特徴を表す複数の顔特徴点(例えば、口、目、鼻、など)の位置を求め、顔領域の位置と大きさがそれぞれ所定の位置と大きさとなるように正規化し、正規化した顔特徴点の分布を画像特徴量として定める過程と、定めた画像特徴量と所定の人物の顔画像に係る画像特徴量と照合し、照合に成功した画像特徴量に係る人物を特定する過程を有する。記憶部360には、アカウント毎に、そのアカウントでログインする正規ユーザとしての認証情報が設定されている。認証情報には、そのユーザの顔画像の画像特徴量が含まれる。認証情報には、さらにそのユーザを示すユーザ情報を対応付けて記憶される。ユーザ情報は、例えば、ユーザ名、ユーザID(Identifier)、など電子機器1のユーザを特定できる情報であればよい。
認証処理部321は、撮像部120で撮像された人物の顔画像と、設定されているユーザの認証情報とを照合した結果が一致と判断できる場合に顔認証に成功したと判定する。一方、認証処理部321は、例えば、電子機器1を使用する人物以外の人物が前を単に横切った場合には、撮像部120で撮像された画像から顔領域が検出されない。認証処理部321は、顔認証の成否を示す認証結果をログイン処理部322に出力する。
ログイン処理部322は、認証処理部による認証結果に基づいてログインする(ユーザがOSを利用可能な状態にする)ログイン処理を実行する。具体的には、ログイン処理部322は、起動処理において、OSの利用を許可する前に顔認証処理の実行を認証処理部321に指示し、以降の起動処理を一旦停止する。ログイン処理部322は、認証処理部321による認証結果が成功であった場合、ログインを許可し、一旦停止していた起動処理の実行を再開させる。一方、認証処理部321による認証結果が失敗であった場合、ログインを許可しない旨を通知し、起動処理の実行を停止させたままにする。
ログオフ処理部323は、ログインしている状態からログオフするログオフ処理を実行する。例えば、ユーザ操作、OSの処理、またはHPD処理などによりログオフの指示(待機状態への遷移指示)を受けた場合、ログオフ処理部323は、ログオフ処理を実行する。
再生処理部324は、OS上で動作する動画再生用のアプリケーションプログラムを実行することにより実現される機能であり、ストリーミング動画やMP4等のファイル形式で保存されている動画等の再生を行う。再生された動画の画像は、表示部110に表示される。例えば、再生処理部324は、システムが通常動作状態であるときには、アプリケーションプログラムに基づいて表示部110に表示される「再生」、「停止(一時停止)」、「早戻し」、「早送り」等の機能のそれぞれに対応する操作ボタンへのユーザの操作に応じて、当該操作を示す操作信号をC200から取得し、当該操作信号に応じて動画の「再生」、「停止(一時停止)」、「早戻し」、「早送り」等を実行する。また、システムが通常動作状態から待機状態へ遷移する際や、待機状態から通常動作状態へ遷移する際には、再生処理部324は、EC200の再生制御部230から取得する「再生コマンド」、「停止コマンド」、「早戻しコマンド」等に応じて、動画の再生、停止、早戻し等を実行する。
[HPD処理による動作状態制御処理の動作]
次に、HPD処理によりシステムの動作状態を制御する動作状態制御処理の動作について説明する。まず、EC200が、電子機器1への人物の接近を検出したことによりシステムを起動する起動処理の動作について説明する。
図9は、本実施形態に係る起動制御の一例を示すフローチャートである。ここでは、電子機器1は、開状態で机の上等に置かれており、待機状態であるものとする。
(ステップS101)EC200は、近接センサ130から取得する検出信号に基づいて、電子機器1への人物の接近を検出したか否かを判定する。EC200は、人物検出範囲内に人物を検出しない状態から人物を検出した場合、電子機器1への人物の接近を検出したと判定する。また、EC200は、人物検出範囲内に人物を検出しない状態のままである場合、電子機器1への人物の接近を検出していないと判定する。そして、EC200は、電子機器1への人物の接近を検出していないと判定した場合(NO)、再びステップS101の処理を行う。一方、EC200は、電子機器1への人物の接近を検出したと判定した場合(YES)、ステップS103の処理に進む。
(ステップS103)EC200は、システム処理部300によるシステムを起動させる。具体的には、EC200は、システム処理部300によるシステムを起動させる場合、電源部400に対して、電子機器1の各部の動作に必要な電力を供給するための制御信号を出力する。また、EC200は、システム処理部300にシステムの起動を指示するための起動信号を出力する。システム処理部300は、起動信号を取得すると、起動処理を開始する。そして、ステップS105の処理に進む。
(ステップS105)システム処理部300は、ログイン処理(認証処理)を実行する。例えば、システム処理部300は、撮像部120から取得する撮像画像に基づいて顔認証によるログイン処理を実行し、ステップS107の処理に進む。
(ステップS107)システム処理部300は、認証結果が成功であるか否かを判定する。システム処理部300は、認証結果が成功であると判定した場合には(YES)、ステップS109の処理に進む。一方、システム処理部300は、認証結果が失敗であると判定した場合には(NO)、ステップS113の処理に進む。
(ステップS109)システム処理部300は、認証結果が成功の場合にはログイン成功である旨を通知し(例えば、表示部110に表示)、起動処理を継続する。そして、ステップS111の処理に進む。
(ステップS111)システム処理部300は、ログイン処理を完了し、通常動作状態に遷移する。ここで、EC200が人物の接近を検出してからログイン処理が完了するまでには、ログイン処理時間T2(図2参照)かかる。
(ステップS113)システム処理部300は、認証結果が失敗の場合にはログイン失敗である旨を通知し(例えば、表示部110に表示)、ステップS105の認証処理に戻る。なお、システム処理部300は、連続して所定の回数の認証処理に失敗した場合には、認証処理を中止し、ログイン不可の状態に遷移させてもよい。
次に、EC200が、電子機器1からの人物の離脱を検出したことによりシステムを通常動作状態から待機状態へ遷移させる待機状態遷移処理の動作について説明する。
図10は、本実施形態に係る待機状態遷移処理の一例を示すフローチャートである。ここでは、電子機器1は、開状態で机の上等に置かれており、通常動作状態であるものとする。
(ステップS151)EC200は、近接センサ130から取得する検出信号に基づいて、電子機器1からの人物の離脱を検出したか否かを判定する。ここで、EC200は、人物の離脱を検出する際には、前述したように検出時間T1(図2参照)をかけて検出する。
例えば、EC200は、人物検出範囲内に人物を検出している状態から人物を検出しなくなった場合、電子機器1からの人物の離脱を検出したと判定する。一方、EC200は、人物検出範囲内に人物を検出している状態のままである場合、電子機器1からの人物の離脱を検出していないと判定する。そして、EC200は、電子機器1からの人物の離脱を検出していない場合(NO)、再びステップS151の処理を行う。一方、EC200は、電子機器1からの人物の離脱を検出した場合(YES)、ステップS153の処理に進む。
(ステップS153)EC200は、システム処理部300によるシステムを通常動作状態から待機状態へ遷移させる。具体的には、EC200は、システム処理部300にシステムを待機状態へ遷移させる指示をするための待機信号を出力する。システム処理部300は、待機信号を取得すると、通常動作状態から待機状態へ遷移させる。また、EC200は、電源部400に対して、待機状態では不要な電力の供給を停止させるための制御信号を出力する。
[HPD処理による再生制御処理の動作]
次に、HPD処理により再生中の動画の停止と再開を制御する再生制御処理の動作について説明する。まず、EC200が、人物の離脱を検出する際の検出時間T1を計測する離脱検出時間計測処理の動作について説明する。
図11は、本実施形態に係る離脱検出時間計測処理の一例を示すフローチャートである。ここでは、電子機器1が通常動作状態であるものとする。
(ステップS201)EC200は、近接センサ130から取得する検出信号に基づいて、人物の離脱を検出する離脱検出処理を開始したか否かを判定する。EC200は、離脱検出処理を開始したと判定した場合(YES)、ステップS203の処理に進む。一方、EC200は、離脱検出処理を開始していないと判定した場合(NO)、ステップS201の処理を繰り返す。
(ステップS203)EC200は、離脱検出処理を開始したタイミングで離脱検出タイマのカウントアップを開始し、検出時間T1(図2参照)を計測する。ここで、離脱検出処理を開始したタイミングとは、図2の時刻t10のタイミングに対応する。そして、ステップS205の処理に進む。
(ステップS205)EC200は、人物の離脱を検出したか否かを判定する。EC200は、人物の離脱を検出していないと判定した場合(NO)、ステップS207の処理に進む。一方、EC200は、人物の離脱を検出したと判定した場合(YES)、ステップS209の処理に進む。
(ステップS207)EC200は、近接センサ130から取得する検出信号に基づいて、人物検出範囲内に人物を検出(人物の存在または接近を検出)した場合(YES)、人物が離脱していないと判定して、ステップS211の処理に進む。一方、EC200は、人物検出範囲内に人物を検出しない場合(NO)、ステップS203の処理に戻り、離脱検出タイマのカウントアップを継続する。
(ステップS209)EC200は、人物の離脱を検出したタイミングで離脱検出タイマの計測を停止し、タイマ値(検出時間T1)を保存する。ここで、人物の離脱を検出したタイミングとは、図2の時刻t15のタイミングに対応する。
(ステップS211)EC200は、離脱検出タイマをリセットして、離脱検出時間計測処理を終了する。
次に、EC200が、ログイン処理時間T2を計測するログイン処理時間計測処理の動作について説明する。
図12は、本実施形態に係るログイン処理時間計測処理の一例を示すフローチャートである。ここでは、電子機器1が待機状態であるものとする。
(ステップS301)EC200は、近接センサ130から取得する検出信号に基づいて、人物の接近を検出したか否かを判定する。EC200は、人物の接近を検出したと判定した場合(YES)、ステップS303の処理に進む。一方、EC200は、人物の接近を検出していないと判定した場合(NO)、ステップS301の処理を繰り返す。
(ステップS303)EC200は、人物の接近を検出したタイミングでログイン処理タイマのカウントアップを開始し、ログイン処理時間T2(図2参照)を計測する。ここで、人物の接近を検出したタイミングとは、図2の時刻t20のタイミングに対応する。そして、ステップS305の処理に進む。
(ステップS305)EC200は、人物の接近を検出したことに応じて開始された起動処理において、ログイン処理が完了したか否かを判定する。EC200は、ログイン処理が完了していないと判定した場合(NO)、ステップS303の処理に戻り、ログイン処理タイマのカウントアップを継続する。一方、EC200は、ログイン処理が完了したと判定した場合(YES)、ステップS307の処理に進む。
(ステップS307)EC200は、ログイン処理が完了したタイミングでログイン処理タイマの計測を停止し、タイマ値(ログイン処理時間T2)を保存する。ここで、ログイン処理が完了したタイミングとは、図2の時刻t25のタイミングに対応する。そして、ステップS309の処理に進む。
(ステップS309)EC200は、ログイン処理タイマをリセットして、ログイン処理時間計測処理を終了する。
次に、EC200が、電子機器1からの人物の離脱を検出した際に再生中の動画を停止させる再生停止処理の動作について説明する。
図13は、本実施形態に係る再生停止処理の一例を示すフローチャートである。ここでは、電子機器1が通常動作状態であるものとする。
(ステップS401)EC200は、人物の離脱を検出したか否かを判定する。EC200は、人物の離脱を検出していないと判定した場合(NO)、このステップS401の処理を繰り返す。一方、EC200は、人物の離脱を検出したと判定した場合(YES)、ステップS403の処理に進む。
(ステップS403)EC200は、システム処理部300(再生処理部324)の処理において、動画が再生中であるか否かを判定する。EC200は、動画が再生中でないと判定した場合(NO)、動画の制御を行わずに再生停止処理を終了する。一方、EC200は、動画が再生中であると判定した場合(YES)、ステップS405の処理に進む。
(ステップS405)EC200は、再生中の動画を停止させる指示をシステム処理部300へ行う。例えば、EC200は、人物の離脱を検出する際の検出時間T1(図2参照)の最後のタイミングで、システムを通常動作状態から待機状態へ遷移させる指示をするための待機信号を出力する前に、動画の再生を停止させる指示をする「停止コマンド」をシステム処理部300へ送信して、再生停止処理を終了する。
次に、EC200が、電子機器1への人物の接近を検出した際に動画の再生を再開させる再生再開処理の動作について説明する。
図14は、本実施形態に係る再生再開処理の一例を示すフローチャートである。ここでは、電子機器1は、待機状態から起動してログイン処理が実行されたものとする。
(ステップS501)EC200は、ログイン処理が完了したか否かを判定する。EC200は、ログイン処理が完了していないと判定した場合(NO)、このステップS501の処理を繰り返す。一方、EC200は、ログイン処理が完了したと判定した場合(YES)、ステップS503の処理に進む。
(ステップS503)EC200は、動画の再生位置を前に戻す指示をする「早戻しコマンド」をシステム処理部300へ送信する。そして、ステップS505の処理に進む。
(ステップS505)EC200は、「早戻しコマンド」を送信した後、一定時間が経過したタイミングで、再生を開始(再開)させる指示をする「再生コマンド」をシステム処理部300へ送信する。上記の一定時間とは、検出時間T1とログイン処理時間T2とで再生された時間分を戻すのに必要な時間である。具体的には、EC200は、図11のステップS209で保存した検出時間T1の計測値(タイマ値)と、図12のステップS307で保存したログイン処理時間T2の計測値(タイマ値)とに基づいて、検出時間T1とログイン処理時間T2とで再生された時間分を戻すのに必要な時間を算出する。そして、EC200は、ステップS503で「早戻しコマンド」を送信した後、上記算出した時間が経過したタイミングで「再生コマンド」を送信する。そして、再生再開処理を終了する。
なお、EC200は、検出時間T1とログイン処理時間T2とで再生された時間に所定の時間をさらに加えた再生時間分を戻した再生位置から動画の再生を開始(再開)させてもよい。また、EC200は、ステップS503で「早戻しコマンド」を送信する前に、または、ステップS505を「再生コマンド」を送信する前に、「停止コマンド」をシステム処理部300へ送信してもよい。
[第1の実施形態のまとめ]
以上説明してきたように、本実施形態に係る電子機器1は、システム処理部300と、再生処理部324と、人物検出部210と、動作制御部220と、再生制御部230とを備えている。システム処理部300は、システム(例えば、OS)に基づくシステム処理を実行する。再生処理部324は、システム処理上で動画の再生処理を実行する。人物検出部210は、人物検出範囲(所定の検出範囲の一例)内に人物が存在している第1検出状態から存在しない第2検出状態への変化(即ち、電子機器1からの人物が離脱(Leave))を検出時間T1(第1の期間の一例)をかけて検出する。動作制御部220は、人物検出部210により上記第1検出状態から上記第2検出状態への変化が検出された場合、システムの動作状態をシステム処理の少なくとも一部が制限された待機状態(第1動作状態の一例)へ遷移させる指示をシステム処理部300へ行うとともに、所定の条件が充足されることに基づいて、システムの動作状態を待機状態から活性化(起動)させる指示をシステム処理部300へ行う。ここで、所定の条件とは、電子機器1への人物の接近を検出すること、または、システムを活性化(起動)させるためのユーザの入力(例えば、入力デバイス150への操作)を受け付けること等である。再生制御部230は、検出時間T1の最初のタイミングで動画が再生中であった場合、システムの動作状態が待機状態から活性化(起動)されたことに応じて、検出時間T1の最初のタイミングにおける再生位置を基準に動画の再生を開始させる指示を再生処理部324へ行う。
これにより、電子機器1は、動画の再生中にユーザが一旦離れ、再び戻ってきたときに、ユーザが離れる前に見ていた再生位置の続きから再生を再開することができる。よって、戻ってきたユーザは、動画の続きを見ようとしたときに、再生位置を戻して探す操作をする必要がなく、離れる前に見ていた動画の続きを見ることができる。従って、電子機器1は、人物の存在の有無に応じて適切に動画の再生を制御することができる。
また、再生制御部230は、検出時間T1(第1の期間の一例)の最後のタイミングに応じて、再生中の動画を停止させる指示を再生処理部324へ行う。
これにより、電子機器1は、動画の再生中にユーザが離れたことを検出した場合、再生中の動画を停止させるため、人物の存在の有無に応じて適切に動画の再生を制御することができる。
また、再生制御部230は、少なくとも検出時間T1(第1の期間の一例)に再生された時間分を戻した再生位置を検出時間T1の最初のタイミングにおける再生位置として、当該再生位置を基準に動画の再生を開始させる指示を再生処理部324へ行う。
これにより、電子機器1は、動画の再生中にユーザが一旦離れ、再び戻ってきたときに、ユーザが離れてから当該離れたことを検出するまでの間に再生が進んでしまった分を戻した再生位置から再生することができる。
また、システム処理部300は、動作制御部220による待機状態(第1動作状態の一例)から活性化(起動)させる指示に基づいてログイン処理を実行する。再生制御部230は、ログイン処理が完了したタイミングに応じて、検出時間T1(第1の期間の一例)の最初のタイミングにおける再生位置を基準に動画の再生を開始させる指示を再生処理部324へ行う。
これにより、電子機器1は、動画の再生中にユーザが一旦離れ、再び戻ってきたときに、ログイン処理が完了してユーザが動画を見ることができる動作状態になってから、ユーザが離れる前に見ていた再生位置の続きから再生を再開することができる。
また、人物検出部210は、さらに人物検出範囲(所定の検出範囲の一例)内に人物が存在していない第2検出状態から存在している第1検出状態への変化(即ち、電子機器1への人物の接近(Approach))を検出する。そして、動作制御部220は、人物検出部210により第2検出状態から第1検出状態への変化が検出された場合、所定の条件が充足されたとしてシステムの動作状態を待機状態(第1動作状態の一例)から活性化(起動)させる指示をシステム処理部300へ行う。
これにより、電子機器1は、動画の再生中にユーザが一旦離れたときに待機状態に遷移させたシステムを、再びユーザが戻ってきたときに、戻ってきたことを検出して自動で起動させることができる。
また、再生制御部230は、ログイン処理が完了したタイミングに応じて動画の再生を開始させる指示を行う際に、人物検出範囲(所定の検出範囲の一例)内に人物が存在していない第2検出状態から存在している第1検出状態への変化(即ち、電子機器1への人物の接近(Approach))が検出されてからログイン処理が完了するまでのログイン処理時間T2(第2の期間の一例)と検出時間T1(第1の期間の一例)とで再生された時間分を戻した再生位置を検出時間T1の最初のタイミングにおける再生位置として、当該再生位置を基準に動画の再生を開始させる指示を再生処理部324へ行う。
これにより、電子機器1は、動画の再生中にユーザが一旦離れ、再び戻ってきたときに、ユーザが離れてから当該離れたことを検出するまでの間に再生が進んでしまった分と、ログイン処理中の間に再生が進んでしまった分を戻した再生位置から再生することができる。
また、再生制御部230は、検出時間T1(第1の期間の一例)の最初のタイミングにおける再生位置から所定の時間分(例えば、10秒、1分等)を戻した再生位置から動画の再生を開始させる指示を再生処理部324へ行う。例えば、再生制御部230は、検出時間T1とログイン処理時間T2とで再生された時間分を戻した再生位置よりさらに所定の時間分(例えば、10秒、1分等)を戻した再生位置から動画の再生を開始させる指示をおこなってもよい。
これにより、電子機器1は、動画の再生中にユーザが一旦離れ、再び戻ってきたときに、ユーザが離れる前に見ていた再生位置よりも少し前の再生位置から再生を再開することができる。よって、ユーザは、離れる前に見ていた動画の内容を容易に思い出しつつ動画の続きを見ることができる。
また、人物検出部210は、人物検出範囲(所定の検出範囲の一例)内に存在する物体との距離の検出結果に基づいて、人物検出範囲内に人物が存在しているか否かを検出する。
これにより、電子機器1は、人物との距離を検出することにより、簡易な構成且つ低負荷でユーザの存在の有無を検出することができる。
また、人物検出部210は、人物検出範囲(所定の検出範囲の一例)内に存在する物体との距離の検出結果に基づいて、人物検出範囲内に存在する人物の呼吸に応じて変化する距離の変化を検出時間T1(第1の期間の一例)かけて検出することにより人物検出範囲内に人物が存在しているか否かを検出する。
これにより、電子機器1は、人物と人物以外の物体とを区別して検出することができ、人物の存在の有無の検出精度を高めることができる。
なお、本実施形態では、電子機器1は、動画の再生中にユーザが一旦離れ、再び戻ってきたときに、検出時間T1で再生された再生時間の分とログイン処理時間T2で再生された再生時間の分とを戻してから再生を再開させたが、ログイン処理時間T2の間に動画の再生が行われない場合(または再生されたとしても短時間である場合)、検出時間T1で再生された再生時間の分のみを戻してから再生を再開させてもよい。また、電子機器1は、検出時間T1で再生された時間分を戻した再生位置よりさらに所定の時間分(例えば、10秒、1分等)を戻した再生位置から動画の再生を開始させる指示をおこなってもよい。
また、電子機器1は、検出時間T1の最初のタイミング(図2の時刻t10)のときの再生位置を記憶しておき、ログイン処理が完了したタイミングに応じて動画の再生を、当該記憶しておいた再生位置から再生を開始させてもよい。この場合、電子機器1は、再生を開始させる再生位置を記憶しているため、検出時間T1の計測、ログイン処理時間T2の計測、人物の離脱が検出されたタイミングに応じた動画の再生停止制御等を行わなくてもよい。
<第2の実施形態>
次に、本発明の第2の実施形態について説明する。
本実施形態では、電子機器1が人物の離脱を検出した場合に、再生中の動画を停止させてから待機状態へ遷移させる制御の具体例について説明する。電子機器1は、動画の再生中に人物の離脱を検出した場合、待機状態への遷移を禁止し、動画の再生を停止させる。また、電子機器1は、動画の再生が停止したことを確認した後、待機状態への遷移の禁止を解除し、待機状態へ遷移させる。なお、本実施形態に係る電子機器1の基本的な構成は、図3及び図5に示す構成と同様であり、その説明を適宜省略する。ここでは、本実施形態に係る特徴的な構成及び処理について説明する。
図15は、本実施形態に係るシステム処理部300Aの機能構成の一例を示す概略ブロック図である。この図は、図5に示すシステム処理部300で実行される機能構成の一例を示す図であり、図8に示す各部に対応する構成には同一の符号を付しており、その説明を適宜省略する。システム処理部300Aは、認証処理部321と、ログイン処理部322と、ログオフ処理部323と、再生処理部324と、禁止制御部325とを備えている。ログイン処理部322、ログオフ処理部323、及び再生処理部324の基本的な構成は、第一の実施形態と同様である。
禁止制御部325は、人物検出部210により人物の離脱が検出された場合、待機状態への遷移を禁止する指示を動作制御部220に行う。例えば、禁止制御部325は、待機状態への遷移を禁止することを示すスリープ禁止信号を発行し、当該スリープ禁止信号を動作制御部220へ送信する。動作制御部220は、このスリープ禁止信号を受け取ると、待機状態への遷移させる指示をするための待機信号を出力せずに保留する。また、再生制御部230は、このスリープ禁止信号を受け取ると、動画の再生を停止させる指示をする「停止コマンド」をシステム処理部300へ送信する。
また、禁止制御部325は、OS上で実行される特定の処理の処理状態に基づいて待機状態への遷移の禁止を解除する。例えば、禁止制御部325は、動画の再生が停止状態であること(つまり、再生中の状態から停止状態に変化したこと)を条件として、待機状態への遷移の禁止を解除するスリープ禁止解除信号を動作制御部220へ送信する。動作制御部220は、このスリープ禁止解除信号を受け取ると、待機状態への遷移させる指示をするための待機信号をシステム処理部300へ送信する。
ここで、スリープ禁止信号及びスリープ禁止解除信号は、例えば、待機状態への遷移を禁止するか否かを示すフラグ情報であり、スリープ禁止信号の場合には、待機状態への遷移を禁止することを示す「1」のデータを含む信号であり、スリープ禁止解除信号の場合には、待機状態への遷移を禁止しない(禁止を解除する)ことを示す「0」のデータを含む信号である。
また、動作制御部220は、人物検出部210により人物の離脱が検出された場合、まず、表示部110の表示画面を画面ロックまたは画面OFFになるように制御し、その後、禁止制御部325により待機状態への遷移の禁止が解除された場合、待機状態へ遷移させる指示をするための待機信号を出力してもよい。なお、画面OFFは、表示部110への表示を行わない状態であってもよいし、表示部110へ黒画像(或いはグレー画像)を表示した状態であってもよい。また、完全な画面OFFではなく、画面の一部(例えば、画面の80%程度等)のみが黒画像(或いはグレー画像)の表示となってもよい。つまり、動作制御部220は、人物検出部210により人物の離脱が検出された場合、まず、表示部110に表示される表示画像の少なくとも一部が視認できないように制御してもよい。例えば、動作制御部220は、表示部110の表示画面を画面ロックまたは画面OFFになるように制御する際には、画面ロックまたは画面OFFに遷移させるための制御信号をシステム処理部300へ送信する。システム処理部300は、当該制御信号を受け取ると、表示部110の表示画面を画面ロックまたは画面OFFに制御する。
なお、この画面ロックまたは画面OFFの状態では、少なくとも再生処理部324による動画の再生処理がバックグラウンドで実行可能な状態である。つまり、画面ロックまたは画面OFFに制御するのは、人物の離脱が検出されてから、特定の処理の処理状態に基づいて待機状態への遷移の禁止が解除されるまでに時間がかかったとしても、ユーザからは待機状態(例えばスリープ)に遷移しているように見えるようにするための制御である。
次に、図16を参照して、電子機器1からの人物の離脱を検出したときに動画が再生中の場合に、動画の再生を停止してから待機状態へ遷移させる待機状態遷移処理の動作について説明する。図16は、本実施形態に係る待機状態遷移処理の一例を示すフローチャートである。
(ステップS601)EC200は、近接センサ130から取得する検出信号に基づいて、電子機器1からの人物の離脱を検出したか否かを判定する。例えば、EC200は、人物検出範囲内に人物を検出している状態から人物を検出しなくなった場合、電子機器1からの人物の離脱を検出したと判定する。一方、EC200は、人物検出範囲内に人物を検出している状態のままである場合、電子機器1からの人物の離脱を検出していないと判定する。EC200は、電子機器1からの人物の離脱を検出していない場合(NO)、再びステップS601の処理を行う。一方、EC200は、電子機器1からの人物の離脱を検出した場合(YES)、ステップS603の処理に進む。
(ステップS603)EC200は、表示部110の表示画面を画面ロックまたは画面OFFになるように制御する。例えば、EC200は、画面ロックまたは画面OFFに遷移させるための制御信号をシステム処理部300へ送信する。そして、ステップS605の処理に進む。
(ステップS605)EC200は、システム処理部300(再生処理部324)の処理において、動画が再生中であるか否かを判定する。EC200は、動画が再生中でないと判定した場合(NO)、ステップS613の処理に進む。一方、EC200は、動画が再生中であると判定した場合(YES)、ステップS607の処理に進む。
(ステップS607)EC200は、スリープ禁止信号が発行されたか否か(待機状態への遷移が禁止されているか否か)を判定する。例えば、EC200は、システム処理部300からスリープ禁止信号を取得しない場合にはスリープ禁止信号が発行されていないと判定し、スリープ禁止信号を取得した場合にはスリープ禁止信号が発行されたと判定する。EC200は、スリープ禁止信号が発行されていないと判定した場合(NO)、ステップS613の処理に進む。一方、EC200は、スリープ禁止信号が発行されたと判定した場合(YES)、ステップS609の処理に進む。
(ステップS609)EC200は、生成中の動画を停止させる指示を行う。例えば、EC200は、動画の再生を停止させる指示をする「停止コマンド」をシステム処理部300へ送信する。そして、ステップS611の処理に進む。
(ステップS611)EC200は、スリープ禁止が解除されたか否か(待機状態への遷移の禁止が解除されたか否か)を判定する。例えば、EC200は、システム処理部300からスリープ禁止解除信号を取得しない場合にはスリープ禁止が解除されていないと判定し、スリープ禁止解除信号を取得した場合にはスリープ禁止が解除されたと判定する。EC200は、スリープ禁止が解除されていないと判定した場合(NO)、ステップS611の処理を繰り返す。一方、EC200は、スリープ禁止が解除されたと判定した場合(YES)、ステップS613の処理に進む。
(ステップS613)EC200は、スリープ禁止解除信号を受け取ると、待機状態への遷移させる指示をするための待機信号をシステム処理部300へ送信する。これにより、システム処理部300は、システムを通常動作状態から待機状態(例えば、スリープ)へ遷移させる。
なお、EC200は、ステップS605の処理を行なわずに、ステップS603の処理の次にステップS607の処理をじっこうしてもよい。即ち、EC200は、動画が再生中であるか否かに関わらず、スリープ禁止信号が発行されたか否か(待機状態への遷移が禁止されているか否か)を判定してもよい。
[第2の実施形態のまとめ]
以上説明してきたように、本実施形態に係る電子機器1は、システム処理部300と、人物検出部210と、動作制御部220と、禁止制御部325とを備えている。システム処理部300は、システム(例えば、OS)に基づくシステム処理を実行する。人物検出部210は、人物検出範囲(所定の検出範囲の一例)内に人物が存在している第1検出状態から存在しない第2検出状態への変化(即ち、電子機器1からの人物の離脱(Leave))を検出する。動作制御部220は、人物検出部210により上記第1検出状態から上記第2検出状態への変化が検出された場合、システムの動作状態をシステム処理の少なくとも一部が制限された待機状態(第1動作状態の一例)へ遷移させる指示をシステム処理部300へ行う。禁止制御部325は、人物検出部210により上記第1検出状態から上記第2検出状態への変化が検出された場合、待機状態への遷移を禁止する指示を動作制御部220に行うとともに、システム処理上で実行される特定の処理の処理状態に基づいて待機状態への遷移の禁止を解除する。
例えば、電子機器1は、再生処理部324と、再生制御部230とを備えている。再生処理部324は、システム処理上で実行される上記特定の処理として動画の再生処理を実行する。再生制御部230は、人物検出部210により上記第1検出状態から上記第2検出状態への変化が検出された場合、且つ禁止制御部325により待機状態(第1動作状態の一例)への遷移を禁止する指示が行われている場合、動画の再生を停止させる指示を再生処理部324へ行う。そして、禁止制御部325は、再生処理部324による動画の再生処理の処理状態として動画の再生が停止状態であることを条件として、待機状態への遷移の禁止を解除する。
これにより、電子機器1は、動画の再生中にユーザが離れた場合に、再生中の動画を停止させてからシステムを待機状態(例えば、スリープ)へ遷移させることができる。よって、電子機器1は、人物の存在の有無に応じて適切に動作状態を制御することができる。
具体的には、禁止制御部325は、人物検出部210により上記第1検出状態から上記第2検出状態への変化(即ち、電子機器1からの人物の離脱(Leave))が検出された場合、再生処理(特定の処理の一例)が再生中(第1処理状態の一例)である場合に待機状態(第1動作状態の一例)への遷移を禁止する指示を動作制御部220に行う。また、禁止制御部325は、再生処理(特定の処理の一例)が再生中から停止した状態(第2処理状態)に変化したことを条件として、待機状態への遷移の禁止を解除する。
これにより、電子機器1は、動画が再生中のときのみ再生中の動画を停止させ、動画を停止させた後に、システムを待機状態(例えば、スリープ)へ遷移させることができる。なお、電子機器1は、人物の離脱を検出した場合、動画が再生中であるか否かに関わらず、一旦待機状態(第1動作状態の一例)への遷移を禁止してもよい。そして、電子機器1は、動画が停止状態であることに基づいて、待機状態への遷移の禁止を解除してもよい。
また、動作制御部220は、人物検出部210により上記第1検出状態から上記第2検出状態への変化(即ち、電子機器1からの人物の離脱(Leave))が検出された場合、表示部110に表示される表示画像の少なくとも一部が視認できないように制御し、その後、禁止制御部325により待機状態(第1動作状態の一例)への遷移の禁止が解除された場合、待機状態へ遷移させる指示をシステム処理部300へ行う。
これにより、電子機器1は、人物の離脱が検出されたことに応じて待機状態への遷移を禁止した後に、待機状態への遷移の禁止が解除されるまでに時間がかかったとしても、ユーザからは待機状態(例えばスリープ)にすぐに遷移しているように見えるため、制御不良ではないかといった不安をユーザが抱くことがないようにできるとともに、セキュリティやプライバシー保護等の安全性を高めることができる。
なお、本実施形態では、再生中の動画を停止してから待機状態へ遷移させる例を説明したが、待機状態へ遷移させる前に行う特定の処理は、他の処理であってもよい。例えば、待機状態へ遷移させる前に行う特定の処理は、メールの送信処理、ファイルのダウンロードまたはアップロード処理、ファイルの保存処理等であってもよい。
具体的には、禁止制御部325は、人物検出部210により上記第1検出状態から上記第2検出状態への変化が検出された場合、待機状態への遷移を禁止する指示を動作制御部220に行うとともに、メールの送信処理(特定の処理の一例)においてメールの送信が完了している状態(即ち、メールの送信中ではない状態)であることを条件として、待機状態への遷移の禁止を解除してもよい。例えば、禁止制御部325は、人物検出部210により上記第1検出状態から上記第2検出状態への変化(即ち、電子機器1からの人物の離脱(Leave))が検出された場合、メールの送信処理(特定の処理の一例)がメールの送信中の状態(第1処理状態の一例)である場合に待機状態(第1動作状態の一例)への遷移を禁止する指示を動作制御部220に行ってもよい。また、禁止制御部325は、メールの送信処理(特定の処理の一例)がメールの送信中の状態から送信が完了した状態(第2処理状態)に変化したことを条件として、待機状態への遷移の禁止を解除してもよい。これにより、電子機器1は、電子機器1からの人物の離脱を検出した場合に、送信中のメールの送信が完了してから待機状態へ遷移させるため、ユーザがメールを送信してすぐに電子機器1から離れても、送信したはずのメールが送信されていないといったことが起きないようにすることができる。
また、禁止制御部325は、人物検出部210により上記第1検出状態から上記第2検出状態への変化が検出された場合、待機状態への遷移を禁止する指示を動作制御部220に行うとともに、ファイルのダウンロードまたはアップロード処理(特定の処理の一例)においてダウンロードまたはアップロードが完了している状態(即ち、ファイルのダウンロード中またはアップロード中ではない状態)であることを条件として、待機状態への遷移の禁止を解除してもよい。例えば、禁止制御部325は、人物検出部210により上記第1検出状態から上記第2検出状態への変化(即ち、電子機器1からの人物の離脱(Leave))が検出された場合、ファイルのダウンロードまたはアップロード処理(特定の処理の一例)がダウンロード中またはアップロード中の状態(第1処理状態の一例)である場合に待機状態(第1動作状態の一例)への遷移を禁止する指示を動作制御部220に行ってもよい。また、禁止制御部325は、ファイルのダウンロードまたはアップロード処理(特定の処理の一例)がダウンロード中またはアップロード中の状態からダウンロードまたはアップロードが完了した状態(第2処理状態)に変化したことを条件として、待機状態への遷移の禁止を解除してもよい。これにより、電子機器1は、電子機器1からの人物の離脱を検出した場合に、ダウンロード中またはアップロード中のファイルのダウンロードまたはアップロードが完了してから待機状態へ遷移させるため、ユーザが電子機器1でダウンロードまたはアップロードをしている最中に電子機器1から離れても、ダウンロードまたはアップロードをしたはずのファイルがダウンロードまたはアップロードされていないといったことが起きないようにすることができる。
また、禁止制御部325は、人物検出部210により上記第1検出状態から上記第2検出状態への変化が検出された場合、待機状態への遷移を禁止する指示を動作制御部220に行うとともに、ファイルの保存処理(特定の処理の一例)においてファイルの保存が完了している状態(即ち、ファイルの保存中ではない状態)であることを条件として、待機状態への遷移の禁止を解除してもよい。例えば、禁止制御部325は、人物検出部210により上記第1検出状態から上記第2検出状態への変化(即ち、電子機器1からの人物の離脱(Leave))が検出された場合、ファイルの保存処理(特定の処理の一例)がファイルの保存中の状態(第1処理状態の一例)である場合に待機状態(第1動作状態の一例)への遷移を禁止する指示を動作制御部220に行ってもよい。また、禁止制御部325は、ファイルの保存処理(特定の処理の一例)がファイルの保存中の状態から保存が完了した状態(第2処理状態)に変化したことを条件として、待機状態への遷移の禁止を解除してもよい。これにより、電子機器1は、電子機器1からの人物の離脱を検出した場合に、保存中のファイルの保存が完了してから待機状態へ遷移させるため、ユーザがファイルの保存操作を行ってすぐに電子機器1から離れても、保存したはずのファイルが保存されていないといったことが起きないようにすることができる。
以上、この発明の第1及び第2の実施形態について図面を参照して詳述してきたが、具体的な構成は上述の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も含まれる。例えば、上述の各実施形態において説明した各構成は、任意に組み合わせることができる。
また、上記実施形態では、人物検出部210は、近接センサ130から取得する検出信号(即ち、物体との距離)に基づいて、人物検出範囲内に存在する人物(より詳しくは、人物と推測される物体)を検出する例を説明したが、人物の検出方法は、これに限られるものではない。例えば、人物検出部210は、撮像部120が取得する撮像画像から人物または人物の顔を検出することにより、人物検出範囲内に存在する人物を検出してもよい。
また、上記実施形態では、電子機器1に撮像部120が内蔵されている構成例を説明したが、これに限られるものではない。例えば、撮像部120は、電子機器1に内蔵されていなくてもよく、電子機器1の外部アクセサリとして無線または有線で電子機器1と接続されるものであってもよい。
また、上記実施形態では、システム処理部300と独立に動作するEC200は、センサハブ、チップセット、などのいずれの処理部であってもよく、EC200以外の処理部がEC200に代えて上述の処理を実行してもよい。このEC200等の処理部と近接センサ130の電力消費量の合計は、通例、システム処理部300の電力消費量よりも格段に少ない。
また、上述した待機状態には、ハイバネーション状態やパワーオフ状態等が含まれてもよい。ハイバネーション状態は、例えば、ACPIで規定されているS4状態に相当する。パワーオフ状態は、例えば、ACPIで規定されているS5状態(シャットダウンした状態)相当する。
なお、上述した電子機器1は、内部にコンピュータシステムを有している。そして、上述した電子機器1が備える各構成の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより上述した電子機器1が備える各構成における処理を行ってもよい。ここで、「記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行する」とは、コンピュータシステムにプログラムをインストールすることを含む。ここでいう「コンピュータシステム」とは、OSや周辺機器等のハードウェアを含むものとする。また、「コンピュータシステム」は、インターネットやWAN、LAN、専用回線等の通信回線を含むネットワークを介して接続された複数のコンピュータ装置を含んでもよい。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、CD−ROM等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。このように、プログラムを記憶した記録媒体は、CD−ROM等の非一過性の記録媒体であってもよい。
また、記録媒体には、当該プログラムを配信するために配信サーバからアクセス可能な内部又は外部に設けられた記録媒体も含まれる。なお、プログラムを複数に分割し、それぞれ異なるタイミングでダウンロードした後に電子機器1が備える各構成で合体される構成や、分割されたプログラムのそれぞれを配信する配信サーバが異なっていてもよい。さらに「コンピュータ読み取り可能な記録媒体」とは、ネットワークを介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ(RAM)のように、一定時間プログラムを保持しているものも含むものとする。また、上記プログラムは、上述した機能の一部を実現するためのものであってもよい。さらに、上述した機能をコンピュータシステムに既に記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル(差分プログラム)であってもよい。
また、上述した実施形態における電子機器1が備える各機能の一部、または全部を、LSI(Large Scale Integration)等の集積回路として実現してもよい。各機能は個別にプロセッサ化してもよいし、一部、又は全部を集積してプロセッサ化してもよい。また、集積回路化の手法はLSIに限らず専用回路、または汎用プロセッサで実現してもよい。また、半導体技術の進歩によりLSIに代替する集積回路化の技術が出現した場合、当該技術による集積回路を用いてもよい。
また、上述した実施形態における電子機器1は、PC、タブレット端末装置、スマートフォンなどに限られるものではなく、家庭用電気製品や業務用電気製品にも適用できる。家庭用電気製品としては、ストリーミング動画や動画ファイルとして記録されている動画を再生可能なテレビ等にも適用できる。例えば、人物の接近または離脱に応じて、テレビの画面のON/OFFの制御及び動画の再生の制御をすることができる。また、家庭用電気製品としては、ストリーミング動画や動画ファイルとして記録されている動画(例えば、製品の使用方法の説明動画や、レシピ動画等)を再生可能な表示部が備えられた冷蔵庫、電子レンジ等に適用してもよい。また、業務用電気製品としては、ストリーミング動画や動画ファイルとして記録されている動画を再生可能な表示部が備えられたマルチメディア端末等に適用できる。例えば、人物の接近または離脱に応じて、マルチメディア端末の表示部の画面のON/OFF及び動画の再生の制御をすることができる。
1 電子機器、10 第1筐体、20 第2筐体、15 ヒンジ機構、110 表示部、120 撮像部、130 近接センサ、140 電源ボタン、150 入力デバイス、151 キーボード、153 タッチパッド、200 EC、210 人物検出部、220 動作制御部、230 再生制御部、300,300A システム処理部、302 CPU、304 GPU、306 メモリコントローラ、308 I/Oコントローラ、310 システムメモリ、321 認証処理部、322 ログイン処理部、323 ログオフ処理部、324 再生処理部、325 禁止制御部、350 通信部、360 記憶部、400 電源部

Claims (6)

  1. システムに基づくシステム処理を実行するシステム処理部と、
    所定の検出範囲内に人物が存在している第1検出状態から存在しない第2検出状態への変化を検出する人物検出部と、
    前記人物検出部により前記第1検出状態から前記第2検出状態への変化が検出された場合、前記システムの動作状態を前記システム処理の少なくとも一部が制限された第1動作状態へ遷移させる指示を前記システム処理部へ行う動作制御部と、
    前記人物検出部により前記第1検出状態から前記第2検出状態への変化が検出された場合、前記第1動作状態への遷移を禁止する指示を前記動作制御部に行うとともに、前記システム処理上で実行される特定の処理の処理状態に基づいて前記第1動作状態への遷移の禁止を解除する禁止制御部と、
    を備える電子機器。
  2. 前記システム処理上で実行される前記特定の処理として動画の再生処理を実行する再生処理部と、
    前記人物検出部により前記第1検出状態から前記第2検出状態への変化が検出された場合、且つ前記禁止制御部により前記第1動作状態への遷移を禁止する指示が行われている場合、前記動画の再生を停止させる指示を前記再生処理部へ行う再生制御部と、
    を備え、
    前記禁止制御部は、
    前記再生処理部による前記動画の再生処理の処理状態として前記動画の再生が停止状態であることを条件として、前記第1動作状態への遷移の禁止を解除する、
    請求項1に記載の電子機器。
  3. 前記禁止制御部は、
    前記人物検出部により前記第1検出状態から前記第2検出状態への変化が検出された場合、前記特定の処理が第1処理状態である場合に前記第1動作状態への遷移を禁止する指示を前記動作制御部に行い、前記特定の処理が前記第1処理状態から第2処理状態に変化したことを条件として、前記第1動作状態への遷移の禁止を解除する、
    請求項1または請求項2に記載の電子機器。
  4. 前記動作制御部は、
    前記人物検出部により前記第1検出状態から前記第2検出状態への変化が検出された場合、表示部に表示される表示画像の少なくとも一部が視認できないように制御し、その後、前記禁止制御部により前記第1動作状態への遷移の禁止が解除された場合、第1動作状態へ遷移させる指示を前記システム処理部へ行う、
    請求項1から請求項3のいずれか一項に記載の電子機器。
  5. システムに基づくシステム処理を実行するシステム処理部を備えた電子機器における制御方法であって、
    人物検出部が、所定の検出範囲内に人物が存在している第1検出状態から存在しない第2検出状態への変化を検出する人物検出ステップと、
    動作制御部が、前記人物検出ステップにより前記第1検出状態から前記第2検出状態への変化が検出された場合、前記システムの動作状態を前記システム処理の少なくとも一部が制限された第1動作状態へ遷移させる指示を前記システム処理部へ行う動作制御ステップと、
    禁止制御部が、前記人物検出部により前記第1検出状態から前記第2検出状態への変化が検出された場合、前記第1動作状態への遷移を禁止する指示を前記動作制御部に行うとともに、前記システム処理上で実行される特定の処理の処理状態に基づいて前記第1動作状態への遷移の禁止を解除する禁止制御ステップと、
    を有する制御方法。
  6. システムに基づくシステム処理を実行するシステム処理部を備えた電子機器としてのコンピュータに、
    所定の検出範囲内に人物が存在している第1検出状態から存在しない第2検出状態への変化を検出する人物検出ステップと、
    前記人物検出ステップにより前記第1検出状態から前記第2検出状態への変化が検出された場合、前記システムの動作状態を前記システム処理の少なくとも一部が制限された第1動作状態へ遷移させる指示を前記システム処理部へ行う動作制御ステップと、
    前記人物検出ステップにより前記第1検出状態から前記第2検出状態への変化が検出された場合、前記第1動作状態への遷移を禁止する指示を行うとともに、前記システム処理上で実行される特定の処理の処理状態に基づいて前記第1動作状態への遷移の禁止を解除する禁止制御ステップと、
    を実行させるためのプログラム。
JP2019081236A 2019-04-22 2019-04-22 電子機器、制御方法、及びプログラム Pending JP2020177584A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2019081236A JP2020177584A (ja) 2019-04-22 2019-04-22 電子機器、制御方法、及びプログラム
US16/506,080 US10834461B1 (en) 2019-04-22 2019-07-09 Electronic apparatus, control method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019081236A JP2020177584A (ja) 2019-04-22 2019-04-22 電子機器、制御方法、及びプログラム

Publications (1)

Publication Number Publication Date
JP2020177584A true JP2020177584A (ja) 2020-10-29

Family

ID=72832145

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019081236A Pending JP2020177584A (ja) 2019-04-22 2019-04-22 電子機器、制御方法、及びプログラム

Country Status (2)

Country Link
US (1) US10834461B1 (ja)
JP (1) JP2020177584A (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7314102B2 (ja) * 2020-07-09 2023-07-25 Tvs Regza株式会社 制御信号生成回路、受信装置、システム、生成方法、およびプログラム
US11856256B1 (en) * 2022-03-30 2023-12-26 Amazon Technologies, Inc. Presence-detection modes for display devices

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008054085A (ja) * 2006-08-25 2008-03-06 Hitachi Ltd 放送受信装置及びその起動方法
JP4876806B2 (ja) * 2006-09-12 2012-02-15 船井電機株式会社 テレビジョン受信装置
JP6439478B2 (ja) 2015-02-10 2018-12-19 富士ゼロックス株式会社 顔認証機能付機器
JP6696239B2 (ja) * 2016-03-15 2020-05-20 株式会社リコー 情報処理装置、情報処理システム、認証方法、及びプログラム

Also Published As

Publication number Publication date
US10834461B1 (en) 2020-11-10
US20200336788A1 (en) 2020-10-22

Similar Documents

Publication Publication Date Title
US11314306B2 (en) Electronic apparatus and control method
JP2020184177A (ja) 電子機器、制御方法、及びプログラム
JP7114651B2 (ja) 電子機器、及び制御方法
CN111381671B (zh) 电子设备、控制方法以及存储介质
US11669142B2 (en) Electronic apparatus and control method that accurately detect human faces
US10719919B1 (en) Information processing apparatus, and control method
US20220366721A1 (en) Electronic apparatus and control method
JP2020177584A (ja) 電子機器、制御方法、及びプログラム
JP2020184674A (ja) 電子機器、制御方法、及びプログラム
US11287856B2 (en) Electronic apparatus and controlling method
JP7132392B1 (ja) 電子機器、及び制御方法
JP6849743B2 (ja) 電子機器、制御方法、及びプログラム
JP6710267B1 (ja) 情報処理装置、制御方法、及びプログラム
JP2022002033A (ja) 電子機器、及び制御方法
US11385702B2 (en) Electronic apparatus and controlling method
US20230176897A1 (en) Electronic apparatus and control method
US20230205858A1 (en) Electronic apparatus and control method
JP7218421B1 (ja) 電子機器、及び制御方法
US20230289195A1 (en) Information processing apparatus and control method
JP2021135870A (ja) 電子機器、及び制御方法