JP7005577B2 - Information processing equipment and information processing method - Google Patents

Information processing equipment and information processing method Download PDF

Info

Publication number
JP7005577B2
JP7005577B2 JP2019209328A JP2019209328A JP7005577B2 JP 7005577 B2 JP7005577 B2 JP 7005577B2 JP 2019209328 A JP2019209328 A JP 2019209328A JP 2019209328 A JP2019209328 A JP 2019209328A JP 7005577 B2 JP7005577 B2 JP 7005577B2
Authority
JP
Japan
Prior art keywords
control unit
detection
unit
event
host application
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019209328A
Other languages
Japanese (ja)
Other versions
JP2021082039A (en
Inventor
光俊 高坂
浩子 安田
直 北本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Personal Computers Ltd
Original Assignee
NEC Personal Computers Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Personal Computers Ltd filed Critical NEC Personal Computers Ltd
Priority to JP2019209328A priority Critical patent/JP7005577B2/en
Publication of JP2021082039A publication Critical patent/JP2021082039A/en
Application granted granted Critical
Publication of JP7005577B2 publication Critical patent/JP7005577B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、情報処理装置、及び情報処理方法に関する。 The present invention relates to an information processing apparatus and an information processing method.

近年、停止状態から音声でシステムを起動するWOV(Wake On Voice)機能が知られている(例えば、特許文献1を参照)。このようなWOV機能を利用することで、システムを起動した後に、様々なアプリケーションの動作を実現可能である。特許文献1は、WOV機能を備える携帯電話などの端末機が記載されている。 In recent years, a WOV (Wake On Voice) function for activating a system by voice from a stopped state has been known (see, for example, Patent Document 1). By using such a WOV function, it is possible to realize the operation of various applications after the system is started. Patent Document 1 describes a terminal such as a mobile phone having a WOV function.

特表2015-509680号公報Japanese Patent Application Laid-Open No. 2015-509680

ところで、携帯電話よりも大規模なシステムである、例えば、パーソナルコンピュータなどの情報処理装置では、電源管理や各種イベントの検出を行うエンベデッドコントローラなどのサブ制御部と、各種アプリケーションなどのシステムのメイン処理を実行するメイン制御部とを備えている。このような情報処理装置にWOV機能を適用する場合には、例えば、WOV機能を利用するアプリケーションは、WOVのイベントを検出するサブ制御部の仕様(機種)に合わせて開発する必要があり、汎用性が低いという課題があった。 By the way, in an information processing device such as a personal computer, which is a system larger than a mobile phone, a sub-control unit such as an embedded controller that manages power supply and detects various events, and a main process of the system such as various applications. It has a main control unit that executes. When applying the WOV function to such an information processing device, for example, an application that uses the WOV function needs to be developed according to the specifications (model) of the sub-control unit that detects WOV events, and is general-purpose. There was a problem of low sex.

本発明は、上記問題を解決すべくなされたもので、その目的は、汎用性を高めることができる情報処理装置、及び情報処理方法を提供することにある。 The present invention has been made to solve the above problems, and an object of the present invention is to provide an information processing apparatus and an information processing method capable of increasing versatility.

上記問題を解決するために、本発明の一態様は、人の発話及び動きのうち少なくとも一方を含む言動を検出可能であり、検出した前記言動と、予め定められた言動とが一致する場合に、検出通知を出力する検出処理部と、OS(オペレーティングシステム)に基づく処理を実行するメイン制御部とは異なるサブ制御部であって、前記検出処理部が前記検出通知を出力したことを示すイベント情報を保持するとともに、前記メイン制御部の動作を停止した停止状態で、前記検出通知を受信した場合に、前記停止状態を解除して前記OSを起動させるサブ制御部と、前記OSに基づいて動作する仮想デバイスであって、前記OSが起動したことに応じた、前記OS上で実行されるホストアプリケーションからのイベントの問い合わせを受信した場合に、前記サブ制御部が保持するイベント情報を確認し、当該確認の結果を前記ホストアプリケーションに返信する仮想デバイスとを備え、前記メイン制御部によって実行される前記ホストアプリケーションは、記確認の結果が、前記検出処理部が前記検出通知を出力したことを示す場合に、予め定められた処理を前記メイン制御部に実行させる情報処理装置である。 In order to solve the above problem, one aspect of the present invention can detect a word or action including at least one of a person's speech and movement, and when the detected word and action match a predetermined word and action. , An event indicating that the detection processing unit outputs the detection notification and is a sub-control unit different from the main control unit that executes the processing based on the OS (operating system). Based on the sub-control unit that retains the information and that releases the stopped state and starts the OS when the detection notification is received in the stopped state in which the operation of the main control unit is stopped, and the OS. Check the event information held by the sub-control unit when a virtual device that operates and receives an event inquiry from a host application executed on the OS in response to the startup of the OS. In the host application executed by the main control unit, the host application includes a virtual device that returns the confirmation result to the host application, and the detection processing unit outputs the detection notification as the confirmation result. Is an information processing device that causes the main control unit to execute a predetermined process.

また、本発明の一態様は、上記の情報処理装置において、前記サブ制御部は、前記メイン制御部が動作状態で、且つ、表示部による表示を停止している状態において、前記検出通知を受信した場合に、前記検出通知を受信したことを示すイベント通知を前記仮想デバイスに出力し、前記仮想デバイスは、前記イベント通知を予め定められた書式に変換して、前記ホストアプリケーションに出力し、前記ホストアプリケーションは、前記イベント通知によって、前記検出処理部が前記検出通知を出力したことを判定し、前記検出処理部が前記検出通知を出力した場合に、前記予め定められた処理を前記メイン制御部に実行させるようにしてもよい。 Further, in one aspect of the present invention, in the above information processing apparatus, the sub control unit receives the detection notification while the main control unit is in an operating state and the display by the display unit is stopped. In this case, an event notification indicating that the detection notification has been received is output to the virtual device, and the virtual device converts the event notification into a predetermined format and outputs the event notification to the host application. The host application determines that the detection processing unit has output the detection notification by the event notification, and when the detection processing unit outputs the detection notification, the host application performs the predetermined processing to the main control unit . May be executed.

また、本発明の一態様は、上記の情報処理装置において、前記ホストアプリケーションは、前記予め定められた処理として、予め設定されたアプリケーションを前記メイン制御部に実行させるようにしてもよい。 Further, in one aspect of the present invention, in the above information processing apparatus, the host application may cause the main control unit to execute a preset application as the predetermined process.

また、本発明の一態様は、上記の情報処理装置において、前記仮想デバイスは、BIOS(Basic Input Output System)によって実され、前記仮想デバイスと前記サブ制御部との間の入出力処理を行うイベント機能部と、前記OSに基づくデバイスドライバによって実され、前記仮想デバイスと前記ホストアプリケーションとの間の入出力処理を、予め定められたインタフェースで行うドライバインタフェース部とを備えるようにしてもよい。 Further, in one aspect of the present invention, in the above information processing device, the virtual device is realized by a BIOS (Basic Input Output System), and input / output processing is performed between the virtual device and the sub control unit. It may be provided with an event function unit and a driver interface unit realized by the device driver based on the OS and performing input / output processing between the virtual device and the host application by a predetermined interface. ..

また、本発明の一態様は、上記の情報処理装置において、前記人の言動が、人の発話を含む場合、前記検出処理部は、人が発話した音声を検出し、検出した前記音声と、予め定められたキーフレーズとが一致する場合に、前記検出通知を出力するようにしてもよい。 Further, in one aspect of the present invention, in the above information processing apparatus, when the person's words and actions include the person's utterance, the detection processing unit detects the voice spoken by the person, and the detected voice and the detected voice are used. If the key phrase matches a predetermined key phrase, the detection notification may be output.

また、本発明の一態様は、上記の情報処理装置において、前記停止状態には、停止前の状態を記憶部に退避した後に前記メイン制御部の動作を停止する休止状態が含まれ、前記サブ制御部は、前記休止状態で前記検出通知を受信した場合に、前記メイン制御部に、前記記憶部に退避した前記停止前の状態を復帰させるレジューム処理を実行させて、前記OSを起動させるようにしてもよい。 Further, in one aspect of the present invention, in the above information processing apparatus, the stopped state includes a paused state in which the operation of the main control unit is stopped after the state before the stop is saved in the storage unit, and the sub. When the control unit receives the detection notification in the hibernation state, the control unit causes the main control unit to execute a resume process for restoring the state before the stop saved in the storage unit to start the OS. You may do it.

また、本発明の一態様は、検出処理部が、人の発話及び動きのうち少なくとも一方を含む言動を検出可能であり、検出した前記言動と、予め定められた言動とが一致する場合に、検出通知を出力する検出処理ステップと、OS(オペレーティングシステム)に基づく処理を実行するメイン制御部とは異なるサブ制御部が、前記検出処理ステップによって前記検出通知が出力されたことを示すイベント情報を保持するとともに、前記メイン制御部の動作を停止した停止状態で、前記検出通知を受信した場合に、前記停止状態を解除して前記OSを起動させる起動ステップと、前記OSに基づいて動作する仮想デバイスが、前記OSが起動したことに応じた、前記OS上で実行されるホストアプリケーションからのイベントの問い合わせを受信した場合に、前記サブ制御部が保持するイベント情報を確認し、当該確認の結果を前記ホストアプリケーションに返信する通知ステップと、前記メイン制御部が、前記ホストアプリケーションの処理において、前記確認の結果が、前記検出処理部が前記検出通知を出力したことを示す場合に、予め定められた処理を実行する実行処理ステップとを含む情報処理方法である。 Further, one aspect of the present invention is when the detection processing unit can detect words and actions including at least one of a person's speech and movement, and the detected words and actions match a predetermined word and action. The detection processing step that outputs the detection notification and the sub-control unit that is different from the main control unit that executes the processing based on the OS (operating system) provide event information indicating that the detection notification was output by the detection processing step. When the detection notification is received in the stopped state in which the operation of the main control unit is stopped while being held, the start step of releasing the stopped state and starting the OS and the virtual operation based on the OS When the device receives an event inquiry from a host application executed on the OS in response to the startup of the OS, the device confirms the event information held by the sub-control unit, and the result of the confirmation. And the main control unit in the processing of the host application, the result of the confirmation is predetermined when the detection processing unit outputs the detection notification. It is an information processing method including an execution processing step for executing a processing.

本発明の上記態様によれば、汎用性を高めることができる。 According to the above aspect of the present invention, versatility can be enhanced.

本実施形態によるパーソナルコンピュータ(PC)の一例を示す外観図である。It is an external view which shows an example of the personal computer (PC) by this embodiment. 本実施形態によるPCの主要なハードウェア構成の一例を示す図である。It is a figure which shows an example of the main hardware composition of the PC by this embodiment. 本実施形態によるPCの機能構成の一例を示すブロック図である。It is a block diagram which shows an example of the functional structure of the PC by this embodiment. 本実施形態によるPCの停止状態における動作の一例を示す図である。It is a figure which shows an example of the operation in the stopped state of the PC by this embodiment. 本実施形態によるPCの表示を停止した動作状態における動作の一例を示す図である。It is a figure which shows an example of the operation in the operation state which stopped the display of the PC by this embodiment.

以下、本発明の一実施形態による情報処理装置、及び情報処理方法について、図面を参照して説明する。 Hereinafter, the information processing apparatus and the information processing method according to the embodiment of the present invention will be described with reference to the drawings.

図1は、本実施形態によるパーソナルコンピュータ(PC)1の一例を示す外観図である。なお、本実施形態において、情報処理装置の一例として、PC1について説明する。
図1に示すように、PC1は、一体型(オールインワンタイプ)のデスクトップPCであり、表示部14を内蔵した本体と、入力部32とを備えている。PC1は、利用者が音声により、予め定められたキーフレーズ(例えば、「○○○起きて」など)を入力することで、システムを起動するWOV機能を有している。
FIG. 1 is an external view showing an example of a personal computer (PC) 1 according to the present embodiment. In this embodiment, PC1 will be described as an example of the information processing apparatus.
As shown in FIG. 1, the PC 1 is an integrated (all-in-one type) desktop PC, and includes a main body having a built-in display unit 14 and an input unit 32. The PC 1 has a WOV function that activates the system by the user inputting a predetermined key phrase (for example, "get up XX") by voice.

図2は、本実施形態によるPC1の主要なハードウェア構成の一例を示す図である。
図2に示すように、PC1は、CPU11と、メインメモリ12と、ビデオサブシステム13と、表示部14と、チップセット21と、BIOSメモリ22と、HDD23と、オーディオシステム24と、WLANカード25と、USBコネクタ26と、撮像部27と、エンベデッドコントローラ31と、入力部32と、電源回路33と、マイク241と、スピーカ242とを備える。
なお、本実施形態において、CPU11と、チップセット21とは、メイン制御部10に対応する。
FIG. 2 is a diagram showing an example of a main hardware configuration of the PC 1 according to the present embodiment.
As shown in FIG. 2, the PC 1 includes a CPU 11, a main memory 12, a video subsystem 13, a display unit 14, a chipset 21, a BIOS memory 22, an HDD 23, an audio system 24, and a WLAN card 25. , A USB connector 26, an image pickup unit 27, an embedded controller 31, an input unit 32, a power supply circuit 33, a microphone 241 and a speaker 242.
In this embodiment, the CPU 11 and the chipset 21 correspond to the main control unit 10.

CPU(Central Processing Unit)11は、プログラム制御により種々の演算処理を実行し、PC1全体を制御している。
メインメモリ12は、CPU11の実行プログラムの読み込み領域として、又は、実行プログラムの処理データを書き込む作業領域として利用される書き込み可能メモリである。メインメモリ12は、例えば、複数個のDRAM(Dynamic Random Access Memory)チップで構成される。この実行プログラムには、OS(オペレーティングシステム)、周辺機器類をハードウェア操作するための各種ドライバ、各種サービス/ユーティリティ、アプリケーションプログラム等が含まれる。
The CPU (Central Processing Unit) 11 executes various arithmetic processes by program control and controls the entire PC1.
The main memory 12 is a writable memory used as a read area for the execution program of the CPU 11 or as a work area for writing the processing data of the execution program. The main memory 12 is composed of, for example, a plurality of DRAM (Dynamic Random Access Memory) chips. This execution program includes an OS (operating system), various drivers for operating peripheral devices by hardware, various services / utilities, application programs, and the like.

ビデオサブシステム13は、画像表示に関連する機能を実現するためのサブシステムであり、ビデオコントローラを含んでいる。このビデオコントローラは、CPU11からの描画命令を処理し、処理した描画情報をビデオメモリに書き込むとともに、ビデオメモリからこの描画情報を読み出して、表示部14に描画データ(表示データ)として出力する。
表示部14は、例えば、液晶ディスプレイであり、ビデオサブシステム13から出力された描画データ(表示データ)に基づく表示画面を表示する。
The video subsystem 13 is a subsystem for realizing a function related to image display, and includes a video controller. This video controller processes a drawing command from the CPU 11, writes the processed drawing information to the video memory, reads the drawing information from the video memory, and outputs it to the display unit 14 as drawing data (display data).
The display unit 14 is, for example, a liquid crystal display, and displays a display screen based on drawing data (display data) output from the video subsystem 13.

チップセット21は、USB(Universal Serial Bus)、シリアルATA(AT Attachment)、SPI(Serial Peripheral Interface)バス、PCI(Peripheral Component Interconnect)バス、PCI-Expressバス、及びLPC(Low Pin Count)バスなどのコントローラを備えており複数のデバイスが接続される。図2では、デバイスの例示として、BIOSメモリ22と、HDD23と、オーディオシステム24と、WLANカード25と、USBコネクタ26と、撮像部27とが、チップセット21に接続されている。 The chipset 21 includes USB (Universal Serial Bus), serial ATA (AT Attachment), SPI (Serial Peripheral Interface) bus, PCI (Peripheral Component Interconnect) bus, PCI-Express bus, LPC (Low Pin Count) bus, and the like. It has a controller and multiple devices are connected. In FIG. 2, as an example of the device, the BIOS memory 22, the HDD 23, the audio system 24, the WLAN card 25, the USB connector 26, and the image pickup unit 27 are connected to the chipset 21.

BIOS(Basic Input Output System)メモリ22は、例えば、EEPROM(Electrically Erasable Programmable Read Only Memory)やフラッシュROMなどの電気的に書き換え可能な不揮発性メモリで構成される。BIOSメモリ22は、BIOS、及びエンベデッドコントローラ31などを制御するためのシステムファームウェアなどを記憶する。 The BIOS (Basic Input Output System) memory 22 is composed of, for example, an electrically rewritable non-volatile memory such as an EEPROM (Electrically Erasable Programmable Read Only Memory) or a flash ROM. The BIOS memory 22 stores the BIOS, the system firmware for controlling the embedded controller 31, and the like.

HDD(Hard Disk Drive)23(不揮発性記憶装置の一例)は、OS、各種ドライバ、各種サービス/ユーティリティ、アプリケーションプログラム、及び各種データを記憶する。 The HDD (Hard Disk Drive) 23 (an example of a non-volatile storage device) stores an OS, various drivers, various services / utilities, application programs, and various data.

オーディオシステム24は、マイク241及びスピーカ242が接続され、音データの記録、再生、出力を行う。また、オーディオシステム24は、DSP(Digital Signal Processor)240を備える。 In the audio system 24, a microphone 241 and a speaker 242 are connected to record, reproduce, and output sound data. Further, the audio system 24 includes a DSP (Digital Signal Processor) 240.

DSP240(検出処理部の一例)は、音データの処理を行うプロセッサであり、マイク241が検出した音信号をデジタル信号処理するとともに、チップセット21を介して取得した音データをデジタル信号処理して、スピーカ242から出力させる。また、DSP240は、PC1がWOVを実行する際に、マイク241から入力された音声(検出された音声)が、予め定められたキーフレーズ(又は、キーワード)と一致するか否かを検出し、一致する場合に、WOVの検出信号(検出通知)を出力する。なお、DSP240によるWOVに関する処理の詳細については後述する。 The DSP 240 (an example of the detection processing unit) is a processor that processes sound data, digitally processes the sound signal detected by the microphone 241 and digitally processes the sound data acquired via the chip set 21. , Is output from the speaker 242. Further, the DSP 240 detects whether or not the voice (detected voice) input from the microphone 241 matches a predetermined key phrase (or keyword) when the PC 1 executes WOV. If they match, the WOV detection signal (detection notification) is output. The details of the WOV processing by the DSP 240 will be described later.

WLAN(Wireless Local Area Network)カード25は、ワイヤレス(無線)LANにより、ネットワークに接続して、データ通信を行う。WLANカード25は、例えば、ネットワークからのデータを受信した際に、データを受信したことを示すイベントトリガを発生する。
USBコネクタ26は、USBを利用した周辺機器類を接続するためのコネクタである。
The WLAN (Wireless Local Area Network) card 25 is connected to a network by a wireless LAN to perform data communication. When the WLAN card 25 receives data from the network, for example, an event trigger indicating that the data has been received is generated.
The USB connector 26 is a connector for connecting peripheral devices using USB.

撮像部27は、例えば、図1に示すように、表示部14の上部に配置されているWebカメラであり、画像を撮像する。撮像部27は、例えば、USBインタフェースによりチップセット21と接続されている。 As shown in FIG. 1, the image pickup unit 27 is, for example, a Web camera arranged at the upper part of the display unit 14 and captures an image. The image pickup unit 27 is connected to the chipset 21 by, for example, a USB interface.

エンベデッドコントローラ31は、PC1のシステム状態に関わらず、各種デバイス(周辺装置やセンサ等)を監視し制御するワンチップマイコン(One-Chip Microcomputer)である。また、エンベデッドコントローラ31は、電源回路33を制御する電源管理機能を有している。なお、エンベデッドコントローラ31は、不図示のCPU、ROM、RAMなどで構成されるとともに、複数チャネルのA/D入力端子、D/A出力端子、タイマ、及びデジタル入出力端子を備えている。エンベデッドコントローラ31には、それらの入出力端子を介して、例えば、入力部32、及び電源回路33などが接続されており、エンベデッドコントローラ31は、これらの動作を制御する。 The embedded controller 31 is a one-chip microcomputer that monitors and controls various devices (peripheral devices, sensors, etc.) regardless of the system state of the PC1. Further, the embedded controller 31 has a power supply management function for controlling the power supply circuit 33. The embedded controller 31 is composed of a CPU, ROM, RAM, etc. (not shown), and includes a plurality of channels of A / D input terminals, D / A output terminals, timers, and digital input / output terminals. For example, an input unit 32, a power supply circuit 33, and the like are connected to the embedded controller 31 via their input / output terminals, and the embedded controller 31 controls these operations.

エンベデッドコントローラ31は、ACPI(Advanced Configuration and Power Interface)仕様に規定されたシステム状態(例えば、S0状態~S5状態)に応じて、電源回路33を制御する。ここで、S0状態は、最もアクティブな状態であり、メイン制御部10が動作している動作状態(通常稼働状態)である。また、S5状態は、ソフトウェアにより電源をオフしたシャットダウン状態(電源断状態)である。 The embedded controller 31 controls the power supply circuit 33 according to the system state (for example, S0 state to S5 state) defined in the ACPI (Advanced Configuration and Power Interface) specification. Here, the S0 state is the most active state, and is an operating state (normal operating state) in which the main control unit 10 is operating. Further, the S5 state is a shutdown state (power off state) in which the power is turned off by software.

また、S4状態は、CPU11のレジスタ情報、メインメモリ12のデータ、及びチップセット21の設定情報をHDD23(記憶部の一例)に退避して、CPU11、メインメモリ12、及びチップセット21への電源供給を停止したハイバネーション状態である。また、S3状態は、CPU11のレジスタ情報、及びチップセット21の設定情報をメインメモリ12(記憶部の一例)に退避して、CPU11、及びチップセット21への電源供給を停止したスリープ状態である。 Further, in the S4 state, the register information of the CPU 11, the data of the main memory 12, and the setting information of the chipset 21 are saved in the HDD 23 (an example of the storage unit), and the power supply to the CPU 11, the main memory 12, and the chipset 21 is supplied. It is in a hibernation state where the supply is stopped. Further, the S3 state is a sleep state in which the register information of the CPU 11 and the setting information of the chipset 21 are saved in the main memory 12 (an example of the storage unit) and the power supply to the CPU 11 and the chipset 21 is stopped. ..

なお、本実施形態において、停止状態には、メイン制御部10の動作を停止した状態であり、上述したS5状態(シャットダウン状態)、S4状態(ハイバネーション状態)、及びS3状態(スリープ状態)が含まれる。また、レジューム機能を利用する休止状態には、S4状態(ハイバネーション状態)、及びS3状態(スリープ状態)が含まれる。 In the present embodiment, the stopped state is a state in which the operation of the main control unit 10 is stopped, and includes the above-mentioned S5 state (shutdown state), S4 state (hibernation state), and S3 state (sleep state). Is done. Further, the hibernation state using the resume function includes an S4 state (hibernation state) and an S3 state (sleep state).

入力部32は、例えば、キーボードなどの、ポインティング・デバイス、タッチパッドなどの入力デバイスである。 The input unit 32 is an input device such as a pointing device such as a keyboard or a touch pad.

電源回路33は、例えば、DC/DCコンバータ、充放電ユニット、電池ユニット、AC/DCアダプタなどを含んでおり、AC/DCアダプタ、又は電池ユニットから供給される直流電圧を、PC1を動作させるために必要な複数の電圧に変換する。また、電源回路33は、エンベデッドコントローラ31からの制御に基づいて、PC1の各部に電力を供給する。 The power supply circuit 33 includes, for example, a DC / DC converter, a charge / discharge unit, a battery unit, an AC / DC adapter, and the like, in order to operate the PC1 with a DC voltage supplied from the AC / DC adapter or the battery unit. Convert to multiple voltages required for. Further, the power supply circuit 33 supplies electric power to each part of the PC 1 based on the control from the embedded controller 31.

次に、図3を参照して、本実施形態によるPC1の機能構成について説明する。
図3は、本実施形態によるPC1の機能構成の一例を示すブロック図である。
図3に示すように、PC1は、DSP240と、エンベデッドコントローラ31と、ソフトウェアデバイス50と、OS61と、ホストアプリケーション62と、アプリケーション63とを備える。なお、図3において、PC1が備える機能構成のうちの、本実施形態の発明に関する主要な機能構成のみを記載している。
Next, the functional configuration of the PC 1 according to the present embodiment will be described with reference to FIG.
FIG. 3 is a block diagram showing an example of the functional configuration of the PC 1 according to the present embodiment.
As shown in FIG. 3, the PC 1 includes a DSP 240, an embedded controller 31, a software device 50, an OS 61, a host application 62, and an application 63. In addition, in FIG. 3, among the functional configurations included in PC1, only the main functional configurations relating to the invention of the present embodiment are shown.

また、図3において、ソフトウェアデバイス50、OS61、ホストアプリケーション62、及びアプリケーション63は、HDD23又はBIOSメモリ22が記憶するプログラムをメイン制御部10が実行することで実現されるソフトウェアの機能部である。 Further, in FIG. 3, the software device 50, the OS 61, the host application 62, and the application 63 are functional units of software realized by the main control unit 10 executing a program stored in the HDD 23 or the BIOS memory 22.

OS(オペレーティングシステム)61は、例えば、Windows(登録商標)であり、ここでは、HDD23が記憶するOSプログラムをメイン制御部10に実行させることで実現される機能部として説明する。 The OS (operating system) 61 is, for example, Windows (registered trademark), and is described here as a functional unit realized by causing the main control unit 10 to execute an OS program stored in the HDD 23.

BIOS60は、BIOSメモリ22が記憶するBIOSのプログラムをメイン制御部10に実行させることで実現される機能部であり、各種周辺機器類とOS61との間の入出力処理を行う。 The BIOS 60 is a functional unit realized by causing the main control unit 10 to execute a BIOS program stored in the BIOS memory 22, and performs input / output processing between various peripheral devices and the OS 61.

ホストアプリケーション62及びアプリケーション63は、OS61上で実行されるソフトウェアの機能部であり、HDD23が記憶するOSプログラムをメイン制御部10に実行させることで実現される。ホストアプリケーション62は、WOVによりPC1のシステム(OS61)が起動した後、予め定められた処理を実行させる特別なアプリケーションである。ここで、予め定められた処理には、予め設定されたアプリケーションを実行させる処理が含まれ、ホストアプリケーション62は、予め定められた処理として、予め設定されたアプリケーション(例えば、アプリケーション63)を実行させる。 The host application 62 and the application 63 are functional units of software executed on the OS 61, and are realized by causing the main control unit 10 to execute the OS program stored in the HDD 23. The host application 62 is a special application that executes a predetermined process after the system (OS61) of the PC1 is started by WOV. Here, the predetermined process includes a process of executing the preset application, and the host application 62 executes the preset application (for example, the application 63) as the predetermined process. ..

DSP240(検出処理部の一例)は、WOVを実行する際に、接続されたマイク241を介して、人の音声(人の言動の一例)を検出し、検出した音声と、予め定められた音声とが一致するか否かを判定する。ここで、予め定められた音声は、例えば、「○○○起きて」などの予め定められたキーフレーズである。DSP240は、検出した音声と、予め定められた音声とが一致する場合に、検出通知をエンベデッドコントローラ31に出力する。 The DSP 240 (an example of a detection processing unit) detects a human voice (an example of human behavior) through a connected microphone 241 when executing WOV, and the detected voice and a predetermined voice. Judges whether or not matches. Here, the predetermined voice is a predetermined key phrase such as "Get up XX". The DSP 240 outputs a detection notification to the embedded controller 31 when the detected voice and the predetermined voice match.

また、DSP240は、内部にキーフレーズ記憶部41を備える。キーフレーズ記憶部41は、上述した「○○○起きて」などの予め定められたキーフレーズを記憶する。すなわち、DSP240は、マイク241が検出した音声を音声認識処理により、音声のフレーズにテキスト変換し、検出した音声のフレーズと、キーフレーズ記憶部41が記憶するキーフレーズとが一致するか否かを判定する。 Further, the DSP 240 is provided with a key phrase storage unit 41 inside. The key phrase storage unit 41 stores a predetermined key phrase such as "Wake up XX" described above. That is, the DSP 240 converts the voice detected by the microphone 241 into a text into a voice phrase by voice recognition processing, and determines whether or not the detected voice phrase matches the key phrase stored in the key phrase storage unit 41. judge.

エンベデッドコントローラ31(サブ制御部の一例)は、OS61に基づく処理を実行するメイン制御部10とは異なる制御部であり、DSP240が検出通知を出力したことを示すイベント情報を保持するとともに、メイン制御部10の動作を停止した停止状態で、検出通知を受信した場合に、停止状態を解除してOS61を起動させる。 The embedded controller 31 (an example of a sub-control unit) is a control unit different from the main control unit 10 that executes processing based on the OS 61, holds event information indicating that the DSP 240 outputs a detection notification, and holds the main control. When the detection notification is received in the stopped state in which the operation of the unit 10 is stopped, the stopped state is canceled and the OS 61 is started.

また、エンベデッドコントローラ31は、内部にWOVイベントフラグ42を有している。WOVイベントフラグ42は、DSP240がWOVの検出通知を出力したことを示すイベント情報を保持するフラグである。例えば、WOVイベントフラグ42が“1”である場合に、WOVイベントが発生した(DSP240から検出通知を受信した)ことを示し、WOVイベントフラグ42が“0”である場合に、WOVイベントが発生していない(DSP240から検出通知を受信していない)ことを示している。 Further, the embedded controller 31 has a WOV event flag 42 inside. The WOV event flag 42 is a flag for holding event information indicating that the DSP 240 has output a WOV detection notification. For example, when the WOV event flag 42 is "1", it indicates that a WOV event has occurred (a detection notification has been received from the DSP 240), and when the WOV event flag 42 is "0", a WOV event has occurred. It indicates that it has not been performed (the detection notification has not been received from the DSP 240).

エンベデッドコントローラ31は、DSP240から検出通知を受信した場合に、WOVイベントフラグ42を“1”に変更し、DSP240が検出通知を出力したことを示すイベント情報として保持する。なお、WOVイベントフラグ42へのアクセス方法(例えば、アクセスのためのアドレスやインタフェースなど)は、エンベデッドコントローラ31の仕様(機種、型名など)によって異なっている。 When the embedded controller 31 receives the detection notification from the DSP 240, the WOV event flag 42 is changed to "1", and the embedded controller 31 holds the event information indicating that the DSP 240 has output the detection notification. The access method to the WOV event flag 42 (for example, the address and interface for access) differs depending on the specifications (model, model name, etc.) of the embedded controller 31.

エンベデッドコントローラ31は、例えば、S5状態(シャットダウン状態)、S4状態(ハイバネーション状態)、又はS3状態(スリープ状態)である場合に、DSP240から検出通知を受信した場合に、電源回路33を制御して、メイン制御部10等に電源を供給して、OS61を起動させる。エンベデッドコントローラ31は、S4状態(ハイバネーション状態)、又はS3状態(スリープ状態)において、OS61を起動(再起動)させる場合に、HDD23又はメインメモリ12に退避した停止前の状態(CPU11のレジスタ情報、メインメモリ12のデータ、及びチップセット21の設定情報)を復帰させるレジューム処理を実行させて、OS61を再起動させる。 The embedded controller 31 controls the power supply circuit 33 when receiving a detection notification from the DSP 240, for example, in the S5 state (shutdown state), the S4 state (hibernation state), or the S3 state (sleep state). , The main control unit 10 and the like are supplied with power to start the OS 61. When the OS 61 is started (restarted) in the S4 state (hibernation state) or the S3 state (sleep state), the embedded controller 31 is saved in the HDD 23 or the main memory 12 before stopping (register information of the CPU 11). The resume process for restoring the data of the main memory 12 and the setting information of the chipset 21) is executed, and the OS 61 is restarted.

また、エンベデッドコントローラ31は、例えば、表示停止状態において、DSP240から検出通知を受信した場合に、検出通知を受信したことを示すイベント通知(例えば、WOVイベント通知)をソフトウェアデバイス50に出力する。ここで、表示停止状態とは、メイン制御部10が動作状態(S0状態)で、且つ、表示部14による表示を停止している状態である。 Further, for example, when the detection notification is received from the DSP 240 in the display stop state, the embedded controller 31 outputs an event notification (for example, WOV event notification) indicating that the detection notification has been received to the software device 50. Here, the display stop state is a state in which the main control unit 10 is in the operating state (S0 state) and the display by the display unit 14 is stopped.

ソフトウェアデバイス50(仮想デバイスの一例)は、OS61に基づいて動作する機能部であり、BIOS60のACPIコードで仮想のデバイスとして作成されており、デバイスの入出力インタフェース及びWOVイベント機能(WOV Event Function)を定義する。ソフトウェアデバイス50は、OS61が起動したことに応じた、ホストアプリケーション62からのイベントの問い合わせ(Query Event)を受信した場合に、エンベデッドコントローラ31が保持するイベント情報(WOVイベントフラグ42の情報)を確認し、当該確認の結果をホストアプリケーション62に返信する。 The software device 50 (an example of a virtual device) is a functional unit that operates based on the OS 61, is created as a virtual device by the ACPI code of the BIOS 60, and has an input / output interface of the device and a WOV event function (WOV Event Function). Is defined. The software device 50 confirms the event information (information of the WOV event flag 42) held by the embedded controller 31 when receiving an event inquiry (Query Event) from the host application 62 in response to the OS 61 being started. Then, the result of the confirmation is returned to the host application 62.

この場合、ホストアプリケーション62は、ソフトウェアデバイス50から受信した確認の結果が、DSP240が検出通知を出力したことを示す場合(WOVイベントフラグ42が“1”である場合)に、予め定められた処理(アプリケーション63)を実行させる。 In this case, when the confirmation result received from the software device 50 indicates that the DSP 240 has output the detection notification (when the WOV event flag 42 is "1"), the host application 62 performs a predetermined process. (Application 63) is executed.

また、ソフトウェアデバイス50は、エンベデッドコントローラ31からWOVイベント通知を受信した場合に、受信したWOVイベント通知を予め定められた書式(フォーマット)に変換して、ホストアプリケーション62に出力する。この場合、ホストアプリケーション62は、WOVイベント通知によって、DSP240が検出通知を出力したことを判定し、DSP240が検出通知を出力した場合に、予め定められた処理(アプリケーション63)を実行させる。 Further, when the software device 50 receives the WOV event notification from the embedded controller 31, the software device 50 converts the received WOV event notification into a predetermined format (format) and outputs the received WOV event notification to the host application 62. In this case, the host application 62 determines that the DSP 240 has output the detection notification by the WOV event notification, and when the DSP 240 outputs the detection notification, the host application 62 executes a predetermined process (application 63).

また、ソフトウェアデバイス50は、イベント機能部51と、ドライバインタフェース部52とを備える。
イベント機能部51は、BIOS60によって実行される機能部(BIOS60の一部)であり、ソフトウェアデバイス50とエンベデッドコントローラ31との間の入出力処理を行う。
Further, the software device 50 includes an event function unit 51 and a driver interface unit 52.
The event function unit 51 is a function unit (a part of the BIOS 60) executed by the BIOS 60, and performs input / output processing between the software device 50 and the embedded controller 31.

ドライバインタフェース部52は、OS61に基づくデバイスドライバによって実行される機能部であり、ソフトウェアデバイス50とホストアプリケーション62との間の入出力処理を、予め定められたインタフェースで行う。 The driver interface unit 52 is a functional unit executed by a device driver based on the OS 61, and performs input / output processing between the software device 50 and the host application 62 with a predetermined interface.

次に、図面を参照して、本実施形態によるPC1の動作について説明する。
図4は、本実施形態によるPC1の停止状態における動作の一例を示す図である。すなわち、図4に示す例では、PC1が、S5状態(シャットダウン状態)、S4状態(ハイバネーション状態)、及びS3状態(スリープ状態)のいずれかの停止状態である場合のWOVによる起動動作について説明する。
Next, the operation of the PC 1 according to the present embodiment will be described with reference to the drawings.
FIG. 4 is a diagram showing an example of the operation of the PC 1 in the stopped state according to the present embodiment. That is, in the example shown in FIG. 4, the start operation by WOV when the PC1 is in the stopped state of any of the S5 state (shutdown state), the S4 state (hibernation state), and the S3 state (sleep state) will be described. ..

図4に示すように、PC1のDSP240は、まず、音声を検出したか否かを判定する(ステップS101)。DSP240は、マイク241を介して、人の音声を検出したか否かを判定する。DSP240は、音声を検出した場合(ステップS101:YES)に、処理をステップS102に進める。また、DSP240は、音声を検出していない場合(ステップS101:NO)に、処理をステップS101に戻す。 As shown in FIG. 4, the DSP 240 of the PC 1 first determines whether or not the voice is detected (step S101). The DSP 240 determines whether or not a human voice is detected via the microphone 241. When the DSP 240 detects the voice (step S101: YES), the DSP 240 advances the process to step S102. Further, when the DSP 240 does not detect the voice (step S101: NO), the DSP 240 returns the process to step S101.

ステップS102において、DSP240は、検出した音声が、設定されたキーフレーズと一致するか否かを判定する。DSP240は、例えば、マイク241が検出した音声を音声認識処理により、音声のフレーズにテキスト変換し、検出した音声のフレーズと、キーフレーズ記憶部41が記憶するキーフレーズとが一致するか否かを判定する。DSP240は、検出した音声が設定されたキーフレーズと一致する場合(ステップS102:YES)に、処理をステップS103に進める。また、DSP240は、検出した音声が設定されたキーフレーズと一致しなかった場合(ステップS102:NO)に、処理をステップS101に戻す。 In step S102, the DSP 240 determines whether or not the detected voice matches the set key phrase. For example, the DSP 240 converts the voice detected by the microphone 241 into a text into a voice phrase by voice recognition processing, and determines whether or not the detected voice phrase matches the key phrase stored in the key phrase storage unit 41. judge. When the detected voice matches the set key phrase (step S102: YES), the DSP 240 advances the process to step S103. Further, when the detected voice does not match the set key phrase (step S102: NO), the DSP 240 returns the process to step S101.

ステップS103において、DSP240は、検出通知(例えば、WOVの検出信号)をエンベデッドコントローラ31に出力する。 In step S103, the DSP 240 outputs a detection notification (for example, a WOV detection signal) to the embedded controller 31.

次に、エンベデッドコントローラ31は、DSP240が出力した検出通知(例えば、WOVの検出信号)の受信に応じて、PC1のパワーオン処理を実行する(ステップS104)。すなわち、エンベデッドコントローラ31は、電源回路33を制御して、メイン制御部10等に電源を供給させる。 Next, the embedded controller 31 executes the power-on process of the PC 1 in response to the reception of the detection notification (for example, the detection signal of WOV) output by the DSP 240 (step S104). That is, the embedded controller 31 controls the power supply circuit 33 to supply power to the main control unit 10 and the like.

次に、エンベデッドコントローラ31は、OS61に起動要求を出力する(ステップS105)。すなわち、エンベデッドコントローラ31は、メイン制御部10に起動信号(例えば、リセット信号や割り込み信号など)を出力して、OS61を起動又は再起動させる。なお、エンベデッドコントローラ31は、休止状態(S3状態(スリープ状態)又はS4状態(ハイバネーション状態))で検出通知を受信した場合に、記憶部(HDD23又はメインメモリ12)に退避した停止前の状態を復帰させるレジューム処理を実行させて、OS61を起動させる。 Next, the embedded controller 31 outputs a start request to the OS 61 (step S105). That is, the embedded controller 31 outputs a start signal (for example, a reset signal, an interrupt signal, etc.) to the main control unit 10 to start or restart the OS 61. When the embedded controller 31 receives the detection notification in the hibernation state (S3 state (sleep state) or S4 state (hibernation state)), the embedded controller 31 saves the state before the stop to the storage unit (HDD 23 or main memory 12). The resume process to be restored is executed, and the OS 61 is started.

次に、エンベデッドコントローラ31からの起動要求に応じて、OS61が、システムを起動する(ステップS106)。 Next, the OS 61 boots the system in response to the boot request from the embedded controller 31 (step S106).

次に、OS61は、レジューム処理を実行する(ステップS107)。OS61は、例えば、S3状態(スリープ状態)で休止していた場合には、レジューム処理として、メインメモリ12に退避していたCPU11のレジスタ情報、及びチップセット21の設定情報を復帰させる。また、OS61は、例えば、S4状態(ハイバネーション状態)で休止していた場合には、レジューム処理として、メインメモリ12に退避していたCPU11のレジスタ情報、チップセット21の設定情報、及びメインメモリ12のデータを復帰させる。
なお、OS61は、S5状態(シャットダウン状態)で停止していた場合には、レジューム処理をスキップする。
Next, the OS 61 executes the resume process (step S107). For example, when the OS 61 is inactive in the S3 state (sleep state), the register information of the CPU 11 and the setting information of the chipset 21 saved in the main memory 12 are restored as a resume process. Further, for example, when the OS 61 is paused in the S4 state (hibernation state), the register information of the CPU 11 saved in the main memory 12, the setting information of the chipset 21, and the main memory 12 are resumed. Restore the data of.
If the OS 61 is stopped in the S5 state (shutdown state), the resume process is skipped.

次に、OS61は、ホストアプリケーション62に起動要求を出力する(ステップS108)。OS61からの起動要求に応じて、ホストアプリケーション62は、起動して動作を開始する。 Next, the OS 61 outputs a start request to the host application 62 (step S108). In response to the start request from the OS 61, the host application 62 starts and starts the operation.

次に、ホストアプリケーション62は、イベントの問い合わせ(Query Event)をソフトウェアデバイス50に出力する(ステップS109)。 Next, the host application 62 outputs an event query (Query Event) to the software device 50 (step S109).

次に、ソフトウェアデバイス50は、ホストアプリケーション62からのイベントの問い合わせ(Query Event)に応じて、WOVイベントフラグ42の読み出し要求を、エンベデッドコントローラ31に出力する(ステップS110)。 Next, the software device 50 outputs a read request for the WOV event flag 42 to the embedded controller 31 in response to an event inquiry (Query Event) from the host application 62 (step S110).

次に、エンベデッドコントローラ31は、ソフトウェアデバイス50からのWOVイベントフラグ42の読み出し要求に応じて、フラグ情報をソフトウェアデバイス50に出力する(ステップS111)。すなわち、エンベデッドコントローラ31は、内蔵するWOVイベントフラグ42の情報であるフラグ情報を読み出し、ソフトウェアデバイス50に出力する。 Next, the embedded controller 31 outputs the flag information to the software device 50 in response to the read request of the WOV event flag 42 from the software device 50 (step S111). That is, the embedded controller 31 reads the flag information, which is the information of the built-in WOV event flag 42, and outputs the flag information to the software device 50.

次に、エンベデッドコントローラ31からのフラグ情報に応じて、ソフトウェアデバイス50は、イベントの問い合わせ(Query Event)に対する確認結果をホストアプリケーション62に出力する(ステップS112)。ここで、ソフトウェアデバイス50は、WOVイベントフラグ42のフラグ情報を予め定められた書式(フォーマット)の電文に変換して、確認結果として、ホストアプリケーション62に送信する。 Next, according to the flag information from the embedded controller 31, the software device 50 outputs the confirmation result for the event query (Query Event) to the host application 62 (step S112). Here, the software device 50 converts the flag information of the WOV event flag 42 into a message in a predetermined format (format), and sends it to the host application 62 as a confirmation result.

次に、ホストアプリケーション62は、確認結果がWOVイベントの発生であるか否かを判定する(ステップS113)。ホストアプリケーション62は、ソフトウェアデバイス50から受信した確認結果が、WOVイベントの発生であるか否か(WOVイベントフラグ42が“1”であるか否か)を判定する。ホストアプリケーション62は、WOVイベントが発生した(WOVイベントフラグ42が“1”である)場合(ステップS113:YES)に、処理をステップS114に進める。また、ホストアプリケーション62は、WOVイベントが発生ていない(WOVイベントフラグ42が“0”である)場合(ステップS113:NO)に、処理をスキップして何も実行しない。 Next, the host application 62 determines whether or not the confirmation result is the occurrence of a WOV event (step S113). The host application 62 determines whether or not the confirmation result received from the software device 50 is the occurrence of a WOV event (whether or not the WOV event flag 42 is "1"). When the WOV event occurs (the WOV event flag 42 is "1") (step S113: YES), the host application 62 advances the process to step S114. Further, when the WOV event has not occurred (the WOV event flag 42 is “0”) (step S113: NO), the host application 62 skips the process and does not execute anything.

次に、ステップS114において、ホストアプリケーション62は、指定したアプリケーション(例えば、アプリケーション63)を起動させる。
このように、本実施形態によるPC1では、停止状態において、音声で予め定められたキーフレーズを入力することで、PC1のシステムが起動し、予め指定したアプリケーションが実行される。
Next, in step S114, the host application 62 launches the designated application (for example, application 63).
As described above, in the PC1 according to the present embodiment, the system of the PC1 is started by inputting a predetermined key phrase by voice in the stopped state, and the application specified in advance is executed.

例えば、予め定められたキーフレーズが「○○○起きて」であり、ホストアプリケーション62に予め指定したアプリケーションが、メールソフトである場合、停止状態において、利用者が、PC1に「○○○起きて」と話しかけることで、PC1のシステム(OS61)が起動し、ホストアプリケーション62によって、メールソフトが起動させれる。 For example, if the predetermined key phrase is "Wake up XX" and the application specified in advance for the host application 62 is mail software, the user can "wake up XX" on the PC1 in the stopped state. By talking to "te", the system of PC1 (OS61) is started, and the mail software is started by the host application 62.

次に、図5を参照して、本実施形態によるPC1の表示を停止した動作状態(表示停止状態)における動作について説明する。なお、ここでの表示停止状態は、表示部14の表示を停止したS0状態である。また、ここでの表示部14の表示の停止は、ビデオサブシステム13及び表示部14の電源供給も停止するものとする。
図5は、本実施形態によるPC1の表示停止状態における動作の一例を示す図である。
Next, with reference to FIG. 5, the operation in the operating state (display stopped state) in which the display of the PC 1 is stopped according to the present embodiment will be described. The display stop state here is the S0 state in which the display of the display unit 14 is stopped. Further, when the display of the display unit 14 is stopped here, the power supply of the video subsystem 13 and the display unit 14 is also stopped.
FIG. 5 is a diagram showing an example of the operation of the PC 1 in the display stopped state according to the present embodiment.

図5に示すように、PC1のDSP240は、まず、音声を検出したか否かを判定する(ステップS201)。DSP240は、マイク241を介して、人の音声を検出したか否かを判定する。DSP240は、音声を検出した場合(ステップS201:YES)に、処理をステップS202に進める。また、DSP240は、音声を検出していない場合(ステップS201:NO)に、処理をステップS201に戻す。 As shown in FIG. 5, the DSP 240 of the PC 1 first determines whether or not the voice is detected (step S201). The DSP 240 determines whether or not a human voice is detected via the microphone 241. When the DSP 240 detects the voice (step S201: YES), the DSP 240 advances the process to step S202. Further, when the DSP 240 does not detect the voice (step S201: NO), the DSP 240 returns the process to step S201.

ステップS202において、DSP240は、検出した音声が、設定されたキーフレーズと一致するか否かを判定する。DSP240は、検出した音声が設定されたキーフレーズと一致する場合(ステップS202:YES)に、処理をステップS203に進める。また、DSP240は、検出した音声が設定されたキーフレーズと一致しなかった場合(ステップS202:NO)に、処理をステップS201に戻す。 In step S202, the DSP 240 determines whether or not the detected voice matches the set key phrase. When the detected voice matches the set key phrase (step S202: YES), the DSP 240 advances the process to step S203. Further, when the detected voice does not match the set key phrase (step S202: NO), the DSP 240 returns the process to step S201.

ステップS203において、DSP240は、検出通知(例えば、WOVの検出信号)をエンベデッドコントローラ31に出力する。 In step S203, the DSP 240 outputs a detection notification (for example, a WOV detection signal) to the embedded controller 31.

次に、エンベデッドコントローラ31は、DSP240が出力した検出通知(例えば、WOVの検出信号)の受信に応じて、WOVイベント通知をソフトウェアデバイス50に出力する(ステップS204)。 Next, the embedded controller 31 outputs the WOV event notification to the software device 50 in response to the reception of the detection notification (for example, the WOV detection signal) output by the DSP 240 (step S204).

次に、エンベデッドコントローラ31は、表示部14の電源をオンする処理を実行する(ステップS205)。エンベデッドコントローラ31は、電源回路33を制御して、ビデオサブシステム13及び表示部14に電源(電力)を供給させる。 Next, the embedded controller 31 executes a process of turning on the power of the display unit 14 (step S205). The embedded controller 31 controls the power supply circuit 33 to supply power (electric power) to the video subsystem 13 and the display unit 14.

次に、ソフトウェアデバイス50は、エンベデッドコントローラ31からのWOVイベント通知に応じて、WOVイベント通知をホストアプリケーション62に出力する(ステップS206)。ここで、ソフトウェアデバイス50は、受信したWOVイベント通知を予め定められた書式(フォーマット)に変換して、ホストアプリケーション62に出力する。 Next, the software device 50 outputs the WOV event notification to the host application 62 in response to the WOV event notification from the embedded controller 31 (step S206). Here, the software device 50 converts the received WOV event notification into a predetermined format (format) and outputs it to the host application 62.

次に、ホストアプリケーション62は、WOVイベントが発生したか否かを判定する(ステップS207)。すなわち、ホストアプリケーション62は、ソフトウェアデバイス50からWOVイベント通知を受信したか否かによって、WOVイベントが発生したか否かを判定する。ホストアプリケーション62は、WOVイベントが発生した場合(ステップS207:YES)に、処理をステップS209に進める。また、ホストアプリケーション62は、WOVイベントが発生ていない場合(ステップS207:NO)に、処理をスキップして何も実行しない。 Next, the host application 62 determines whether or not a WOV event has occurred (step S207). That is, the host application 62 determines whether or not a WOV event has occurred depending on whether or not a WOV event notification has been received from the software device 50. When the WOV event occurs (step S207: YES), the host application 62 advances the process to step S209. Further, when the WOV event has not occurred (step S207: NO), the host application 62 skips the process and does not execute anything.

また、一方で、ステップS205におけるビデオサブシステム13及び表示部14への電源(電力)供給に応じて、OS61は、表示部14の表示を再開させる(ステップS208)。 On the other hand, the OS 61 restarts the display of the display unit 14 in response to the power supply (power) supply to the video subsystem 13 and the display unit 14 in step S205 (step S208).

次に、ステップS209において、ホストアプリケーション62は、指定したアプリケーション(例えば、アプリケーション63)を起動させる。ここで、ホストアプリケーション62は、OS61によって表示部14の表示が再開された後、予め定められた処理として、指定したアプリケーション(例えば、アプリケーション63)を起動させる。 Next, in step S209, the host application 62 launches the designated application (for example, application 63). Here, the host application 62 starts the designated application (for example, the application 63) as a predetermined process after the display of the display unit 14 is restarted by the OS 61.

このように、本実施形態によるPC1では、表示停止状態において、音声で予め定められたキーフレーズを入力することで、PC1の表示が再開し、予め指定したアプリケーションが実行される。 As described above, in the PC1 according to the present embodiment, the display of the PC1 is restarted by inputting a predetermined key phrase by voice in the display stopped state, and the application specified in advance is executed.

以上説明したように、本実施形態によるPC1(情報処理装置)は、DSP240(検出処理部)と、エンベデッドコントローラ31と、ソフトウェアデバイス50とを備える。DSP240は、人の言動(例えば、人の音声)を検出可能であり、検出した言動(音声)と、予め定められた言動(音声)とが一致する場合に、検出通知を出力する。ここで、人の言動は、人の発話及び動きのうち少なくとも一方を含む。エンベデッドコントローラ31(サブ制御部)は、OS61(例えば、Windows(登録商標)に基づく処理を実行するメイン制御部10とは異なるサブ制御部であって、DSP240が検出通知を出力したことを示すイベント情報(WOVイベントフラグ42の情報)を保持するとともに、メイン制御部10の動作を停止した停止状態で、検出通知を受信した場合に、停止状態を解除してOS61を起動させる。ソフトウェアデバイス50は、OS61に基づいて動作するソフトウェアデバイス50(仮想デバイス)であって、OS61が起動したことに応じた、OS61上で実行されるホストアプリケーション62からのイベントの問い合わせを受信した場合に、エンベデッドコントローラ31が保持するイベント情報(WOVイベントフラグ42の情報)を確認し、当該確認の結果をホストアプリケーション62に返信する。ホストアプリケーション62は、メイン制御部10によって処理が実行され、確認の結果が、DSP240が検出通知を出力したことを示す場合に、予め定められた処理を実行させる。 As described above, the PC 1 (information processing apparatus) according to the present embodiment includes a DSP 240 (detection processing unit), an embedded controller 31, and a software device 50. The DSP 240 can detect a person's words and actions (for example, a person's voice), and outputs a detection notification when the detected words and actions (voice) match a predetermined word and action (voice). Here, a person's words and actions include at least one of a person's utterances and movements. The embedded controller 31 (sub-control unit) is a sub-control unit different from the main control unit 10 that executes processing based on OS61 (for example, Windows (registered trademark)), and is an event indicating that the DSP 240 outputs a detection notification. When the detection notification is received in the stopped state in which the operation of the main control unit 10 is stopped while holding the information (information of the WOV event flag 42), the stopped state is released and the OS 61 is started. The software device 50 starts the OS 61. , The embedded controller 31 is a software device 50 (virtual device) that operates based on the OS 61, and receives an event inquiry from a host application 62 executed on the OS 61 in response to the OS 61 being started. Confirms the event information (information of the WOV event flag 42) held by the host application 62, and returns the confirmation result to the host application 62. The host application 62 is executed by the main control unit 10, and the confirmation result is the DSP 240. Indicates that the detection notification has been output, and causes a predetermined process to be executed.

これにより、本実施形態によるPC1は、エンベデッドコントローラ31とホストアプリケーション62との間を標準のインタフェースとして橋渡しするソフトウェアデバイス50を備えることで、エンベデッドコントローラ31の仕様(機種)に合わせてホストアプリケーション62(WOV機能を利用するアプリケーション)を開発する必要がない。そのため、本実施形態によるPC1は、ホストアプリケーション62(WOV機能を利用するアプリケーション)を開発するコスト、工数、及び期間を低減することができ、汎用性を高めることができる。 As a result, the PC 1 according to the present embodiment includes the software device 50 that bridges between the embedded controller 31 and the host application 62 as a standard interface, so that the host application 62 (model) can be matched to the specifications (model) of the embedded controller 31. There is no need to develop an application that uses the WOV function. Therefore, the PC 1 according to the present embodiment can reduce the cost, man-hours, and period for developing the host application 62 (application using the WOV function), and can increase the versatility.

すなわち、本実施形態によるPC1は、ソフトウェアデバイス50により、プラットフォーム毎のエンベデッドコントローラ31などのハードウェア仕様の差分を吸収することができるため、プラットフォームに依存しないホストアプリケーション62を開発することが可能であり、汎用性を高めることができる。
また、本実施形態によるPC1は、ソフトウェアデバイス50を備えることで、ホストアプリケーション62のメンテナンスコスト(保守コスト)を低減することができる。
That is, since the PC 1 according to the present embodiment can absorb the difference in the hardware specifications such as the embedded controller 31 for each platform by the software device 50, it is possible to develop the host application 62 that does not depend on the platform. , Versatility can be increased.
Further, the PC 1 according to the present embodiment is provided with the software device 50, so that the maintenance cost (maintenance cost) of the host application 62 can be reduced.

また、本実施形態では、エンベデッドコントローラ31は、メイン制御部10が動作状態(S0状態)で、且つ、表示部14による表示を停止している状態(表示停止状態)において、検出通知を受信した場合に、検出通知を受信したことを示すイベント通知をソフトウェアデバイス50に出力する。ソフトウェアデバイス50は、イベント通知を予め定められた書式に変換して、ホストアプリケーション62に出力する。ホストアプリケーション62は、イベント通知によって、DSP240が検出通知を出力したことを判定し、DSP240が検出通知を出力した場合に、予め定められた処理を実行させる。 Further, in the present embodiment, the embedded controller 31 receives the detection notification when the main control unit 10 is in the operating state (S0 state) and the display by the display unit 14 is stopped (display stop state). In this case, an event notification indicating that the detection notification has been received is output to the software device 50. The software device 50 converts the event notification into a predetermined format and outputs it to the host application 62. The host application 62 determines that the DSP 240 has output the detection notification by the event notification, and when the DSP 240 outputs the detection notification, causes the host application 62 to execute a predetermined process.

これにより、本実施形態によるPC1は、メイン制御部10が動作状態(S0状態)で、且つ、表示部14による表示を停止している状態(表示停止状態)においても、好適にWOV機能を利用することができる。 As a result, the PC 1 according to the present embodiment preferably uses the WOV function even when the main control unit 10 is in the operating state (S0 state) and the display by the display unit 14 is stopped (display stopped state). can do.

また、本実施形態では、ホストアプリケーション62は、予め定められた処理として、予め設定されたアプリケーション(例えば、アプリケーション63)を実行させる。
これにより、本実施形態によるPC1は、WOV機能を利用して利用者の音声により、システムを起動させることができる上に、さらに指定したアプリケーションを起動させることができる。よって、本実施形態によるPC1は、利便性を向上させることができる。
Further, in the present embodiment, the host application 62 executes a preset application (for example, application 63) as a predetermined process.
As a result, the PC 1 according to the present embodiment can start the system by the voice of the user by using the WOV function, and can further start the specified application. Therefore, the PC 1 according to the present embodiment can improve the convenience.

また、本実施形態では、ソフトウェアデバイス50は、イベント機能部51と、ドライバインタフェース部52とを備える。イベント機能部51は、BIOS60によって実行され、ソフトウェアデバイス50とエンベデッドコントローラ31との間の入出力処理を行う。ドライバインタフェース部52は、OS61に基づくデバイスドライバによって実行され、ソフトウェアデバイス50とホストアプリケーション62との間の入出力処理を、予め定められたインタフェースで行う。 Further, in the present embodiment, the software device 50 includes an event function unit 51 and a driver interface unit 52. The event function unit 51 is executed by the BIOS 60 and performs input / output processing between the software device 50 and the embedded controller 31. The driver interface unit 52 is executed by a device driver based on the OS 61, and performs input / output processing between the software device 50 and the host application 62 with a predetermined interface.

これにより、本実施形態によるPC1は、BIOS60によるイベント機能部51と、デバイスドライバによるドライバインタフェース部52とを、一度開発することで、ソフトウェアデバイス50を再利用することができ、汎用性を高めることができる。また、本実施形態によるPC1は、イベント機能部51と、ドライバインタフェース部52とを個別に変更、及び更新することができるため、より保守性を高めることができるとともに、機能拡張性を高めることができる。 As a result, in the PC 1 according to the present embodiment, the software device 50 can be reused by once developing the event function unit 51 by the BIOS 60 and the driver interface unit 52 by the device driver, and the versatility is enhanced. Can be done. Further, in the PC 1 according to the present embodiment, the event function unit 51 and the driver interface unit 52 can be individually changed and updated, so that the maintainability can be further improved and the function expandability can be enhanced. can.

また、本実施形態では、人の言動には、人の発話(音声)が含まれる。人の言動が、人の発話を含む場合、DSP240は、人が発話した音声を検出し、検出した音声と、予め定められたキーフレーズとが一致する場合に、検出通知を出力する。
これにより、本実施形態によるPC1は、容易にWOV機能を実現することができる。
Further, in the present embodiment, the words and actions of a person include the utterance (voice) of the person. When a person's words and actions include a person's utterance, the DSP 240 detects the voice spoken by the person, and outputs a detection notification when the detected voice matches a predetermined key phrase.
As a result, the PC1 according to the present embodiment can easily realize the WOV function.

また、本実施形態では、停止状態には、停止前の状態を記憶部(HDD23、又はメインメモリ12)に退避した後にメイン制御部10の動作を停止する休止状態(例えば、S3状態又はS4状態)が含まれる。エンベデッドコントローラ31は、休止状態で検出通知を受信した場合に、記憶部(HDD23又はメインメモリ12)に退避した停止前の状態を復帰させるレジューム処理を実行させて、OS61を起動させる。 Further, in the present embodiment, in the stopped state, the state before the stop is saved in the storage unit (HDD 23 or the main memory 12), and then the operation of the main control unit 10 is stopped (for example, the S3 state or the S4 state). ) Is included. When the embedded controller 31 receives the detection notification in the hibernate state, the embedded controller 31 causes the storage unit (HDD 23 or the main memory 12) to execute a resume process for restoring the state before the stop, and starts the OS 61.

これにより、本実施形態によるPC1は、休止状態(例えば、S3状態又はS4状態)においても、WOV機能を適切に使用することができ、利便性をさらに高めることができる。 As a result, the PC1 according to the present embodiment can appropriately use the WOV function even in the hibernation state (for example, the S3 state or the S4 state), and the convenience can be further enhanced.

また、本実施形態による情報処理方法は、検出処理ステップと、起動ステップと、通知ステップと、実行処理ステップとを含む。検出処理ステップにおいて、DSP240が、人の言動を検出し、検出した言動と、予め定められた言動とが一致する場合に、検出通知を出力する。起動ステップにおいて、OS61に基づく処理を実行するメイン制御部10とは異なるエンベデッドコントローラ31が、検出処理ステップによって検出通知が出力されたことを示すイベント情報を保持するとともに、メイン制御部10の動作を停止した停止状態で、検出通知を受信した場合に、停止状態を解除してOS61を起動させる。通知ステップにおいて、OS61に基づいて動作するソフトウェアデバイス50が、OS61が起動したことに応じた、OS61上で実行されるホストアプリケーション62からのイベントの問い合わせを受信した場合に、エンベデッドコントローラ31が保持するイベント情報を確認し、当該確認の結果をホストアプリケーション62に返信する。実行処理ステップにおいて、メイン制御部10が、ホストアプリケーション62の処理において、確認の結果が、DSP240が検出通知を出力したことを示す場合に、予め定められた処理を実行させる。 Further, the information processing method according to the present embodiment includes a detection processing step, an activation step, a notification step, and an execution processing step. In the detection processing step, the DSP 240 detects a person's words and actions, and outputs a detection notification when the detected words and actions match a predetermined word and action. In the startup step, the embedded controller 31, which is different from the main control unit 10 that executes the processing based on the OS 61, holds the event information indicating that the detection notification is output by the detection processing step, and operates the main control unit 10. When the detection notification is received in the stopped state, the stopped state is canceled and the OS 61 is started. In the notification step, when the software device 50 operating based on the OS 61 receives an event inquiry from the host application 62 executed on the OS 61 in response to the OS 61 being started, the embedded controller 31 holds the software device 50. The event information is confirmed, and the result of the confirmation is returned to the host application 62. In the execution process step, the main control unit 10 causes the host application 62 to execute a predetermined process when the confirmation result indicates that the DSP 240 has output a detection notification.

これにより、本実施形態による情報処理方法は、上述したPC1(情報処理装置)と同様の効果を奏し、ホストアプリケーション62(WOV機能を利用するアプリケーション)を開発するコスト、工数、及び期間を低減することができ、汎用性を高めることができる。 As a result, the information processing method according to the present embodiment has the same effect as the PC1 (information processing device) described above, and reduces the cost, man-hours, and period for developing the host application 62 (application using the WOV function). It can be done and versatility can be increased.

なお、本発明は、上記の実施形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲で変更可能である。
例えば、上記の実施形態において、情報処理装置が一体型(オールインワンタイプ)のデスクトップPC(PC1)である例を説明したが、これに限定されるものではなく、例えば、ノートブック型PC、タブレット端末装置、外付け表示部を備えるデスクトップPCなどの他の情報処理装置であってもよい。
The present invention is not limited to the above embodiment, and can be modified without departing from the spirit of the present invention.
For example, in the above embodiment, an example in which the information processing device is an integrated (all-in-one type) desktop PC (PC1) has been described, but the present invention is not limited to this, and for example, a notebook PC or a tablet terminal. It may be another information processing device such as a device or a desktop PC provided with an external display unit.

また、上記の実施形態において、PC1は、マイク241及びスピーカ242を内蔵する例を説明したが、これに限定されるものではなく、外付けのマイク241及びスピーカ242により構成してもよい。 Further, in the above embodiment, the example in which the PC 1 incorporates the microphone 241 and the speaker 242 has been described, but the present invention is not limited to this, and the PC 1 may be configured by an external microphone 241 and the speaker 242.

また、上記の実施形態において、人の言動として、人の発話した音声を検出する例を説明したが、これに限定されるものではなく、例えば、人の動き(モーション)などを撮像部27を介して検出するようにしてもよいし、他のセンサなどの検出を用いてもよい。 Further, in the above embodiment, an example of detecting a voice spoken by a person as a person's behavior has been described, but the present invention is not limited to this, and for example, the image pickup unit 27 captures the movement (motion) of the person. It may be detected via, or detection by another sensor or the like may be used.

また、上記の実施形態において、所定の処理として、予め設定されたアプリケーションを実行させる例を説明したが、これに限定されるものではなく、例えば、OS61を使用するための利用者の認証処理であってもよい。また、利用者の認証処理としては、入力部32によるパスワードの入力による認証処理でもよいし、撮像部27を利用した顔認証処理であってもよい。 Further, in the above embodiment, an example of executing a preset application as a predetermined process has been described, but the present invention is not limited to this, and for example, in the user authentication process for using the OS 61. There may be. Further, the user authentication process may be an authentication process by inputting a password by the input unit 32 or a face authentication process using the image pickup unit 27.

また、上記の実施形態において、PC1は、人の言動を検出した場合に、ホストアプリケーション62が、OS61を起動した後に、予め設定された所定の処理を実行する例を説明したが、これに限定されるものではなく、OS61の起動までで処理を完了してもよい。 Further, in the above embodiment, the example in which the host application 62 executes a predetermined predetermined process set in advance after the host application 62 starts the OS 61 when the PC 1 detects the behavior of a person has been described, but the present invention is limited to this. The process may be completed by the time the OS 61 is started.

また、上記の実施形態において、DSP240は、検出した音声のキーフレーズが、予め定められた1つのキーフレーズと一致するか否かを検出する例を説明したが、これに限定されるものではない。DSP240は、予め定められた複数のキーフレーズと比較して、いずれかと一致した場合に、検出通知を出力するようにしてもよい。この場合、エンベデッドコントローラ31は、複数のキーフレーズのそれぞれに対応したWOVイベントフラグを備えて、それぞれのイベント検出をフラグ情報として保持するようにしてもよい。 Further, in the above embodiment, the DSP 240 has described an example of detecting whether or not the detected voice key phrase matches one predetermined key phrase, but the present invention is not limited thereto. .. The DSP 240 may compare with a plurality of predetermined key phrases and output a detection notification when any of the key phrases matches. In this case, the embedded controller 31 may include WOV event flags corresponding to each of the plurality of key phrases, and may hold each event detection as flag information.

また、この場合、ホストアプリケーション62は、複数のキーフレーズのそれぞれに応じた、予め設定された所定の処理を実行するようにしてもよい。すなわち、PC1は、予め定められたキーフレーズに応じて、起動するアプリケーションを変更するようにしてもよい。 Further, in this case, the host application 62 may execute a predetermined predetermined process corresponding to each of the plurality of key phrases. That is, the PC 1 may change the application to be started according to a predetermined key phrase.

また、上記の実施形態において、OS61が、レジューム処理を実行する例を説明したが、これに限定されるものではなく、レジューム処理の一部又は全部をエンベデッドコントローラ31が実行するようにしてもよい。 Further, in the above embodiment, the example in which the OS 61 executes the resume processing has been described, but the present invention is not limited to this, and the embedded controller 31 may execute a part or all of the resume processing. ..

また、上記の実施形態において、表示部14の表示の停止は、ビデオサブシステム13及び表示部14の電源供給も停止するものとして説明したが、これに限定されるものではなく、電源供給を停止せずに、表示部14の表示を停止するようにしてもよい。また、この場合は、図5のステップS205の処理が、不要になる。また、ホストアプリケーション62が、表示部14の表示の再開を制御するようにしてもよい。 Further, in the above embodiment, the stoppage of the display of the display unit 14 has been described as stopping the power supply of the video subsystem 13 and the display unit 14, but the present invention is not limited to this, and the power supply is stopped. Instead, the display of the display unit 14 may be stopped. Further, in this case, the process of step S205 in FIG. 5 becomes unnecessary. Further, the host application 62 may control the restart of the display of the display unit 14.

また、上記の実施形態において、DSP240は、マイク241が検出した音声を音声認識処理により、音声のフレーズにテキスト変換し、検出した音声のフレーズと、キーフレーズ記憶部41が記憶するキーフレーズとが一致するか否かを判定する例を説明したが、これに限定されるものではない。例えば、DSP240は、利用者の所定のフレーズの音声を録音して抽出した特徴量をキーフレーズ記憶部41に記憶させて、検出した音声の特徴量とを比較するようにしてもよい。 Further, in the above embodiment, the DSP 240 text-converts the voice detected by the microphone 241 into a voice phrase by voice recognition processing, and the detected voice phrase and the key phrase stored by the key phrase storage unit 41 are stored. An example of determining whether or not they match has been described, but the present invention is not limited to this. For example, the DSP 240 may record the voice of the user's predetermined phrase, store the extracted feature amount in the key phrase storage unit 41, and compare it with the detected voice feature amount.

なお、上述したPC1が備える各構成は、内部に、コンピュータシステムを有している。そして、上述したPC1が備える各構成の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより上述したPC1が備える各構成における処理を行ってもよい。ここで、「記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行する」とは、コンピュータシステムにプログラムをインストールすることを含む。ここでいう「コンピュータシステム」とは、OSや周辺機器等のハードウェアを含むものとする。 It should be noted that each configuration included in the above-mentioned PC1 has a computer system inside. Then, the program for realizing the functions of each configuration included in the above-mentioned PC1 is recorded on a computer-readable recording medium, and the program recorded on the recording medium is read into the computer system and executed. The processing in each configuration provided in the PC 1 may be performed. Here, "loading and executing a program recorded on a recording medium into a computer system" includes installing the program in the computer system. The term "computer system" as used herein includes hardware such as an OS and peripheral devices.

また、「コンピュータシステム」は、インターネットやWAN、LAN、専用回線等の通信回線を含むネットワークを介して接続された複数のコンピュータ装置を含んでもよい。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、CD-ROM等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。このように、プログラムを記憶した記録媒体は、CD-ROM等の非一過性の記録媒体であってもよい。 Further, the "computer system" may include a plurality of computer devices connected via a network including a communication line such as the Internet, WAN, LAN, and a dedicated line. Further, the "computer-readable recording medium" refers to a portable medium such as a flexible disk, a magneto-optical disk, a ROM, or a CD-ROM, and a storage device such as a hard disk built in a computer system. As described above, the recording medium in which the program is stored may be a non-transient recording medium such as a CD-ROM.

また、記録媒体には、当該プログラムを配信するために配信サーバからアクセス可能な内部又は外部に設けられた記録媒体も含まれる。なお、プログラムを複数に分割し、それぞれ異なるタイミングでダウンロードした後にPC1が備える各構成で合体される構成や、分割されたプログラムのそれぞれを配信する配信サーバが異なっていてもよい。さらに「コンピュータ読み取り可能な記録媒体」とは、ネットワークを介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ(RAM)のように、一定時間プログラムを保持しているものも含むものとする。また、上記プログラムは、上述した機能の一部を実現するためのものであってもよい。さらに、上述した機能をコンピュータシステムに既に記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル(差分プログラム)であってもよい。 The recording medium also includes an internal or external recording medium accessible from the distribution server for distributing the program. It should be noted that the program may be divided into a plurality of parts, downloaded at different timings, and then combined with each configuration provided in the PC 1, or the distribution server for distributing each of the divided programs may be different. Furthermore, a "computer-readable recording medium" is a volatile memory (RAM) inside a computer system that serves as a server or client when a program is transmitted via a network, and holds the program for a certain period of time. It shall include things. Further, the above program may be for realizing a part of the above-mentioned functions. Further, a so-called difference file (difference program) may be used, which can realize the above-mentioned function in combination with a program already recorded in the computer system.

また、上述した機能の一部又は全部を、LSI(Large Scale Integration)等の集積回路として実現してもよい。上述した各機能は個別にプロセッサ化してもよいし、一部、又は全部を集積してプロセッサ化してもよい。また、集積回路化の手法はLSIに限らず専用回路、又は汎用プロセッサで実現してもよい。また、半導体技術の進歩によりLSIに代替する集積回路化の技術が出現した場合、当該技術による集積回路を用いてもよい。 Further, a part or all of the above-mentioned functions may be realized as an integrated circuit such as an LSI (Large Scale Integration). Each of the above-mentioned functions may be made into a processor individually, or a part or all of them may be integrated into a processor. Further, the method of making an integrated circuit is not limited to the LSI, and may be realized by a dedicated circuit or a general-purpose processor. Further, when an integrated circuit technology that replaces an LSI appears due to advances in semiconductor technology, an integrated circuit based on this technology may be used.

1 PC
10 メイン制御部
11 CPU
12 メインメモリ
13 ビデオサブシステム
14 表示部
21 チップセット
22 BIOSメモリ
23 HDD
24 オーディオシステム
25 WLANカード
26 USBコネクタ
27 撮像部
31 エンベデッドコントローラ(EC)
32 入力部
33 電源回路
41 キーフレーズ記憶部
42 WOVイベントフラグ
50 ソフトウェアデバイス
51 イベント機能部
52 ドライバインタフェース部
61 OS
62 ホストアプリケーション
63 アプリケーション
240 DSP
241 マイク
242 スピーカ
1 PC
10 Main control unit 11 CPU
12 Main memory 13 Video subsystem 14 Display 21 Chipset 22 BIOS memory 23 HDD
24 Audio system 25 WLAN card 26 USB connector 27 Imaging unit 31 Embedded controller (EC)
32 Input section 33 Power supply circuit 41 Key phrase storage section 42 WOV event flag 50 Software device 51 Event function section 52 Driver interface section 61 OS
62 Host application 63 Application 240 DSP
241 microphone 242 speaker

Claims (7)

人の発話及び動きのうち少なくとも一方を含む言動を検出可能であり、検出した前記言動と、予め定められた言動とが一致する場合に、検出通知を出力する検出処理部と、
OS(オペレーティングシステム)に基づく処理を実行するメイン制御部とは異なるサブ制御部であって、前記検出処理部が前記検出通知を出力したことを示すイベント情報を保持するとともに、前記メイン制御部の動作を停止した停止状態で、前記検出通知を受信した場合に、前記停止状態を解除して前記OSを起動させるサブ制御部と、
前記OSに基づいて動作する仮想デバイスであって、前記OSが起動したことに応じた、前記OS上で実行されるホストアプリケーションからのイベントの問い合わせを受信した場合に、前記サブ制御部が保持するイベント情報を確認し、当該確認の結果を前記ホストアプリケーションに返信する仮想デバイスと
を備え、
前記メイン制御部によって実行される前記ホストアプリケーションは、記確認の結果が、前記検出処理部が前記検出通知を出力したことを示す場合に、予め定められた処理を前記メイン制御部に実行させる
情報処理装置。
A detection processing unit that can detect words and actions including at least one of a person's utterances and movements and outputs a detection notification when the detected words and actions match a predetermined word and action.
It is a sub-control unit that is different from the main control unit that executes processing based on the OS (operating system), and holds event information indicating that the detection processing unit has output the detection notification, and also holds event information indicating that the detection processing unit has output the detection notification. A sub-control unit that releases the stopped state and starts the OS when the detection notification is received in the stopped state in which the operation is stopped.
A virtual device that operates based on the OS, and is held by the sub-control unit when an event inquiry is received from a host application executed on the OS in response to the startup of the OS. It is equipped with a virtual device that confirms event information and returns the result of the confirmation to the host application.
The host application executed by the main control unit causes the main control unit to execute a predetermined process when the result of the confirmation indicates that the detection processing unit outputs the detection notification. Information processing device.
前記サブ制御部は、前記メイン制御部が動作状態で、且つ、表示部による表示を停止している状態において、前記検出通知を受信した場合に、前記検出通知を受信したことを示すイベント通知を前記仮想デバイスに出力し、
前記仮想デバイスは、前記イベント通知を予め定められた書式に変換して、前記ホストアプリケーションに出力し、
前記ホストアプリケーションは、前記イベント通知によって、前記検出処理部が前記検出通知を出力したことを判定し、前記検出処理部が前記検出通知を出力した場合に、前記予め定められた処理を前記メイン制御部に実行させる
請求項1に記載の情報処理装置。
When the sub-control unit receives the detection notification while the main control unit is in the operating state and the display by the display unit is stopped, the sub-control unit sends an event notification indicating that the detection notification has been received. Output to the virtual device
The virtual device converts the event notification into a predetermined format and outputs it to the host application.
The host application determines that the detection processing unit has output the detection notification by the event notification, and when the detection processing unit outputs the detection notification, the main control of the predetermined process is performed. The information processing apparatus according to claim 1, which is executed by a unit.
前記ホストアプリケーションは、前記予め定められた処理として、予め設定されたアプリケーションを前記メイン制御部に実行させる
請求項1又は請求項2に記載の情報処理装置。
The information processing device according to claim 1 or 2, wherein the host application causes the main control unit to execute a preset application as a predetermined process.
前記仮想デバイスは、
BIOS(Basic Input Output System)によって実され、前記仮想デバイスと前記サブ制御部との間の入出力処理を行うイベント機能部と、
前記OSに基づくデバイスドライバによって実され、前記仮想デバイスと前記ホストアプリケーションとの間の入出力処理を、予め定められたインタフェースで行うドライバインタフェース部と
を備える請求項1から請求項3のいずれか一項に記載の情報処理装置。
The virtual device is
An event function unit that is realized by BIOS (Basic Input Output System) and performs input / output processing between the virtual device and the sub control unit.
Any of claims 1 to 3, which is realized by the device driver based on the OS and includes a driver interface unit that performs input / output processing between the virtual device and the host application with a predetermined interface. The information processing device according to paragraph 1.
前記人の言動が、人の発話を含む場合、
前記検出処理部は、人が発話した音声を検出し、検出した前記音声と、予め定められたキーフレーズとが一致する場合に、前記検出通知を出力する
請求項1から請求項4のいずれか一項に記載の情報処理装置。
When the person's words and actions include the person's utterances
The detection processing unit detects a voice spoken by a person, and outputs a detection notification when the detected voice matches a predetermined key phrase. Any one of claims 1 to 4. The information processing device according to paragraph 1.
前記停止状態には、停止前の状態を記憶部に退避した後に前記メイン制御部の動作を停止する休止状態が含まれ、
前記サブ制御部は、前記休止状態で前記検出通知を受信した場合に、前記メイン制御部に、前記記憶部に退避した前記停止前の状態を復帰させるレジューム処理を実行させて、前記OSを起動させる
請求項1から請求項5のいずれか一項に記載の情報処理装置。
The stopped state includes a hibernation state in which the operation of the main control unit is stopped after the state before the stop is saved in the storage unit.
When the detection notification is received in the hibernation state, the sub-control unit causes the main control unit to execute a resume process for restoring the state before the stop, which is saved in the storage unit, and starts the OS. The information processing apparatus according to any one of claims 1 to 5.
検出処理部が、人の発話及び動きのうち少なくとも一方を含む言動を検出可能であり、検出した前記言動と、予め定められた言動とが一致する場合に、検出通知を出力する検出処理ステップと、
OS(オペレーティングシステム)に基づく処理を実行するメイン制御部とは異なるサブ制御部が、前記検出処理ステップによって前記検出通知が出力されたことを示すイベント情報を保持するとともに、前記メイン制御部の動作を停止した停止状態で、前記検出通知を受信した場合に、前記停止状態を解除して前記OSを起動させる起動ステップと、
前記OSに基づいて動作する仮想デバイスが、前記OSが起動したことに応じた、前記OS上で実行されるホストアプリケーションからのイベントの問い合わせを受信した場合に、前記サブ制御部が保持するイベント情報を確認し、当該確認の結果を前記ホストアプリケーションに返信する通知ステップと、
前記メイン制御部が、前記ホストアプリケーションの処理において、前記確認の結果が、前記検出処理部が前記検出通知を出力したことを示す場合に、予め定められた処理を実行する実行処理ステップと
を含む情報処理方法。
A detection processing step that outputs a detection notification when the detection processing unit can detect words and actions including at least one of a person's utterance and movement, and the detected words and actions match a predetermined word and action. ,
A sub-control unit different from the main control unit that executes processing based on the OS (operating system) holds event information indicating that the detection notification has been output by the detection processing step, and operates the main control unit. When the detection notification is received in the stopped state, the start step of canceling the stopped state and starting the OS, and
Event information held by the sub-control unit when a virtual device operating based on the OS receives an event inquiry from a host application executed on the OS in response to the startup of the OS. And a notification step to return the result of the confirmation to the host application,
The main control unit includes an execution processing step of executing a predetermined process when the confirmation result indicates that the detection processing unit has output the detection notification in the processing of the host application. Information processing method.
JP2019209328A 2019-11-20 2019-11-20 Information processing equipment and information processing method Active JP7005577B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019209328A JP7005577B2 (en) 2019-11-20 2019-11-20 Information processing equipment and information processing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019209328A JP7005577B2 (en) 2019-11-20 2019-11-20 Information processing equipment and information processing method

Publications (2)

Publication Number Publication Date
JP2021082039A JP2021082039A (en) 2021-05-27
JP7005577B2 true JP7005577B2 (en) 2022-01-21

Family

ID=75966328

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019209328A Active JP7005577B2 (en) 2019-11-20 2019-11-20 Information processing equipment and information processing method

Country Status (1)

Country Link
JP (1) JP7005577B2 (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120150546A1 (en) 2010-12-13 2012-06-14 Hon Hai Precision Industry Co., Ltd. Application starting system and method
US20150363587A1 (en) 2012-02-24 2015-12-17 Samsung Electronics Co., Ltd. Method and apparatus for controlling lock/unlock state of terminal through voice recognition
JP2017532669A (en) 2014-09-19 2017-11-02 華為技術有限公司Huawei Technologies Co.,Ltd. Method and apparatus for executing an application program

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120150546A1 (en) 2010-12-13 2012-06-14 Hon Hai Precision Industry Co., Ltd. Application starting system and method
US20150363587A1 (en) 2012-02-24 2015-12-17 Samsung Electronics Co., Ltd. Method and apparatus for controlling lock/unlock state of terminal through voice recognition
JP2017532669A (en) 2014-09-19 2017-11-02 華為技術有限公司Huawei Technologies Co.,Ltd. Method and apparatus for executing an application program

Also Published As

Publication number Publication date
JP2021082039A (en) 2021-05-27

Similar Documents

Publication Publication Date Title
JP3266560B2 (en) Information processing system and control method thereof
JP3045948B2 (en) Information processing apparatus and control method thereof
TWI436199B (en) Method and controller for power management
US20100106886A1 (en) Transparent Self-Hibernation of Non-Volatile Memory System
US7900091B2 (en) Method for recovering basic input output system and computer device thereof
KR20110081967A (en) Method and system for providing hybrid-shutdown and fast startup processes
JP2018511104A (en) Techniques for improved hybrid sleep power management
WO2021233363A1 (en) Computing device and bios update method therefor, and medium
US20110154484A1 (en) Information processing apparatus, method of controlling authentication process, and recording medium
TW201525869A (en) System and method for dual OS memory switching
EP3889735A1 (en) Information processing apparatus and control method
US20130086372A1 (en) Information processing apparatus and boot control method
JP2006293760A (en) Information processor
JP7005577B2 (en) Information processing equipment and information processing method
US11086371B2 (en) Heat suppression in an information processing device in an initial setting mode
JP2007066060A (en) Electronic apparatus and computer executable program
US11163354B2 (en) Information processing apparatus, and control method
JP6797991B1 (en) Electronic device and operation information output method
US11409542B2 (en) Information sharing between operating systems of the same device
WO2019080321A1 (en) Power-on method and apparatus for terminal device, device, and storage medium
KR101249831B1 (en) Computer system and method for booting the same
JP7066022B1 (en) Information processing device and control method
JP6644989B2 (en) Information processing apparatus, control method, and program
JP6967639B1 (en) Information processing device and control method
US10997046B2 (en) Integrity check staging

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20201022

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210929

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211012

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211129

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20211214

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220105

R150 Certificate of patent or registration of utility model

Ref document number: 7005577

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150