JP7115216B2

JP7115216B2 - 情報処理装置および情報処理方法

Info

Publication number: JP7115216B2
Application number: JP2018200397A
Authority: JP
Inventors: 敬三川口
Original assignee: Toyota Motor Corp
Current assignee: Toyota Motor Corp
Priority date: 2018-10-24
Filing date: 2018-10-24
Publication date: 2022-08-09
Anticipated expiration: 2038-10-24
Also published as: US10991171B2; US20200134936A1; CN111093130A; JP2020066339A; CN111093130B; US20210201601A1

Description

本発明は、事故を起こした車両に関する情報を取得する情報処理装置および情報処理方法に関する。

車両に衝突事故が発生した場合、車両に搭載された緊急通報装置から管理センタに自動で緊急通報を実行し、管理センタの手配により救急車などを事故現場に向かわせるシステムが知られている。

特許文献１は、車両事故の発生時、管理センタ側で乗員の傷害程度を推定可能な車両用緊急通報装置を開示する。この装置では、車両の各座席付近にマイクが１つずつ設けられ、マイクで乗員の音声を取得し、音声情報が管理センタへ送信される。管理センタのオペレータは、乗員と通話することでケガの状況などを把握する。

特開２０１６－３０４８１号公報

特許文献１の技術では、たとえば事故車両の外の雑音が大きい状況で、特定の乗員の音声を明瞭に取得することは困難な可能性がある。

本発明はこうした状況に鑑みてなされたものであり、その目的は、車両に事故が発生した場合、車室内の指定した位置の乗員の音声を明瞭に取得しやすくできる情報処理装置および情報処理方法を提供することにある。

上記課題を解決するために、本発明のある態様の情報処理装置は、事故を起こした車両から乗員の位置に関する情報と乗員に関する情報を取得する取得部と、オペレータの操作入力を受け付ける受付部と、前記操作入力にもとづいて前記車両の車室内のマイクの指向性を決定する決定部と、前記乗員に関する情報にもとづいて、前記乗員の着座位置と、前記乗員の状態とを表す画像を表示する表示部と、を備える。前記受付部は、前記表示部に表示された画像における前記乗員の着座位置を指定する操作入力を受け付け、前記決定部は、指定された前記乗員の着座位置の方向に前記マイクの指向性を決定する。

この態様によると、オペレータの操作入力にもとづいて、事故を起こした車両の車室内のマイクの指向性を決定するので、指定した位置の乗員の音声を明瞭に取得しやすくできる。

前記取得部は、前記車両から窓の開閉状態に関する情報を取得し、前記表示部は、前記窓の開閉状態を表す画像を表示してもよい。

本発明の別の態様もまた、情報処理装置である。この装置は、事故を起こした車両から乗員の位置に関する情報と乗員に関する情報を取得する取得部と、オペレータの操作入力を受け付ける受付部と、前記操作入力にもとづいて前記車両の車室内のマイクの指向性を決定する決定部と、前記乗員に関する情報にもとづいて、前記乗員の着座位置と、前記乗員の状態とを表す画像を表示する表示部と、を備える。前記取得部は、前記車両から窓の開閉状態に関する情報を取得し、前記表示部は、前記窓の開閉状態を表す画像を表示する。

前記決定部は、前記表示部に表示された画像における前記窓を指定する操作入力にもとづいて、指定された前記窓の方向に前記マイクの指向性を決定してもよい。

本発明の別の態様もまた、情報処理装置である。この装置は、事故を起こした車両から乗員に関する情報を取得する取得部と、前記乗員に関する情報にもとづいて、前記乗員の着座位置と、前記乗員の状態とを表す画像を表示する表示部と、を備える。前記取得部は、前記車両から窓の開閉状態に関する情報を取得し、前記表示部は、前記窓の開閉状態を表す画像を表示する。

この態様によると、画像をもとに、事故を起こした車両の各乗員の着座位置と状態を速やかに把握できる。

本発明のさらに別の態様は、情報処理方法である。この方法は、事故を起こした車両から乗員の位置に関する情報と乗員に関する情報を取得する取得ステップと、前記乗員に関する情報にもとづいて、前記乗員の着座位置と、前記乗員の状態とを表す画像を表示部により表示する表示ステップと、オペレータの操作入力を受け付ける受付ステップと、前記受付ステップで受け付けた前記操作入力にもとづいて前記車両の車室内のマイクの指向性を決定する決定ステップと、を備える。前記受付ステップにおいて、前記表示部に表示された画像における前記乗員の着座位置を指定する操作入力を受け付け、前記決定ステップにおいて、指定された前記乗員の着座位置の方向に前記マイクの指向性を決定する。
本発明のさらに別の態様もまた、情報処理方法である。この方法は、事故を起こした車両から乗員の位置に関する情報と乗員に関する情報を取得する取得ステップと、前記乗員に関する情報にもとづいて、前記乗員の着座位置と、前記乗員の状態とを表す画像を表示部により表示する表示ステップと、オペレータの操作入力を受け付ける受付ステップと、前記受付ステップで受け付けた前記操作入力にもとづいて前記車両の車室内のマイクの指向性を決定する決定ステップと、を備える。前記取得ステップにおいて、前記車両から窓の開閉状態に関する情報を取得し、前記表示ステップにおいて、前記窓の開閉状態を表す画像を前記表示部により表示する。

本発明によれば、車両に事故が発生した場合、車室内の指定した位置の乗員の音声を明瞭に取得しやすくできる。

実施の形態に係る緊急通報システムの構成を示すブロック図である。図１の車両の車室内を概略的に示す図である。図１の情報処理装置の表示部に表示された画像の一例を示す図である。

図１は、実施の形態に係る緊急通報システム１の構成を示すブロック図である。緊急通報システム１は、緊急通報装置１０と、情報処理装置４０とを備える。

緊急通報装置１０は、自動車である車両９０に搭載される。緊急通報装置１０は、無線通信機能を有し、無線基地局や無線アクセスポイントを介してネットワーク３０に接続する。ネットワーク３０には情報処理装置４０が接続されており、情報処理装置４０は緊急通報装置１０とネットワーク３０経由で通信を行う。情報処理装置４０は、たとえば緊急通報センターに設置され、オペレータに利用される。無線通信の規格は特に限定されないが、例えば、３Ｇ（第３世代移動通信システム）、４Ｇ（第４世代移動通信システム）または５Ｇ（第５世代移動通信システム）を含む。

車両９０は、緊急通報装置１０、乗員検知センサ１２、シートベルトセンサ１４、窓開閉センサ１６、ドアＥＣＵ１８、マイク２０およびスピーカ２２を備える。緊急通報装置１０は、検出部５０、取得部５２、導出部５４、通信部５６、保持部５８、指向性制御部６０および通話部６２を備える。

乗員検知センサ１２は、車両９０の各座席に設けられ、荷重を検知することで各座席の乗員の着座状態を検知し、検知結果を取得部５２に出力する。

シートベルトセンサ１４は、車両９０の各座席に設けられ、各座席の乗員のシートベルトの着用状態を検知し、検知結果を取得部５２に出力する。

窓開閉センサ１６は、車両９０の各窓の開閉状態を検知し、検知結果をドアＥＣＵ１８と取得部５２に出力する。

車両９０の衝突などにより、予め定められたしきい値以上の加速度が図示しない加速度センサで検出された場合、図示しないエアバッグＥＣＵ（Electronic Control Unit）は、エアバッグを展開させる展開信号をエアバッグと検出部５０に出力する。検出部５０は、展開信号を受けた場合、車両９０に事故が発生したことを検出する。

ドアＥＣＵ１８は、検出部５０で事故発生が検出された場合、窓開閉センサ１６により閉状態が検知された窓のそれぞれに関して、窓が割れている可能性があるか診断する。ドアＥＣＵ１８は、ジャムプロテクション機能を有効に設定した上で窓を閉め、診断を実行する。ジャムプロテクションは、窓の閉動作中に窓開閉用のモータに負荷がかかると窓の開動作を実行し、手などの挟み込みを防止する機能である。通常、ほぼ完全に窓が閉じていればジャムプロテクション機能は無効になるが、診断のために有効にする。窓が割れていなければ、既に閉じている窓を閉める動作によりモータに負荷がかかり、ジャムプロテクションが動作することが想定される。窓が割れていれば、窓を閉める動作によりモータに負荷がかからず、ジャムプロテクションが動作しないことが想定される。ドアＥＣＵ１８は、窓開閉センサ１６が閉状態を示す窓においてジャムプロテクションが動作しない場合、この窓が開状態であることを検知し、検知結果を取得部５２に出力する。

取得部５２は、事故発生の検出の有無によらず乗員検知センサ１２の検知結果とシートベルトセンサ１４の検知結果を定期的に取得する。取得部５２は、検出部５０で事故発生が検出された場合、事故発生の直前に取得した乗員検知センサ１２の検知結果とシートベルトセンサ１４の検知結果を導出部５４に出力する。

取得部５２は、検出部５０で事故発生が検出された場合、ドアＥＣＵ１８および／または窓開閉センサ１６から出力された窓の開閉状態の検知結果を取得し、取得した検知結果を導出部５４に出力する。前述のように、窓開閉センサ１６の検知結果が閉状態を示す窓であっても、ドアＥＣＵ１８の検知結果が開状態を示せば、この窓は開状態であるとする。

導出部５４は、検出部５０で事故発生が検出された場合、緊急通報情報を導出し、導出した緊急通報情報を通信部５６に出力する。緊急通報情報は、ＭＳＤ（ＭｉｎｉｍｕｍＳｅｔｏｆＤａｔａ）ともよばれる。緊急通報情報は、車両９０を特定する情報、車両９０の位置、取得部５２から出力された乗員検知センサ１２の検知結果、シートベルトセンサ１４の検知結果、および、窓の開閉状態の検知結果などを含む。車両９０を特定する情報は、車両識別番号（ＶＩＮ）、ナンバープレートの情報、車種、車両９０の色などを含み、図示しない記憶部に予め記憶されている。車両９０の位置は、図示しないＧＰＳ受信部で取得される。

通信部５６は、導出部５４から出力された緊急通報情報を情報処理装置４０に送信する。

図２は、図１の車両９０の車室内を概略的に示す。マイク２０は、たとえば車室内の中心付近に１つ設けられる。マイク２０は、単一指向性を有しており、特定方向の感度が他の方向の感度より高い。事故発生時以外の通常時には、運転手による発話を取得しやすいように、マイク２０の指向性は運転席の方向ｄ１に設定される。通常時には、マイクで取得された音声の情報は図示しないナビゲーション装置などに供給され、音声認識によりナビゲーション装置などを操作できる。マイクの指向性の方向は、指向性制御部６０による制御に応じて変更可能である。マイク２０の指向性は、たとえば助手席の方向ｄ２、右後部座席の方向ｄ３、左後部座席の方向ｄ４、運転席側の窓の方向ｄ５などに変更できる。

図１に戻る。保持部５８は、各座席および各窓に関するマイク２０の指向性の制御情報を予め保持している。指向性の制御情報は、各座席および各窓の方向に指向性を設定するための角度などを含む。

指向性制御部６０は、後述する情報処理装置４０から事故発生時に送信されたマイク２０の指向性情報と、保持部５８に保持された指向性の制御情報とにもとづいて、マイク２０の指向性を制御する。たとえば、指定された指向性が右後部座席の方向であれば、指向性制御部６０は、右後部座席に関する指向性の制御情報にもとづいて指向性を制御する。

マイク２０で取得された音声情報は、通話部６２にも供給される。事故発生が検出された場合、通話部６２は、通信部５６を介して情報処理装置４０の通話部７８と接続され、マイク２０とスピーカ２２を用いて、車両９０の乗員と情報処理装置４０のオペレータとの通話を実行する。スピーカ２２は、車室内に設けられ、通話部６２から供給される音声信号にもとづいて音声を出力する。

情報処理装置４０は、通信部７０、取得部７２、表示制御部７４、表示部７６、通話部７８、受付部８０および決定部８２を備える。通信部７０は、事故を起こした車両から緊急通報情報を受信し、受信した緊急通報情報を取得部７２に出力する。

取得部７２は、通信部７０から出力された緊急通報情報を取得し、その緊急通報情報にもとづいて、事故車両の乗員に関する情報を取得する。

取得部７２は、緊急通報情報における乗員検知センサ１２の検知結果にもとづいて、乗員の位置に関する情報を取得する。

取得部７２は、緊急通報情報における乗員検知センサ１２の検知結果とシートベルトセンサ１４の検知結果にもとづいて、乗員の状態に関する情報を取得する。取得部７２は、ある座席に関して、乗員の着座があり、シートベルトが着用されていれば、この乗員の重傷度が低いことを示す乗員の状態に関する情報を取得する。取得部７２は、ある座席に関して、乗員の着座があり、シートベルトが着用されていなければ、この乗員の重傷度が高いことを示す乗員の状態に関する情報を取得する。

取得部７２は、緊急通報情報における窓の開閉状態の検知結果にもとづいて、窓の開閉状態に関する情報を取得する。取得部７２は、取得した乗員に関する情報と、窓の開閉状態に関する情報を、表示制御部７４に出力する。

表示制御部７４は、取得部７２から出力された乗員に関する情報と、窓の開閉状態に関する情報にもとづいて、表示部７６による画像の表示を制御する。

表示部７６は、表示制御部７４の制御にしたがい、事故車両における乗員の着座位置と、乗員の状態と、窓の開閉状態とを表す画像を表示する。

図３は、情報処理装置４０の表示部７６に表示された画像１００の一例を示す。画像１００は、着座位置が運転席である乗員を示す図形１０２、着座位置が助手席である乗員を示す図形１０４、着座位置が右後部座席である乗員を示す図形１０６を含む。左後部座席に対応する位置には図形が表示されていないので、左後部座席には乗員が着座していないことを表す。図形に代えて、乗員を示すキャラクタが表示されてもよい。

各図形１０２，１０４，１０６は、色または模様などにより、乗員の状態も示す。図形１０２は、運転席の乗員の状態が「重傷度高」であることを示す。図形１０４は、助手席の乗員の状態が「重傷度高」であることを示す。図形１０６は、右後部座席の乗員の状態が「重傷度低」であることを示す。

画像１００は、助手席側の窓が開状態であることを示す図形１１０も含む。他の窓に対応する位置には図形が表示されていないので、他の窓は閉状態であることを表す。

図１に戻る。通話部７８は、取得部７２が緊急通報情報を取得した場合、緊急通報情報を送信した緊急通報装置１０の通話部６２を介して、車両９０の乗員とオペレータとの通話を実行する。

受付部８０は、表示部７６に表示された画像における乗員の着座位置または開状態の窓の位置を指定するオペレータの操作入力を受け付ける。受付部８０は、オペレータによる表示部７６の画面へのタッチ操作入力を受け付けるタッチセンサを含んでもよい。

決定部８２は、操作入力にもとづいて車両９０の車室内のマイク２０の指向性を決定する。決定部８２は、表示部７６に表示された画像における乗員の着座位置を指定する操作入力にもとづいて、指定された乗員の着座位置の方向にマイク２０の指向性を決定する。決定部８２は、表示部７６に表示された画像における窓を指定する操作入力にもとづいて、指定された窓の方向にマイク２０の指向性を決定する。

決定部８２は、決定したマイク２０の指向性の情報を通信部７０に出力し、通信部７０は、マイク２０の指向性情報を緊急通報装置１０に送信する。緊急通報装置１０は、前述のように指向性情報にしたがってマイク２０の指向性を制御する。

通話が開始されると、オペレータは「大丈夫ですか？」などと車両９０の乗員に呼びかける。オペレータの声は、各座席で聞こえる。マイク２０の指向性が向いている運転手から問題ない旨の返答があれば、オペレータは救急車を要請しない。

オペレータは、呼びかけに対して運転手から応答が無い場合、表示部７６の画像１００を確認し、重傷度が低い乗員の着座位置を画面のタッチ操作などにより指定する。オペレータは、画像を確認することで各乗員の重傷度と着座位置を速やかに把握できる。これにより、重傷度が高い乗員よりも会話できる確率が高い重傷度が低い乗員と速やかに会話を開始しやすくなる。図３の例では、オペレータは右後部座席を指定することが想定される。

オペレータは、指定した乗員と会話可能であれば、各乗員のケガの程度などを聞き、救急車を要請する。マイク２０は指定した乗員の方向の感度が高く、他の方向の感度が低いので、車外の雑音が大きい状況でも、指定した乗員の音声を明瞭に取得しやすい。

オペレータは、全ての乗員から応答が無い場合にも、救急車を要請する。救急車を要請する場合、オペレータは、消防本部の通信司令室などに通報し、受信した緊急通報情報にもとづいて車両９０の位置、車両９０を特定する情報を知らせ、乗員から聞けていればケガの程度なども知らせる。情報処理装置４０は、消防本部の通信司令室などの端末装置に緊急通報情報を送信してもよい。

オペレータは、全ての乗員から応答が無い場合、画像において開状態の窓の位置を指定してもよい。オペレータは、画像を確認することで開状態の窓を速やかに把握できる。指定された開いた窓の方向にマイク２０の指向性が制御され、オペレータは、マイク２０で集音された車外の音を聞くことができるため、たとえば以下に示すように対処の幅が広がる。

たとえば、高速道路または自動車専用道路と、一般道路とが上下に並行し、緊急通報情報の車両９０の位置からはどちらの道路で事故が発生したか特定し難い場合にも、事故が発生した道路を速やかに特定できる可能性がある。車外から他車両の走行音が聞こえ、通行人の声が聞こえなければ、高速道路や自動車専用道路で事故が起こった可能性がある。車外から通行人の声が聞こえれば、一般道路で事故が起こった可能性がある。オペレータは、車外の通行人と会話して、一般道路であるか確認できる。車外の通行人と会話する場合、情報処理装置４０は、オペレータの操作入力に応じて、スピーカ２２の音量を高める指示を緊急通報装置１０に送信してもよい。

また、オペレータは、車外の通行人と会話して、乗員の応急処置などを通行人に依頼したり、より詳しい事故状況などを通行人から聞いたりできる。マイク２０は指定した開状態の窓の方向の感度が高く、他の方向の感度が低いので、通行人の音声を明瞭に取得しやすい。

検出部５０、取得部５２、導出部５４、指向性制御部６０、通話部６２、取得部７２、表示制御部７４、通話部７８、受付部８０、決定部８２の構成は、ハードウエア的には、任意のコンピュータのＣＰＵ、メモリ、その他のＬＳＩで実現でき、ソフトウエア的にはメモリにロードされたプログラムなどによって実現されるが、ここではそれらの連携によって実現される機能ブロックを描いている。したがって、これらの機能ブロックがハードウエアのみ、ソフトウエアのみ、またはそれらの組合せによっていろいろな形で実現できることは、当業者には理解されるところである。

本実施の形態によれば、オペレータの操作入力にもとづいて、事故を起こした車両９０の車室内のマイク２０の指向性を決定するので、指定した位置の乗員の音声を明瞭に取得しやすくできる。よって、オペレータに、事故に対して適切な対応を速やかに取らせやすくできる。

以上、実施の形態をもとに本発明を説明した。実施の形態はあくまでも例示であり、各構成要素や各処理プロセスの組合せにいろいろな変形例が可能なこと、またそうした変形例も本発明の範囲にあることは当業者に理解されるところである。

たとえば、後部座席に乗員検知センサ１２とシートベルトセンサ１４が設けられていない車両９０の場合、図示しないドア開閉センサにより後部座席のドアの開閉の有無を検知して、車両９０の走行開始前にドアが開き、続いて閉じれば、緊急通報装置１０の取得部５２は、そのドアに対応する座席に乗員が着座していることを取得してもよい。また、後部座席に乗員検知センサ１２とシートベルトセンサ１４が設けられていない場合、車両９０の走行中にマイク２０の指向性を後部座席の方向に定期的に向け、取得部５２は、マイク２０で集音された音声の周波数と、集音されたときの指向性の方向とにもとづいて、後部座席の乗員の着座位置を推定してもよい。これらの変形例では、乗員検知センサ１２とシートベルトセンサ１４が後部座席に設けられていない車両９０でも、後部座席の乗員の有無や着座位置をオペレータに把握させることができる。

実施の形態では車両９０に１つのマイク２０が設けられたが、運転席の乗員、助手席の乗員および窓に対して指向性を制御可能な第１マイクと、後部座席の乗員および窓に対して指向性を制御可能な第２マイクが設けられてもよい。この変形例では、車両９０の構成の自由度を向上できる。

緊急通報装置１０は、予め入力された運転手情報を保持していてもよい。運転手情報は、たとえば、年齢層、血液型、性別などの救命処置に有効な可能性のある情報を含む。事故発生が検出された場合、導出部５４は、運転手情報も緊急通報情報に含ませる。この変形例では、たとえば運転手の意識がない場合にも、オペレータは、出動前の救急隊員に運転手情報を知らせることができ、救急隊員は出動準備を行いやすくなる。

緊急通報装置１０の導出部５４は、図示しない加速度センサにより検出された事故発生時の加速度の情報も緊急通報情報に含ませてもよい。情報処理装置４０の取得部７２は、シートベルトが着用されていない座席の乗員に関して、加速度の絶対値が大きいほど、重傷度を高くしてもよい。つまり重傷度は、高、低の２段階より多くの段階であってもよい。この変形例では、オペレータに提供する情報量を増やすことができる。

緊急通報装置１０の導出部５４は、図示しないジャイロセンサなどで車両９０の横転が検出された場合、横転情報も緊急通報情報に含ませてもよい。この変形例では、オペレータに提供する情報量を増やすことができる。

１…緊急通報システム、１０…緊急通報装置、２０…マイク、４０…情報処理装置、７２…取得部、７６…表示部、８０…受付部、８２…決定部、９０…車両、１００…画像。

Claims

事故を起こした車両から乗員の位置に関する情報と乗員に関する情報を取得する取得部と、
オペレータの操作入力を受け付ける受付部と、
前記操作入力にもとづいて前記車両の車室内のマイクの指向性を決定する決定部と、
前記乗員に関する情報にもとづいて、前記乗員の着座位置と、前記乗員の状態とを表す画像を表示する表示部と、
を備え、
前記受付部は、前記表示部に表示された画像における前記乗員の着座位置を指定する操作入力を受け付け、
前記決定部は、指定された前記乗員の着座位置の方向に前記マイクの指向性を決定する、ことを特徴とする情報処理装置。
前記取得部は、前記車両から窓の開閉状態に関する情報を取得し、
前記表示部は、前記窓の開閉状態を表す画像を表示する、ことを特徴とする請求項１に記載の情報処理装置。
事故を起こした車両から乗員の位置に関する情報と乗員に関する情報を取得する取得部と、
オペレータの操作入力を受け付ける受付部と、
前記操作入力にもとづいて前記車両の車室内のマイクの指向性を決定する決定部と、
前記乗員に関する情報にもとづいて、前記乗員の着座位置と、前記乗員の状態とを表す画像を表示する表示部と、
を備え、
前記取得部は、前記車両から窓の開閉状態に関する情報を取得し、
前記表示部は、前記窓の開閉状態を表す画像を表示する、ことを特徴とする情報処理装置。
前記決定部は、前記表示部に表示された画像における前記窓を指定する操作入力にもとづいて、指定された前記窓の方向に前記マイクの指向性を決定する、ことを特徴とする請求項２または３に記載の情報処理装置。
事故を起こした車両から乗員に関する情報を取得する取得部と、
前記乗員に関する情報にもとづいて、前記乗員の着座位置と、前記乗員の状態とを表す画像を表示する表示部と、
を備え、
前記取得部は、前記車両から窓の開閉状態に関する情報を取得し、
前記表示部は、前記窓の開閉状態を表す画像を表示する、ことを特徴とする情報処理装置。
事故を起こした車両から乗員の位置に関する情報と乗員に関する情報を取得する取得ステップと、
前記乗員に関する情報にもとづいて、前記乗員の着座位置と、前記乗員の状態とを表す画像を表示部により表示する表示ステップと、
オペレータの操作入力を受け付ける受付ステップと、
前記受付ステップで受け付けた前記操作入力にもとづいて前記車両の車室内のマイクの指向性を決定する決定ステップと、
を備え、
前記受付ステップにおいて、前記表示部に表示された画像における前記乗員の着座位置を指定する操作入力を受け付け、
前記決定ステップにおいて、指定された前記乗員の着座位置の方向に前記マイクの指向性を決定する、ことを特徴とする情報処理方法。
事故を起こした車両から乗員の位置に関する情報と乗員に関する情報を取得する取得ステップと、
前記乗員に関する情報にもとづいて、前記乗員の着座位置と、前記乗員の状態とを表す画像を表示部により表示する表示ステップと、
オペレータの操作入力を受け付ける受付ステップと、
前記受付ステップで受け付けた前記操作入力にもとづいて前記車両の車室内のマイクの指向性を決定する決定ステップと、
を備え、
前記取得ステップにおいて、前記車両から窓の開閉状態に関する情報を取得し、
前記表示ステップにおいて、前記窓の開閉状態を表す画像を前記表示部により表示する、ことを特徴とする情報処理方法。