JP6922911B2 - 情報処理システム、情報処理装置、情報処理方法、およびプログラム - Google Patents

Description

本開示は、情報処理システム、情報処理装置、情報処理方法、およびプログラムに関する。

従来のコミュニケーションとして最も多用されているものとして「言語」によるコミュニケーションがある（バーバルコミュニケーション）。言語によるコミュニケーションは情報伝達に優れ、例えば屋内での住人同士では言語によるコミュニケーションで感情を伝えることができる。一方、屋内の人物の感情を屋外に筒抜けにすることは防犯上も公衆道徳上も好ましくない。

また、近年は地域コミュニティの衰退と共に防犯への意識が進んでおり、監視カメラの導入等、ホームセキュリティに関する様々な技術が提案されている。例えば下記特許文献１では、センサにより異常を検知すると、異常情報を警備会社のセンタ装置へ送信すると共に、ドアホンから音声や映像を出力して侵入者を威嚇したり異常事態を周辺住民へ報知するシステムが開示されている。

特開２００６−２００１７６号公報

ここで、従来の「縁側」のような近隣住民とのインターフェースとなる物理的接触が可能な空間を家に設置することは、犯罪に対しての物理的なセキュリティホールであるとも言え、防犯上躊躇われるところである。そのため、近年は物理的にも社交的にも周辺住民との距離が広がり、地域コミュニティが衰退している。

そこで、本開示では、物理的な接触には距離を置きつつも、屋内の様子を適宜外部に伝えて、防犯および防災と地域コミュニティの活性化を両立させることが可能な情報処理システム、情報処理装置、情報処理方法、およびプログラムを提案する。

本開示によれば、屋内の様子をセンシングしたセンサデータに基づいて屋内の１以上の人物の感情を検知する検知部と、前記検知した感情のうち少なくともいずれかの人物の感情値が所定の条件を満たす場合、前記屋内の様子を撮像した撮像画像を屋外の表示装置に出力するよう制御する制御部と、を備える、情報処理システムを提案する。

本開示によれば、屋内の様子をセンシングしたセンサデータに基づいて屋内の１以上の人物の感情を検知する検知部と、前記検知した感情値が所定の条件を満たす場合、前記屋内の様子を撮像した撮像画像を屋外の表示装置に出力するよう制御する制御部と、を備える、情報処理装置を提案する。

本開示によれば、プロセッサが、屋内の様子をセンシングしたセンサデータに基づいて屋内の１以上の人物の感情を検知することと、前記検知した感情値が所定の条件を満たす場合、前記屋内の様子を撮像した撮像画像を屋外の表示装置に出力するよう制御することと、を含む、情報処理方法を提案する。

本開示によれば、コンピュータを、屋内の様子をセンシングしたセンサデータに基づいて屋内の１以上の人物の感情を検知する検知部と、前記検知した感情値が所定の条件を満たす場合、前記屋内の様子を撮像した撮像画像を屋外の表示装置に出力するよう制御する制御部と、として機能させる、プログラムを提案する。

以上説明したように本開示によれば、物理的な接触には距離を置きつつも、屋内の様子を適宜外部に伝えて、防犯および防災と地域コミュニティの活性化を両立させることが可能となる。

なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。

本開示の一実施形態による情報処理システムの概要を説明する図である。 第１の実施形態による情報処理システムの構成の一例を示すブロック図である。 第１の実施形態による動作処理を示すフローチャートである。 第２の実施形態による情報処理システムの構成の一例を示すブロック図である。 第２の実施形態による音声認識した文字列を追加する画像コンテンツの生成について説明する図である。 第２の実施形態による画像加工した撮像画像を用いた画像コンテンツの生成について説明する図である。 第３の実施形態による情報処理システムの構成の一例を示すブロック図である。 第３の実施形態による再生コンテンツに基づく画像コンテンツの生成について説明する図である。 第４の実施形態による情報処理システムの構成の一例を示すブロック図である。 第４の実施形態による複数の家の出力装置の連動について説明する図である。 第５の実施形態による情報処理システムの構成の一例を示すブロック図である。 第５の実施形態による屋外からの入力について説明する図である。 第６の実施形態による訪問医療に対応する画像コンテンツの表示例を示す図である。 本開示の一実施形態による情報処理システムにおける緊急事態発生時の動作処理を示すフローチャートである。 本実施形態によるパニック通知コンテンツの表示例を示す図である。 本実施形態による捜索願いの表示例を示す図である。 本開示にかかる情報処理装置のハードウェア構成を示した説明図である。

以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。

また、説明は以下の順序で行うものとする。
１．本開示の一実施形態による情報処理システムの概要
２．各実施形態
２−１．第１の実施形態
２−２．第２の実施形態
２−３．第３の実施形態
２−４．第４の実施形態
２−５．第５の実施形態
２−６．第６の実施形態
２−７．第７の実施形態
３．緊急時対応
４．ハードウェア構成
５．まとめ

＜＜１．本開示の一実施形態による情報処理システムの概要＞＞
まず、本開示の一実施形態による情報処理システムの概要について説明する。図１は、本開示の一実施形態による情報処理システムの概要を説明する図である。図１に示すように、本実施形態による情報処理システムは、家２０の塀２１に設けられた出力装置１２に屋内の様子を表示することで、物理的な接触には距離を置きつつも、屋内の様子を適宜外部に伝えて、防犯および防災と地域コミュニティの活性化を両立させることを可能とする。

出力装置１２の設置場所は、塀２１に限定されず、家２０の壁面等、外部から視認できる場所であればよい。

（背景）
上述したように、近年は防犯への意識が進むとともに地域コミュニティが衰退している。例えば個人宅での監視カメラの導入が進んでいるが、監視カメラの導入は犯罪の抑止には効果的であっても、自身の猜疑心が露わになり近隣住民にとの関係が悪くなることが懸念される。住民同士が互いに猜疑心を持つようになると、地域コミュニティがさらに衰退してしまう。

一方、従来の「縁側」のような、物理的接触が可能な隣家とのインターフェースを自宅に設置することは、犯罪に対しての物理的なセキュリティホールであるとも言え、防犯上躊躇われるところである。そのため、物理的にも社交的にも周辺住民との距離が広がりつつある。

そこで、本実施形態では、図１を参照して説明したように、屋外に設けた出力装置１２から適宜屋内の様子を外部に伝えることで、物理的な接触を避けつつ、防犯および防災と、地域コミュニティの活性化を両立させることを可能とする。

以上、本実施形態による情報処理システムの概要について説明した。続いて、本実施形態による情報処理システムの各実施形態について図面を参照して説明する。

＜＜２．各実施形態＞＞
＜２−１．第１の実施形態＞
まず、本開示の第１の実施形態による情報処理システム１−１について、図２〜図３を参照して説明する。

（２−１−１．構成）
図２は、第１の実施形態による情報処理システム１−１の構成の一例を示すブロック図である。図２に示すように、情報処理システム１−１は、感情検知部１０、制御部１１ａ、および出力装置１２を有する。

感情検知部１０は、屋内のユーザ感情を検知する機能を有する。例えば感情検知部１０は、屋内に設置されたカメラにより撮像された撮像画像からユーザの顔画像を認識し、顔画像から（例えば笑顔度等）ユーザ感情を定量化してもよい。また、感情検知部１０は、マイクロホンにより収音されたユーザ音声からユーザの発話内容、声色等を認識し、ユーザ感情を定量化することも可能である。また、感情検知部１０は、生体センサにより検知されたユーザの生体情報（脈拍、心拍、発汗量、脳波、体温等）を認識し、ユーザ感情を定量化することも可能である。生体情報を用いた感情の解析の具体例としては、例えば特開2005-64839号公報に記載されているように、学習済み、またはユーザ個別に再学習を行った感情モデルを用いて、デジタル化された複数種類の生体情報から感情パラメータ値を求めてもよい。また、ユーザ感情をより精度良く認識するために、特開2007-４1988号公報に記載されているように、ユーザの表情、ジェスチャー、声といった情報から特徴量を抽出してユーザ感情を予測し、さらにユーザが視聴しているコンテンツのメタ情報からユーザの感情を予測し、これら両者の予測結果に基づいてユーザの感情を認識してもよい。

制御部１１ａは、演算処理装置および制御装置として機能し、各種プログラムに従って情報処理システム１−１内の動作全般を制御する。制御部１１ａは、例えばＣＰＵ（Central Processing Unit）、マイクロプロセッサ等の電子回路によって実現される。また、制御部１１ａは、使用するプログラムや演算パラメータ等を記憶するＲＯＭ（Read Only Memory）、及び適宜変化するパラメータ等を一時記憶するＲＡＭ（Random Access Memory）を含んでいてもよい。本実施形態による制御部１１ａは、ホームネットワークに接続するホームエージェント等の情報処理装置により実現され、感情検知部１０や出力装置１２と別体であってもよい。

また、本実施形態による制御部１１ａは、コンテンツ生成部１１１ａとしても機能する。コンテンツ生成部１１１ａは、感情検知部１０により検知された屋内の人物の感情に応じて、出力装置１２に出力するコンテンツを生成する。例えばコンテンツ生成部１１１ａは、検知された感情が所定の閾値を上回った際に屋内で撮像された撮像画像に基づいて、図１に示すような壁新聞形態のコンテンツを生成してもよい。かかる撮像画像は、屋内に設置されたカメラで撮像されてもよいし、ユーザによりスマートフォンやハンディカム等で撮像されてもよい。また、撮像画像は静止画および動画のいずれであってもよい。

出力装置１２は、制御部１１ａの制御に従って、コンテンツ生成部１１１ａにより生成されたコンテンツ（画像、音声等）を出力する。例えば出力装置１２は、表示装置により実現される。表示装置は、例えば液晶ディスプレイ（ＬＣＤ：Liquid CrystalDisplay）、有機ＥＬ（Electroluminescence）ディスプレイなどであってもよいし、近年開発されている電子ペーパーであってもよい。電子ペーパーは、表示において待機電力が実質０であって、「電子機器」でもあり、塀や壁に設置し得る「建材」としても有用である。本実施形態では、例えば塀や壁に巨大な電子ペーパーを出力装置１２として設ける。

（２−１−２．動作処理）
続いて、本実施形態による情報処理システム１−１の動作処理について図３を参照して説明する。図３は、第１の実施形態による動作処理を示すフローチャートである。

図３に示すように、まず、本実施形態による情報処理システム１−１は、感情検知部１０により家屋内の人物の感情を検知する（ステップＳ１０３）。例えば感情検知部１０は、屋内に設置されたカメラで継続的に撮影される屋内の人物の表情を解析し、各人物の感情を定量化する。

次に、制御部１１ａは、感情検知部１０により検知された感情の変動が一定値（所定の閾値）を超えたか否かを判断する（ステップＳ１０６）。若しくは、制御部１１ａは、検知された感情の値が所定値を超えたか否かを判断してもよい。また、各閾値は人物毎にそれぞれ設定してもよい。

次いで、一定値を超えた場合（ステップＳ１０６／Ｙｅｓ）、制御部１１ａは、検知された感情値が予め設定された公開可能の範囲内であるか否かを判断する（ステップＳ１０９）。

次に、公開可能の範囲内である場合（ステップＳ１０９／Ｙｅｓ）、コンテンツ生成部１１１ａは、コンテンツを生成する（ステップＳ１１２）。例えば屋内のある人物の「喜び」の感情の変動が一定値を超え、かつ公開可能の範囲内である場合、コンテンツ生成部１１１ａは、当該感情が検知された際に撮像された当該人物の撮像画像に基づいて、図１の出力装置１２に示すような壁新聞形式の画像コンテンツ（例えば、見出し、日付、および撮像画像を含む新聞形式のレイアウト画像）を生成する。

そして、制御部１１ａは、生成した画像コンテンツを出力装置１２に出力し、出力装置１２に前回の壁新聞が表示されている場合はこれを更新する（ステップＳ１１５）。

一方、公開可能の範囲内ではなかった場合（ステップＳ１０９／Ｎｏ）、制御部１１ａはコンテンツの生成を行わず、壁新聞を更新せずに終了する。

以上説明した動作処理を継続的若しくは定期的に繰り返し、屋内の人物の感情に応じて屋内の様子を適宜外部へ報知することが可能となる。近隣住民は、塀２１の出力装置１２に表示されている壁新聞を見て、この家の住人の最近の出来事を知ることができ、地域コミュニティの活性化に繋がる。

なお、上述した情報処理システム１−１の動作処理は一例であって、本実施形態はこれに限定されない。例えば、情報処理システム１−１は、記念に残しておきたい場面をユーザが撮影した際の感情（撮影者または被写体の感情）を検知し、一定値を超えていた場合に当該撮影した画像に基づいて画像コンテンツを生成するようにしてもよい。また、情報処理システム１−１は、生成した画像コンテンツをユーザに提示し、ユーザにより承認された場合に出力装置１２に出力するようにしてもよい。また、情報処理システム１−１は、生成した画像コンテンツをユーザに提示し、ユーザによる編集を可能としてもよい。この際、情報処理システム１−１は、インターフェースとしてユーザのスマートフォンやＰＣ等の通信端末を用いてもよい。

＜２−２．第２の実施形態＞
以上説明した第１の実施形態では、画像コンテンツとして撮像画像をそのまま用いているが、本開示はこれに限定されず、撮像時の音声を文字にして追加したり、撮像画像を一部加工して用いてもよい。以下、本開示の第２の実施形態による情報処理システム１−２について、図４〜図６を参照して説明する。

（２−２−１．構成）
図４は、第２の実施形態による情報処理システム１−２の構成の一例を示すブロック図である。図４に示すように、情報処理システム１−２は、感情検知部１０、制御部１１ｂ、出力装置１２、音声入力部１３、および操作入力部１４を有する。

感情検知部１０および出力装置１２は、図２を参照して説明した第１の実施形態と同様である。

音声入力部１３は、家屋内に設けられたマイクロホンと、そのマイクロホンで得られた音声信号を増幅処理するマイクアンプ部と、音声信号にデジタル変換するＡ／Ｄ変換器により実現され、音声信号を制御部１１ｂに出力する。

操作入力部１４は、ユーザによる操作入力を受付け、操作内容を制御部１１ｂに出力する。操作入力部１４は、屋内の表示部と一体的に設けられるタッチセンサ、圧力センサ、若しくは近接センサであってもよい。或いは、操作入力部１４は、ボタン、スイッチ、またはレバーなど、物理的構成であってもよい。

制御部１１ｂは、演算処理装置および制御装置として機能し、各種プログラムに従って情報処理システム１−２内の動作全般を制御する。また、本実施形態による制御部１１ｂは、コンテンツ生成部１１１ｂ、音声認識部１１２、および画像加工部１１３として機能する。

音声認識部１１２は、音声入力部１３により収音された音声信号を認識し、文字列に変換する機能を有する。また、音声認識部１１２は、さらに文字列の構文解析や意味解析を行ってもよい。

画像加工部１１３は、家屋内のカメラにより撮像された撮像画像の加工を行う機能を有する。例えば画像加工部１１３は、出力装置１２で公開される撮像画像の一部を切り取ったり消したりすることが可能である。本実施形態による画像加工部１１３は、予め設定された加工を自動的に行ってもよいし、ユーザ操作に従って行ってもよい。

コンテンツ生成部１１１ｂは、音声認識部１１２により認識された音声の文字列や画像加工部１１３で加工された撮像画像に基づいて、出力装置１２に出力するコンテンツを生成することが可能である。

（２−２−２．画像コンテンツ例）
ここで、本実施形態により生成する画像コンテンツの一例について図５および図６を参照して説明する。

図５は、第２の実施形態による音声認識した文字列を追加する画像コンテンツの生成について説明する図である。図５に示すように、例えば屋内のカメラ２２で屋内の様子を撮像すると共に、音声入力部１３で屋内の音声を収音している際に、撮像画像や音声に基づいてユーザ２３Ａやユーザ２３Ｂの感情を継続的に検知する。次いで、例えばユーザ２３Ｂが笑顔になって「喜び」の感情値の変動が一定値を超えた場合、コンテンツ生成部１１１ｂは、カメラ２２で撮像したユーザ２３Ｂの撮像画像に基づいて、壁新聞形式レイアウトの画像コンテンツ１２２を生成する。この際、感情値の変動が一定値を超えた際のユーザ２３Ｂの発話音声「美味しい！」が音声入力部１３で収音され、音声認識部１１２により文字列に変換される。

コンテンツ生成部１１１ｂは、当該文字列を撮像画像に追加して画像コンテンツ１２２を生成することで、感情値が変動した際の状況をより詳しく近隣住民に報知することができる。なお画像コンテンツに追加する文字列は、感情値が変動した際に撮像された撮像画像の撮像タイミング前後に開始されたユーザの発話音声としてもよい。

また、かかる文字列の配置方法は特に限定しないが、例えば撮像画像を顔認識して、撮像画像に写るユーザ２３Ｂの顔の口部を検出し、口部周辺から吹き出し型にして文字列を表示してもよい。具体的には、図５に示す吹き出し画像１２３が相当する。

図６は、第２の実施形態による画像加工した撮像画像を用いた画像コンテンツの生成について説明する図である。例えば家の中で撮像した撮像画像には、散らかっている部分や汚れている部分等、公開したくない部分も含まれる。例えば制御部１１ｂは、図６に示す撮像画像６０から、物体認識等により自動で、若しくはユーザの指示に基づいて、散らかっている部分や汚れている部分等の公開したくない部分３１を特定する。次いで、画像加工部１１３は、かかる公開したくない部分３１を消す加工、若しくは図６に示すような吹き出し１２５等で隠す加工を行い、公開したくない部分３１を隠した画像コンテンツ１２４を生成することが可能となる。

以上説明したように、第２の実施形態では、屋内の人物の感情に応じて屋内の様子を適宜外部へ報知する際に、発話音声に基づく文字列を画像に追加することで、より詳しく屋内の様子を報知することが可能となる。また、報知する撮像画像のうち、散らかっている部分や汚れている部分等、公開したくない部分は隠すことが可能となる。このように、本実施形態では、地域コミュニティをさらに活性化させ、また、ユーザビリティを向上させることが可能となる。

＜２−３．第３の実施形態＞
上述した各実施形態では、屋内に設置されたカメラやユーザのスマートフォン等からリアルタイムで撮像された撮像画像に基づいて感情の検知や画像コンテンツの生成を行っているが、本開示はこれに限定されない。例えば本開示による情報処理システム１は、コンテンツ再生装置と連動し、過去の撮像画像や録画映像等を視聴した際のユーザ感情を検知して、出力装置１２に出力する画像コンテンツを生成してもよい。以下、このような本開示の第３の実施形態による情報処理システム１−３について、図７〜図８を参照して説明する。

（２−３−１．構成）
図７は、第３の実施形態による情報処理システム１−３の構成の一例を示すブロック図である。図７に示すように、情報処理システム１−３は、感情検知部１０、制御部１１ｃ、出力装置１２、音声入力部１３、操作入力部１４、およびコンテンツ再生装置１５を有する。

感情検知部１０、出力装置１２、音声入力部１３、および操作入力部１４は、図４を参照して説明した第２の実施形態と同様である。

コンテンツ再生装置１５は、過去の撮像画像や録画映像等を再生する機能を有する。例えばコンテンツ再生装置１５は、ＴＶ、レコーダー、スマートフォン、またはＰＣ等により実現される。コンテンツ再生装置１５は、必要に応じて再生中のコンテンツを制御部１１ｃに出力する。

制御部１１ｃは、演算処理装置および制御装置として機能し、各種プログラムに従って情報処理システム１−３内の動作全般を制御する。また、本実施形態による制御部１１ｃは、コンテンツ生成部１１１ｃ、音声認識部１１２、および再生コンテンツ編集部１１４として機能する。

音声認識部１１２は、図４を参照して説明した第２の実施形態と同様に、音声入力部１３により収音された音声信号を認識し、文字列に変換したり、さらに文字列の構文解析や意味解析を行う機能を有する。

再生コンテンツ編集部１１４は、コンテンツ再生装置１５により再生されたコンテンツから抽出された内容に基づいて再生コンテンツの取捨選択やキャプションを入れる機能を有する。本実施形態では、例えばコンテンツ再生装置１５で映画等のコンテンツが再生されている際に視聴しているユーザの感情値の変動が一定値を超えると、制御部１１ｃは、当該ユーザが視聴していたコンテンツの内容をコンテンツ再生装置１５から取得し、再生コンテンツ編集部１１４により再生コンテンツの編集を行う。

編集された画像は、後述するように出力装置１２に出力され、不特定多数に公開されるが、当該画像の公開が著作権上問題となる場合も懸念される。この場合、公開されることで一種の宣伝効果も得られることから、著作権者側から本情報処理システム１での利用許諾を得る仕組みを搭載していてもよい。著作権者側からコンテンツの利用許諾を得るシステムの詳細については特に限定しないが、例えば必要に応じて著作権者に許諾依頼を出したり、予め著作権者により本システムでの利用が許諾されていることをコンテンツのメタデータから取得するようにしてもよい。

コンテンツ生成部１１１ｃは、再生コンテンツ編集部１１４で編集された画像に基づいて、出力装置１２に出力するコンテンツを生成する。この際、コンテンツ生成部１１１ｃは、音声入力部１３により入力され音声認識部１１２により認識された、当該再生コンテンツ視聴時のユーザ発話音声の文字列を追加してもよい。

（２−３−２．画像コンテンツ例）
ここで、本実施形態により生成する画像コンテンツの一例について図８を参照して説明する。

図８は、第３の実施形態による再生コンテンツに基づく画像コンテンツの生成について説明する図である。図８に示す例では、塀２１の出力装置１２に、再生コンテンツに基づいて生成された画像コンテンツ１２６が表示されている。画像コンテンツ１２６には、再生コンテンツに基づいて生成された複数の画像コンテンツ１２６ａ〜１２６ｄが壁新聞のようなレイアウトで配置されている。

画像コンテンツ１２６ａは、例えばユーザがコンテンツ再生装置１５で映画を視聴中にユーザの感情（例えば「楽しい」「興奮」等）の変動が一定値を超えたため、当該映画から抽出された画像に基づいて、コンテンツ生成部１１１ｃにより生成されたものである。「昨晩の映画、最高！」というキャプションは、例えばユーザにより操作入力部１４から任意に入力され得る。なお、例えば各種のＳＮＳや、blog、ユーザが送信・公開したメール、チャット、メッセージといったものからの入力をこれに変えてもよい。

画像コンテンツ１２６ｂ〜１２６ｄは、例えばユーザがコンテンツ再生装置１５で過去に撮像した写真や動画を見ている際にユーザの感情（例えば「嬉しい」「楽しい」等）の変動が一定値を超えたため、当該写真や動画から抽出された画像に基づいて、コンテンツ生成部１１１ｃにより生成されたものである。「画伯！」、「祝！入学！」、「念願の自転車！」というキャプションは、例えばユーザにより操作入力部１４から任意に入力され得る。

以上説明した第３の実施形態では、屋内の人物がどのようなコンテンツを見て楽しんでいるのかを報知し、地域コミュニティをさらに活性化させることができる。

＜２−４．第４の実施形態＞
情報処理システム１により生成する画像コンテンツは、上述した例に限定されず、例えば撮像画像や発話音声に基づいてマンガ形式の画像コンテンツ（以下、マンガコンテンツとも称す）を生成してもよい。このような本開示の第４の実施形態による情報処理システム１−４について、以下図９〜図１０を参照して説明する。

（２−４−１．構成）
図９は、第４の実施形態による情報処理システム１−４の構成の一例を示すブロック図である。図９に示すように、情報処理システム１−４は、感情検知部１０、制御部１１ｄ、出力装置１２、音声入力部１３、操作入力部１４、および通信部１６を有する。

感情検知部１０、出力装置１２、音声入力部１３、および操作入力部１４は、図４、図７を参照して説明した上記実施形態と同様である。

制御部１１ｄは、演算処理装置および制御装置として機能し、各種プログラムに従って情報処理システム１−４内の動作全般を制御する。また、本実施形態による制御部１１ｄは、コンテンツ生成部１１１ｄおよび音声認識部１１２としても機能する。

コンテンツ生成部１１１ｄは、感情検知部１０により検知されたユーザ感情の変動が一定値を超えた場合、屋内のカメラによる当該ユーザの撮像画像や、音声入力部１３により収音し、音声認識部１１２により認識されたユーザ発話音声に基づいて、出力装置１２に出力するマンガコンテンツを生成する。例えばコンテンツ生成部１１１ｄは、特開2008-305171号公報に記載されているマンガ自動作成方法を用いて、ユーザの感情をストーリーやキャラクターに反映させたマンガを生成することが可能である。より具体的には、例えばコンテンツ生成部１１１ｄは、撮像画像やユーザ発話音声に基づくテキストを構成している文章の長さに応じた種類のフレーム（マンガのページを構成する各コマに用いられる複数パターンの表示枠に対応したフレーム）を決定する。次いで、コンテンツ生成部１１１ｄは、ユーザの感情に応じて、コマに配置するキャラクターの表情（例えば撮像画像から切り出したユーザの顔画像）および吹き出し枠を決定する。そして、コンテンツ生成部１１１ｄは、決定したフレーム、キャラクターの表情（撮像画像）、および吹き出し枠を合成し、テキストを吹出し枠の中に配置してコマを作成する。

また、コンテンツ生成部１１１ｄは、屋内のカメラやユーザのスマートフォン等により撮像された動画のメタデータに基づいて、当該動画を要約した動画コンテンツを生成することも可能である。動画の要約方法は、例えば特開2012-249156号公報や特開2013-25748号公報に記載されているような、対象物が登場する区間を示す区間メタデータを利用して行う方法であってもよい。若しくは、動画の要約方法は、特開2009-159330号公報に記載されているような、撮像画像の特徴量に基づいて適宜履歴画像（時間軸において前に位置する撮像画像）に合成する方法であってもよい。そして、コンテンツ生成部１１１ｄは、このように要約した動画をマンガ化したコンテンツを生成し得る。

コンテンツ生成部１１１ｄは、生成したマンガコンテンツを出力装置１２に出力して周辺住民に報知する。生成したマンガコンテンツが出力装置１２の表示領域では足りない場合、情報処理システム１−４は、続きを隣家や近隣の塀に設置された出力装置から表示するようにしてもよい。

通信部１６は、有線／無線により他の装置との間でデータの送受信を行うための通信モジュールである。通信部１６は、例えば有線ＬＡＮ（Local Area Network）、無線ＬＡＮ、Ｗｉ−Ｆｉ（Wireless Fidelity、登録商標）、赤外線通信、Ｂｌｕｅｔｏｏｔｈ（登録商標）、近距離／非接触通信等の方式で、外部機器と直接、またはネットワークアクセスポイントを介して無線通信する。本実施形態による通信部１６は、例えばコンテンツ生成部１１１ｄにより生成されたマンガコンテンツ等を他の家の情報処理システム１に送信したり、他の家の情報処理システム１からマンガコンテンツ等を受信する。

（２−４−２．マンガコンテンツの表示例）
ここで、マンガコンテンツの続きを隣家の塀に表示する場合について図１０を参照して説明する。図１０は、本実施形態による複数の家の出力装置の連動について説明する図である。

図１０では、例えば情報処理システム１−４Ａが、家２０Ａ内の人物の感情を検知し、感情値の変動が一定値を超える場合、当該感情を検知した際に撮像した撮像画像（静止画、動画）や収音したユーザ音声に基づいてマンガコンテンツを生成し、外部の塀２１Ａの出力装置１２Ａに表示する。この時、情報処理システム１−４Ａは、マンガコンテンツが家２０Ａの出力装置１２Ａの表示領域で足りなければ所定の近隣の家２０Ｂの情報処理システム１−４Ｂにアクセスしてマンガコンテンツを送信し、図１０に示すように近隣の家２０Ｂの塀２１Ｂに設けられている出力装置１２Ｂで続きのマンガコンテンツを表示するよう制御する。

以上説明したように、本実施形態では、塀２１の出力装置１２にマンガ化したコンテンツを表示することで、屋内の人物の感情や出来事を、より分かりやすく周囲に報知することができる。

＜２−５．第５の実施形態＞
上述した各実施形態では、屋内の人物の感情や様子を出力装置１２から周囲に一方的に報知しているが、本開示はこれに限定されず、例えば屋外からの入力を可能とすることで、地域コミュニケーションのためのインフラとしての存在意義を高めることが可能となる。このような本開示の第５の実施形態による情報処理システム１−５について、以下図１１〜図１２を参照して説明する。

図１１は、本実施形態による情報処理システム１−５の構成の一例を示すブロック図である。図１１に示すように、情報処理システム１−５は、感情検知部１０、制御部１１ｅ、出力装置１２、音声入力部１３、操作入力部１４、および入力装置１７を有する。

感情検知部１０、出力装置１２、音声入力部１３、および操作入力部１４は、図４、図７、図９を参照して説明した上記各実施形態と同様である。

入力装置１７は、出力装置１２に表示された画像コンテンツへのコメントや書き込みを受け付ける機能を有する。例えば入力装置１７は、出力装置１２の表示画面上に設けられ、ペン状のアタッチメントや指等により接触／近接／非接触入力を受け付ける。また、入力装置１７は、出力装置１２周辺に設けられたマイクにより屋外の人物の音声を収音し、音声入力を受け付けてもよい。なお音声入力の場合、明示的な入力開始操作があった場合に音声入力を受け付けるようにしてもよい。例えば入力装置１７は、出力装置１２に表示する壁新聞画像のうちいずれか１ヶ所が押さえられていることをタッチセンサ等により検知した場合に、音声入力を受け付けるようにしてもよい。

制御部１１ｅは、演算処理装置および制御装置として機能し、各種プログラムに従って情報処理システム１−５内の動作全般を制御する。また、本実施形態による制御部１１ｅは、コンテンツ生成部１１１ｅ、音声認識部１１２、および画像加工部１１３としても機能する。

コンテンツ生成部１１１ｅは、出力装置１２に出力する画像コンテンツを生成する。また、コンテンツ生成部１１１ｅは、入力装置１７を介して入力されたコメントや書き込みを画像コンテンツに反映させて出力装置１２に出力する。ここで、図１２に、本実施形態による屋外からの入力について説明する図を示す。図１２に示すように、情報処理システム１−５は、屋外の塀２１に設けられた出力装置１２と一体化された入力装置１７（例えば書き込み可能な電子ペーパー）を有する。かかる情報処理システム１−５は、入力装置１７により、出力装置１２に表示した画像コンテンツに対する書き込みを受け付け、図１２に示すように画像コンテンツ上に書き込みを表示する（若しくは、制御部１１ｅの制御に寄らず、電子ペーパー上で書き替えを可能としてもよい）。これにより、出力装置１２に表示され報知された内容に対する周辺住民の応答を得ることができる。書き込まれる内容は電子的に入力、表示されるものであるため、内容が迷惑なものであったり、公序良俗に反したり、誹謗中傷に該当するようなものである場合、自動的にまたはユーザによる検閲を入れて、非表示にするようにすることもできる。また、屋外の人物も利用できる「消去機能」を入力装置１７と共に併設することで、「不適切な情報」はサイレントマジョリティによって駆逐されることが期待できる。

また、コンテンツ生成部１１１ｅは、出力装置１２の表示画面のうちいずれか１ヶ所が押さえられていることをトリガとして入力装置１７により音声入力を受け付けた場合、押さえられている個所に、音声認識した文字列を表示するようにしてもよい。

以上説明したように、本実施形態によれば、屋内の人物の感情や様子を一方的に周辺住民に報知するだけではなく、周辺住民からの反応を得ることで、双方向コミュニケーションを実現することができる。このように、壁型の出力装置１２を、周辺住民との「次世代の縁側」、または「リアルな地域ＳＮＳツール」として利用することができるようになる。なお入力装置１７は上述した例に限定されず、例えばカメラにより実現され、撮像画像を入力できるようにしてもよい。また、監視カメラを併設して、書き込みを行っている人物の顔画像を記録してもよい。

また、出力装置１２に表示されている画像コンテンツに関係ない内容であっても、地域住民の知識交換のために様々な情報が書き込まれることも想定される。屋外の壁型の出力装置１２および入力装置１７が、自由に書き込みができる掲示板として用いられる。この際、離れた場所に設置されている他の出力装置（他の家の塀に設けられている出力装置等）にも連動して書き込み内容が表示されるようにしてもよい（同期制御）。これにより、例えば地域における不審者情報の共有等が可能となる。また、この際、入力装置１７から出力先を任意に指定することも可能である。

＜２−６．第６の実施形態＞
上記第５の実施形態のように、屋外からのインタラクティブな入力が可能となると、書き換え頻度が高くなり、電力消費が大きくなる。そこで、例えば書き換えを局所化することで、省電力効果を得るようにしてもよい。

例えば出力装置１２と入力装置１７が一体化された入出力装置として電子ペーパーを用いる場合、複数の電子ペーパーを並べて巨大な電子ペーパーを形成し、入力があった領域だけ書き替えるようにしてもよい。また、入出力装置としてＦＰＤ（Flat Panel Display）を用いる場合、ＦＰＤにおけるＬＥＤバックライトの低消費制御として、入力可能な部分を一部に局所化（書き換えＯＦＦの部分はバックライトを消す等）してもよい。

また、このように書き換え電力を最小化することで、例えば太陽電池等のエナジーハーベストで入手したエネルギーでも十分に入出力装置を動作させることが可能となる。

エナジーハーベストの例としては、太陽電池の他、例えば塀２１の前の道路を通る車両等の振動によって電力を発生するモジュールを設け、入出力装置の自立した電源系を確立してもよい。この場合、例えば制御部１１は、電力が溜まった場合に入出力装置に表示する壁新聞等の画像コンテンツを更新するようにしてもよい。また、手回し充電器を併設して、書き込みを行いたい人自ら電力を供給させるようにしてもよい。

＜２−７．第７の実施形態＞
屋外に屋内の様子や感情を報知することは、上述した地域コミュニティの活性化の他、地域医療や独居老人対策にも有用である。

例えば、医療行為の中心は、診療所・病院などの医療機関であるが、今後の超高齢化社会を迎えるに当たり、医療資源のひっ迫は必然であり、訪問医療や在宅医療への切り替えが重要となる。しかし、こうした訪問医療において、各家庭を訪問し、全ての家庭を往診していると、一人の医療者が見られる人数が少なくなってしまう。そうすると、各患者の往診間隔が空いてしまい、重篤な状況にまで進行してからの往診になってしまう可能性がある。

一方、本開示による情報処理システム１を応用して、屋内に入らずとも屋内の人物のおおよその様子が道すがらに観察できるようになっていれば、往診の合間に地域の対象者を観察することができ、屋内に入ってまで往診・介護をする必要があるかないかを事前に判断することができる。以下、図１３を参照して説明する。

図１３は、本実施形態による訪問医療に対応する画像コンテンツの表示例を示す図である。図１３に示すように、例えば屋内の人物の生体情報（体温、血圧、発汗量、運動量、心拍、脈拍等）や健康情報（睡眠時間、摂取カロリー、食事の時間等）、医療行為（服薬内容、服薬有無、処置内容）が取得され、塀２１の出力装置１２に表示されると、医療者２４は家の前を通る際に基本的な生体情報等を確認し、往診の有無を判断する。かかる生体情報や健康情報は、屋内のユーザが装着するウェアラブル装置により自動的に検知され、制御部１１に送信されてもよいし、自宅で血圧計等をユーザが利用した場合に、当該血圧計等からホームネットワークを介して制御部１１に送信されてもよい。また、このうち、医療行為などの限られた人にしか公開すべきでない情報については、見る資格のある対象者が、パスワードやカードタッチ、生体認証など、しかるべき方法で認証されたときにのみ表示されるようにしてもよい。

また、高齢者以外にも、各種の生体センサなどの情報に基づいて、医療による介入が必要であると制御部１１により判断された場合に、医療機関に通知したり、未病の状態を観察する機会を得ることにも繋がる。

また、昨今では、縁側などが当たり前だった数十年前に比べ、マンションなどで顔の見えない関係が増えている。そこに超高齢化社会が加わることで、独居老人問題も増加する。最悪の場合、孤独死に繋がり、発見されるまで時間がかかるといった事態も生じている。

これに対し、本実施形態のような情報処理システム１によれば、屋内の感情や様子を外部に報知することで、独居老人や孤立家庭、“孤”育て家庭などに対しての周辺住民との（相互）扶助に役立てることができる。

＜＜３．緊急時対応＞＞
＜３−１．パニック検知＞
本実施形態による情報処理システム１は、以上説明した各実施形態において、平常時には地域コミュニケーションを活性化させることが可能となる。一方、屋内で緊急事態が発生した場合は緊急事態を周辺に報知し得る。以下、このような緊急時対応について図１４〜図１６を参照して説明する。

図１４は、本実施形態の情報処理システム１による緊急事態発生時の動作処理を示すフローチャートである。図１４に示すように、まず、情報処理システム１は、感情検知部１０により家屋内の人物の感情の変動を検知する（ステップＳ２０３）。

次に、家屋内で誰かの緊張および不快の感情の変動が一定値を超えた場合（ステップＳ２０６／Ｙｅｓ）、制御部１１は、屋内で火災や犯罪などの緊急事態（パニック状態）が起きている可能性が高いと判断できる。なお制御部１１は、緊張および不快の値の総和、またはいずれか一方、若しくは加重加算値が一定値を超えたか否かに基づいてパニック状態の判定を行ってもよい。

続いて、かかるパニック状態が一定時間を経過した後も継続していた場合（ステップＳ２０９／Ｙｅｓ）、制御部１１は、パニック通知コンテンツを生成し、出力装置１２の壁新聞画像を更新する（ステップＳ２１２）。この際、制御部１１は、出力装置１２から警告音を流してもよい。パニック通知コンテンツは、例えばパニック中であることを示す表示と、パニック状態と判定された人物周辺の撮像画像を含む画像コンテンツである。ここで、図１５に、本実施形態によるパニック通知コンテンツの表示例を示す。図１５の上段に示すように、平常時は第１〜第７の実施形態で説明したような壁新聞画像コンテンツが塀２１の出力装置１２に表示される。一方、屋内でのパニックが検知された場合、図１５の下段に示すように、パニックであることを示す表示とパニック状況の撮像画像を含むパニック通知コンテンツに更新される。これにより、家の前を通る周辺住民に屋内でパニックが続いてることを知らせることができる。

なお本実施形態では、パニックを検知した後、一定時間そのパニック状態が継続している場合に、出力装置１２から外部にパニックを周知している。これにより、一時的にパニックが検知されたとしても屋内の人物が自ら対処出来て落ち着いた場合には外部に周知されないようにすることができる。

次いで、さらに予め設定した一定時間が経過してもパニック状態が継続する場合（ステップＳ２１５／Ｙｅｓ）、制御部１１は、パニック通知コンテンツを１つ隣の家の壁（具体的には壁に設置された出力装置）にも表示するよう制御する（ステップＳ２１８）。制御部１１は、パニック状態が継続する限り上記ステップＳ２１５およびステップＳ２１８を繰り返し、２つ隣の家、さらにその隣の家・・・と、パニック状態が長引くほど近隣の家の情報処理システムと連動して周知範囲を広げていく。なおこの連鎖は可能なだけ続けてもよいし、所定の範囲で留めてもよい。

そして、パニック状態が解けた場合（ステップＳ２０９／Ｎｏ、ステップＳ２１５／Ｎｏ）、制御部１１は、出力装置１２からは通常時の表示（パニック通知コンテンツに切り換えている場合は元に戻す制御）を行う（ステップＳ２２１）。

以上説明したように、本実施形態による情報処理システム１では、緊急時にはパニック通知コンテンツを出力装置１２に表示し、異常事態であることを周辺に報知することができる。なお、図１４に示す動作処理では、パニック検知時の対応として出力装置１２からの報知のみを説明したが、本実施形態はこれに限定されず、例えばパニック状態の度合いや継続時間に応じて、第１段階として登録された家族宛にパニック通知を行い、第２段階として出力装置１２から外部に報知し、第３段階として所定の公的機関（消防、警察、病院等）に通知するようにしてもよい。なお、パニック検知時に限らず、火災報知機との連動時や、その他外部の有資格者（居住者や、その家に入る資格のあるもの、また警備会社、警察、消防、自治体関係者）からしかるべきトリガーがかかった際に、こうした表示を行うようにしてもよい。

＜３−２．捜索周知＞
また、本実施形態による情報処理システム１は、屋内での突発的な異常事態を自動的に検知して報知することに限定されず、ユーザ自ら、もしくはユーザから適切な権限移譲を受けた者（介護者や、警備会社、近隣の住民、警察、自治体関係者など）が操作入力部１４から緊急事態であることを入力して出力装置１２から周辺住民に報知することも可能である。

例えば、昨今、超高齢化社会への移行に伴い、認知症が増加している。そうなると、認知症の老人の徘徊が問題となる。実際、地域での防災無線では、火災や地震などへの放送の他、行方不明の高齢者に関する放送も多い。地域の防災無線は音声による放送であるが、詳細な特徴を伝えることが難しい。また、防災無線で放送してもらうまでには時間がかかり、その分だけ徘徊を始めてからの時間が長くなり、捜索範囲が広がってしまう。

そこで、本実施形態の情報処理システム１によれば、例えば図１６に示すように、自宅から行方不明になった高齢者の捜索願いをすぐに家の外の塀２１の出力装置１２に表示して近隣に周知することができる。この際、高齢者の撮像画像も表示することで、特徴を視覚的に周知することができ、捜索に役立たせることができる。

また、上述した第１〜第７の実施形態により普段から対象となる高齢者や家の住人の様子が周辺住民に明らかになっていれば、高齢者が自宅から不自然な形（靴を履いていないなど）で外出していることに近隣の知り合いがすぐに気付いて行方不明を未然に防ぐことが期待できる。

また、本実施形態による情報処理システム１は、特開2016-6612号公報や特開2016-6611号公報に記載されているような、各種センサと行動認識技術を用いて高齢者の徘徊に対してさらに移動軌跡を出力装置１２に表示して捜索の役に立てることが可能である。

以上説明したように、本実施形態によれば、異常時においてパニック状態に対応したり、認知症等による徘徊の対策を実現することができる。

＜＜４．ハードウェア構成＞＞
以上、本開示の実施形態を説明した。上述した感情検知部１０、制御部１１、音声入力部１３、操作入力部１４、および通信部１６は、情報処理装置１００において、ソフトウェアと、以下に説明する情報処理装置１００のハードウェアとの協働により実現される。

図１７は、本開示に係る情報処理装置１００のハードウェア構成を示した説明図である。図１７に示したように、情報処理装置１００は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１４２と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１４４と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１４６と、ブリッジ１４８と、バス１５０と、インターフェース１５２と、入力装置１５４と、出力装置１５６と、ストレージ装置１５８と、ドライブ１６０と、接続ポート１６２と、通信装置１６４とを備える。

ＣＰＵ１４２は、演算処理装置および制御装置として機能し、各種プログラムと協働して情報処理装置１００内のコンテンツ生成部１１１、音声認識部１１２、画像加工部１１３、および再生コンテンツ編集部１１４の動作を実現する。また、ＣＰＵ１４２は、マイクロプロセッサであってもよい。ＲＯＭ１４４は、ＣＰＵ１４２が使用するプログラムまたは演算パラメータ等を記憶する。ＲＡＭ１４６は、ＣＰＵ１４２の実行にいて使用するプログラムまたは実行において適宜変化するパラメータ等を一時記憶する。ＲＯＭ１４４およびＲＡＭ１４６により、情報処理システム内の記憶部（不図示）の一部を実現する。ＣＰＵ１４２、ＲＯＭ１４４およびＲＡＭ１４６は、ＣＰＵバスなどから構成される内部バスにより相互に接続されている。

入力装置１５４は、情報処理システム１の感情検知部１０、音声入力部１３、および操作入力部１４の一例として、例えば、カメラ、マウス、キーボード、タッチパネル、ボタン、マイクロホン、各種センサ（加速度センサ、角速度センサ、地磁気センサ、照度センサ、温度センサ、気圧センサ、生体センサなど）、スイッチおよびレバーなどユーザが情報を入力するための入力手段、およびカメラの撮像またはユーザによる入力に基づいて入力信号を生成し、ＣＰＵ１４２に出力する入力制御回路などから構成されている。情報処理装置１００のユーザは、入力装置１５４を操作することにより、情報処理装置１００に対して各種のデータを入力したり処理動作を指示したりすることができる。

出力装置１５６は、例えば、液晶ディスプレイ（ＬＣＤ）装置、ＯＬＥＤ（Ｏｒｇａｎｉｃ Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）装置、ランプなどの装置への出力を行う。さらに、出力装置１５６は、スピーカおよびヘッドフォンなどの音声出力を行ってもよい。

ストレージ装置１５８は、データ格納用の装置である。ストレージ装置１５８は、記憶媒体、記憶媒体にデータを記録する記録装置、記憶媒体からデータを読み出す読出し装置および記憶媒体に記録されたデータを削除する削除装置等を含んでもよい。ストレージ装置１５８は、ＣＰＵ１４２が実行するプログラムや各種データを格納する。

ドライブ１６０は、記憶媒体用リーダライタであり、情報処理装置１００に内蔵、あるいは外付けされる。ドライブ１６０は、装着されている磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリ等のリムーバブル記憶媒体に記録されている情報を読み出して、ＲＡＭ１４４に出力する。また、ドライブ１６０は、リムーバブル記憶媒体に情報を書込むこともできる。

接続ポート１６２は、例えば、情報処理装置１００の外部の情報処理装置または周辺機器と接続するためのバスである。また、接続ポート１６２は、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）であってもよい。

通信装置１６４は、情報処理システム１の通信部１６の一例として、例えば、ネットワークに接続するための通信デバイスで構成された通信インターフェースである。また、通信装置１６４は、赤外線通信対応装置であっても、無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）対応通信装置であっても、ＬＴＥ（Ｌｏｎｇ Ｔｅｒｍ Ｅｖｏｌｕｔｉｏｎ）対応通信装置であっても、有線による通信を行うワイヤー通信装置であってもよい。

＜＜４．まとめ＞＞
上述したように、本開示の実施形態による情報処理システム１では、物理的な接触には距離を置きつつも、屋内の様子を適宜外部に伝えて、防犯および防災と地域コミュニティの活性化を両立させることを可能とする。

本実施形態によれば、地域で顔の見える関係が増えることとなり、地域の防犯や活性化に役立つようになる。プライバシーを懸念する住民も想定されるが、近年はＳＮＳが流行しているように、限られた関係者間において日常生活を共有することに抵抗のない人々が多い。地域のような限られた範囲において、自分の生活における喜怒哀楽といった感情を共有することは、社会的なネットワークを構築・維持することに役立つことが期待される。

また、このように地域コミュニティが活性化されると、日常生活で問題が起きた時や困った時に周辺住民が良き相談相手となる。例えば近年、オレオレ詐欺をはじめとして、個人、特に孤立した老人を狙った犯罪が増加の一途をたどっている。これに対して、当初はＡＴＭや銀行窓口などによる集中的な水際作戦で被害を防ごうとしていたが、現在は自宅にまで直接お金を受け取りに来たり等、詐欺における金銭のやり取りが個別化、分散化している。このような場合には、地域の社会的なネットワークの強化が抑止力となる。また、このような詐欺被害が増加している背景には、身内の不祥事に対して親身になってくれる相談相手がいないことも要因の一つとして挙げられる。本実施形態によれば、地域コミュニティの向上により、このような詐欺被害への抑止力となることが期待される。

また、地域コミュニケーションが乏しいところでは、弱みに付け込まれるリスクを恐れて、社会的に弱い立場の人間ほど自身の情報を隠すようになる。生命の危機に瀕した場合には公的扶助が入るが、人口ピラミッドが逆ピラミッドになり、社会的弱者（社会保障費がかかるという意味で）側の方が人数が多くなる肩車型社会においては、公的扶助が行き届かない場合が危惧される。このような社会においては地域コミュニティの再醸成が急務であって、上述したような個別の犯罪・徘徊などへの対策だけでなく、地域のコミュニティが醸成されることで、地域の結束を高め、セキュリティ効果の他、住民によるイベントの企画や、共同購入によるよりよいインフラの導入等、地域全体での様々な生活改善の効果が期待される。

以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本技術はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。

例えば、上述した情報処理システム１に内蔵されるＣＰＵ、ＲＯＭ、およびＲＡＭ等のハードウェアに、情報処理システム１の機能を発揮させるためのコンピュータプログラムも作成可能である。また、当該コンピュータプログラムを記憶させたコンピュータ読み取り可能な記憶媒体も提供される。

また、出力装置１２は、家の壁や塀に限定されず、屋内と屋外の境界である玄関のドア、窓、ポスト、門扉等に設けてもよいし、出力装置１２を家の周辺に設置してもよい。

また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。

なお、本技術は以下のような構成も取ることができる。
（１）
屋内の様子をセンシングしたセンサデータに基づいて屋内の１以上の人物の感情を検知する検知部と、
前記検知した感情のうち少なくともいずれかの人物の感情値が所定の条件を満たす場合、前記屋内の様子を撮像した撮像画像を屋外の表示装置に出力するよう制御する制御部と、
を備える、情報処理システム。
（２）
前記制御部は、前記検知部により検知された緊張または不快の感情値が所定の閾値を上回る場合、前記撮像画像と共に、緊急事態である旨を通知する表示を前記屋外の表示装置に出力するよう制御する、前記（１）に記載の情報処理システム。
（３）
前記制御部は、前記緊張または不快の感情値が閾値を上回る状態が所定時間継続した場合、所定の通知先へ通知するよう制御する、前記（２）に記載の情報処理システム。
（４）
前記検知部は、センサデータとして屋内の様子を撮像した撮像画像に基づいて感情を検知する、前記（１）〜（３）のいずれか１項に記載の情報処理システム。
（５）
前記制御部は、周囲の家屋の屋外の表示装置にも前記屋内の様子を撮像した撮像画像を連動して出力するよう制御する、前記（１）〜（４）のいずれか１項に記載の情報処理システム。
（６）
前記制御部は、
前記屋内の音声を収音した音声信号を認識してテキストに変換し；
前記撮像画像と共に、前記変換したテキストを表示するよう制御する、前記（１）〜（５）のいずれか１項に記載の情報処理システム。
（７）
前記制御部は、前記屋内の様子を撮像した撮像画像を加工して前記表示装置に出力する、前記（１）〜（６）のいずれか１項に記載の情報処理システム。
（８）
前記制御部は、所定ユーザの生体情報を併せて前記表示装置に出力する、前記（１）〜（７）のいずれか１項に記載の情報処理システム。
（９）
屋内の様子をセンシングしたセンサデータに基づいて屋内の１以上の人物の感情を検知する検知部と、
前記検知した感情値が所定の条件を満たす場合、前記屋内の様子を撮像した撮像画像を屋外の表示装置に出力するよう制御する制御部と、
を備える、情報処理装置。
（１０）
プロセッサが、
屋内の様子をセンシングしたセンサデータに基づいて屋内の１以上の人物の感情を検知することと、
前記検知した感情値が所定の条件を満たす場合、前記屋内の様子を撮像した撮像画像を屋外の表示装置に出力するよう制御することと、
を含む、情報処理方法。
（１１）
コンピュータを、
屋内の様子をセンシングしたセンサデータに基づいて屋内の１以上の人物の感情を検知する検知部と、
前記検知した感情値が所定の条件を満たす場合、前記屋内の様子を撮像した撮像画像を屋外の表示装置に出力するよう制御する制御部と、
として機能させる、プログラム。

１、１−１〜１−５ 情報処理システム
１０ 感情検知部
１１、１１ａ〜１１ｅ 制御部
１２ 出力装置
１３ 音声入力部
１４ 操作入力部
１５ コンテンツ再生装置
１６ 通信部
１７ 入力装置
２０ 家
２１ 塀
２２ カメラ
１００ 情報処理装置
１１１、１１１ａ〜１１１ｅ コンテンツ生成部
１１２ 音声認識部
１１３ 画像加工部
１１４ 再生コンテンツ編集部

Claims (11)

1. 屋内の様子をセンシングしたセンサデータに基づいて屋内の１以上の人物の感情を検知する検知部と、
   前記検知した感情のうち少なくともいずれかの人物の感情値が所定の条件を満たす場合、前記屋内の様子を撮像した撮像画像を屋外の表示装置に出力するよう制御する制御部と、
   を備える、情報処理システム。
2. 前記制御部は、前記検知部により検知された緊張または不快の感情値が所定の閾値を上回る場合、前記撮像画像と共に、緊急事態である旨を通知する表示を前記屋外の表示装置に出力するよう制御する、請求項１に記載の情報処理システム。
3. 前記制御部は、前記緊張または不快の感情値が閾値を上回る状態が所定時間継続した場合、所定の通知先へ通知するよう制御する、請求項２に記載の情報処理システム。
4. 前記検知部は、センサデータとして屋内の様子を撮像した撮像画像に基づいて感情を検知する、請求項１〜３のいずれか１項に記載の情報処理システム。
5. 前記制御部は、周囲の家屋の屋外の表示装置にも前記屋内の様子を撮像した撮像画像を連動して出力するよう制御する、請求項１〜４のいずれか１項に記載の情報処理システム。
6. 前記制御部は、
   前記屋内の音声を収音した音声信号を認識してテキストに変換し；
   前記撮像画像と共に、前記変換したテキストを表示するよう制御する、請求項１〜５のいずれか１項に記載の情報処理システム。
7. 前記制御部は、前記屋内の様子を撮像した撮像画像を加工して前記表示装置に出力する、請求項１〜６のいずれか１項に記載の情報処理システム。
8. 前記制御部は、所定ユーザの生体情報を併せて前記表示装置に出力する、請求項１〜７のいずれか１項に記載の情報処理システム。
9. 屋内の様子をセンシングしたセンサデータに基づいて屋内の１以上の人物の感情を検知する検知部と、
   前記検知した感情値が所定の条件を満たす場合、前記屋内の様子を撮像した撮像画像を屋外の表示装置に出力するよう制御する制御部と、
   を備える、情報処理装置。
10. プロセッサが、
    屋内の様子をセンシングしたセンサデータに基づいて屋内の１以上の人物の感情を検知することと、
    前記検知した感情値が所定の条件を満たす場合、前記屋内の様子を撮像した撮像画像を屋外の表示装置に出力するよう制御することと、
    を含む、情報処理方法。
11. コンピュータを、
    屋内の様子をセンシングしたセンサデータに基づいて屋内の１以上の人物の感情を検知する検知部と、
    前記検知した感情値が所定の条件を満たす場合、前記屋内の様子を撮像した撮像画像を屋外の表示装置に出力するよう制御する制御部と、
    として機能させる、プログラム。

Images