JP6818310B2 - 情報処理装置、情報処理方法、並びにプログラム - Google Patents

情報処理装置、情報処理方法、並びにプログラム Download PDF

Info

Publication number
JP6818310B2
JP6818310B2 JP2016111563A JP2016111563A JP6818310B2 JP 6818310 B2 JP6818310 B2 JP 6818310B2 JP 2016111563 A JP2016111563 A JP 2016111563A JP 2016111563 A JP2016111563 A JP 2016111563A JP 6818310 B2 JP6818310 B2 JP 6818310B2
Authority
JP
Japan
Prior art keywords
comment
video
target video
input person
input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016111563A
Other languages
English (en)
Other versions
JP2017219573A (ja
Inventor
裕 坂根
裕 坂根
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Exa Wizards Inc
Original Assignee
Exa Wizards Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Exa Wizards Inc filed Critical Exa Wizards Inc
Priority to JP2016111563A priority Critical patent/JP6818310B2/ja
Publication of JP2017219573A publication Critical patent/JP2017219573A/ja
Application granted granted Critical
Publication of JP6818310B2 publication Critical patent/JP6818310B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本技術は、情報処理装置、情報処理方法、並びにプログラムに関する。詳しくは、所定の講座を受講している受講者が、受講内容をより理解し、習得できる手助けを行うのに適した情報処理装置、情報処理方法、並びにプログラムに関する。
文化伝統や工業、スポーツ、幼児教育、高齢者ケアなど、現場でのコーチングやOJT (On-the-Job Training) が主たる教育方法となる分野では、現場外での教育に現場の映像が用いられることが多い。
非特許文献１には、スポーツ指導における競技映像の活用について、競技後すぐに視聴できる即時性の重要性と、映像に対して細かいメタ情報（技の情報、時間情報など）を付与することの有効性についての記載がある。
非特許文献２には、放送番組とスマートフォンやタブレットなどの携帯端末が連動し実現できるコンテンツ化技術やサービスについての記載があり、メインスクリーン（例えば、テレビジョン受像機）とセカンダリスクリーン（例えば、携帯端末）を駆使することが想定されている。
三浦智和著、"トップスポーツでの映像システム活用" 情報処理, Vol.55, No.11, pp.1221-1227 (2014)． 古川易史、"次世代スマートテレビの動向について"映像情報メディア学会誌, Vol.68, No.9, pp.682-685 (2014)．
上記した映像には、現場の状況や登場人物の動きは記録されるが、登場人物が何に意識を払い、状況をどのように評価し行動を意図したかまでは記録されない。また指導者（熟練者）が、映像を一緒に見ながら学習者のスキルに合わせ、適切な解説で情報を補うことで、高い学習効果が得られるが、指導機会が制限されることから大規模に効率よく教育できていない。
そこで、指導者の指導自体をコンテンツ化する技術を開発することが望まれている。これにより、映像と指導者コンテンツをインターネットで配信でき、学習者のスキルレベルや空き時間に合わせた学習（指導）が実現できるようにすることが望まれている。
本技術は、このような状況に鑑みてなされたものであり、指導者の指導自体をコンテンツ化し、学習者のスキルレベルや空き時間に合わせた学習が行えるようにすることができるようにするものである。
本技術の一側面の情報処理装置は、ターゲットビデオを再生する再生部と、再生されている前記ターゲットビデオに、入力者から追加されたコメントのコメントビデオを生成する生成部とを備え、前記生成部は、前記ターゲットビデオの画像と前記入力者の画像を合成し、前記ターゲットビデオの音声と前記入力者の音声を合成した前記コメントビデオを生成する。
前記入力者を撮像する撮像部と、前記入力者の音声を集音する集音部とをさらに備え、前記生成部は、前記撮像部で撮像された前記入力者の画像と、前記ターゲットビデオの画像を合成し、前記集音部で集音された前記入力者の音声と、前記ターゲットビデオの音声を合成するようにすることができる。
前記ターゲットビデオの画像の一部に、前記撮像部で撮像された前記入力者の画像を表示するようにすることができる。
前記生成部は、前記入力者が入力した画像も、前記ターゲットビデオの画像と合成するようにすることができる。
前記入力者の画像を表示するウィンドウの枠と、前記入力者が入力した前記画像を、同一の色で表示するようにすることができる。
前記コメントの入力中に、前記入力者により、前記ウィンドウの枠の拡大、縮小、移動が指示された場合、その指示に基づき、前記ウィンドウの表示を更新するようにすることができる。
前記コメントを入力中に、前記入力者により、前記ターゲットビデオの音量の変更が指示された場合、その指示に基づき、前記ターゲットビデオの音量を変更するようにすることができる。
前記コメントを入力中に、前記入力者により、前記ターゲットビデオの再生、停止、一時停止、巻き戻し、先送り、シークが指示された場合、その指示に基づく処理を実行するようにすることができる。
前記コメントを入力中に、前記入力者により、前記ターゲットビデオが表示されているウィンドウの拡大、縮小、移動が指示された場合、その指示に基づき、前記ウィンドウの表示を更新するようにすることができる。
第１の入力者の画像を表示するウィンドウの枠と、第２の入力者の画像を表示するウィンドウの枠を、異なる色で表示するようにすることができる。
第１の入力者が入力した画像と、第２の入力者が入力した画像を、異なる色で表示するようにすることができる。
前記ターゲットビデオが再生されているときに、前記コメントが追加された再生時刻になった場合、前記コメントビデオの再生の開始を指示するためのボタンを表示するようにすることができる。
前記コメントビデオが再生中に、前記ターゲットビデオの再生に戻るためのボタンを表示するようにすることができる。
前記ターゲットビデオを再生中に、前記コメントが追加された再生時刻になった場合、前記コメントビデオの再生を開始するようにすることができる。
前記生成部は、再生されている前記コメントビデオに、入力者から追加されたコメントのコメントビデオを生成するようにすることができる。
前記ターゲットビデオは、所定の人物が、所定の作業を行っている状態を撮影したビデオであるようにすることができる。
前記ターゲットビデオは、所定の講義を受けている受講者により撮像されたビデオであり、前記入力者は、前記受講者を指導する指導者であるようにすることができる。
本技術の一側面の情報処理方法は、ターゲットビデオを再生し、再生されている前記ターゲットビデオに、入力者から追加されたコメントのコメントビデオを生成するステップを含み、前記生成は、前記ターゲットビデオの画像と前記入力者の画像を合成し、前記ターゲットビデオの音声と前記入力者の音声を合成した前記コメントビデオを生成するステップを含む。
本技術の一側面のプログラムは、ターゲットビデオを再生し、再生されている前記ターゲットビデオに、入力者から追加されたコメントのコメントビデオを生成するステップを含み、前記生成は、前記ターゲットビデオの画像と前記入力者の画像を合成し、前記ターゲットビデオの音声と前記入力者の音声を合成した前記コメントビデオを生成するステップを含む処理をコンピュータに実行させる。
本技術の一側面の情報処理装置、情報処理方法、並びにプログラムにおいては、ターゲットビデオが再生され、再生されているターゲットビデオに、入力者から追加されたコメントのコメントビデオが生成される。その生成は、ターゲットビデオの画像と入力者の画像を合成し、ターゲットビデオの音声と入力者の音声を合成したコメントビデオを生成することで行われる。
なお、情報処理装置は、独立した装置であっても良いし、１つの装置を構成している内部ブロックであっても良い。
また、プログラムは、伝送媒体を介して伝送することにより、または、記録媒体に記録して、提供することができる。
本技術の一側面によれば、指導者の指導自体をコンテンツ化することができ、学習者のスキルレベルや空き時間に合わせた学習が行えるようにすることができる。
なお、ここに記載された効果は必ずしも限定されるものではなく、本開示中に記載されたいずれかの効果であってもよい。
本技術を適用した一実施の形態のシステムについて説明するための図である。 情報処理装置の構成について説明するための図である。 コンテンツの構造について説明するための図である。 ターゲットビデオとコメントビデオの関係について説明するための図である。 コンテンツの再生、コメントの入力に係わる処理について説明するためのフローチャートである。 プレイヤー状態の更新処理について説明するためのフローチャートである。 コメント入力処理について説明するためのフローチャートである。 コメント入力準備処理について説明するためのフローチャートである。 コメント入力者情報の更新処理について説明するためのフローチャートである。 表示部に表示される画面の一例である。 表示部に表示される画面の一例である。 表示部に表示される画面の一例である。 表示部に表示される画面の一例である。 表示部に表示される画面の一例である。 表示部に表示される画面の一例である。 表示部に表示される画面の一例である。 表示部に表示される画面の一例である。 表示部に表示される画面の一例である。
図１は、本技術を適用したシステムの一実施の形態の構成を示す図である。本技術は、所定の講座を受講し、その講座を受講した受講者が、さらなる学習を行う手助けとなるシステムに適用できる。図１に示したシステムは、介護に関する講座に係わるシステムを例示している。
図１に示したシステムは、講座を受講する受講者が、自己が実際に介護しているときの状況を撮影し、その撮影した映像に対して、指導者が指導を加えるシステムである。
図１中の左上に示したように、まず、受講者１は、介護対象者２を介護し、その様子を、撮影者３は、情報処理装置１１で撮影する。情報処理装置１１は、デジタルビデオカメラ、スマートフォン、パーソナルコンピュータなどとすることができる。撮影されたビデオ0（Video0）は、サーバ５１に対して送信される。サーバ５１は、データベース５２を備え、そのデータベース５２にビデオ0が蓄積される。
データベース５２には、ビデオ0の他に、ビデオ1（Video1）、ビデオ2（Video2）、ビデオ1.1（Video1.1）が、それぞれ関連付けられて蓄積されている。ビデオ1、ビデオ2、ビデオ1.1は、それぞれ、ビデオ0がアップロードされた後の時点で、ビデオ0に関連付けられて蓄積されたビデオデータである。
データベース５２（サーバ５１）は、ここでは１台のコンピュータで構成されている場合を例に挙げて説明するが、複数のデータベース５２に分散されていても良い。例えば、ビデオ毎に、別のデータベース５２（サーバ５１）で分散管理されるように構成することも可能である。
また、データベース５２は、一般的なデータベース管理システム (DBMS: Database Management System) に限定されるものではなく、例えばビデオ0などは、ハードディスクなどのストレージにそのまま保存されるようにしても良い。
データベース５２にアップロードされたデータは、他の学習者や指導者と共有される。例えば、指導者４は、情報処理装置２１でビデオ0を視聴することができる。指導者４は、ビデオ0を視聴しながら、所望とする再生位置でコメントを付ける（指導する）ことができる。このようにビデオ0に対してコメントが付けられると、ビデオ1（Video1）、ビデオ2（Video2）が生成され、データベース５２にアップロードされる。
このようにして指導者４によるコメントが付けられたビデオを、受講者１は情報処理装置４１で視聴することができる。例えば、受講者１は、ビデオ1（コメントビデオ）を視聴し、質問などのコメントを付けることができる。このように、ビデオ1に対してコメントが付けられるとビデオ1.1（Video1.1）が生成され、データベース５２にアップロードされる。
さらに指導者４は、このビデオ1.1を視聴することができ、必要に応じて、返答（コメント）を付けることができる。
このように、受講者１や指導者４は、データベース５２に蓄積されているコンテンツ（ビデオ）を視聴することができる。また視聴しているコンテンツに対してコメントを付けることができる。すなわち、受講者１は、データベース５２に蓄積されているコンテンツを視聴することで、学習を行うことができ、指導者４は、データベース５２に蓄積されているコンテンツを視聴し、コメントを付けることで指導を行うことができる。
このように、コンテンツ（動画像）を送り合って互いのコミュニケーションをとることで、言葉や文字と同じようなコミュニケーションが実現される。
なおここでは、介護を実践し、撮影されている受講者１が、コンテンツを視聴して学習する受講者である（同一人物である）として説明を続けるが、例えば、学習を行うのは、受講者１を含む介護施設に勤めている多数の人でも良い。
本システムは、受講者１が実践したことに対して、コメントなどが付けられ、そのコメントなどを視聴することで、さらなる学習が行われるシステムである。またコメントは、受講者１、指導者４の両方で、それぞれ付けることができる。また複数の指導者４がそれぞれコメントを付けることも可能とされている。
図２は、情報処理装置２１の構成を示す図である。情報処理装置２１において、ＣＰＵ（Central Processing Unit）１０１、ＲＯＭ（Read Only Memory）１０２、ＲＡＭ（Random Access Memory）１０３は、バス１０４により相互に接続されている。バス１０４には、さらに、入出力インタフェース１０５が接続されている。入出力インタフェース１０５には、入力部１０６、出力部１０７、記憶部１０８、通信部１０９、およびドライブ１１０が接続されている。
入力部１０６は、キーボード、マウス、マイクロフォン、カメラなどよりなる。出力部１０７は、ディスプレイ、スピーカなどよりなる。記憶部１０８は、ハードディスクや不揮発性のメモリなどよりなる。通信部１０９は、ネットワークインタフェースなどよりなる。ドライブ１１０は、磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリなどのリムーバブルメディア１１１を駆動する。
以上のように構成される情報処理装置２１では、ＣＰＵ１０１が、例えば、記憶部１０８に記憶されているプログラムまたは通信部１０９を介してサーバなどから供給されたプログラムを、入出力インタフェース１０５およびバス１０４を介して、ＲＡＭ１０３にロードして実行する。
情報処理装置１１と情報処理装置４１も、情報処理装置２１と同様の構成とすることができ、ここでは、その説明を省略する。
図３は、受講者１が撮影したコンテンツ（以下、適宜、ターゲットビデオと記述する）と、そのターゲットビデオが視聴されたときに付けられたコメントのコンテンツ（以下、適宜、コメントビデオと記述する）の関係について説明するための図である。
コメントビデオは、ターゲットビデオの所定の再生時刻から入力された動画像である。よって、図３に示したような木構造となる。例えば、ターゲットビデオ（Video0、以下、ターゲットビデオ0とする）の再生時刻ｔ２において付けられたコメントは、コメントビデオ（Video１、以下、コメントビデオ1とする）として生成され、ターゲットビデオ0の再生時刻ｔ２の再生位置に関連付けられる。
コメントビデオ1の所定の再生時刻に対してコメントが付けられると、そのコメントビデオ1.1は、その再生時刻に関連付けられ、データベース５２（図１）に蓄積される。
同様に、ターゲットビデオ0の再生時刻ｔ１においてコメントが付けられると、そのコメントビデオ2は、再生時刻ｔ１に関連付けられ、データベース５２（図１）に蓄積される。さらに同様に、コメントビデオ2の所定の再生時刻においてコメントが付けられると、そのコメントビデオ2.1は、その再生時刻に関連付けられ、データベース５２（図１）に蓄積される。
さらに同様に、コメントビデオ2.1の所定の再生時刻においてコメントが付けられると、そのコメントビデオ2.1.1は、その再生時刻に関連付けられ、データベース５２（図１）に蓄積される。さらに同様に、コメントビデオ2.1の所定の再生時刻（コメントビデオ2.1.1が付けられた再生時刻とは異なる再生時刻）においてコメントが付けられると、そのコメントビデオ2.1.2は、その再生時刻に関連付けられ、データベース５２（図１）に蓄積される。
このように、ターゲットビデオに対して付けられたコメントは、コメントビデオとしてターゲットビデオに対して関連付けられ、コメントビデオに対して付けられたコメントは、コメントビデオとしてコメントビデオに対して関連付けられる。
なお、図３において、コメントビデオは、同一の長さで図示してあるが、コメントの長さはそれぞれ異なり、コメントが多ければ長く、少なければ短くなる。
図４は、例えばターゲットビデオ0に対してコメントビデオ1を作成するときの処理の流れについて説明するための図である。図４において、横軸は、ターゲットビデオ0の時間軸を表し、縦軸は、コメントビデオ1の時間軸を表す。
ターゲットビデオ0が再生時刻０から再生時刻ｘ２まで視聴され、再生時刻ｘ２において、コメントの入力が開始される。コメントの入力が開始されると、コメントビデオ1の作成が開始される。コメントの入力が開始されてからも、ターゲットビデオ0の再生(PLAY)は継続される。ターゲットビデオ0が再生時刻ｔ２から再生時刻ｔ３まで再生されているとき、コメントの入力が継続され、コメントビデオ1の再生時刻ｙ０から再生時刻ｙ１までが生成される。
ターゲットビデオ0の再生時刻ｘ３において、ターゲットビデオ0の再生が一時停止（pause）される。ターゲットビデオ0が一時停止の状態のまま、コメントの入力は継続され、コメントビデオ1の再生時刻ｙ１から再生時刻ｙ２までが生成される。
ターゲットビデオ0の再生時刻ｘ３であり、コメントビデオ1の再生時刻ｙ２において、ターゲットビデオ0が、再生時刻ｘ１まで巻き戻され（rewind）、一時停止（pause）される。ターゲットビデオ0の再生時刻ｘ１であり、コメントビデオ1の再生時刻ｙ３において、ターゲットビデオ0は、一時停止の状態のまま、コメントの入力が継続され、コメントビデオ1の再生時刻ｙ３から再生時刻ｙ４までが生成される。
ターゲットビデオ0の再生時刻ｘ１であり、コメントビデオ1の再生時刻ｙ４において、ターゲットビデオ0の一時停止の状態が解除され、再生(play)が開始される。ターゲットビデオ0が再生時刻ｘ１から再生時刻ｘ２まで再生されているとき、コメントの入力が継続され、コメントビデオ1の再生時刻ｙ４から再生時刻ｙ５までが生成される。
ターゲットビデオ0の再生時刻ｘ２であり、コメントビデオ1の再生時刻ｙ５において、コメントの入力が停止される。
このように、ターゲットビデオ0の再生を継続したまま、コメントを入力したり、ターゲットビデオ0の再生を一時停止した状態で、コメントを入力したりすることができる。また、ターゲットビデオ0を巻き戻したり、先送りしたりし、その巻き戻し再生位置や先送りした再生位置からコメントを入力することもできる。
このようなターゲットビデオ0の視聴と、コメントの入力に係わる処理について図５乃至９のフローチャートを参照して説明する。コンテンツの視聴とコメントの入力はシームレスに移行するため、一連の処理として説明する。
図５乃至９に示したフローチャートは、指導者４がターゲットビデオ0を視聴し、コメントを入力するときに、情報処理装置２１で行われる処理の一例であるとする。なお、受講者１が、ターゲットビデオ0やコメントビデオ1などを視聴し、コメントを入力するときにも同様の処理が行われる。
ステップＳ１０１において、再生ビデオが選択される。指導者４は、データベース５２に登録されている複数のターゲットビデオから、所望のターゲットビデオを選択し、視聴することができる。
ステップＳ１０２において、プレイヤーが初期化（画面の初期化やファイル読み込み等）が実行される。図１０に初期化されたプレイヤーの一例（画面例）を示す。
情報処理装置２１には、出力部１０７としての表示部２０１（ディスプレイ）が設けられている。また情報処理装置２１には、マイクロフォン２０２とカメラ２０３も設けられている。表示部２０１には、ステップＳ１０１で選択された再生ビデオの映像が表示される。マイクロフォン２０２は、視聴者の声を集音する。カメラ２０３は、指導者４を撮像する。なお、マイクロフォン２０２やカメラ２０３は、情報処理装置２１に複数設けられていても良い。
表示部２０１の左上は、戻るボタン２１１が表示されている。この戻るボタン２１１は、コンテンツ視聴中に元の映像に戻るときに操作されるボタンである。例えば、戻るボタン２１１は、コメントビデオ1が再生されているときに、ターゲットビデオ0(木構造で言うところの親)に移動するときに操作される。戻るボタン２１１は、コメントビデオが再生されているときに表示されるボタンである。
戻るボタン２１１の右側にはコメント視聴ボタン２１２が表示されている。このコメント視聴ボタン２１２は、その時点で視聴しているビデオの再生位置に、コメントがあるときに表示されるボタンである。図１０ではコメント視聴ボタン２１２が表示されている例を示したが、コメントがない再生位置においては表示されない。
表示部２０１の左下には、コメント入力ボタン２１３が表示されている。コメント入力ボタン２１３は、コメントを入力したいとき(コメントの入力を開始したいとき)に操作されるボタンである。またコメントの入力が開始された後、その入力を停止するときに操作されるボタンでもある。
コメント入力ボタン２１３の右側には、再生されているコンテンツの再生、停止、一時停止、巻き戻し、早送りなどの指示を出す指示部２１４が表示されている。
指示部２１４の右側には、再生されているコンテンツの再生位置(再生時刻)を変更するときに操作されるシークバー２１５が表示されている。また表示部２０１の右側には、再生されているコンテンツの音量を変更するときに操作される音量調整バー２１６も表示されている。
なお、図１０に示した画面は一例であり、限定を示すものではない。例えば、戻るボタン２１１は、表示部２０１の左上に表示されることを限定する記載ではなく、右下など、他の場所に表示されていても良い。
ステップＳ１０２(図５)において、図１０に示したような画面が指導者４に提供される。なお、初期化がされたときの画面としては、コンテンツの再生開始時にコメントがなければ、コメント視聴ボタン２１２は表示されていない。また初期化のときにはターゲットビデオが再生されているため、戻るボタン２１１は表示されていない。
ステップＳ１０３において、プレイヤー状態の更新処理が実行される。ステップＳ１０３におけるプレイヤー状態の更新処理について、図６に示したフローチャートを参照して説明する。
ステップＳ１３１において、再生、停止、一時停止、早送り、または巻き戻しが指示されたか否かが判定される。すなわち、ステップＳ１３１においては、指示部２１４(図１０)が操作されたか否かが判定される。
ステップＳ１３１において、指示部２１４が操作されたと判定された場合、ステップＳ１３２に処理が進められる。ステップＳ１３２において、指示部２１４が操作されたことにより指示された内容に基づき、再生状態が変更される。例えば、指示部２１４が操作されることで、一時停止が指示されたと判定された場合、再生されているコンテンツの再生が一時停止される。
ステップＳ１３２の処理が終了した場合、またはステップＳ１３１において、指示部２１４は操作されていないと判定された場合、ステップＳ１３３に処理が進められる。
ステップＳ１３３において、シークバー２１５が操作されたか否かが判定される。ステップＳ１３３において、シークバー２１５が操作されたと判定された場合、ステップＳ１３４に処理が進められ、指示された再生時刻への変更、および変更後の再生時刻からの再生が開始される。
ステップＳ１３４の処理が終了した場合、またはステップＳ１３３において、シークバー２１５は操作されていないと判定された場合、ステップＳ１３５に処理が進められる。
ステップＳ１３５において、再生音量の変更が指示されたか否か、換言すれば音量調整バー２１６が操作されたか否かが判定される。ステップＳ１３５において、音量調整バー２１６が操作されたと判定された場合、ステップＳ１３６に処理が進められ、指示された再生音量の変更が行われる。
ステップＳ１３６の処理が終了した場合、またはステップＳ１３５において、音量調整バー２１６は操作されていないと判定された場合、ステップＳ１３７に処理が進められる。
ステップＳ１３７において、視聴可能なコメントがあるか否かが判定される。すなわち、再生されているコンテンツの再生時刻（再生時間）にコメントビデオが関連付けられているか否かが判定される。
例えば、図４を再度参照するに、ターゲットビデオ0が再生されているときであり、ターゲットビデオ0の再生時刻ｘ２（再生時刻ｘ２から再生時刻ｘ３の間）において、ステップＳ１３７の処理が実行された場合、視聴可能なコメントがあると判定される。
ステップＳ１３７において、視聴可能なコメントがあると判定された場合、ステップＳ１３８に処理が進められる。ステップＳ１３８において、表示部２０１にコメント視聴ボタン２１２が表示される。
ステップＳ１３８の処理が終了した場合、またはステップＳ１３７において、視聴可能なコメントはないと判定された場合、ステップＳ１３９に処理が進められる。
ステップＳ１３９において、コメントビデオの再生中であるか否かが判定される。ステップＳ１３９において、コメントビデオの再生中であると判定された場合、ステップＳ１４０に処理が進められる。ステップＳ１４０において、表示部２０１上に戻るボタン２１１が表示される。
ステップＳ１４０の処理が終了した場合、またはステップＳ１３９において、コメントビデオの再生中ではないと判定された場合、図６に示したプレイヤー状態の更新処理は終了され、ステップＳ１０４(図５)に処理が進められる。
ステップＳ１０４において、コメント視聴ボタン２１２が操作されたか否かが判定される。ステップＳ１０４において、コメント視聴ボタン２１２が操作されたと判定された場合、ステップＳ１０２に処理が戻され、それ以降の処理が繰り返される。ただし、コメント視聴ボタン２１２が操作されたときのプレイヤーの初期化は、新しいビデオ(コメントビデオ)を選択した状態でのプレイヤーの初期化の処理となる。
一方、ステップＳ１０４において、コメント視聴ボタン２１２は操作されていないと判定された場合、ステップＳ１０５に処理が進められ、戻るボタン２１１が操作されたか否かが判定される。
ステップＳ１０５において、戻るボタン２１１が操作されたと判定された場合、ステップＳ１０２に処理が戻され、それ以降の処理が繰り返される。ただし、戻るボタン２１１が操作されたときのプレイヤーの初期化は、遷移前のビデオ（例えば、コメントビデオに遷移する前のビデオがターゲットビデオであった場合、ターゲットビデオ）を選択した状態でのプレイヤーの初期化の処理となる。
一方、ステップＳ１０５において、戻るボタン２１１は操作されていないと判定された場合、ステップＳ１０６に処理が進められ、コメント入力ボタン２１３が操作されたか否かが判定される。ステップＳ１０６において、コメント入力ボタン２１３が操作されたと判定された場合、ステップＳ１０７に処理が進められる。
ステップＳ１０７において、コメント入力処理が実行される。ステップＳ１０７において実行されるコメント入力処理について、図７に示したフローチャートを参照して説明する。
ステップＳ１６１において、コメント入力準備処理が実行される。ステップＳ１６１において実行されるコメント入力準備処理について、図８に示したフローチャートを参照して説明する。
ステップＳ１９１において、表示部２０１に入力準備画面が表示される。図１１に、入力準備画面の一例を示す。
図１１に示した入力準備画面には、カメラ２０３で撮像されている指導者４の映像(コメント入力者の画像)を表示するウィンドウ３１１が、表示部２０１上に表示されている。このウィンドウ３１１は、例えば図１１に示したように、表示部２０１の左下の領域を初期位置とし、初期状態では、表示部２０１の左下の領域に表示される。このウィンドウ３１１は、後述するように、コメント入力者が所望とする位置に移動可能とされている。
表示部２０１の下側には、ＯＫボタン３２１、Cancelボタン３２２、および色選択パレット３２３を含む指示部３１２が表示されている。ＯＫボタン３２１は、入力準備画面で設定できることを設定した後、その設定でよいときに操作されるボタンである。Cancelボタン３２２は、入力準備画面で設定できることを設定した後、その設定を破棄するときに操作されるボタンであり、コメントの入力の開始をキャンセルするときに操作されるボタンである。
色選択パレット３２３は、ウィンドウ３１１の枠の色を選択する操作されるボタンである。なお、色ではなく、線種などでも良い。この色選択パレット３２３で選択された色は、コメントを入力した入力者を識別するための色とされ、ウィンドウ３１１の枠以外にも、後述する入力者が入力した画像の色などにも適用される。
表示部２０１の右側には、音量調整ボタン３１３が表示されている。この音量調整ボタン３１３は、その時点で再生されているコンテンツ（ターゲットビデオ）の音量を調整するときに操作されるボタンである。図１１に示した例では、音量調整ボタン３１３として、“１００”、“７５”、“５０”、“２５”、“０”といった数値が記載されたボタンが表示されている。例えば“７５”との数値の音量調整ボタン３１３は、７５％の音声に変更したいときに操作されるボタンである。
入力準備画面では、このように、コメント入力者を識別するための色や、再生されているコンテンツの音量を設定できる。また、コメント入力者を表示するウィンドウ３１１の位置も設定できる。これら入力準備画面で設定できる色、音量、ウィンドウ３１１の位置のうち、音量と位置は、コメント入力中にも変更可能である。
このような入力準備画面が、ステップＳ１９１(図８)における処理で、表示部２０１に表示される。ステップＳ１９２において、コメント入力者が表示されているウィンドウ３１１の移動が指示されたか否かが判定される。
ステップＳ１９２において、ウィンドウ３１１の移動が指示されたと判定された場合、ステップＳ１９３に処理が進められ、入力者画像の更新処理が実行される。すなわち、入力者が指示した位置に、ウィンドウ３１１が移動される。
一方、ステップＳ１９２において、ウィンドウ３１１の移動は指示されていないと判定された場合、またはステップＳ１９３の処理が終了した場合、ステップＳ１９４に処理が進められる。ステップＳ１９４において、色が選択されたか否か、換言すれば色選択パレット３２３が操作されたか否かが判定される。
ステップＳ１９４において、色選択パレット３２３が操作されたと判定された場合、ステップＳ１９５に処理が進められ、色選択パレット３２３で選択された色に更新される。例えばウィンドウ３１１の枠の色が、色選択パレット３２３で選択された色に変更される。
一方、ステップＳ１９４において、色選択パレット３２３は操作されていないと判定された場合、またはステップＳ１９５の処理が終了した場合、ステップＳ１９６に処理が進められる。ステップＳ１９６において、音量が操作されたか否か、換言すれば音量調整ボタン３１３が操作されたか否かが判定される。
ステップＳ１９６において、音量調整ボタン３１３が操作されたと判定された場合、ステップＳ１９７に処理が進められ、音量調整ボタン３１３で選択された音量に更新される。
一方、ステップＳ１９６において、音量調整ボタン３１３は操作されていないと判定された場合、またはステップＳ１９７の処理が終了した場合、ステップＳ１９８に処理が進められる。ステップＳ１９８において、ＯＫボタン３２１またはCancelボタン３２２が操作されたか否かが判定される。
ステップＳ１９８において、ＯＫボタン３２１またはCancelボタン３２２が操作されたと判定されるまで、ステップＳ１９２乃至Ｓ１９８の処理が繰り返される。コメント入力者は、所望の色、音量、表示位置を設定することができる。
一方、ステップＳ１９８において、ＯＫボタン３２１またはCancelボタン３２２が操作されたと判定された場合、図８に示したフローチャートに基づくコメント入力準備処理は終了され、ステップＳ１６２(図７)に処理が進められる。
なお、ＯＫボタン３２１が操作された場合には、その時点で設定されている色、音量、表示位置が設定され、Cancelボタン３２２が操作された場合、その時点で設定されている色、音量、表示位置の設定は破棄され、コメントの入力指示もキャンセルされる。
ステップＳ１６２において、録画の開始が指示されたか否かが判定される。録画の開始が指示されたと判定された場合、ステップＳ１６３に処理が進められる。
録画(コメントの入力)は、例えば、ＯＫボタン３２１が操作されたときから開始される。または、図１１に示した入力準備画面から、図１２に示すような画面に切り替わり、コメント入力ボタン２１３が操作されたときから開始される。
図１２に示した画面例を参照する。図１２に示した画面は、図１１に示した入力準備画面において、ＯＫボタン３２１が操作された後に、入力準備画面から切り換えられた画面であり、コメント入力時の画面(以下、適宜、コメント入力画面と記述する)である。
図１２に示したコメント入力画面は、入力準備画面において設定された位置にウィンドウ３１１が表示され、その時点でカメラ２０３により撮像されているコメント入力者の画像が、ウィンドウ３１１内に表示されている。
コメント入力画面に表示されているウィンドウ３１１は、コメント入力中(録画中)にも移動可能にされている。
またコメント入力画面の左下には、コメント入力ボタン２１３が表示され、その右側には、指示部２１４が表示されている。このコメント入力ボタン２１３と指示部２１４は、図１０を参照して説明したように、コメントを入力するときに操作されるボタンと再生されているコンテンツに対する指示を出す領域である。
コメント入力画面に、指示部２１４が表示されることで、図４を参照して説明したように、再生されているターゲットビデオ（コメントを付けたいビデオ）に対する操作、例えば、一時停止や巻き戻しといった指示を出すことができる。すなわち、コメント入力画面に、指示部２１４を表示することで、コメント入力中にも、コメントを付けるビデオに対する所望の操作を行うことができる。
また指示部２１４の右側には、シークバー２１５も表示されており、このシークバー２１５も図１０を参照して説明したように、再生されているコンテンツの再生位置(再生時刻)を指示するための領域である。
コメント入力画面に、シークバー２１５が表示されることで、図４を参照して説明したように、再生されているターゲットビデオ（コメントを付けたいビデオ）に対して所望の再生位置まで戻る、または進むといった処理を、シークバー２１５を操作することで行うことが可能となる。
すなわち、コメント入力画面に、シークバー２１５を表示することで、コメント入力中にも、コメントを付けるビデオの所望の再生位置まで簡便に移動することができる。
コメント入力画面の右側には、音量調整ボタン３１３も表示されている。この音量調整ボタン３１３は、図１１を参照して説明したように、再生されているコンテンツの音量を調整するためのボタンである。
コメント入力画面に、音量調整ボタン３１３が表示されることで、再生されているターゲットビデオ（コメントを付けたいビデオ）の音量を所望の音量にすることができ、コメント入力中にも、入力するコメントの邪魔にならないような音量を設定することができる。
ところで、図１２に示したコメント入力画面において、コメント入力ボタン２１３は、黒く表示されている。図１０に示した画面を再度参照するに、図１０に示した画面（コメント入力画面ではない画面）においては、コメント入力ボタン２１３は、黒くは表示されていない。
コメント入力ボタン２１３が黒く表示されているときは、録画中であることを示している。コメント入力者は、コメント入力ボタン２１３の表示色を見ることで、録画中であるか否かを判断することができる。
また、コメント入力ボタン２１３が黒く表示されているとき（録画中であるとき）に、コメント入力ボタン２１３が操作されると、録画が停止され、表示も白に戻される。
なおここでは、黒または白といった表記を行っているが、録画中のコメント入力ボタン２１３の色は、黒に限定されることを示すわけではない。コメント入力ボタン２１３の色（表示）は、録画中であるか否かをコメント入力者に明確に認識させることができる色（表示）であればよい。
図７に示したフローチャートの説明に戻り、ステップＳ１６２において、録画開始が指示されたと判定された場合、ステップＳ１６３に処理が進められ、コメントの録画が開始される。録画されるのは、ターゲットビデオの画像にウィンドウ３１１（ウィンドウ３１１内に表示されているコメント入力者の画像）が合成された画像と、ターゲットビデオの音声とマイクロフォン２０２で集音されたコメント入力者の音声が合成された音声である。
ステップＳ１６４において、プレイヤー状態の更新処理が実行される。ステップＳ１６４において実行されるプレイヤー状態の更新処理は、図６に示したフローチャートに基づき実行される。図６に示したフローチャートに基づく処理については既に説明したので、ここではその説明を省略する。
すなわち、コメントの入力中（録画中）においても、再生されているターゲットビデオに対して、再生、停止、一時停止、早送り、巻き戻し、再生位置の変更、音量の変更といった指示を出すことができるように構成されている。
なお、コメントの入力中には、ターゲットビデオが表示されているウィンドウ（ウィンドウ３３１とする）に対しても種々の変更を加えることが可能な構成としても良い。例えば、図１３に示すように、ターゲットビデオが表示されているウィンドウ３３１を縮小したり、回転したりすることができるように構成しても良い。
コメント入力者からの、ターゲットビデオが表示されているウィンドウ３３１の拡大、縮小、回転、移動などの指示を受け付け、指示された更新が行われるようにしても良い。
ステップＳ１６５（図７）において、コメント入力者情報の更新処理が実行される。このステップＳ１６５において実行されるコメント入力者情報の更新処理について、図９に示したフローチャートを参照して説明する。
ステップＳ２１１において、画像の移動または拡大が指示されたか否かが判定される。画像の移動とは、ウィンドウ３１１の移動であり、画像の拡大とはウィンドウ３１１の拡大のことである。ステップＳ２１１において、画像の移動または拡大が指示されたと判定された場合、ステップＳ２１２に処理が進められる。
ステップＳ２１２において、入力者画像（ウィンドウ３１１）の更新が行われる。例えば、ステップＳ２１１において、画像の移動が指示されたと判定された場合、ステップＳ２１２においては、画像（ウィンドウ３１１）が、指示された位置に移動される。
例えば、図１４に示すように、表示部２０１の左上にウィンドウ３１１ａが表示されている状態のときに、コメント入力者が、ウィンドウ３１１ａをドラッグし、そのまま右側に移動させた場合、所謂ドラッグアンドドロップ（drag-and-drop）を実行した場合、その移動先である領域が、新たな表示領域に設定され、ウィンドウ３１１ｂが表示される。
コメント入力者は、ウィンドウ３１１の背後に表示されている画像（映像）に応じて、その画像の邪魔にならないような位置に、ウィンドウ３１１を移動させることができる。
また例えば、ステップＳ２１１において、画像の拡大が指示されたと判定された場合、ステップＳ２１２においては、画像（ウィンドウ３１１）が、指示された大きさに拡大され、表示される。
例えば、図１２に示したように、表示部２０１の左上にウィンドウ３１１が表示されている状態のときに、コメント入力者が、ウィンドウ３１１をピンチアウトした場合、図１５に示したように拡大されたウィンドウ３１１ｃが表示部２０１に表示される。
コメント入力者は、例えば、自己の動作を受講者１に見せたい（注目させたい）ときなどに、ウィンドウ３１１を所望の大きさに拡大することができる。なお、ここでは、拡大を例に挙げて説明したが、縮小することも勿論できる。
図９に示したフローチャートの説明に戻る。ステップＳ２１１において、画像の移動や拡大は指示されていないと判定された場合、またはステップＳ２１２の処理が終了された場合、ステップＳ２１３に処理が進められる。
ステップＳ２１３において、手書き入力中であるか否かが判定される。コメント入力者は、表示部２０１をタッチし、なぞることで図形、記号、文字など（以下、適宜、手書き画像と記述する）を入力することができる。表示部２０１は、タッチパネルを備え、入力部としての機能も備える。またはマウスやキーボードなどから手書き画像が入力されるようにすることも可能である。
ステップＳ２１３において、手書き入力中であると判定された場合、ステップＳ２１４に処理が進められる。ステップＳ２１４において、手書き画像の更新が行われる。例えば、図１６に示すように、コメント入力者の指で、表示部２０１（表示部２０１に装着されているタッチパネル）上がなぞられることで、手書き画像Ｄを入力される。
コメント入力者により入力された手書き画像３５１Ｄの色と、ウィンドウ３１１Ｄの枠の色は、同一の色とされる。この色は、図１１を参照して説明したように、色選択パレット３２３を用いて選択された色である。
例えば、このようにしてコメントが入力されたコンテンツビデオを、視聴し、さらにコメント（追加コメントと記述する）を付けることができる。また、その追加コメントを付ける追加コメント入力者も、手書き画像を追加することができる。よって、この追加コメント入力者の手書き画像と、先にコメントを付けたコメント入力者の手書き画像を識別することができるように、手書き画像が異なる色で表示されるようにする。
例えば、図１７に示したように、先にコメントを付けたコメント入力者が表示されているウィンドウ３１１Ｄの枠の色と、そのコメント入力者が手書き入力した手書き画像３５１Ｄは、同一の色で表示される。
また、後にコメントを付けた追加コメント入力者が表示されているウィンドウ３１１Ｅの枠の色と、その追加コメント入力者が手書き入力した手書き画像３５１Ｅは、同一の色で表示される。
ウィンドウ３１１Ｄの枠の色と、ウィンドウ３１１Ｅの枠の色は異なる色で表示される。また、手書き画像３５１Ｄと手書き画像３５１Ｅは、異なる色で表示される。なお、図１７では、異なる色ではなく、異なる線種（一方を破線、他方を実線）で示している。図１７に示したように、異なる色ではなく、異なる線種が用いられるようにしても良い。
このように、異なるコメント入力者毎にウィンドウ３１１の色（線種など）と手書き画像３５１の色（線種など）を変えることで、また、同一のコメント入力者のウィンドウ３１１の色（線種など）と手書き画像３５１の色（線種など）を同一とすることで、どのコメント入力者が入力した手書き画像３５１であるかを、視聴者に明確に示すことが可能となる。
なお、手書き画像３５１が入力されていないときには、図１８に示したような画面が視聴者（追加コメント入力者）に提供されている。図１８を参照するに、表示部２０１には、左上に先にコメントを付けたコメント入力者の画像が表示されるウィンドウ３１１Ｄが表示され、その隣に、後でコメントを追加した追加コメント入力者の画像が表示されるウィンドウ３１１Ｅが表示されている。このウィンドウ３１１Ｄの枠の色と、ウィンドウ３１１Ｅの枠の色は異なる色とされている。
さらにコメントを追加するコメント入力者がいた場合、そのコメント入力者の画像が表示されるウィンドウ３１１の枠の色は、先に表示されているウィンドウ３１１の色とは異なる色とされる。
このようなことを実現するために、図１１に示した入力準備画面の色選択パレット３２３には、既に選択されている色は表示されない。また、このように、ウィンドウ３１１の枠の色は、コメント入力者を識別する機能を有するため、入力準備画面で選択された後、すなわちコメントを入力しているときに変更することはできないようにされている。
図９に示したフローチャートの説明に戻り、ステップＳ２１３において、手書き入力中ではないと判定された場合、またはステップＳ２１４における処理が終了した場合、図９に示したコメント入力者情報の更新処理は終了され、処理は、ステップＳ１６７（図７）に進められる。
ステップＳ１６７において、録画の終了が指示されたか否かが判定される。録画の終了は、コメント入力ボタン２１３が操作されることで指示される。ステップＳ１６７において、録画の終了は指示されていないと判定された場合、換言すれば、コメント入力ボタン２１３は操作されていないと判定された場合、ステップＳ１６４に処理が戻され、それ以降の処理が繰り返される。
一方、ステップＳ１６７において、録画の終了が指示されたと判定された場合、ステップＳ１６８に処理が進められ、録画が終了される。そして処理は、ステップＳ１６９に進められ、コメントの登録が指示されたか否かが判定される。
例えば、表示部２０１に、“コメントを登録しますか？”といったメッセージを表示し、登録ボタンとキャンセルボタンを合わせて表示し、コメント入力者が、コメントを登録するか否かの指示を出せる仕組みを設ける。そして、登録ボタンが操作された場合、コメントの登録が指示されたと判定されるようにすることができる。
ステップＳ１６９において、コメントを登録しないと判定された場合、ステップＳ１７０に処理が進められ、この処理の前の時点で録画されていたコメント（作成されたコメントビデオ）は、破棄される。
一方、ステップＳ１６９において、コメントを登録すると判定された場合、ステップＳ１７１に処理が進められ、この処理の前の時点で録画されていたコメント（作成されたコメントビデオ）は、保存される。例えば、データベース５２にアップロードされる。
このようにして、作成されたコメントビデオが登録または破棄されると、図７に示したフローチャートにおけるコメント入力処理は終了され、処理は、ステップＳ１０８（図５）に進められる。
ステップＳ１０８において、再生は終了か否かが判定される。このステップＳ１０８における処理は、視聴者（コメント入力者）により映像の再生の停止が指示されたか否かの判定である。例えば、指示部２１４（図１０）内の停止ボタンが操作されることで、映像の再生の停止は指示される。
また、ステップＳ１０８における処理は、再生しているビデオを再度まで再生したか否かの判定も行う。ステップＳ１０８において、再生は終了ではないと判定された場合、ステップＳ１０３に処理は戻され、それ以降の処理が繰り返される。
一方、ステップＳ１０８において、再生は終了である判定された場合、ステップＳ１０９に処理が進められ、映像の再生が停止される。
ステップＳ１１０において、コメントビデオの視聴であったか否かが判定される。ステップＳ１１０において、コメントビデオの視聴であったと判定された場合、ステップＳ１０２に処理が戻され、それ以降の処理が実行される。この場合、コメントビデオの再生が停止された後であるため、コメントビデオに遷移する前のビデオ、例えば、ターゲットビデオが選択された状態で、プレイヤーの初期化が行われる。
一方、ステップＳ１１０において、コメントビデオの視聴ではないと判定された場合、換言すれば、戻るビデオがない場合、コンテンツの再生は終了される。
このように、本技術によると、所定のコンテンツ（ターゲットビデオ）を視聴しながら、コメントを付けることができる。また再生時には、コメントが付けられたコンテンツを、コメントと合わせて視聴することができる。
上記した実施の形態においては、コメントが付けられている再生位置が再生されているときには、コメント視聴ボタン２１２が表示され、そのコメント視聴ボタン２１２が操作されたときに、コメントが再生されるとしたが、このような視聴者からの指示を必要とせずに、コメントが再生されるようにしても良い。
すなわち、コメントが付けられている再生位置に来た時点で、その付けられているコメントが再生されるようにしても良い。
このように、本技術によれば、受講者１が実際に行った処理、上記した例では、介護に対して、指導者４からの指導（コメント）が加えられるため、個々の受講者１に合ったコンテンツを提供できる。個々の受講者１に合ったコンテンツで学習を行うことで、受講者１の修得度を上げることが可能となる。
またコンテンツの視聴は、受講者１の都合の良いときに行えるため、また複数回視聴することができるため、時間や場所に制約を受けずに自由に学習を行うことができ、この点からも受講者１の修得度を上げることが可能となる。
また受講者１からも、質問などのコメントを加えることが可能なため、またその質問に対する返答を指導者４はさらに加えることが可能とされている。すなわち受講者１と指導者４との間で、動画像を送り合うことができ、コミュニケーションをとることが可能なシステムを提供することができる。
なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。
また、本明細書において、システムとは、複数の装置により構成される装置全体を表すものである。
なお、本明細書に記載された効果はあくまで例示であって限定されるものではなく、また他の効果があってもよい。
なお、本技術の実施の形態は、上述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。
１１，２１，４１ 情報処理装置， ２０１ 表示部， ２０２ マイクロフォン， ２０３ カメラ， ２１１ 戻るボタン， ２１２ コメント視聴ボタン， ２１３ コメント入力ボタン， ２１４ 指示部， ２１５ シークバー， ２１６ 音量調整バー， ３１１ ウィンドウ， ３１２ 指示部， ３１３ 音量調整ボタン

Claims (20)

  1. 入力者の指示に応じてターゲットビデオを再生する再生部と、
    前記入力者を撮像する撮像部と、
    前記入力者の音声を集音する集音部と、
    再生中の前記ターゲットビデオに対して、前記ターゲットビデオの再生中の所定の再生時刻から前記入力者から追加されているコメントを合成したコメントビデオを生成する生成部と、
    を備え、
    前記生成部は、前記再生中のターゲットビデオの画像と前記撮像部で撮像中の前記入力者の画像を合成し、前記再生中のターゲットビデオの音声と前記集音部で集音中の前記入力者の音声を合成した前記コメントビデオを生成し、
    前記ターゲットビデオは、所定の人物が、所定の作業を行っている状態を撮影したビデオであり、
    前記入力者は、前記所定の作業に対して指導する指導者であり、前記コメントは、前記所定の作業に対する前記指導者からの指導に関し、
    前記生成されたコメントビデオを、前記ターゲットビデオに対して、前記再生時刻に関連付けて蓄積し、
    前記所定の作業に対する指導を受ける学習者の指示に応じて前記コメントビデオが関連付けられた前記ターゲットビデオを再生中に、前記再生時刻になった場合、前記コメントビデオの再生の開始を指示するためのボタンを表示する
    情報処理装置。
  2. 入力者の指示に応じてターゲットビデオを再生する再生部と、
    前記入力者を撮像する撮像部と、
    前記入力者の音声を集音する集音部と、
    再生中の前記ターゲットビデオに対して、前記ターゲットビデオの再生中の所定の再生時刻から前記入力者から追加されているコメントを合成したコメントビデオを生成する生成部と、
    を備え、
    前記生成部は、前記再生中のターゲットビデオの画像と前記撮像部で撮像中の前記入力者の画像を合成し、前記再生中のターゲットビデオの音声と前記集音部で集音中の前記入力者の音声を合成した前記コメントビデオを生成し、
    前記ターゲットビデオは、所定の人物が、所定の作業を行っている状態を撮影したビデオであり、
    前記入力者は、前記所定の作業に対して指導する指導者であり、前記コメントは、前記所定の作業に対する前記指導者からの指導に関し、
    前記生成されたコメントビデオを、前記ターゲットビデオに対して、前記再生時刻に関連付けて蓄積し、
    前記所定の作業に対する指導を受ける学習者の指示に応じて前記コメントビデオが関連付けられた前記ターゲットビデオを再生中に、前記再生時刻になった場合、前記コメントビデオの再生を開始する
    情報処理装置。
  3. 入力者の指示に応じてターゲットビデオを再生する再生部と、
    前記入力者を撮像する撮像部と、
    前記入力者の音声を集音する集音部と、
    再生中の前記ターゲットビデオに対して、前記ターゲットビデオの再生中の所定の再生時刻から前記入力者から追加されているコメントを合成したコメントビデオを生成する生成部と、
    を備え、
    前記生成部は、前記再生中のターゲットビデオの画像と前記撮像部で撮像中の前記入力者の画像を合成し、前記再生中のターゲットビデオの音声と前記集音部で集音中の前記入力者の音声を合成した前記コメントビデオを生成し、
    前記ターゲットビデオは、所定の人物が、所定の作業を行っている状態を撮影したビデオであり、
    前記入力者は、前記所定の作業に対して指導する指導者であり、前記コメントは、前記所定の作業に対する前記指導者からの指導に関し、
    前記生成されたコメントビデオを、前記ターゲットビデオに対して、前記再生時刻に関連付けて蓄積し、
    前記所定の作業に対する指導を受ける学習者の指示に応じて再生中の前記コメントビデオに対して、前記学習者から追加されている第２のコメントを合成した第２のコメントビデオを生成する
    情報処理装置。
  4. 前記ターゲットビデオの画像の一部に、前記撮像部で撮像された前記入力者の画像を表示する
    請求項１〜３の何れか一項に記載の情報処理装置。
  5. 前記生成部は、前記再生中のターゲットビデオの画像と前記撮像部で撮像中の前記入力者の画像と前記入力者が入力中の手書き画像を合成し、前記再生中のターゲットビデオの音声と前記集音部で集音中の前記入力者の音声を合成した前記コメントビデオを生成する
    請求項１〜４の何れか一項に記載の情報処理装置。
  6. 前記入力者の画像を表示するウィンドウの枠と、前記入力者が入力した前記手書き画像を、同一の色で表示する
    請求項５に記載の情報処理装置。
  7. 前記コメントの入力中に、前記入力者により、前記ウィンドウの枠の拡大、縮小、移動が指示された場合、その指示に基づき、前記ウィンドウの表示を更新する
    請求項６に記載の情報処理装置。
  8. 第１の入力者の画像を表示するウィンドウの枠と、第２の入力者の画像を表示するウィンドウの枠を、異なる色で表示する
    請求項６に記載の情報処理装置。
  9. 第１の入力者が入力した手書き画像と、第２の入力者が入力した手書き画像を、異なる色で表示する
    請求項５に記載の情報処理装置。
  10. 前記コメントビデオの再生中に、前記ターゲットビデオの再生に戻るためのボタンを表示する
    請求項１〜９の何れか一項に記載の情報処理装置。
  11. 前記コメントを入力中に、前記入力者により、前記ターゲットビデオの音量の変更が指示された場合、その指示に基づき、前記ターゲットビデオの音量を変更する
    請求項１〜１０の何れか一項に記載の情報処理装置。
  12. 前記コメントを入力中に、前記入力者により、前記ターゲットビデオの再生、停止、一時停止、巻き戻し、先送り、シークが指示された場合、その指示に基づく処理を実行する
    請求項１〜１１の何れか一項に記載の情報処理装置。
  13. 前記コメントを入力中に、前記入力者により、前記ターゲットビデオが表示されているウィンドウの拡大、縮小、移動が指示された場合、その指示に基づき、前記ウィンドウの表示を更新する
    請求項１〜１２の何れか一項に記載の情報処理装置。
  14. 前記ターゲットビデオは、所定の講義を受けている受講者により撮像されたビデオであり、
    前記入力者は、前記受講者を指導する指導者である
    請求項１〜１３の何れか一項に記載の情報処理装置。
  15. コンピュータが、入力者の指示に応じてターゲットビデオを再生し、
    コンピュータが、前記入力者を撮像し、
    コンピュータが、前記入力者の音声を集音し、
    コンピュータが、再生中の前記ターゲットビデオに対して、前記ターゲットビデオの再生中の所定の再生時刻から前記入力者から追加されているコメントを合成したコメントビデオを生成し、
    コンピュータが、前記生成されたコメントビデオを、前記ターゲットビデオに対して、前記再生時刻に関連付けて蓄積する
    ステップを含み、
    前記生成するステップは、前記再生中のターゲットビデオの画像と前記撮像中の前記入力者の画像を合成し、前記再生中のターゲットビデオの音声と前記集音中の前記入力者の音声を合成した前記コメントビデオを生成するステップを含み、
    前記ターゲットビデオは、所定の人物が、所定の作業を行っている状態を撮影したビデオであり、
    前記入力者は、前記所定の作業に対して指導する指導者であり、前記コメントは、前記所定の作業に対する前記指導者からの指導に関し、
    さらに、コンピュータが、前記所定の作業に対する指導を受ける学習者の指示に応じて前記コメントビデオが関連付けられた前記ターゲットビデオを再生中に、前記再生時刻になった場合、前記コメントビデオの再生の開始を指示するためのボタンを表示する
    ステップを含む
    情報処理方法。
  16. コンピュータが、入力者の指示に応じてターゲットビデオを再生し、
    コンピュータが、前記入力者を撮像し、
    コンピュータが、前記入力者の音声を集音し、
    コンピュータが、再生中の前記ターゲットビデオに対して、前記ターゲットビデオの再生中の所定の再生時刻から前記入力者から追加されているコメントを合成したコメントビデオを生成し、
    コンピュータが、前記生成されたコメントビデオを、前記ターゲットビデオに対して、前記再生時刻に関連付けて蓄積する
    ステップを含み、
    前記生成するステップは、前記再生中のターゲットビデオの画像と前記撮像中の前記入力者の画像を合成し、前記再生中のターゲットビデオの音声と前記集音中の前記入力者の音声を合成した前記コメントビデオを生成するステップを含み、
    前記ターゲットビデオは、所定の人物が、所定の作業を行っている状態を撮影したビデオであり、
    前記入力者は、前記所定の作業に対して指導する指導者であり、前記コメントは、前記所定の作業に対する前記指導者からの指導に関し、
    さらに、コンピュータが、前記所定の作業に対する指導を受ける学習者の指示に応じて前記コメントビデオが関連付けられた前記ターゲットビデオを再生中に、前記再生時刻になった場合、前記コメントビデオの再生を開始する
    ステップを含む
    情報処理方法。
  17. コンピュータが、入力者の指示に応じてターゲットビデオを再生し、
    コンピュータが、前記入力者を撮像し、
    コンピュータが、前記入力者の音声を集音し、
    コンピュータが、再生中の前記ターゲットビデオに対して、前記ターゲットビデオの再生中の所定の再生時刻から前記入力者から追加されているコメントを合成したコメントビデオを生成し、
    コンピュータが、前記生成されたコメントビデオを、前記ターゲットビデオに対して、前記再生時刻に関連付けて蓄積する
    ステップを含み、
    前記生成するステップは、前記再生中のターゲットビデオの画像と前記撮像中の前記入力者の画像を合成し、前記再生中のターゲットビデオの音声と前記集音中の前記入力者の音声を合成した前記コメントビデオを生成するステップを含み、
    前記ターゲットビデオは、所定の人物が、所定の作業を行っている状態を撮影したビデオであり、
    前記入力者は、前記所定の作業に対して指導する指導者であり、前記コメントは、前記所定の作業に対する前記指導者からの指導に関し、
    さらに、コンピュータが、前記所定の作業に対する指導を受ける学習者の指示に応じて再生中の前記コメントビデオに対して、前記学習者から追加されている第２のコメントを合成した第２のコメントビデオを生成する
    ステップを含む
    情報処理方法。
  18. 入力者の指示に応じてターゲットビデオを再生し、
    前記入力者を撮像し、
    前記入力者の音声を集音し、
    再生中の前記ターゲットビデオに対して、前記ターゲットビデオの再生中の所定の再生時刻から前記入力者から追加されているコメントを合成したコメントビデオを生成し、
    前記生成されたコメントビデオを、前記ターゲットビデオに対して、前記再生時刻に関連付けて蓄積する
    ステップを含み、
    前記生成するステップは、前記再生中のターゲットビデオの画像と前記撮像中の前記入力者の画像を合成し、前記再生中のターゲットビデオの音声と前記集音中の前記入力者の音声を合成した前記コメントビデオを生成するステップを含み、
    前記ターゲットビデオは、所定の人物が、所定の作業を行っている状態を撮影したビデオであり、
    前記入力者は、前記所定の作業に対して指導する指導者であり、前記コメントは、前記所定の作業に対する前記指導者からの指導に関し、
    さらに、前記所定の作業に対する指導を受ける学習者の指示に応じて前記コメントビデオが関連付けられた前記ターゲットビデオを再生中に、前記再生時刻になった場合、前記コメントビデオの再生の開始を指示するためのボタンを表示する
    ステップを含む
    処理をコンピュータに実行させるためのプログラム。
  19. 入力者の指示に応じてターゲットビデオを再生し、
    前記入力者を撮像し、
    前記入力者の音声を集音し、
    再生中の前記ターゲットビデオに対して、前記ターゲットビデオの再生中の所定の再生時刻から前記入力者から追加されているコメントを合成したコメントビデオを生成し、
    前記生成されたコメントビデオを、前記ターゲットビデオに対して、前記再生時刻に関連付けて蓄積する
    ステップを含み、
    前記生成するステップは、前記再生中のターゲットビデオの画像と前記撮像中の前記入力者の画像を合成し、前記再生中のターゲットビデオの音声と前記集音中の前記入力者の音声を合成した前記コメントビデオを生成するステップを含み、
    前記ターゲットビデオは、所定の人物が、所定の作業を行っている状態を撮影したビデオであり、
    前記入力者は、前記所定の作業に対して指導する指導者であり、前記コメントは、前記所定の作業に対する前記指導者からの指導に関し、
    さらに、前記所定の作業に対する指導を受ける学習者の指示に応じて前記コメントビデオが関連付けられた前記ターゲットビデオを再生中に、前記再生時刻になった場合、前記コメントビデオの再生を開始する
    ステップを含む
    処理をコンピュータに実行させるためのプログラム。
  20. 入力者の指示に応じてターゲットビデオを再生し、
    前記入力者を撮像し、
    前記入力者の音声を集音し、
    再生中の前記ターゲットビデオに対して、前記ターゲットビデオの再生中の所定の再生時刻から前記入力者から追加されているコメントを合成したコメントビデオを生成し、
    前記生成されたコメントビデオを、前記ターゲットビデオに対して、前記再生時刻に関連付けて蓄積する
    ステップを含み、
    前記生成するステップは、前記再生中のターゲットビデオの画像と前記撮像中の前記入力者の画像を合成し、前記再生中のターゲットビデオの音声と前記集音中の前記入力者の音声を合成した前記コメントビデオを生成するステップを含み、
    前記ターゲットビデオは、所定の人物が、所定の作業を行っている状態を撮影したビデオであり、
    前記入力者は、前記所定の作業に対して指導する指導者であり、前記コメントは、前記所定の作業に対する前記指導者からの指導に関し、
    さらに、前記所定の作業に対する指導を受ける学習者の指示に応じて再生中の前記コメントビデオに対して、前記学習者から追加されている第２のコメントを合成した第２のコメントビデオを生成する
    ステップを含む
    処理をコンピュータに実行させるためのプログラム。
JP2016111563A 2016-06-03 2016-06-03 情報処理装置、情報処理方法、並びにプログラム Active JP6818310B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016111563A JP6818310B2 (ja) 2016-06-03 2016-06-03 情報処理装置、情報処理方法、並びにプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016111563A JP6818310B2 (ja) 2016-06-03 2016-06-03 情報処理装置、情報処理方法、並びにプログラム

Publications (2)

Publication Number Publication Date
JP2017219573A JP2017219573A (ja) 2017-12-14
JP6818310B2 true JP6818310B2 (ja) 2021-01-20

Family

ID=60656033

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016111563A Active JP6818310B2 (ja) 2016-06-03 2016-06-03 情報処理装置、情報処理方法、並びにプログラム

Country Status (1)

Country Link
JP (1) JP6818310B2 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6734965B2 (ja) * 2018-05-22 2020-08-05 東光電気工事株式会社 画像処理装置、プログラムおよび画像処理方法
CN112287129A (zh) * 2019-07-10 2021-01-29 阿里巴巴集团控股有限公司 音频数据的处理方法、装置及电子设备
TWI741550B (zh) * 2020-03-31 2021-10-01 國立雲林科技大學 書籤影格的生成方法、自動生成書籤的影音播放裝置及其使用者介面
KR102347173B1 (ko) * 2021-06-02 2022-01-03 재단법인 사랑글로벌아카데미 맞춤형 복음 콘텐츠 생성 시스템 및 방법 그리고 이를 이용한 맞춤형 복음 콘텐츠 공유 방법

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3424822B2 (ja) * 2001-11-29 2003-07-07 株式会社コナミコンピュータエンタテインメント東京 ネットワークゲームシステム
JP2005070532A (ja) * 2003-08-26 2005-03-17 Hitachi Ltd 遠隔対話型教育装置
JP4631014B2 (ja) * 2004-07-07 2011-02-16 学校法人東海大学 電子教材学習支援装置と電子教材学習支援システム及び電子教材学習支援方法並びに電子学習支援プログラム
JP2007274090A (ja) * 2006-03-30 2007-10-18 Toshiba Corp コンテンツ再生装置、方法およびプログラム
JP5960623B2 (ja) * 2013-02-20 2016-08-02 株式会社スクウェア・エニックス ゲームシステム、制御方法、プログラム、及び記録媒体
US9116871B2 (en) * 2013-05-20 2015-08-25 Microsoft Technology Licensing, Llc Ink to text representation conversion

Also Published As

Publication number Publication date
JP2017219573A (ja) 2017-12-14

Similar Documents

Publication Publication Date Title
Reyna The potential of 360-degree videos for teaching, learning and research
JP6818310B2 (ja) 情報処理装置、情報処理方法、並びにプログラム
WO2021109678A1 (zh) 视频生成方法、装置、电子设备及存储介质
US8363056B2 (en) Content generation system, content generation device, and content generation program
JP2015505175A (ja) テレビ会議の強化
CN108369816A (zh) 用于从全向视频创建视频剪辑的设备和方法
WO2019019403A1 (zh) 一种用于k12阶段的互动情景教学系统
JP2016136699A (ja) 情報処理装置及びその制御方法、プログラム、並びに記憶媒体
McIlvenny Inhabiting spatial video and audio data: Towards a scenographic turn in the analysis of social interaction
CN114327700A (zh) 一种虚拟现实设备及截屏图片播放方法
KR100901111B1 (ko) 삼차원 가상 공간 콘텐츠를 이용한 영상제공시스템
CN105808231B (zh) 录制与播放脚本的系统及方法
TW202341038A (zh) 電腦程式、終端及伺服器
KR20150112113A (ko) 이벤트 처리 기반의 온라인 강의 콘텐츠 관리방법
JP2021006894A (ja) コンテンツ配信サーバ、コンテンツ作成装置、教育端末、コンテンツ配信プログラム、および教育プログラム
CN114846808B (zh) 内容发布系统、内容发布方法以及存储介质
KR20200028830A (ko) 실시간 cg 영상 방송 서비스 시스템
Liu et al. A comparison of immersive and non-immersive VR for the education of filmmaking
Mulvany Because the Night-Immersive Theatre for Digital Audiences: Mapping the affordances of immersive theatre to digital interactions using game engines
Jin A Constructivism-based 3D Scene Display Teaching System for Wushu Teaching.
US20240137599A1 (en) Terminal and non-transitory computer-readable medium
JP2021005058A (ja) 遠隔教育システム
Labacher The evolution of the cellphone as film and video camera
TWI739544B (zh) 影音製作方法、系統與其使用者介面
WO2023130715A1 (zh) 一种数据处理方法、装置、电子设备、计算机可读存储介质及计算机程序产品

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160603

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20180220

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20180710

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190422

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20190422

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20190603

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190618

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190730

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20191008

RD13 Notification of appointment of power of sub attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7433

Effective date: 20191029

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191112

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191120

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20200218

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200427

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20200427

C876 Explanation why request for accelerated appeal examination is justified

Free format text: JAPANESE INTERMEDIATE CODE: C876

Effective date: 20200427

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20200518

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20200519

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20200626

C211 Notice of termination of reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C211

Effective date: 20200630

C305 Report on accelerated appeal examination

Free format text: JAPANESE INTERMEDIATE CODE: C305

Effective date: 20200706

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20200707

C13 Notice of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: C13

Effective date: 20200818

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20200928

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200929

C302 Record of communication

Free format text: JAPANESE INTERMEDIATE CODE: C302

Effective date: 20201109

C23 Notice of termination of proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C23

Effective date: 20201117

C03 Trial/appeal decision taken

Free format text: JAPANESE INTERMEDIATE CODE: C03

Effective date: 20201215

C30A Notification sent

Free format text: JAPANESE INTERMEDIATE CODE: C3012

Effective date: 20201215

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20201218

R150 Certificate of patent or registration of utility model

Ref document number: 6818310

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250