JP2017508192A5

JP2017508192A5 -

Info

Publication number: JP2017508192A5
Application number: JP2016541214A
Authority: JP
Filing date: 2014-12-19
Publication date: 2017-06-01
Anticipated expiration: 2034-12-19

Claims

ビデオ処理の方法であって、
ビューのプライマリフィールドを有するプライマリビデオストリーム内に表された第１のオブジェクトの第１の選択を受信することと、
前記第１の選択を受信したことに応答して、前記第１のオブジェクトを含み、ビューの前記プライマリフィールドよりも狭いビューの第１のフィールドを有する第１のビデオストリームを、前記プライマリビデオストリームから生成することと、
前記プライマリビデオストリーム内に表された第２のオブジェクトの第２の選択を受信することと、
前記第２の選択を受信したことに応答して、前記第２のオブジェクトを含み、ビューの前記プライマリフィールドよりも狭いビューの第２のフィールドを有する第２のビデオストリームを、前記プライマリビデオストリームから生成することと、
を備え、
前記第１のビデオストリームは、前記第２の選択を受信するよりも前に生成され、前記第２のビデオストリームに対応するビデオは、前記第１のビデオストリームに対応するビデオが画面に表示される間に前記画面に表示され、ビューの前記第１のフィールドは、ビューの前記第２のフィールド内にないビューの前記プライマリフィールドの一部分を含み、ビューの前記第２のフィールドは、ビューの前記第１のフィールド内にないビューの前記プライマリフィールドの一部分を含む、ビデオ処理の方法。
前記プライマリビデオストリームの第１の複数のフレームまたは前記第１のビデオストリームの第２の複数のフレームの少なくとも一方の中で、前記第１のオブジェクトの動きを検出することと、
前記動きを検出したことに応答して、ビューの前記第１のフィールドの方向を変更することと、
をさらに備える、請求項１に記載のビデオ処理の方法。
ビューの前記第１のフィールドの前記方向を変更することは、前記第１のオブジェクトの前記動きに従うように前記方向を変更することを備える、請求項２に記載のビデオ処理の方法。
前記第１のビデオストリームを生成することは、前記プライマリビデオストリームの少なくとも１つの対応するフレームの一部分から前記第１のビデオストリームの各フレームを生成することを備える、請求項１に記載のビデオ処理の方法。
前記第１のビデオストリームの各フレームについて、前記フレーム内の前記第１のオブジェクトの第１の表現の重心の第１の座標位置と前記フレームの中心座標との間の第１の距離は、前記プライマリビデオストリームの対応するフレーム内の前記第１のオブジェクトの第２の表現の重心の第２の座標位置と前記対応するフレームの中心座標との間の第２の距離よりも小さい、請求項１に記載のビデオ処理の方法。
前記第１のビデオストリームを生成することは、前記第１のビデオストリームの第１の複数のフレームの各々の中の前記第１のオブジェクトの表現のサイズを正規化することを備える、請求項１に記載のビデオ処理の方法。
前記第１のビデオストリームを生成することは、前記第１のビデオストリームの第１の複数のフレームの各々の中での明るさ、コントラスト、またはホワイトバランスのうちの少なくとも１つを正規化することを備える、請求項１に記載のビデオ処理の方法。
第１のウィンドウ内に前記第１のビデオストリームを前記画面に表示することと、
第２のウィンドウ内に前記第２のビデオストリームを前記画面に表示することと、
をさらに備える、請求項１に記載のビデオ処理の方法。
前記第１のオブジェクトと前記第２のオブジェクトとの幾何学的配置の関係の指示を前記画面に表示することをさらに備える、請求項１に記載のビデオ処理の方法。
前記プライマリビデオストリームの第１のフレームにおいて、前記第１のオブジェクトは、前記第１のフレームの第１のフレーム端部に対して、前記第２のオブジェクトが前記第１のフレーム端部に対するよりも近いと決定することと、
前記第１のオブジェクトが前記第１のフレーム端部により近いと決定した後に、前記プライマリビデオストリームの第２のフレームにおいて、前記第２のオブジェクトは、前記第２のフレームの第２のフレーム端部に対して、前記第１のオブジェクトが前記第２のフレーム端部に対するよりも近いと決定することと、前記第２のフレーム端部は、前記第１のフレーム端部に対応する、
前記第２のオブジェクトが前記第２のフレーム端部により近いと決定したことに応答して、前記第１のウィンドウ内に前記第２のビデオストリームを表示し、前記第２のウィンドウ内に前記第１のビデオストリームを表示することと、
をさらに備える、請求項８に記載のビデオ処理の方法。
前記第１のウィンドウ内に前記第１のビデオストリームを表示した後に、前記プライマリビデオストリームのフレーム、前記第１のビデオストリームのフレーム、または前記第２のビデオストリームのフレームのうちの少なくとも１つにおいて、前記第２のオブジェクトが前記第１のオブジェクトと重複すると決定することと、
前記第２のオブジェクトが前記第１のオブジェクトと重複すると決定したことに応答して、前記第１のウィンドウ内に前記第２のビデオストリームを表示し、前記第２のウィンドウ内に前記第１のビデオストリームを表示することと、
をさらに備える、請求項８に記載のビデオ処理の方法。
前記プライマリビデオストリームから、ビューの前記プライマリフィールドよりも狭いビューの二次的フィールドを有する表示ビデオストリームを生成することと、
前記画面の第３のウィンドウ内に、前記表示ビデオストリームを表示することと、
前記第１のオブジェクトまたは前記第２のオブジェクトのうちの少なくとも１つが前記表示ビデオストリームのフレームの端部に近いことを検出したことに応答して、ビューの三次的フィールドを有するように前記表示ビデオストリームを変更することと、
をさらに備え、
ビューの前記三次的フィールドはビューの前記二次的フィールドよりも広角を有する、請求項８に記載のビデオ処理の方法。
前記第１のオブジェクトはロボットオブジェクトであり、前記方法は、前記ロボットオブジェクトの動きを制御することをさらに備える、請求項１に記載のビデオ処理の方法。
命令を記憶する非一時的コンピュータ可読媒体であって、前記命令は、プロセッサによって実行されると、前記プロセッサに、
ビューのプライマリフィールドを有するプライマリビデオストリーム内に表された第１のオブジェクトの第１の選択を受信させ、
前記第１の選択を受信したことに応答して、前記第１のオブジェクトを含み、ビューの前記プライマリフィールドよりも狭いビューの第１のフィールドを有する第１のビデオストリームを、前記プライマリビデオストリームから生成させ、
前記プライマリビデオストリーム内に表された第２のオブジェクトの第２の選択を受信させ、
前記第２の選択を受信したことに応答して、前記第２のオブジェクトを含み、ビューの前記プライマリフィールドよりも狭いビューの第２のフィールドを有する第２のビデオストリームを、前記プライマリビデオストリームから生成させ、
前記第１のビデオストリームは、前記第２の選択を受信するよりも前に生成され、前記第２のビデオストリームに対応するビデオは、前記第１のビデオストリームに対応するビデオが画面に表示される間に前記画面に表示され、ビューの前記第１のフィールドは、ビューの前記第２のフィールド内にないビューの前記プライマリフィールドの一部分を含み、ビューの前記第２のフィールドは、ビューの前記第１のフィールド内にないビューの前記プライマリフィールドの一部分を含む、非一時的コンピュータ可読媒体。
前記プロセッサによって実行されると、前記プロセッサに、
前記プライマリビデオストリームの第１の複数のフレームまたは前記第１のビデオストリームの第２の複数のフレームの少なくとも一方に基づいて、前記第１のオブジェクトの動きを検出させ、
前記第１のオブジェクトの前記動きを前記検出したことに応答して、前記第１のオブジェクトの前記動きに従うようにビューの前記第１のフィールドの方向を変更させる、
命令を記憶している、請求項１４に記載の非一時的コンピュータ可読媒体。
前記第１のビデオストリームを生成するための前記命令は、前記プロセッサによって実行されると、前記プロセッサに、前記第１のビデオストリームの第１の複数のフレームの各々の中の前記第１のオブジェクトの表現のサイズを正規化させる命令を備える、請求項１４に記載の非一時的コンピュータ可読媒体。
前記プロセッサによって実行されると、前記プロセッサに、
第１のウィンドウ内に前記第１のビデオストリーム、および第２のウィンドウ内に前記第２のビデオストリームを、前記画面に表示させ、
前記プライマリビデオストリームの第１のフレームにおいて、前記第１のオブジェクトは、前記第１のフレームの第１のフレーム端部に対して、前記第２のオブジェクトが前記第１のフレーム端部に対するよりも近いと決定させ、
前記第１のオブジェクトが前記第１のフレーム端部により近いと決定した後に、前記プライマリビデオストリームの第２のフレームにおいて、前記第２のオブジェクトは、前記第２のフレームの第２のフレーム端部に対して、前記第１のオブジェクトが前記第２のフレーム端部に対するよりも近いと決定させ、前記第２のフレーム端部は、前記第１のフレーム端部に対応する、
前記第２のオブジェクトが前記第２のフレーム端部により近いと決定したことに応答して、前記第１のウィンドウ内に前記第２のビデオストリームを表示させ、前記第２のウィンドウ内に前記第１のビデオストリームを表示させる、
命令を記憶している、請求項１４に記載の非一時的コンピュータ可読媒体。
プロセッサによって実行されると、前記プロセッサに、
第１のウィンドウ内に前記第１のビデオストリーム、および第２のウィンドウ内に前記第２のビデオストリームを、前記画面に表示させ、
前記第１のウィンドウ内に前記第１のビデオストリームを表示した後に、前記プライマリビデオストリームのフレーム、前記第１のビデオストリームのフレーム、または前記第２のビデオストリームのフレームのうちの少なくとも１つにおいて、前記第２のオブジェクトが前記第１のオブジェクトと重複すると決定させ、
前記第２のオブジェクトが前記第１のオブジェクトと重複すると決定したことに応答して、前記第１のウィンドウ内に前記第２のビデオストリーム、および前記第２のウィンドウ内に前記第１のビデオストリームを表示させる、
命令を記憶している、請求項１４に記載の非一時的コンピュータ可読媒体。
前記プロセッサによって実行されると、前記プロセッサに、
第１のウィンドウ内に前記第１のビデオストリーム、および第２のウィンドウ内に前記第２のビデオストリームを、前記画面に表示させ、
前記プライマリビデオストリームから、ビューの前記プライマリフィールドよりも狭いビューの二次的フィールドを有する表示ビデオストリームを生成させ、
前記画面の第３のウィンドウ内に、前記表示ビデオストリームを表示させ、
前記第１のオブジェクトまたは前記第２のオブジェクトのうちの少なくとも１つが前記表示ビデオストリームのフレームの端部に近いことを検出したことに応答して、ビューの三次的フィールドを有するように前記表示ビデオストリームを変更させる、
命令を記憶しており、
ビューの前記三次的フィールドはビューの前記二次的フィールドよりも広角を有する、
請求項１４に記載の非一時的コンピュータ可読媒体。
ビデオ処理のための装置であって、
ビューのプライマリフィールドを有するプライマリビデオストリーム内に表された第１のオブジェクトの第１の選択を受信するための手段と、
前記第１の選択を受信したことに応答して、前記第１のオブジェクトを含み、ビューの前記プライマリフィールドよりも狭いビューの第１のフィールドを有する第１のビデオストリームを、前記プライマリビデオストリームから生成するための手段と、
前記プライマリビデオストリーム内に表された第２のオブジェクトの第２の選択を受信するための手段と、
前記第２の選択を受信したことに応答して、前記第２のオブジェクトを含み、ビューの前記プライマリフィールドよりも狭いビューの第２のフィールドを有する第２のビデオストリームを、前記プライマリビデオストリームから生成するための手段と、
を備え、
前記第１のビデオストリームは、前記第２の選択を受信するよりも前に生成され、前記第２のビデオストリームに対応するビデオは、前記第１のビデオストリームに対応するビデオが画面に表示される間に前記画面に表示され、前記第１のビデオストリームを生成しおよび前記第２のビデオストリームを生成した後、ビューの前記第１のフィールドは、ビューの前記第２のフィールド内にないビューの前記プライマリフィールドの一部分を含み、ビューの前記第２のフィールドは、ビューの前記第１のフィールド内にないビューの前記プライマリフィールドの一部分を含む、装置。
前記第１のビデオストリームを生成するための前記手段は、前記第１のビデオストリームの第１の複数のフレームの各々の中の前記第１のオブジェクトの表現のサイズを正規化するように構成される、請求項２０に記載の装置。
第１のウィンドウ内に前記第１のビデオストリーム、および第２のウィンドウ内に前記第２のビデオストリームを、前記画面に表示するための手段と、
前記プライマリビデオストリームの第１のフレームにおいて、前記第１のオブジェクトは、前記第１のフレームの第１のフレーム端部に対して、前記第２のオブジェクトが前記第１のフレーム端部に対するよりも近いと決定するための手段と、
前記第１のオブジェクトが前記第１のフレーム端部により近いと決定した後に、前記プライマリビデオストリームの第２のフレームにおいて、前記第２のオブジェクトは、前記第２のフレームの第２のフレーム端部に対して、前記第１のオブジェクトが前記第２のフレーム端部に対するよりも近いと決定するための手段と、前記第２のフレーム端部は、前記第１のフレーム端部に対応し、
前記第２のオブジェクトが前記第２のフレーム端部により近いと決定したことに応答して、前記第１のウィンドウ内に前記第２のビデオストリーム、および前記第２のウィンドウ内に前記第１のビデオストリームを表示するための手段と、
をさらに備える、請求項２０に記載の装置。
第１のウィンドウ内に前記第１のビデオストリーム、および第２のウィンドウ内に前記第２のビデオストリームを、前記画面に表示するための手段と、
前記第１のウィンドウ内に前記第１のビデオストリームを表示した後に、前記プライマリビデオストリームのフレーム、前記第１のビデオストリームのフレーム、または前記第２のビデオストリームのフレームのうちの少なくとも１つにおいて、前記第２のオブジェクトが前記第１のオブジェクトと重複すると決定するための手段と、
前記第２のオブジェクトが前記第１のオブジェクトと重複すると決定したことに応答して、前記第１のウィンドウ内に前記第２のビデオストリーム、および前記第２のウィンドウ内に前記第１のビデオストリームを表示するための手段と、
をさらに備える、請求項２０に記載の装置。
第１のウィンドウ内に前記第１のビデオストリーム、および第２のウィンドウ内に前記第２のビデオストリームを、前記画面に表示するための手段と、
前記プライマリビデオストリームから、ビューの前記プライマリフィールドよりも狭いビューの二次的フィールドを有する表示ビデオストリームを生成するための手段と、
前記画面の第３のウィンドウ内に、前記表示ビデオストリームを表示するための手段と、
前記第１のオブジェクトまたは前記第２のオブジェクトのうちの少なくとも１つが前記表示ビデオストリームのフレームの端部に近いことを検出したことに応答して、ビューの三次的フィールドを有するように前記表示ビデオストリームを変更するための手段と、
をさらに備え、
ビューの前記三次的フィールドはビューの前記二次的フィールドよりも広角を有する、請求項２０に記載の装置。
ビデオ処理のための装置であって、
ビューのプライマリフィールドを有するプライマリビデオストリーム内に表された第１のオブジェクトの第１の選択を受信し、前記プライマリビデオストリーム内に表された第２のオブジェクトの第２の選択を受信するように構成される判別器と、
前記第１の選択を受信したことに応答して、前記第１のオブジェクトを含み、ビューの前記プライマリフィールドよりも狭いビューの第１のフィールドを有する第１のビデオストリームを、前記プライマリビデオストリームから生成し、前記第２の選択を受信したことに応答して、前記第２のオブジェクトを含み、ビューの前記プライマリフィールドよりも狭いビューの第２のフィールドを有する第２のビデオストリームを、前記プライマリビデオストリームから生成するように構成されるビデオストリーム生成器と、
を備え、
前記第１のビデオストリームは、前記第２の選択を受信するよりも前に生成され、前記第２のビデオストリームに対応するビデオは、前記第１のビデオストリームに対応するビデオが画面に表示される間に前記画面に表示され、前記第１のビデオストリームを生成しおよび前記第２のビデオストリームを生成した後、ビューの前記第１のフィールドは、ビューの前記第２のフィールド内にないビューの前記プライマリフィールドの一部分を含み、ビューの前記第２のフィールドは、ビューの前記第１のフィールド内にないビューの前記プライマリフィールドの一部分を含む、装置。
前記プライマリビデオストリームの第１の複数のフレームまたは前記第１のビデオストリームの第２の複数のフレームの少なくとも一方に基づいて、前記第１のオブジェクトの動きを検出するように構成されるオブジェクトトラッカーをさらに備え、
前記ビデオストリーム生成器は、前記第１のオブジェクトの前記動きを検出したことに応答して、前記第１のオブジェクトの前記動きに従うようにビューの前記第１のフィールドの方向を変更するように構成される、請求項２５に記載の装置。
前記ビデオストリーム生成器は、前記第１のビデオストリームの第１の複数のフレームの各々の中の前記第１のオブジェクトの表現のサイズを正規化するように構成される、請求項２５に記載の装置。
第１のウィンドウ内に前記第１のビデオストリーム、および第２のウィンドウ内に前記第２のビデオストリームを、前記画面に表示するように構成される表示信号生成器と、
前記プライマリビデオストリームの第１のフレームにおいて、前記第１のオブジェクトは、前記第１のフレームの第１のフレーム端部に対して、前記第２のオブジェクトが前記第１のフレーム端部に対するよりも近いと決定し、
前記第１のオブジェクトが前記第１のフレーム端部により近いと前記決定した後に、前記プライマリビデオストリームの第２のフレームにおいて、前記第２のオブジェクトは、前記第２のフレームの第２のフレーム端部に対して、前記第１のオブジェクトが前記第２のフレーム端部に対するよりも近いと決定する
ように構成されるオブジェクトトラッカーと、
をさらに備え、
前記第２のフレーム端部は、前記第１のフレーム端部に対応し、前記表示信号生成器は、前記第１のウィンドウ内に前記第１のビデオストリームを表示した後に、前記第２のオブジェクトが前記第２のフレーム端部により近いと決定したことに応答して、前記第１のウィンドウ内に前記第２のビデオストリーム、および前記第２のウィンドウ内に前記第１のビデオストリームを表示するように構成される、請求項２５に記載の装置。
第１のウィンドウ内に前記第１のビデオストリーム、および第２のウィンドウ内に前記第２のビデオストリームを、画面に表示するように構成される表示信号生成器と、
前記プライマリビデオストリームのフレーム、前記第１のビデオストリームのフレーム、または前記第２のビデオストリームのフレームのうちの少なくとも１つにおいて、前記第２のオブジェクトが前記第１のオブジェクトと重複すると決定するように構成されるオブジェクトトラッカーと、
をさらに備え、
前記表示信号生成器は、前記第１のウィンドウ内に前記第１のビデオストリームを表示した後に、前記第２のオブジェクトが前記第１のオブジェクトと重複すると決定したことに応答して、前記第１のウィンドウ内に前記第２のビデオストリーム、および前記第２のウィンドウ内に前記第１のビデオストリームを表示するように構成される、
請求項２５に記載の装置。
前記ビデオストリーム生成器は、前記プライマリビデオストリームから、ビューの前記プライマリフィールドよりも狭いビューの二次的フィールドを有する表示ビデオストリームを生成するように構成され、
前記装置は、
第１のウィンドウ内に前記第１のビデオストリーム、第２のウィンドウ内に前記第２のビデオストリーム、および第３のウィンドウ内に前記表示ビデオストリームを、画面に表示するように構成される表示信号生成器と、
前記表示ビデオストリームのフレームにおいて、前記第１のオブジェクトまたは前記第２のオブジェクトのうちの少なくとも１つが前記フレームの端部に近いことを検出するように構成されるオブジェクトトラッカーと
をさらに備え、
前記ビデオストリーム生成器は、前記オブジェクトトラッカーが前記第１のオブジェクトまたは前記第２のオブジェクトが前記端部に近いことを検出したことに応答して、ビューの三次的フィールドを有するように前記表示ビデオストリームを変更するように構成され、ビューの前記三次的フィールドはビューの前記二次的フィールドよりも広角を有する、請求項２５に記載の装置。