JP2022142980A5 - - Google Patents

Description

上記課題を解決する本発明の一側面としての電子機器は、振れに関する第１の情報を取得する取得部と、前記第１の情報を機械学習モデルに入力することで第２の情報を出力する演算部と、前記第２の情報を用いて振れ補正の制御を行う第１の振れ補正制御部とを有し、前記第１の振れ補正制御部は、静止画の撮影指示が行われる前の前記第１の情報に基づいて前記演算部から出力された前記第２の情報を用いて、前記静止画の撮影指示が行われてからの振れ補正の制御を行い、前記第２の情報は、歩行状態、三脚状態、パンニング状態、およびホールド状態のうち少なくとも二つを含む複数の振れの種別から選ばれた振れの種別に関する情報であり、前記第１の振れ補正制御部は、前記少なくとも二つの振れの種別に応じて互いに異なる前記制御を行うことを特徴とする。

本発明の他の側面としての電子機器は、他の機器と通信可能な電子機器であって、前記他の機器および前記電子機器の少なくとも一方に生じる振れに関する第１の情報を取得する取得部と、前記第１の情報を機械学習モデルに入力することで第２の情報を出力する演算部と、静止画の撮影指示が行われる前の前記第１の情報に対応する前記第２の情報を前記他の機器に送信する通信部とを有し、前記他の機器は、前記通信部により送信された前記第２の情報を用いて、前記静止画の撮影指示が行われてからの振れ補正の制御を行い、前記第２の情報は、歩行状態、三脚状態、パンニング状態、およびホールド状態のうち少なくとも二つを含む複数の振れの種別から選ばれた振れの種別に関する情報であり、前記他の機器は、前記少なくとも二つの振れの種別に応じて互いに異なる前記制御を行うことを特徴とする。

本発明の他の側面としての制御方法は、振れに関する第１の情報を取得する第１のステップと、前記第１の情報を機械学習モデルに入力することで第２の情報を出力する第２のステップと、前記第２の情報を用いて振れ補正の制御を行う第３のステップとを有し、前記第３のステップでは、静止画の撮影指示が行われる前の前記第１の情報に基づいて前記第２のステップで出力された前記第２の情報を用いて、前記静止画の撮影指示が行われた後の振れ補正の制御を行い、前記第２の情報は、歩行状態、三脚状態、パンニング状態、およびホールド状態のうち少なくとも二つを含む複数の振れの種別から選ばれた振れの種別に関する情報であり、前記第３のステップでは、前記少なくとも二つの振れの種別に応じて互いに異なる前記制御を行うことを特徴とすることを特徴とする。

Claims (20)

1. 振れに関する第１の情報を取得する取得部と、
   前記第１の情報を機械学習モデルに入力することで第２の情報を出力する演算部と、
   前記第２の情報を用いて振れ補正の制御を行う第１の振れ補正制御部とを有し、
   前記第１の振れ補正制御部は、静止画の撮影指示が行われる前の前記第１の情報に基づいて前記演算部から出力された前記第２の情報を用いて、前記静止画の撮影指示が行われてからの振れ補正の制御を行い、
   前記第２の情報は、歩行状態、三脚状態、パンニング状態、およびホールド状態のうち少なくとも二つを含む複数の振れの種別から選ばれた振れの種別に関する情報であり、
   前記第１の振れ補正制御部は、前記少なくとも二つの振れの種別に応じて互いに異なる前記制御を行うことを特徴とする電子機器。
2. 前記撮影指示に応じて、前記演算部は前記機械学習モデルを用いた処理を停止することを特徴とする請求項１に記載の電子機器。
3. 前記第１の情報は、０．１秒以上５．０秒以下の長さの時系列データであることを特徴とする請求項１または２に記載の電子機器。
4. 前記第１の情報は、０．１秒以上０．４秒以下の長さの時系列データであることを特徴とする請求項１乃至３のいずれか一項に記載の電子機器。
5. 前記演算部は、第１の長さの時系列データである前記第１の情報に基づく前記第２の情報と、前記第１の長さよりも長い第２の長さの時系列データである前記第１の情報に基づく前記第２の情報を出力することを特徴とする請求項１乃至４のいずれか一項に記載の電子機器。
6. 前記第１の振れ補正制御部は、前記第１の長さの前記第１の情報に基づく前記第２の情報と、前記第２の長さの前記第１の情報に基づく前記第２の情報との少なくとも一方を用いて前記制御を行うことを特徴とする請求項５に記載の電子機器。
7. 前記第１の振れ補正制御部は、前記演算部から前記第２の長さの前記第１の情報に基づく前記第２の情報が出力される前は、前記第１の長さの前記第１の情報に基づく前記第２の情報を用いて前記制御を行うことを特徴とする請求項６に記載の電子機器。
8. 角速度信号を出力する角速度センサと、加速度信号を出力する加速度センサとの少なくとも一方を有し、
   前記第１の情報は、前記角速度信号と前記加速度信号の少なくとも一方に関する振れ検出信号に基づくデータであることを特徴とする請求項１乃至７のいずれか一項に記載の電子機器。
9. 前記第１の情報は、標準化処理、欠損値の除去、外れ値の除去、単位変換の少なくとも一つの処理が行われた前記振れ検出信号に基づくデータであることを特徴とする請求項８に記載の電子機器。
10. 前記第１の情報は、前記振れ検出信号の平均値、最大値、最小値、二乗和、分散、標準偏差、尖度、歪度の少なくとも一つを含むことを特徴とする請求項８または９に記載の電子機器。
11. 前記第１の振れ補正制御部は、前記振れ検出信号と前記第２の情報に基づく振れ補正信号を用いて前記制御を行うことを特徴とする請求項８乃至１０のいずれか一項に記載の電子機器。
12. 撮像素子を更に有し、
    前記第１の振れ補正制御部は、前記撮像素子を駆動することで前記制御を行うことを特徴とする請求項１乃至１１のいずれか一項に記載の電子機器。
13. レンズを更に有し、
    前記第１の振れ補正制御部は、前記レンズを駆動することで前記制御を行うことを特徴とする請求項１乃至１１のいずれか一項に記載の電子機器。
14. 前記制御を行うための第２の振れ補正制御部を含む他の機器と通信可能であり、
    前記第１の振れ補正制御部は、前記第１の振れ補正制御部による振れ補正と、前記第２の振れ補正制御部による振れ補正との補正比率を取得し、前記補正比率と前記第２の情報を用いて前記制御を行うことを特徴とする請求項１乃至１３のいずれか一項に記載の電子機器。
15. 前記補正比率は前記他の機器で算出された情報であることを特徴とする請求項１４に記載の電子機器。
16. 前記第１の振れ補正制御部は、前記第２の情報と、他の機器から取得した振れの種別に関する第３の情報とに基づいて前記制御を行うことを特徴とする請求項１乃至１３のいずれか一項に記載の電子機器。
17. 前記第１の振れ補正制御部は、前記第２の情報と前記第３の情報が一致している場合に、前記第２の情報を用いて前記制御を行うことを特徴とする請求項１６に記載の電子機器。
18. 他の機器と通信可能な電子機器であって、
    前記他の機器および前記電子機器の少なくとも一方に生じる振れに関する第１の情報を取得する取得部と、
    前記第１の情報を機械学習モデルに入力することで第２の情報を出力する演算部と、
    静止画の撮影指示が行われる前の前記第１の情報に対応する前記第２の情報を前記他の機器に送信する通信部とを有し、
    前記他の機器は、前記通信部により送信された前記第２の情報を用いて、前記静止画の撮影指示が行われてからの振れ補正の制御を行い、
    前記第２の情報は、歩行状態、三脚状態、パンニング状態、およびホールド状態のうち少なくとも二つを含む複数の振れの種別から選ばれた振れの種別に関する情報であり、
    前記他の機器は、前記少なくとも二つの振れの種別に応じて互いに異なる前記制御を行うことを特徴とする電子機器。
19. 振れに関する第１の情報を取得する第１のステップと、
    前記第１の情報を機械学習モデルに入力することで第２の情報を出力する第２のステップと、
    前記第２の情報を用いて振れ補正の制御を行う第３のステップとを有し、
    前記第３のステップでは、静止画の撮影指示が行われる前の前記第１の情報に基づいて前記第２のステップで出力された前記第２の情報を用いて、前記静止画の撮影指示が行われた後の振れ補正の制御を行い、
    前記第２の情報は、歩行状態、三脚状態、パンニング状態、およびホールド状態のうち少なくとも二つを含む複数の振れの種別から選ばれた振れの種別に関する情報であり、
    前記第３のステップでは、前記少なくとも二つの振れの種別に応じて互いに異なる前記制御を行うことを特徴とする制御方法。
20. 請求項１９に記載の制御方法をコンピュータに実行させることを特徴とするプログラム。