JP2010022061A - 撮影画像表示システム、画像受信装置、その制御方法及びサーバ - Google Patents
撮影画像表示システム、画像受信装置、その制御方法及びサーバ Download PDFInfo
- Publication number
- JP2010022061A JP2010022061A JP2009245469A JP2009245469A JP2010022061A JP 2010022061 A JP2010022061 A JP 2010022061A JP 2009245469 A JP2009245469 A JP 2009245469A JP 2009245469 A JP2009245469 A JP 2009245469A JP 2010022061 A JP2010022061 A JP 2010022061A
- Authority
- JP
- Japan
- Prior art keywords
- image
- blur
- amount
- shake
- received
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Landscapes
- Studio Devices (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
【解決手段】通信先の送信側装置から撮影データD2とぶれデータB2とを受信し(ステップS2、S3)、当該受信側装置のぶれデータB1を取得し(ステップS4)、ぶれデータB2とぶれデータB1との差を示す差分データBDを取得し(ステップS5)、この差分データBDに基づき撮影データD2にぶれ補正処理を行うようにした(ステップS6)。
【選択図】図4
Description
また、従来の画像ぶれ防止技術として、プロジェクタ装置がスクリーンに映像を投射している場合に、プロジェクタ装置、スクリーン又は鑑賞者のぶれを各々検出し、少なくともいずれかの位置を物理的に移動してぶれを補正する技術が知られている(例えば、特許文献2参照)。
本発明は、上述した事情に鑑みてなされたものであり、構成の複雑化を回避しつつ、鑑賞側でぶれを低減した画像を表示することができる撮影画像表示システム、画像受信装置、その制御方法及びサーバを提供することにある。
この発明によれば、画像受信装置が受信したぶれ量に基づいて受信した撮影画像にぶれ補正処理を実行して補正した撮影画像を表示するので、送信側の処理負担を軽減しつつ、鑑賞側でぶれを低減した画像を表示することができる。また、物理的に移動する機構が必要な従来の画像ぶれ防止装置に比して、構成の複雑化を回避することができる。
この発明によれば、撮影装置がぶれを補正した撮影画像を送信し、画像受信装置が自装置のぶれ量に基づいて受信した撮影画像にぶれ補正処理を行って表示するので、撮影装置と画像受信装置のいずれにぶれが生じている状況でも、鑑賞側でぶれを低減した画像を表示することができ、また、物理的に移動する機構が必要な従来の画像ぶれ防止装置に比して、構成の複雑化を回避することができる。
この発明によれば、サーバが、撮影装置から送信されたぶれ量に基づいて受信した撮影画像にぶれ補正処理を行い、補正後の撮影画像を画像受信装置に送信するので、撮影装置及び画像受信装置の処理負担を軽減しつつ、鑑賞側でぶれを低減した画像を表示することができる。また、物理的に移動する機構が必要な従来の画像ぶれ防止装置に比して、構成の複雑化を回避することができる。
この発明によれば、通信相手から受信したぶれ量に基づいて受信した撮影画像にぶれ補正処理を実行して補正した撮影画像を表示するので、通信相手の処理負担を軽減しつつ、鑑賞側でぶれを低減した画像を表示することができる。また、物理的に移動する機構が必要な従来の画像ぶれ防止装置に比して、構成の複雑化を回避することができる。
この発明によれば、受信したぶれ量に基づいて受信した撮影画像にぶれ補正処理を実行して補正した撮影画像を表示するので、通信相手の処理負担を軽減しつつ、鑑賞側でぶれを低減した画像を表示することができる。また、物理的に移動する機構が必要な従来の画像ぶれ防止装置に比して、構成の複雑化を回避することができる。
上記構成において、当該装置のぶれ量を検出し、受信したぶれ量と前記検出したぶれ量との差を求め、この差に基づいて受信した撮影画像にぶれ補正処理を行うことが好ましい。この構成によれば、受信したぶれ量と、自装置のぶれ量との差に基づいて受信した撮影画像にぶれ補正処理を行うので、通信相手と画像受信装置のいずれにぶれが生じている状況でも、鑑賞側でぶれを低減した画像を表示することができる。
この発明によれば、サーバが、撮影装置から送信されたぶれ量に基づいて受信した撮影画像にぶれ補正処理を行い、補正後の撮影画像を前記画像受信装置に送信するので、撮影装置及び画像受信装置の処理負担を軽減しつつ、鑑賞側でぶれを低減した画像を表示することができる。また、物理的に移動する機構が必要な従来の画像ぶれ防止装置に比して、構成の複雑化を回避することができる。
図1は本発明の撮影画像表示システムの構成を示す図である。
この撮影画像表示システム1は、移動通信ネットワークNWを介して携帯電話機2間で電話やテレビ電話を可能にするシステムであり、携帯電話機2の構成を主に示している。なお、この携帯電話機2は、従来の携帯電話機と同様に、移動通信ネットワークNWを経由して固定電話用通信ネットワーク(不図示)に接続される一般電話との間で電話も可能である。
上記各携帯電話機2は、略同一に構成され、以下、説明の便宜上、テレビ電話を1対1で行っている場合の一方の携帯電話機2を送信側装置(撮影装置に相当する)2Aと表記し、他方の携帯電話機を受信側装置(画像受信装置に相当する)2Bと表記し、これらを特に区別する必要がない場合は、携帯電話機2と表記する。
操作部10は、携帯電話機2が備える複数の操作子の操作を制御部60に通知するものである。通話部20は、他の携帯電話機2や一般電話との間で音声通話を行うための通話手段として機能するものであり、音声入力部21と、音声出力部22とを備えている。音声入力部21は、当該携帯電話機2のユーザの音声を収音するマイクを備え、このマイクを介して入力した音声を制御部60に出力する。また、音声出力部22は、当該携帯電話機2のユーザに向けて音声を放音するスピーカを備え、このスピーカを介して着信音等の合成音声や電話相手から送信された音声を放音する。
角速度検出部40は、当該携帯電話機2のぶれ量を検出するぶれ量検出手段として機能するものである。この角速度検出部40は、図2に示すように、撮影対象のフレームFLの上下方向(以下、X軸と定義する)の角速度を検出するX軸ジャイロセンサ41と、左右方向(以下、Y軸と定義する)の角速度を検出するY軸ジャイロセンサ42とを有している。この角速度検出部40は、2つのジャイロセンサ41、42によりX軸及びY軸の各角速度に応じた電圧値の角速度検出信号SVを制御部60に出力する。
このような構成の下、撮影カメラ52から出力された撮影データD1は、カメラコントロール回路51にて所定の処理がなされた後、撮影部RAM53に一時的に格納され、撮影画像を保存する場合にはリムーバブルメディア70に格納される。また、撮影部RAM53に格納された撮影データは表示パネル54に表示する際に用いられると共に、テレビ電話の際には、この撮影データが通信部20を介して通信先の携帯電話機2(2B)に無線送信される。また、リムーバブルメディア70に格納された撮影データは、撮影画像を表示(再生)する際に用いられる。
カメラコントロール回路51は、ぶれデータ演算部80と、撮影画像処理部81と、補正画像作成部82と、補正画像出力部83とを備えている。
ぶれデータ演算部80は、角速度検出部40から出力される角速度検出信号SVに演算処理を行い、撮影データD1のサンプリング周期でぶれ量に相当するぶれデータB1を取得し、補正画像作成部82又は制御部60に選択的に出力する。すなわち、ぶれデータ演算部80は、撮影データD1の1フレーム毎にぶれデータB1を取得する。
なお、このぶれデータB1は角速度の情報でもよいが、撮影カメラ52の焦点距離や被写体までの距離から計算したフレーム上のずれ量(例えばドット数)の情報を適用してもよい。また、角速度の情報をぶれデータB1として送信する場合は、このぶれデータB1に、撮影カメラ52の焦点距離や被写体までの距離といった撮影状況を示す基礎データを含めることが好ましい。
また、補正画像出力部83は、ぶれ補正処理が行われた場合は補正後の撮影データを、ぶれ補正処理が行われなかった場合は補正されなかった撮影データを、表示パネル54等に出力する。
これらの動作は、テレビ電話中の両方の携帯電話機2が行うものであるが、以下、説明を判りやすくするため、送信側装置2Aから撮影データB2とぶれデータB2とが移動通信ネットワークNWを介して受信側装置2Bに送信され、受信側装置2Bが、その撮影データB2とぶれデータB2とを受信する場合について詳細に説明する。
受信側装置2Bにおいて、まず、制御部60は、テレビ電話の開始時にぶれ補正レベルを設定する(ステップS1)。このぶれ補正レベルは、ユーザが設定するレベルであり、制御部60はこのぶれ補正レベルに応じてカメラコントロール回路51で行うぶれ補正処理の内容を変更する。
詳述すると、本実施形態では、ぶれ補正レベルを「低」、「中」、「高」の三段階に区分けし、「高」に設定された場合には、撮影データ中の複数フレームの画像を参照し、フレームや被写体の動きを分析し、この動きをなくすように画像シフト等の画像補正を行って手ぶれを補正するぶれ補正処理を適用し、「中」に設定された場合には、表示のフレームレートを落とす、又は、解像度を下げる等の簡略的なぶれ補正処理を適用し、「低」に設定された場合には、ぶれ補正しないこととしている。すなわち、ぶれ補正レベルが下がるほど、ぶれ補正による処理負担が軽減される。
続いて、制御部60は、送信側装置2Aから撮影データD2とぶれデータB2とを受信すると、ぶれデータB2からぶれデータB1を引いた差分を求めることにより、送信側装置2Aと受信側装置2Bとの相対ぶれ量を示す差分データBDを取得する(ステップS5)。この場合、送信側装置2AのぶれデータB2が、角速度の情報と基礎データ(撮影時の焦点距離や被写体までの距離)とを含むデータの場合には、これら情報からフレーム上のずれ量を算出し、このずれ量と、受信側装置2BのぶれデータB1から算出したフレーム上のずれ量との差分を差分データBDとすることが好ましい。
この場合、上述したように、ぶれ補正レベルによってぶれ補正処理の内容が変更されるため、ぶれ補正レベルが「高」の場合には、送信側装置2Aと受信側装置2Bとの相対ぶれ量を正確になくすことが可能なぶれ補正処理が実行され、相対ぶれ量をなくした撮影画像を取得することができる。
一方、ぶれ補正レベルが「中」の場合には、送信側装置2Aと受信側装置2Bとの相対ぶれ量に応じて、このぶれが目立たない程度にフレームレートを落とす、又は、解像度を下げる等の簡略的なぶれ補正処理が実行され、処理負担を軽減しつつぶれが目立たない撮影画像を取得することができる。
また、ぶれ補正レベルが「低」の場合には、ぶれ補正処理が行われず、このため、送信側装置2A及び受信側装置2Bの両方に殆どぶれがない場合、或いは、ユーザがぶれを気にしない場合に、ぶれ補正処理を行って無用な処理負担をかけてしまう場合を回避することができる。
また、本構成では、撮影画像のぶれ補正を画像処理によって行うので、従来のプロジェクタ装置やスクリーン等のぶれ量を検出する機構や、プロジェクタ装置やスクリーン等を物理的に移動する機構が必要な従来の画像ぶれ防止装置に比して、部品点数が少なくて済み、構成の複雑化を回避することができる。
このため、携帯電話機の小型化及び薄型化を容易に図ることができ、また、小型のジャイロセンサ41、42を使用すれば、より一層の小型化及び薄型化が可能となる。
また、ぶれ補正に要する処理負担が大きいと、補正後の撮影画像のフレームレートが下がってしまい、いわゆるコマ落ちが生じてしまうおそれがあるが、本構成では、ユーザがぶれ補正レベルを低く設定することにより、ぶれ補正の処理負担を下げ、コマ落ちのない動画、或いは、コマ落ちを低減した動画を表示することが可能になる。
なお、このぶれ補正レベルは、ユーザが設定した過去の履歴、若しくは、送信側装置2A及び受信側装置2Bの相対ぶれ量(差分データBD)等に基づいて自動的に設定するようにしてもよい。この場合、例えば、送信側装置2Aから送信された基礎データを参照し、送信側装置2Aの撮影カメラ52が広角で被写体までの距離が遠い場合には、相対ぶれ量が比較的大きい場合でも撮影画像中のぶれが殆ど判らないため、ぶれ補正レベルを「低」に設定してぶれ補正をしないようにしてもよい。
上述の実施の形態では、受信側装置2Bが、自装置2Bのぶれ量を検出し、送信側装置2Aのぶれ量と自装置2Bのぶれ量との差に基づいて通信先からの撮影画像にぶれ補正を行う場合について説明したが、これに限らず、受信側装置2B側のぶれ量の検出処理を省略し、受信側装置2Bが、送信側装置2Aのぶれ量だけに基づいて通信先からの撮影画像にぶれ補正を行うようにしてもよい。この場合、受信側の処理負担を軽減することが可能になる。
これによって、サーバ90がぶれ補正処理を行う分だけ、携帯電話機2側の処理負担を軽減することができ、また、サーバ90の高い処理能力でぶれ補正処理を行うので、コマ落ちのないぶれ補正画像を得ることが可能になる。
また、上述の各実施形態では、1対1でテレビ電話を行う携帯電話機に本発明を適用する場合について述べたが、同時に複数の携帯電話機とテレビ電話を行うことができる携帯電話機に適用することも可能である。この場合、複数の通信相手からの撮影画像毎に上記ぶれ補正処理を各々実行し、補正後の各撮影画像を、表示パネル24の表示画面を通信相手の数だけ画面分割し、各分割画面に各々表示すればよい。さらに、この場合に、複数の通信相手毎にぶれ補正レベルを設定可能に構成すれば、ユーザが適宜ぶれ補正レベルを低く設定することにより、処理負担を軽減することができる。
Claims (12)
- 撮影画像と撮影時のぶれ量とを送信する撮影装置と、
前記撮影装置から送信された撮影画像とぶれ量とを受信する画像受信装置とを備え、
前記画像受信装置は、
受信したぶれ量に基づいて受信した撮影画像にぶれ補正処理を行うぶれ補正手段と、
前記ぶれ補正手段が補正した撮影画像を表示する表示手段と
を備えることを特徴とする撮影画像表示システム。 - 前記画像受信装置は、
当該装置のぶれ量を検出するぶれ量検出手段を備え、
前記ぶれ補正手段は、受信したぶれ量と、前記ぶれ量検出手段により検出したぶれ量との差を求め、この差に基づいて受信した撮影画像にぶれ補正処理を行うことを特徴とする請求項1に記載の撮影画像表示システム。 - 撮影画像のぶれを補正し、補正後の撮影画像を送信する撮影装置と、
前記撮影装置から送信された撮影画像を受信する画像受信装置とを備え、
前記画像受信装置は、
当該装置のぶれ量を検出するぶれ量検出手段と、
前記ぶれ量検出手段により検出したぶれ量に基づいて撮影画像にぶれ補正処理を行うぶれ補正手段と、
前記ぶれ補正手段が補正した撮影画像を表示する表示手段と
を備えることを特徴とする撮影画像表示システム。 - 撮影画像と撮影時のぶれ量とを通信ネットワークを介して送信する撮影装置と、
前記通信ネットワークを介して撮影画像を受信して表示する画像受信装置と、
前記通信ネットワークに設けられるサーバとを備え、
前記サーバは、前記撮影装置から送信されたぶれ量に基づいて受信した撮影画像にぶれ補正処理を行い、補正後の撮影画像を前記画像受信装置に送信することを特徴とする撮影画像表示システム。 - 前記画像受信装置は、
当該装置のぶれ量を検出するぶれ量検出手段と、
前記ぶれ量検出手段により検出したぶれ量に基づいて受信した撮影画像にぶれ補正処理を行うぶれ補正手段とを備え、
前記ぶれ補正手段が補正した撮影画像を表示することを特徴とする請求項4に記載の撮影画像表示システム。 - 通信相手から撮影画像と撮影時のぶれ量とを受信する受信手段と、
受信したぶれ量に基づいて受信した撮影画像にぶれ補正処理を行うぶれ補正手段と、
前記ぶれ補正手段が補正した撮影画像を表示する表示手段と
を備えることを特徴とする画像受信装置。 - 当該装置のぶれ量を検出するぶれ量検出手段を備え、
前記ぶれ補正手段は、受信したぶれ量と、前記ぶれ量検出手段により検出したぶれ量との差を求め、この差に基づいて受信した撮影画像にぶれ補正処理を行うことを特徴とする請求項6に記載の画像受信装置。 - 前記ぶれ量検出手段は、ジャイロセンサ又は加速度センサであることを特徴とする請求項6又は7に記載の画像受信装置。
- 前記画像受信装置は、撮影する撮影手段と、撮影画像を前記通信相手に送信する送信手段と、前記通信相手との間で音声通話を行うための通話手段とを備える携帯型テレビ電話装置として構成されていることを特徴とする請求項6乃至8のいずれかに記載の画像受信装置。
- 通信相手から撮影画像と撮影時のぶれ量とを受信して表示する画像受信装置の制御方法において、
受信したぶれ量に基づいて受信した撮影画像にぶれ補正処理を行い、補正後の撮影画像を表示することを特徴とする画像受信装置の制御方法。 - 当該装置のぶれ量を検出し、受信したぶれ量と前記検出したぶれ量との差を求め、この差に基づいて受信した撮影画像にぶれ補正処理を行うことを特徴とする請求項10に記載の画像受信装置の制御方法。
- 通信ネットワークに設けられ、撮影装置から送信された撮影画像を受信して画像受信装置に送信するサーバにおいて、
前記サーバは、前記撮影装置から送信された撮影画像と撮影時のぶれ量とを受信し、前記ぶれ量に基づいて前記撮影画像にぶれ補正処理を行い、補正後の撮影画像を前記画像受信装置に送信することを特徴とするサーバ。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009245469A JP2010022061A (ja) | 2009-10-26 | 2009-10-26 | 撮影画像表示システム、画像受信装置、その制御方法及びサーバ |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009245469A JP2010022061A (ja) | 2009-10-26 | 2009-10-26 | 撮影画像表示システム、画像受信装置、その制御方法及びサーバ |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006068557A Division JP4479679B2 (ja) | 2006-03-14 | 2006-03-14 | 撮影画像表示システム、画像受信装置及びその制御方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2010022061A true JP2010022061A (ja) | 2010-01-28 |
Family
ID=41706420
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009245469A Withdrawn JP2010022061A (ja) | 2009-10-26 | 2009-10-26 | 撮影画像表示システム、画像受信装置、その制御方法及びサーバ |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2010022061A (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018221874A1 (ko) * | 2017-05-31 | 2018-12-06 | 주식회사 동운아나텍 | 카메라 모듈에서의 데이터 전송방법 |
-
2009
- 2009-10-26 JP JP2009245469A patent/JP2010022061A/ja not_active Withdrawn
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018221874A1 (ko) * | 2017-05-31 | 2018-12-06 | 주식회사 동운아나텍 | 카메라 모듈에서의 데이터 전송방법 |
KR20180131224A (ko) * | 2017-05-31 | 2018-12-10 | 주식회사 동운아나텍 | 카메라 모듈에서의 데이터 전송방법 |
KR101973095B1 (ko) | 2017-05-31 | 2019-04-26 | 주식회사 동운아나텍 | 카메라 모듈에서의 데이터 전송방법 |
US11330181B2 (en) | 2017-05-31 | 2022-05-10 | Dongwoon Anatech Co., Ltd. | Method for transmitting data in camera module |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4479679B2 (ja) | 撮影画像表示システム、画像受信装置及びその制御方法 | |
JP4872797B2 (ja) | 撮像装置、撮像方法および撮像プログラム | |
CN108353131B (zh) | 获取图像的方法和终端设备 | |
CN107040723B (zh) | 一种基于双摄像头的成像方法、移动终端及存储介质 | |
JPWO2013190946A1 (ja) | 撮像装置およびその動作制御方法 | |
WO2014080718A1 (ja) | 撮像装置及び合焦制御方法 | |
JPWO2016139846A1 (ja) | 撮像装置、フリッカ検出方法、及びフリッカ検出プログラム | |
CN110620871B (zh) | 视频拍摄方法及电子设备 | |
JPWO2014098143A1 (ja) | 画像処理装置、撮像装置、画像処理方法、画像処理プログラム | |
US11134198B2 (en) | Imaging apparatus | |
JP2005303913A (ja) | 携帯端末装置 | |
JP7131541B2 (ja) | 画像処理装置、画像処理方法および画像処理プログラム | |
JP2010022061A (ja) | 撮影画像表示システム、画像受信装置、その制御方法及びサーバ | |
JP5182395B2 (ja) | 撮像装置、撮像方法および撮像プログラム | |
JP2016029750A (ja) | 撮像装置、信号処理方法、信号処理プログラム | |
US11412173B2 (en) | Image processing device and image processing method | |
JP2007233135A (ja) | 撮影装置及びその操作子設定方法 | |
JP2009218911A (ja) | 手ぶれ補正機能を有するカメラ付き携帯端末 | |
JP2013190791A (ja) | 携帯端末機のイメージ撮影装置及び方法 | |
JP6237201B2 (ja) | 撮像装置、撮像システム、撮像方法及びプログラム | |
US20230328375A1 (en) | Imaging apparatus, focus control method, and focus control program | |
JP2010272995A (ja) | 携帯端末および携帯端末の動作方法 | |
JP3845407B2 (ja) | 携帯端末および撮像記録方法 | |
US10158824B2 (en) | Imaging apparatus, electronic device and imaging system | |
CN118283411A (zh) | 一种图像采集方法、装置及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20091117 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20091117 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20091124 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20091124 |
|
A761 | Written withdrawal of application |
Free format text: JAPANESE INTERMEDIATE CODE: A761 Effective date: 20111128 |