JP6333990B2 - パノラマ写真の生成方法および装置 - Google Patents

パノラマ写真の生成方法および装置 Download PDF

Info

Publication number
JP6333990B2
JP6333990B2 JP2016550715A JP2016550715A JP6333990B2 JP 6333990 B2 JP6333990 B2 JP 6333990B2 JP 2016550715 A JP2016550715 A JP 2016550715A JP 2016550715 A JP2016550715 A JP 2016550715A JP 6333990 B2 JP6333990 B2 JP 6333990B2
Authority
JP
Japan
Prior art keywords
state information
video
operation state
horizontal motion
predetermined threshold
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016550715A
Other languages
English (en)
Other versions
JP2017531928A (ja
Inventor
涛 陳
涛 陳
明勇 唐
明勇 唐
華一君 劉
華一君 劉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xiaomi Inc
Original Assignee
Xiaomi Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xiaomi Inc filed Critical Xiaomi Inc
Publication of JP2017531928A publication Critical patent/JP2017531928A/ja
Application granted granted Critical
Publication of JP6333990B2 publication Critical patent/JP6333990B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C19/00Gyroscopes; Turn-sensitive devices using vibrating masses; Turn-sensitive devices without moving masses; Measuring angular rate using gyroscopic effects
    • G01C19/02Rotary gyroscopes
    • G01C19/34Rotary gyroscopes for indicating a direction in the horizontal plane, e.g. directional gyroscopes
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • G03B37/04Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe with cameras or projectors providing touching or overlapping fields of view
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/64Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681Motion detection
    • H04N23/6812Motion detection based on additional sensors, e.g. acceleration sensors

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Studio Devices (AREA)
  • Television Signal Processing For Recording (AREA)
  • Stereoscopic And Panoramic Photography (AREA)
  • Adjustment Of Camera Lenses (AREA)
  • Image Processing (AREA)

Description

本発明は、撮影技術分野に関し、特にパノラマ写真の生成方法および装置に関する。
本願は、出願番号201510518423.7、出願日2015年8月21日の中国特許出願に基づいて提出され、この中国特許出願の優先権を主張し、その全ての内容がここに参照として本明細書に組み込まれる。
科学技術の発展に伴い、カメラのパノラマ撮影がユーザによって広く使用され、カメラで撮影する過程に、レンズを自由に移動して、より多くの被写体をレンズに入り込ませ、レンズが経過したすべての被写体を一枚の写真に集合させることにより、同一の写真がより多くの画像内容をカバーさせることが可能となる。カメラがパノラマ撮影を行う時にビデオを録画することができなく、ビデオを録画する時にパノラマ撮影を行うことができないので、ビデオ撮影とパノラマ撮影を両立できなく、これによりユーザがよいパノラマ素材またはビデオ素材を見逃す。
関連技術の問題点を克服するために、本開示の実施形態は、関連技術の前記欠点を解決するためのパノラマ写真の生成方法及び装置を提供する。
本開示の実施形態の第一の態様によるパノラマ写真の生成方法は、
ビデオファイル撮影中の撮影装置の動作状態情報を確定することと、
前記動作状態情報が予め設定された条件に合致するかどうかを判定し、前記動作状態情報が予め設定された条件に合致する場合、前記動作状態情報に対応するビデオクリップを抽出することと、
前記ビデオクリップをパノラマ写真に生成することとを含む。
一つの実施形態において、前記動作状態情報が水平運動速度と水平運動角度を含むことができ、前記ビデオファイル撮影中の撮影装置の動作状態情報を確定することは、
ジャイロスコープでビデオ撮影中の撮影装置の前記水平運動速度を確定し、
前記ジャイロスコープでビデオ撮影中の前記撮影装置の前記水平運動角度を確定することを含むことができる。
一つの実施形態において、前記動作状態情報が予め設定された条件に合致するかどうかを判定することは、
前記水平運動速度が第一の所定閾値より小さいかどうかを確定し、
前記水平運動角度が第二の所定閾値より大きいかどうかを確定し、
前記水平運動速度が前記第一の所定閾値より小さく且つ前記水平運動角度が前記第二の所定閾値より大きい場合、前記動作状態情報が予め設定された条件に合致することを確定することを含むことができる。
一つの実施形態において、前記方法は、
前記水平運動速度が前記第一の所定閾値より大きく、および/または前記水平運動角度が前記第二の所定閾値より小さい場合、前記ビデオファイルに前記パノラマ写真の生成のためのビデオクリップを確定できないことを提示することをさらに含むことができる。
一つの実施形態において、前記動作状態情報に対応するビデオクリップを抽出することは、
水平運動の開始時点および前記水平運動の終止時点を確定し、
前記開始時点と前記終止時点に基づいて前記ビデオクリップを確定することを含むことができる。
一つの実施形態において、前記動作状態情報が水平運動速度と水平運動角度を含むことができ、前記ビデオファイル撮影中の撮影装置の動作状態情報を確定することは、
ビデオファイルに対応する設定ファイルからビデオ撮影中の撮影装置の水平運動速度とビデオ撮影中の水平運動角度を確定することを含むことができる。
本開示の実施形態の第二の態様によるパノラマ写真の生成装置は、
ビデオファイル撮影中の撮影装置の動作状態情報を確定するように構成される確定モジュールと、
前記確定モジュールにより確定された前記動作状態情報が予め設定された条件に合致するかどうかを判定し、前記動作状態情報が前記予め設定された条件に合致する場合、前記動作状態情報に対応するビデオクリップを抽出するように構成されるビデオ抽出モジュールと、
前記ビデオ抽出モジュールにより抽出された前記ビデオクリップをパノラマ写真に生成するように構成されるパノラマ写真生成モジュールとを含む。
一つの実施形態において、前記動作状態情報が水平運動速度と水平運動角度を含み、前記確定モジュールは、
ジャイロスコープでビデオ撮影中の撮影装置の前記水平運動速度を確定するように構成される第一の確定サブモジュールと、
前記ジャイロスコープでビデオ撮影中の前記撮影装置の前記水平運動角度を確定するように構成される第二の確定サブモジュールとを含むことができる。
一つの実施形態において、前記ビデオ抽出モジュールは、
前記第一の確定サブモジュールにより確定された前記水平運動速度が第一の所定閾値より小さいかどうかを確定するように構成される第三の確定サブモジュールと、
前記第二の確定サブモジュールにより確定された前記水平運動角度が第二の所定閾値より大きいかどうかを確定するように構成される第四の確定サブモジュールと、
前記第三の確定サブモジュールにより確定された前記水平運動速度が前記第一の所定閾値より小さく且つ前記第四の確定サブモジュールにより確定された前記水平運動角度が前記第二の所定閾値より大きいい場合、前記動作状態情報が予め設定された条件に合致することを確定するように構成される第五の確定サブモジュールとを含むことができる。
一つの実施形態において、前記装置は、
前記第一の確定サブモジュールにより確定された前記水平運動速度が前記第一の所定閾値より大きく、および/または前記第二の確定サブモジュールにより確定された前記水平運動角度が前記第二の所定閾値より小さい場合、前記ビデオファイルに前記パノラマ写真の生成のためのビデオクリップを確定できないことを提示するように構成される提示モジュールをさらに含むことができる。
一つの実施形態において、前記ビデオ抽出モジュールは、
前記水平運動の開始時点および前記水平運動の終止時点を確定するように構成される第六の確定サブモジュールと、
前記第六の確定サブモジュールにより確定された前記開始時点と前記終止時点に基づいて前記ビデオクリップを確定するように構成される第七の確定サブモジュールとを含むことができる。
一つの実施形態において、前記動作状態情報が水平運動速度と水平運動角度を含むことができ、前記確定モジュールは、
ビデオファイルに対応する設定ファイルからビデオ撮影中の撮影装置の水平運動速度とビデオ撮影中の水平運動角度を確定するように構成される第八の確定サブモジュールを含むことができる。
本開示の実施形態の第三の態様によるパノラマ写真の生成装置は、
プロセッサと、
プロセッサで実行可能な命令を記憶するように構成されるメモリとを含み、
ここで、前記プロセッサが、
ビデオファイル撮影中の撮影装置の動作状態情報を確定し、
前記動作状態情報が予め設定された条件に合致するかどうかを判定し、前記動作状態情報が予め設定された条件に合致する場合、前記動作状態情報に対応するビデオクリップを抽出し、
前記ビデオクリップをパノラマ写真に生成するように構成される。
本開示の実施形態による技術的解決手段は、ビデオファイルにおける予め設定された条件に合致する動作状態情報に対応するビデオクリップを抽出し、ビデオクリップをパノラマ写真に生成することで、関連技術においてパノラマモードでパノラマ写真を撮影する必要がある実現方式を変化させ、ビデオファイルにおけるパノラマモードに合致するビデオ素材をパノラマ写真に生成し、これによりビデオファイルでユーザに異なる視覚体験をもたらすという有益な効果を含むことができる。
以上の一般的な説明と後の詳細な説明は、例示的または解釈的なものだけであり、本開示を制限することができないと理解すべきである。
一つの例示的な実施形態によるパノラマ写真の生成方法のフローチャートである。 一つの例示的な実施形態1によるパノラマ写真の生成方法の場面図である。 一つの例示的な実施形態1によるパノラマ写真の生成方法のフローチャートである。 一つの例示的な実施形態2によるパノラマ写真の生成方法のフローチャートである。 一つの例示的な実施形態によるパノラマ写真の生成装置のブロック図である。 一つの例示的な実施形態による別のパノラマ写真の生成装置のブロック図である。 一つの例示的な実施形態によるパノラマ写真に適用する生成装置のブロック図である。
ここの図面は、明細書に組み込まれて本明細書の一部を構成し、本発明の実施形態を示し、そして明細書と共に本発明の原理の解釈に用いられる。
ここで例示的な実施形態を詳細に説明し、その例が図面に示される。以下の説明が図面に関係する場合、特に明記しない限り、異なる図面の同じ数字が同じまたは類似の要素を表す。以下の例示的な実施形態に説明される実施形態は、本発明と合致するすべての実施形態を代表しない。逆に、それらは添付の特許請求の範囲に詳述される、本発明のいくつかの方面に合致する装置および方法の例だけである。
図1Aは一つの例示的な実施形態によるパノラマ写真の生成方法のフローチャートであり、図1Bは一つの例示的な実施形態1によるパノラマ写真の生成方法の場面図である。当該パノラマ写真の生成方法は、端末装置(例えば撮影機、カメラ、カメラを備えるスマートフォンとタブレットPC、ビデオファイルを再生できるデスクトップコンピュータなど)に応用されることができ、端末装置にアプリケーションプログラム(APP)をインストールすることまたはソフトウェアで実現されることができ、図1Aに示すように、当該パノラマ写真の生成方法は、以下のステップS101−S103を含む。
ステップS101において、ビデオファイル撮影中の撮影装置の動作状態情報を確定する。
一つの実施形態において、ビデオファイル撮影中の撮影装置の動作状態情報は、設定されたフォーマットでビデオファイルに記憶されてよく、ビデオファイルに対応する、動作状態情報を記録するための設定ファイルに記憶されてもよい。一つの実施形態において、動作状態情報は、撮影中の撮影装置の水平運動速度と水平運動角度を含むことができる。
ステップS102において、動作状態情報が予め設定された条件に合致するかどうかを判定し、動作状態情報が予め設定された条件に合致する場合、動作状態情報に対応するビデオクリップを抽出する。
一つの実施形態において、ビデオ撮影中の撮影装置の水平運動速度と水平運動角度で動作状態情報が設定された条件に合致するかどうかを確定することができ、例えば、撮影装置の水平運動速度が第一の所定閾値より小さく且つ水平運動角度が第二の所定閾値より大きい場合、当該ビデオクリップがパノラマ写真の生成のための設定された条件に合致することを確定する。
ステップS103において、ビデオクリップをパノラマ写真に生成する。
一つの実施形態において、関連技術におけるパノラマ写真の生成方法によりビデオクリップをパノラマ写真に生成することができ、本開示において詳細な説明は、省略する。
図1Bに示すように、撮影装置10が図示される矢印の方向に沿って撮影する過程に、撮影装置10の電荷結合素子(Charge−coupled Device、CCDと略称される)に形成されたビデオ画像の視野範囲は、符号11に示される。撮影中、撮影装置10におけるジャイロスコープで撮影装置の水平運動速度と水平運動角度を取得し、撮影装置10の水平運動速度が第一の所定閾値より小さい場合、撮影されたビデオクリップに対応するパノラマ写真が高い解像度を有することを確保できる。撮影装置10の水平運動角度が第二の所定閾値より大きい場合、ビデオクリップに対応するパノラマ写真が大きい視野を有することを確保できる。
本実施形態において、ビデオファイルにおける予め設定された条件に合致する動作状態情報に対応するビデオクリップを抽出し、ビデオクリップをパノラマ写真に生成することで、関連技術においてパノラマモードでパノラマ写真を撮影する必要がある実現方式を変化させ、ビデオファイルにおけるパノラマモードに合致するビデオ素材をパノラマ写真に生成することを確保し、これによりビデオファイルでユーザに異なる視覚体験をもたらす。
一つの実施形態において、動作状態情報が水平運動速度と水平運動角度を含むことができ、ビデオフ撮影中の撮影装置の動作状態情報を確定することは、
ジャイロスコープでビデオ撮影中の撮影装置の水平運動速度を確定し、
ジャイロスコープでビデオ撮影中の撮影装置の水平運動角度を確定することを含むことができる。
一つの実施形態において、動作状態情報が予め設定された条件に合致するかどうかを判定することは、
水平運動速度が第一の所定閾値より小さいかどうかを確定し、
水平運動角度が第二の所定閾値より大きいかどうかを確定し、
水平運動速度が第一の所定閾値より小さく且つ水平運動角度が第二の所定閾値より大きい場合、動作状態情報が予め設定された条件に合致することを確定することを含むことができる。
一つの実施形態において、方法は、
水平運動速度が第一の所定閾値より大きいく、および/または水平運動角度が第二の所定閾値より小さい場合、ビデオファイルにパノラマ写真の生成のためのビデオクリップを確定できないことを提示することをさらに含むことができる。
一つの実施形態において、前記動作状態情報に対応するビデオクリップを抽出することは、
水平運動の開始時点および前記水平運動の終止時点を確定し、
前記開始時点と前記終止時点に基づいて前記ビデオクリップを確定することを含むことができる。
一つの実施形態において、動作状態情報が水平運動速度と水平運動角度を含むことができ、ビデオファイル撮影中の撮影装置の動作状態情報を確定することは、
ビデオファイルに対応する設定ファイルからビデオ撮影中の撮影装置の水平運動速度とビデオ撮影中の水平運動角度を確定することを含むことができる。
具体的に、どのようにビデオファイルでパノラマ写真を生成するかは、後の実施形態を参照してください。
以上で、本開示の実施形態による前記方法は、ビデオファイルにおけるパノラマモードに合致するビデオ素材をパノラマ写真に生成することを確保でき、これによりビデオファイルでユーザに異なる視覚体験をもたらす。
以下に具体的な実施形態で本開示の実施形態による技術的解決手段を説明する。
図2は一つの例示的な実施形態1によるパノラマ写真の生成方法のフローチャートである。本実施形態は、本開示の実施形態による前記方法を利用して、撮影装置がビデオファイルを撮影するとともに、パノラマ写真を生成することを例にして図1Bを参照して例示的に説明し、図2に示すように、以下のステップを含む。
ステップS201において、ジャイロスコープでビデオ撮影中の撮影装置の水平運動速度とビデオ撮影中の水平運動角度を確定する。
ステップS202において、水平運動速度が第一の所定閾値より小さいかどうかを確定し、水平運動速度が第一の所定閾値より小さい場合、ステップS203を実行し、水平運動速度が第一の所定閾値以上である場合、ステップS207を実行する。
ステップS203において、水平運動角度が第二の所定閾値より大きいかどうかを確定し、水平運動角度が第二の所定閾値より大きい場合、ステップS204を実行し、水平運動角度が第二の所定閾値以下である場合、ステップS207を実行する。
一つの実施形態において、第一の所定閾値と第二の所定閾値が経験値であってよく、撮影装置の水平運動速度と水平運動角度がパノラマ写真の画像品質を確保できればよい。
ステップS204において、水平運動角度が第二の所定閾値より大きい場合、水平運動の開始時点および水平運動の終止時点を確定する。
ステップS205において、開始時点と終止時点に基づいてビデオクリップを確定する。
一つの実施形態において、撮影装置により、水平運動が開始する時の開始時点および水平運動が終止する時の終止時点を記録し、当該開始時点と終止時点を設定されたフォーマットでビデオファイルに記録することができる。
ステップS206において、ビデオクリップをパノラマ写真に生成する。
ステップS207において、ビデオファイルにパノラマ写真の生成のためのビデオクリップを確定できないことを提示する。
撮影装置10が映画を撮影することを例にして例示的に説明し、図1Bに示すように、撮影装置10のレンズは、撮影装置の位置に伴って水平に運動し且つ運動速度が遅く、また、撮影場面全体で、美術部門が光および環境の配置を行い、これにより撮影装置10の存在する環境の照度が均一になり、撮影装置10により撮影された映画に条件に合致するビデオクリップがあることができることを確保し、それによってビデオクリップによって生成されたパノラマ写真を映画のポスターとする。
例えば、映画を撮影する過程に、撮影装置10は、ジャイロスコープでビデオ撮影中の撮影装置10の水平運動速度とビデオ撮影中の水平運動角度を取得し、撮影装置10の水平運動速度が第一の所定閾値より小さく且つ水平運動角度が第二の所定閾値より大きい場合、対応するビデオクリップに符号を付けて、符号に基づいて当該ビデオクリップをパノラマ写真に生成する。
本実施形態において、撮影装置は、ビデオファイルを撮影する過程に、水平運動速度が第一の所定閾値より小さく且つ水平運動角度が第二の所定閾値より大きいことを検出した場合、対応するビデオクリップをパノラマ写真に生成し、これによりビデオを撮影するとともに、よいパノラマ素材に対応するビデオクリップをパノラマ写真に生成することを実現し、ビデオ撮影とパノラマ撮影を両立させることが可能となる。
図3は一つの実施形態2によるパノラマ写真の生成方法のフローチャートである。本実施形態は、本開示の実施形態による前記方法を使用し、撮影装置がビデオファイルを撮影した後に端末装置でビデオファイルをパノラマ写真を生成することを例にして例示的に説明し、図3に示すように、以下のステップを含む。
ステップS301において、ビデオファイルに対応する設定ファイルからビデオ撮影中の撮影装置の水平運動速度とビデオ撮影中の水平運動角度を確定する。
ステップS302において、水平運動速度が第一の所定閾値より小さいかどうかを確定し、水平運動速度が第一の所定閾値より小さい場合、ステップS303を実行し、水平運動速度が第一の所定閾値以上である場合、ステップS307を実行する。
ステップS303において、水平運動角度が第二の所定閾値より大きいかどうかを確定し、水平運動角度が第二の所定閾値より大きい場合、ステップS304を実行し、水平運動角度が第二の所定閾値以下である場合、ステップS307を実行する。
第一の所定閾値と第二の所定閾値の説明は、前記図2に示す実施形態における関連説明を参照することができ、ここで詳細な説明は、省略する。
ステップS304において、水平運動角度が第二の所定閾値より大きい場合、水平運動の開始時点および水平運動の終止時点を確定する。
ステップS305において、開始時点と終止時点に基づいてビデオクリップを確定する。
ステップS306において、ビデオクリップをパノラマに生成する。
ステップS307において、ビデオファイルにパノラマ写真の生成のためのビデオクリップを確定できないことを提示する。
端末装置がすでに撮影装置10により撮影された映画を取得したことを例にして例示的に説明し、端末装置は、ビデオファイルに対応する設定ファイルからビデオ撮影中の撮影装置の水平運動速度とビデオ撮影中の水平運動角度を読み出すことができ、撮影装置10の水平運動速度が第一の所定閾値より小さく且つ水平運動角度が第二の所定閾値より大きいことを検出した場合、水平運動の開始時点および水平運動の終止時点を確定し、開始時点と終止時点に対応するビデオクリップをパノラマ写真に生成する。
例えば、撮影装置10により撮影された映画の時間が60分間であり、端末装置は、45分〜50分の時に撮影装置10の水平運動速度が第一の所定閾値より小さく且つ水平運動角度が第二の所定閾値より大きいことを検出した場合、映画の45分〜50分に対応するビデオクリップをパノラマ写真に生成することができる。
本実施形態において、端末装置は、ビデオファイルに対応する設定ファイルからビデオファイル撮影中の撮影装置の水平運動速度とビデオファイル撮影中の水平運動角度を取得し、水平運動速度が第一の所定閾値より小さく且つ水平運動角度が第二の所定閾値より大きいことを検出した場合、対応するビデオクリップをパノラマ写真に生成し、これによりビデオファイルにおけるよいパノラマ素材を備えるビデオクリップをパノラマ写真に生成することを実現し、ビデオ撮影とパノラマ撮影を両立させることが可能となる。
図4は一つの例示的な実施形態によるパノラマ写真の生成装置のブロック図である。図4に示すように、パノラマ写真の生成装置は、
ビデオファイル撮影中の撮影装置の動作状態情報を確定するように構成される確定モジュール41と、
確定モジュール41により確定された動作状態情報が設定された条件に合致するかどうかを判定し、動作状態情報が予め設定された条件に合致する場合、動作状態情報に対応するビデオクリップを抽出するように構成されるビデオ抽出モジュール42と、
ビデオ抽出モジュール42により抽出されたビデオクリップをパノラマ写真に生成するように構成されるパノラマ写真生成モジュール43とを含む。
図5は一つの例示的な実施形態による別のパノラマ写真の生成装置のブロック図である。図5に示すように、前記図4に示す実施形態に基づいて、一つの実施形態において、動作状態情報が水平運動速度と水平運動角度を含み、確定モジュール41は、
ジャイロスコープでビデオ撮影中の撮影装置の水平運動速度を確定するように構成される第一の確定サブモジュール411と、
ジャイロスコープでビデオ撮影中の撮影装置の水平運動角度を確定するように構成される第二の確定サブモジュール412とを含むことができる。
一つの実施形態において、ビデオ抽出モジュール42は、
第一の確定サブモジュール411により確定された水平運動速度が第一の所定閾値より小さいかどうかを確定するように構成される第三の確定サブモジュール421と、
第二の確定サブモジュール412により確定された水平運動角度が第二の所定閾値より大きいかどうかを確定するように構成される第四の確定サブモジュール422と、
第三の確定サブモジュール421により確定された水平運動速度が第一の所定閾値より小さく且つ第四の確定サブモジュール422により確定された水平運動角度が第二の所定閾値より大きい場合、動作状態情報が予め設定された条件に合致することを確定するように第五の確定サブモジュール423とを含むことができる。
一つの実施形態において、装置は、
第一の確定サブモジュール411により確定された水平運動速度が第一の所定閾値より大きく、および/または第二の確定サブモジュール412により確定された水平運動角度が第二の所定閾値より小さい場合、ビデオファイルにパノラマ写真の生成のためのビデオクリップを確定できないことを提示するように構成される提示モジュール44をさらに含むことができる。
一つの実施形態において、ビデオ抽出モジュール42は、
第五の確定サブモジュール423が予め設定された条件に合致することを確定した後、水平運動の開始時点および水平運動の終止時点を確定するように構成される第六の確定サブモジュール424と、
第六の確定サブモジュール424により確定された開始時点と終止時点に基づいてビデオクリップを確定するように構成される第七の確定サブモジュール425とを含むことができる。
一つの実施形態において、動作状態情報が水平運動速度と水平運動角度を含み、確定モジュール41は、
ビデオファイルに対応する設定ファイルからビデオ撮影中の撮影装置の水平運動速度とビデオ撮影中の水平運動角度を確定するように構成される第八の確定サブモジュール413を含む。
前記実施形態における装置について、その中の各モジュールが操作を実行する具体的な方式は、すでに当該方法に関する実施形態において詳しく説明されるので、ここで詳細な説明は、省略する。
図6は一つの例示的な実施形態によるパノラマ写真に適用する生成装置のブロック図である。例えば、装置600は、携帯電話、コンピュータ、デジタル放送端末、メッセージ送受信機、ゲーム機、タブレットデバイス、医療機器、フィットネス機器、パーソナルデジタルアシスタントなどであってよい。
図6を参照し、装置600は、処理部材602、メモリ604、電源部材606、マルチメディア部材608、オーディオ部材610、入力/出力(I/O)インターフェイス612、センサ部材614、および通信部材616のうちの1つ以上を含むことができる。
処理部材602は、通常、装置600の全体操作、例えば表示、電話コール、データ通信、カメラ操作と記録操作に関連する操作を制御する。処理部材602は、1つ以上のプロセッサ620を含んで命令を実行して、上記の方法のすべてまたは一部のステップを完了することができる。また、処理部材602は、1つ以上のモジュールを含んで、処理部材602と他の部材のインタラクションに便利を与えることができる。例えば、処理部材602は、マルチメディアモジュールを含んで、マルチメディア部材608と処理部材602とのインタラクションのために便利を与えることができる。
メモリ604は、様々なタイプのデータを記憶して装置600での操作をサポートするように構成される。これらのデータの例は、装置600に操作するためのいかなる記憶オブジェクトまたは方法の命令、連絡先データ、電話帳データ、メッセージ、ピクチャー、ビデオなどを含む。メモリ604は、いかなるタイプの揮発性または不揮発性記憶装置またはそれらの組み合わせによって実現されることができ、例えばスタティックランダムアクセスメモリ(SRAM)、電気的消去可能プログラマブル読み出し専用メモリ(EEPROM)、消去可能プログラマブル読み出し専用メモリ(EPROM)、プログラマブルリードオンリーメモリ(PROM)、リードオンリーメモリ(ROM)、磁気メモリ、フラッシュメモリ、磁気ディスクまたは光ディスクである。
電源部材606は、装置600の様々な部材に電力を提供する。電源部材606は、電源管理システム、1つ以上の電源、および他の、装置600のために電力を生成し、管理して割り当てることに関連する部材を含むことができる。
マルチメディア部材608は、前記装置600とユーザの間に1つの出力インタフェースを提供するスクリーンを含む。いくつかの実施形態において、スクリーンは、液晶ディスプレイ(LCD)とタッチパネル(TP)を含むことができる。スクリーンがタッチパネルを含むと、スクリーンは、タッチスクリーンとして実現され、ユーザからの入力信号を受信することができる。タッチパネルは、1つ以上のタッチセンサを含んでタッチ、摺動とタッチパネルでのジェスチャーをセンシングする。前記タッチセンサは、タッチまたは摺動操作の境界をセンシングするだけでなく、前記タッチまたは摺動操作に関連する持続時間と圧力を検出することができる。いくつかの実施形態において、マルチメディア部材608は、1つのフロントカメラおよび/またはリアカメラを含む。装置600が操作モード、例えば撮影モードまたはビデオモードにある場合、フロントカメラおよび/またはリアカメラは、外部のマルチメディアデータを受信することができる。各フロントカメラおよび/またはリアカメラは、固定された光学レンズシステムであってよいまたはフォーカスと光学ズーム機能を備える。
オーディオ部材610は、オーディオ信号を出力および/または入力するように構成される。例えば、オーディオ部材610は、1つのマイク(MIC)を含み、装置600が操作モード、例えばコールモード、記録モードと音声識別モードにある場合、マイクが外部のオーディオ信号を受信するように構成される。受信されたオーディオ信号は、さらにメモリ604に記憶されるまたは通信部材616を介して送信されることができる。いくつかの実施形態において、オーディオ部材610は、オーディオ信号を出力するためのスピーカーをさらに含む。
I/Oインタフェース612は、処理部材602と周辺インタフェースモジュールの間にインタフェースを提供し、前記周辺インタフェースモジュールがキーボード、クリックホイール、ボタンなどであってよい。これらのボタンは、ホームボタン、音量ボタン、起動ボタンとロックボタンを含むことができるがこれらに限られない。
センサ部材614は、1つ以上のセンサを含み、装置600に各方面の状態評価を提供するように構成される。例えば、センサ部材614は、装置600のオン/オフ状態、部材の相対的な位置決めを検出することができ、例えば前記部材が装置600の表示器とキーパッドであり、センサ部材614は、さらに装置600または装置600の1つの部材の位置変化、ユーザと装置600の接触が存在するまたは存在しないこと、装置600の方位または加速/減速と装置600の温度変化を検出することができる。センサ部材614は、いかなる物理的接触がない場合に付近の物体の存在を検出するように構成される近接センサを含むことができる。センサ部材614は、イメージングアプリケーションに使用される光センサ、例えばCMOSまたはCCD画像センサをさらに含むことができる。いくつかの実施形態において、当該センサ部材614は、加速度センサ、ジャイロセンサ、磁気センサ、圧力センサ、マイクロ波センサまたは温度センサをさらに含むことができる。
通信部材616は、装置600と他の装置の間の有線または無線通信を容易にするように構成される。装置600は、通信基準に基づく無線ネットワーク、例えばWiFi、2Gまたは3G、またはそれらの組み合わせにアクセスすることができる。一つの例示的な実施形態において、通信部材616は、放送チャネルを介して外部放送管理システムからの放送信号または放送関連情報を受信する。一つの例示的な実施形態において、前記通信部材616は、さらに近接場通信(NFC)モジュールを含んで、近距離通信を促進する。例えば、NFCモジュールにおいてRF識別(RFID)技術、赤外線データ協会(IrDA)技術、超広帯域(UWB)技術、ブルートゥース(BT)(登録商標)技術と他の技術に基づいて実現することができる。
例示的な実施形態において、装置600は、1つ以上の特定用途向け集積回路(ASIC)、デジタル信号プロセッサ(DSP)、デジタル信号処理装置(DSPD)、プログラマブルロジックデバイス(PLD)、フィールドプログラマブルゲートアレイ(FPGA)、コントローラ、マイクロコントローラ、マイクロプロセッサまたは他の電子素子により実現されることができ、前記方法を実行するように構成される。
例示的な実施形態において、命令を含む非一時的コンピュータ可読記憶媒体、例えば命令を含むメモリ604が提供され、前記命令が装置600のプロセッサ620によって実行されて前記方法を完了することができる。例えば、非一時的コンピュータ可読記憶媒体は、ROM、ランダムアクセスメモリ(RAM)、CD−ROM、磁気テープ、フロッピー(登録商標)ディスクと光データ記憶装置などであってよい。
当業者は、明細書を考慮してここに開示される発明を実践した後に、容易に本開示の他の実施形態を考える。本出願は、本開示に係る実施形態のいかなる変形、用途または適応性変化をカバーすることを意図し、これらの変形、用途または適応性変化が本開示に係る実施形態の一般的な原理に従い且つ本開示に係る実施形態に開示されない本技術分野における公知の常識または慣用技術手段を含む。明細書と実施形態は、ただ例示的なものだけと見なされ、本開示に係る実施形態の真の範囲および精神が以下の特許請求の範囲によって示される。
本開示に係る実施形態は、以上に説明され且つ図面に示す正確な構造に限られなく、且つその範囲から逸脱しなくて各種類の変更と変化を行うことができると理解すべきである。本開示に係る実施形態の範囲は、添付の特許請求の範囲のみによって限定される。
本開示に係る実施形態は、ビデオファイルにおける予め設定された条件に合致する動作状態情報に対応するビデオクリップを抽出し、ビデオクリップをパノラマ写真に生成することで、関連技術においてパノラマモードでパノラマ写真を撮影する必要がある実現方式を変化させ、ビデオファイルにおけるパノラマモードに合致するビデオ素材をパノラマ写真に生成し、これによりビデオファイルでユーザに異なる視覚体験をもたらすという有益な効果を含むことができる。

Claims (11)

  1. パノラマ写真の生成方法であって、
    ビデオファイル撮影中の撮影装置の動作状態情報を確定することと、
    前記動作状態情報が予め設定された条件に合致するかどうかを判定し、前記動作状態情報が予め設定された条件に合致する場合、前記動作状態情報に対応するビデオクリップを抽出することと、
    前記ビデオクリップをパノラマ写真に生成することとを含
    前記動作状態情報が水平運動速度と水平運動角度を含み、前記ビデオファイル撮影中の撮影装置の動作状態情報を確定することは、
    ジャイロスコープでビデオ撮影中の撮影装置の前記水平運動速度を確定し、
    前記ジャイロスコープでビデオ撮影中の前記撮影装置の前記水平運動角度を確定することを含む、前記パノラマ写真の生成方法。
  2. 前記動作状態情報が予め設定された条件に合致するかどうかを判定することは、
    前記水平運動速度が第一の所定閾値より小さいかどうかを確定し、
    前記水平運動角度が第二の所定閾値より大きいかどうかを確定し、
    前記水平運動速度が前記第一の所定閾値より小さく且つ前記水平運動角度が前記第二の所定閾値より大きい場合、前記動作状態情報が予め設定された条件に合致することを確定することを含む
    請求項に記載の方法。
  3. 前記水平運動速度が前記第一の所定閾値より大きく、および/または前記水平運動角度が前記第二の所定閾値より小さい場合、前記ビデオファイルに前記パノラマ写真の生成のためのビデオクリップを確定できないことを提示することをさらに含む
    請求項に記載の方法。
  4. 前記動作状態情報に対応するビデオクリップを抽出することは、
    水平運動の開始時点および前記水平運動の終止時点を確定し、
    前記開始時点と前記終止時点に基づいて前記ビデオクリップを確定することを含む
    請求項1に記載の方法。
  5. 前記動作状態情報が水平運動速度と水平運動角度を含み、前記ビデオファイル撮影中の撮影装置の動作状態情報を確定することは、
    ビデオファイルに対応する設定ファイルからビデオ撮影中の撮影装置の水平運動速度とビデオ撮影中の水平運動角度を確定することを含む
    請求項1に記載の方法。
  6. パノラマ写真の生成装置であって、
    ビデオファイル撮影中の撮影装置の動作状態情報を確定するように構成される確定モジュールと、
    前記確定モジュールにより確定された前記動作状態情報が予め設定された条件に合致するかどうかを判定し、前記動作状態情報が前記予め設定された条件に合致する場合、前記動作状態情報に対応するビデオクリップを抽出するように構成されるビデオ抽出モジュールと、
    前記ビデオ抽出モジュールにより抽出された前記ビデオクリップをパノラマ写真に生成するように構成されるパノラマ写真生成モジュールとを含
    前記動作状態情報が水平運動速度と水平運動角度を含み、前記確定モジュールは、
    ジャイロスコープでビデオ撮影中の撮影装置の前記水平運動速度を確定するように構成される第一の確定サブモジュールと、
    前記ジャイロスコープでビデオ撮影中の前記撮影装置の前記水平運動角度を確定するように構成される第二の確定サブモジュールとを含む、前記パノラマ写真の生成装置。
  7. 前記ビデオ抽出モジュールは、
    前記第一の確定サブモジュールにより確定された前記水平運動速度が第一の所定閾値より小さいかどうかを確定するように構成される第三の確定サブモジュールと、
    前記第二の確定サブモジュールにより確定された前記水平運動角度が第二の所定閾値より大きいかどうかを確定するように構成される第四の確定サブモジュールと、
    前記第三の確定サブモジュールにより確定された前記水平運動速度が前記第一の所定閾値より小さく且つ前記第四の確定サブモジュールにより確定された前記水平運動角度が前記第二の所定閾値より大きいい場合、前記動作状態情報が予め設定された条件に合致することを確定するように構成される第五の確定サブモジュールとを含む
    請求項に記載の装置。
  8. 前記第一の確定サブモジュールにより確定された前記水平運動速度が前記第一の所定閾値より大きく、および/または前記第二の確定サブモジュールにより確定された前記水平運動角度が前記第二の所定閾値より小さい場合、前記ビデオファイルに前記パノラマ写真の生成のためのビデオクリップを確定できないことを提示するように構成される提示モジュールをさらに含む
    請求項に記載の装置。
  9. 前記ビデオ抽出モジュールは、
    前記水平運動の開始時点および前記水平運動の終止時点を確定するように構成される第六の確定サブモジュールと、
    前記第六の確定サブモジュールにより確定された前記開始時点と前記終止時点に基づいて前記ビデオクリップを確定するように構成される第七の確定サブモジュールとを含む
    請求項に記載の装置。
  10. 前記動作状態情報が水平運動速度と水平運動角度を含み、前記確定モジュールは、
    ビデオファイルに対応する設定ファイルからビデオ撮影中の撮影装置の水平運動速度とビデオ撮影中の水平運動角度を確定するように構成される第八の確定サブモジュールを含む
    請求項に記載の装置。
  11. パノラマ写真の生成装置であって、
    プロセッサと、
    プロセッサで実行可能な命令を記憶するように構成されるメモリとを含み、
    前記プロセッサが、
    ビデオファイル撮影中の撮影装置の動作状態情報を確定し、
    前記動作状態情報が予め設定された条件に合致するかどうかを判定し、前記動作状態情報が予め設定された条件に合致する場合、前記動作状態情報に対応するビデオクリップを抽出し、
    前記ビデオクリップをパノラマ写真に生成するように構成され、
    前記動作状態情報が水平運動速度と水平運動角度を含み、前記ビデオファイル撮影中の撮影装置の動作状態情報を確定することは、
    ジャイロスコープでビデオ撮影中の撮影装置の前記水平運動速度を確定し、
    前記ジャイロスコープでビデオ撮影中の前記撮影装置の前記水平運動角度を確定することを含む、前記パノラマ写真の生成装置。
JP2016550715A 2015-08-21 2015-12-25 パノラマ写真の生成方法および装置 Active JP6333990B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201510518423.7 2015-08-21
CN201510518423.7A CN105120155A (zh) 2015-08-21 2015-08-21 全景照片的生成方法及装置
PCT/CN2015/099023 WO2017031890A1 (zh) 2015-08-21 2015-12-25 全景照片的生成方法及装置

Publications (2)

Publication Number Publication Date
JP2017531928A JP2017531928A (ja) 2017-10-26
JP6333990B2 true JP6333990B2 (ja) 2018-05-30

Family

ID=54668031

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016550715A Active JP6333990B2 (ja) 2015-08-21 2015-12-25 パノラマ写真の生成方法および装置

Country Status (8)

Country Link
US (1) US20170054906A1 (ja)
EP (1) EP3133806A1 (ja)
JP (1) JP6333990B2 (ja)
KR (1) KR101826326B1 (ja)
CN (1) CN105120155A (ja)
MX (1) MX364507B (ja)
RU (1) RU2664674C2 (ja)
WO (1) WO2017031890A1 (ja)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105120155A (zh) * 2015-08-21 2015-12-02 小米科技有限责任公司 全景照片的生成方法及装置
KR102576908B1 (ko) * 2016-02-16 2023-09-12 삼성전자주식회사 동적 파노라마 기능을 제공하는 방법 및 장치
CN108012073B (zh) * 2016-10-28 2020-05-19 努比亚技术有限公司 一种实现全景拍摄的方法及装置
CN107707812B (zh) * 2017-09-06 2020-02-18 维沃移动通信有限公司 一种图像处理方法、移动终端及计算机可读存储介质
CN109672776B (zh) 2017-10-16 2021-07-09 华为技术有限公司 显示动态图像的方法及终端
CN108257086B (zh) * 2017-12-22 2021-04-13 微幻科技(北京)有限公司 一种全景照片处理的方法及装置
CN109076263B (zh) * 2017-12-29 2021-06-22 深圳市大疆创新科技有限公司 视频数据处理方法、设备、系统及存储介质

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2720974B2 (ja) * 1988-03-31 1998-03-04 キヤノン株式会社 画像情報処理装置
EP0878963A1 (en) * 1992-10-09 1998-11-18 Sony Corporation Producing and recording images
JP2007135068A (ja) * 2005-11-11 2007-05-31 Sony Corp 撮像再生装置
KR100758632B1 (ko) * 2006-03-29 2007-09-14 삼성전자주식회사 파노라마 사진촬영 장치 및 방법
RU2365998C2 (ru) * 2006-12-18 2009-08-27 Государственное образовательное учреждение высшего профессионального образования Курский государственный технический университет Способ формирования панорамных изображений
JP5155092B2 (ja) * 2008-10-10 2013-02-27 オリンパスイメージング株式会社 カメラ、再生装置、および再生方法
JP5434126B2 (ja) * 2009-02-19 2014-03-05 カシオ計算機株式会社 撮像装置、撮像方法及び撮像プログラム
JP5378135B2 (ja) * 2009-09-29 2013-12-25 富士フイルム株式会社 画像レイアウト決定方法ならびにそのプログラムおよび情報処理装置
JP5352406B2 (ja) * 2009-09-30 2013-11-27 富士フイルム株式会社 合成画像作成方法ならびにそのプログラムおよび情報処理装置
JP5532297B2 (ja) * 2009-12-18 2014-06-25 ソニー株式会社 画像処理装置、画像処理方法、及び、プログラム
JP2012060552A (ja) * 2010-09-13 2012-03-22 Nikon Corp カメラおよび電子機器
JP5413344B2 (ja) * 2010-09-27 2014-02-12 カシオ計算機株式会社 撮像装置、画像合成方法及びプログラム
US20120268554A1 (en) * 2011-04-22 2012-10-25 Research In Motion Limited Apparatus, and associated method, for forming panoramic image
CN103985103A (zh) * 2013-02-07 2014-08-13 百度在线网络技术(北京)有限公司 一种生成全景图片的方法和装置
US20150215532A1 (en) * 2014-01-24 2015-07-30 Amazon Technologies, Inc. Panoramic image capture
JP5768172B2 (ja) * 2014-08-04 2015-08-26 富士フイルム株式会社 画像表示制御方法及びその装置並びに画像撮像装置
CN104616342B (zh) * 2015-02-06 2017-07-25 北京明兰网络科技有限公司 序列帧与全景的相互转换方法
CN104601897B (zh) * 2015-02-13 2017-11-03 浙江宇视科技有限公司 一种摄像机防抖装置及防抖方法
CN105120155A (zh) * 2015-08-21 2015-12-02 小米科技有限责任公司 全景照片的生成方法及装置

Also Published As

Publication number Publication date
RU2016112357A (ru) 2018-07-02
CN105120155A (zh) 2015-12-02
MX364507B (es) 2019-04-29
US20170054906A1 (en) 2017-02-23
JP2017531928A (ja) 2017-10-26
RU2016112357A3 (ja) 2018-07-02
KR101826326B1 (ko) 2018-03-22
WO2017031890A1 (zh) 2017-03-02
EP3133806A1 (en) 2017-02-22
KR20170033807A (ko) 2017-03-27
RU2664674C2 (ru) 2018-08-21
MX2016005637A (es) 2017-11-15

Similar Documents

Publication Publication Date Title
JP6333990B2 (ja) パノラマ写真の生成方法および装置
JP6267363B2 (ja) 画像を撮影する方法および装置
RU2634907C2 (ru) Метод и устройство для получения фотографии
WO2017036037A1 (zh) 拍摄控制方法和装置
US9661223B2 (en) Method and device for photographing including camera shake
WO2017084182A1 (zh) 图片处理方法及装置
JP6534655B2 (ja) プレビューイメージの表示方法および装置
EP2985994B1 (en) Method and apparatus for backing up videos and medium
CN106210496B (zh) 照片拍摄方法及装置
WO2016023339A1 (zh) 延时拍照的方法和装置
WO2017092127A1 (zh) 视频归类方法及装置
WO2017124899A1 (zh) 一种信息处理方法及装置、电子设备
WO2017035994A1 (zh) 外接设备的连接方法及装置
WO2017080084A1 (zh) 字体添加方法及装置
US20170090684A1 (en) Method and apparatus for processing information
CN104869314A (zh) 拍照方法及装置
WO2018053722A1 (zh) 全景照片拍摄方法及装置
US20130235233A1 (en) Methods and devices for capturing images
CN113286073A (zh) 拍摄方法、拍摄装置及存储介质
US20140267817A1 (en) Systems and methods of attracting attention in photography or videography
WO2021237744A1 (zh) 拍摄方法及装置
CN107682623B (zh) 拍照方法及装置
EP2637397A1 (en) Methods and devices for capturing images
CN110933300B (zh) 一种图像处理方法和电子终端设备
CN105549935B (zh) 显示照片的方法及装置

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20171024

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180105

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180403

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180425

R150 Certificate of patent or registration of utility model

Ref document number: 6333990

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250