JP5622535B2 - Imaging device - Google Patents
Imaging device Download PDFInfo
- Publication number
- JP5622535B2 JP5622535B2 JP2010256776A JP2010256776A JP5622535B2 JP 5622535 B2 JP5622535 B2 JP 5622535B2 JP 2010256776 A JP2010256776 A JP 2010256776A JP 2010256776 A JP2010256776 A JP 2010256776A JP 5622535 B2 JP5622535 B2 JP 5622535B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- display
- kaleidoscope
- image data
- subject
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformation in the plane of the image
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/38—Circuits or arrangements for blanking or otherwise eliminating unwanted parts of pictures
Description
本発明は、ユーザに興趣を与える画像をライブビュー表示とともに表示する撮像装置に関する。 The present invention relates to an imaging apparatus that displays an image that gives interest to a user together with a live view display.
撮像装置において、撮像素子に結蔵された被写体像をリアルタイムに表示部に表示させる表示形態が広く行われており、一般にライブビューと呼ばれている。このライブビューにおいて、撮像された被写体像に画像処理を施したものを表示することも行われている。 In an imaging apparatus, a display form in which a subject image stored in an imaging element is displayed on a display unit in real time is widely used, and is generally called a live view. In this live view, an image obtained by subjecting a captured subject image to image processing is also displayed.
表示部への表示方式として、4つの領域から構成されたCRT上の一つの領域をライトペンによって指定すると、選択された領域の画像を元に残りの3表示面に対象の図形を表示して万華鏡的な画像を表示する万華鏡表示法(特許文献1参照)が知られている。 As a display method on the display unit, when one area on the CRT composed of four areas is designated with a light pen, the target graphic is displayed on the remaining three display surfaces based on the image of the selected area. A kaleidoscope display method for displaying a kaleidoscopic image (see Patent Document 1) is known.
また、スクラップブックで使用することができる万華鏡像を、コンピュータ等のディスプレイ上で生成する方法(特許文献2参照)も知られている。 A method of generating a kaleidoscope image that can be used in a scrapbook on a display such as a computer (see Patent Document 2) is also known.
デジタルカメラにおいて、被写体像を観察するために、ライブビュー表示(スルー画表示、モニタ表示とも呼ばれる)を行うことができる。通常のライブビュー表示は、撮像部で取得した画像をリアルタイムでそのまま表示するものである。 In a digital camera, live view display (also called through image display or monitor display) can be performed in order to observe a subject image. In normal live view display, an image acquired by the imaging unit is displayed as it is in real time.
一方で、ライブビュー表示には、単に被写体を観察する目的に限定されず、様々な機能が望まれている。そこで、ライブビュー表示に前述の万華鏡状画像のような趣向性あふれる表示を行うことも可能である。 On the other hand, live view display is not limited to the purpose of simply observing a subject, and various functions are desired. In view of this, it is possible to display a full-fledged display such as the above-described kaleidoscope image in the live view display.
しかし、ライブビュー表示で、画像の一部を部分画像として万華鏡像を構成する場合は、この部分画像の選択が適切でないと、ユーザが、実際の万華鏡を見たときのような楽しさを感じることができない。 However, when configuring a kaleidoscope image with a part of the image as a partial image in live view display, if this partial image is not properly selected, the user feels the joy of seeing the actual kaleidoscope. I can't.
本発明はこのような問題点に鑑みてなされたものであり、ライブビュー表示において、万華鏡像を生成しこれを表示することにより、ユーザに興趣を与える表示を行える撮像装置を提供することを目的とする。 The present invention has been made in view of such problems, and an object of the present invention is to provide an imaging apparatus that can display a display that gives interest to a user by generating a kaleidoscope image and displaying it in a live view display. And
本発明のある態様に係る撮像装置は、被写体を結像する撮影レンズと、撮影レンズによって結像された光学像を画像データに変換して出力する撮像部と、撮像部から出力された画像データをライブビュー表示可能な表示部と、光学像から被写体を検出する被写体検出部と、画像データの一部から万華鏡状画像データを生成する万華鏡状画像生成部と、撮像部から出力された画像データを表示部にライブビュー表示させるとともに、万華鏡状画像生成部によって生成された万華鏡状画像データを表示部に表示させる制御部と、を備え、制御部は、ライブビュー表示において、被写体検出部が被写体を検出したときに、表示部に、当該被写体を用いて生成した万華鏡状画像をライブビュー表示と共に表示する第1表示モードと、被写体検出部が被写体を検出しないときに、万華鏡状画像を表示部に表示しない第2表示モードと、を切り換えることを特徴とする。 An imaging apparatus according to an aspect of the present invention includes a photographing lens that forms an image of a subject, an imaging unit that converts an optical image formed by the photographing lens into image data and outputs the image data, and image data output from the imaging unit A live-view display unit, a subject detection unit that detects a subject from an optical image, a kaleidoscopic image generation unit that generates kaleidoscopic image data from a part of the image data, and image data output from the imaging unit And a control unit that displays kaleidoscopic image data generated by the kaleidoscopic image generation unit on the display unit, and the control unit is configured to display the subject in the live view display. A first display mode in which a kaleidoscope image generated using the subject is displayed on the display unit together with the live view display, and the subject detection unit When not detecting the body, and wherein the switching and the second display mode without displaying the kaleidoscope-like image on the display unit.
本発明のある態様によると、検出された被写体に基づいて表示部にライブビュー表示と共に万華鏡状画像データを表示させ、被写体が検出されなくなった場合に万華鏡状画像を表示しないので、状況に応じたダイナミックな表示を行うことができ、ユーザの興趣を高めることができて、ユーザが撮像装置を親しみながら使用することができる。 According to an aspect of the present invention, the kaleidoscope image data is displayed together with the live view display on the display unit based on the detected subject, and the kaleidoscope image is not displayed when the subject is no longer detected. Dynamic display can be performed, the user's interest can be enhanced, and the user can use the imaging apparatus while getting familiar with it.
図1は、本発明の実施形態のデジタルカメラ100の内部構成を示すブロック図である。
FIG. 1 is a block diagram showing an internal configuration of a
デジタルカメラ100の動作を制御するための制御部として機能するシステムコントローラ300は、CPU302と、複数の回路ブロック(機能ブロック)とを備える。複数の回路ブロックは、画像処理回路304と、圧縮・伸長回路306と、表示画像生成回路307と、動きベクトル検出回路308と、顔認識回路309と、万華鏡画像生成回路310等である。CPU302とこれら各回路ブロックとは、制御ラインやバスラインを介して互いに接続され、CPU302の指令によって各回路ブロックは制御される。
A
システムコントローラ300(制御部)は、撮像素子IF(InterFace)回路312、絞り駆動機構316、シャッタ駆動機構318、表示素子駆動回路332、タッチパネル検出回路336、メモリカード340、FlashRom(フラッシュ・リードオンリー・メモリ)342、SDRAM(シンクロナス・ダイナミック・ランダム・アクセス・メモリ)344、カメラ操作部350に電気的に接続する。撮像素子IF回路312は、撮像素子314に電気的に接続し、表示素子駆動回路332は表示素子334に接続し、タッチパネル検出回路336は表示素子334に備えられるタッチパネル338に接続する。
The system controller 300 (control unit) includes an imaging element IF (InterFace)
撮影レンズ102は、カメラ外部から取り込んだ被写体からの光を撮像素子314に結像する。撮像素子314は、光電変換により、撮像素子314に結像された光学像を画像信号に変換する。撮像素子314は、例えば、CCD(電荷結合素子)センサ、CMOS(相補型金属酸化膜半導体)センサである。撮像素子IF回路312は、システムコントローラ300の制御信号に応じて撮像素子314の駆動信号を生成する回路や、撮像素子314の出力をAD変換するAD変換回路等を含んでいる。光学像の画像信号は、撮像素子IF回路312によってAD変換されて、システムコントローラ300へ画像データとして入力される。
The photographing
すなわち、撮像素子314及び撮像素子IF回路312が、撮影レンズによって結像された被写体像を画像データに変換して出力する撮像部を構成する。
That is, the imaging device 314 and the imaging
焦点・焦点距離調整機構315は、撮影レンズ102の焦点を調整して被写体像を撮像素子314に結像させるレンズ駆動部として構成される。また、焦点・焦点距離調節機構315は、撮影レンズ102の焦点距離を調節して撮像素子314に結像する被写体像の倍率を変更する。
The focal point / focal
絞り駆動機構316は、撮影レンズ102を通過する光の量を制御する絞りを駆動する。シャッタ駆動機構318は、撮像素子314を露光状態と遮光状態とに設定するシャッタを駆動する。
The
システムコントローラ300のCPU302は、回路ブロックを以下の動作を行うように制御する。画像処理回路304は、撮像素子IF回路312から出力される画像データにγ補正、色変換、デモザイキング等の処理をし、圧縮・伸長回路306に出力する。画像処理回路304は、また、デジタルカメラ100が撮像前の状態にあるときに、撮像素子IF回路312から入力した表示用の画像データを所定のフレームレート(30fps、60fps)で処理し、表示素子駆動回路332へ出力してよい。この撮像前の状態は、デジタルカメラ100が画像記録モードに設定されていて、ユーザがデジタルカメラ100を被写体に向けている状態である。
The
表示素子駆動回路332は、画像処理回路304から出力される画像データに基づく画像を表示素子334へ表示する。このとき表示素子に表示される画像は、一般にスルー画像、ライブビュー画像、モニター画像等と称される。
The display
圧縮・伸長回路306は、画像処理回路304から出力された画像データを圧縮し、メモリカード340に記録する。また、圧縮・伸長回路306は、デジタルカメラ100が画像再生モードに設定されているときに、メモリカードから読み込んだ圧縮画像データを伸長し、表示画像生成回路307を介して、表示素子駆動回路332へ出力する。
The compression /
動きベクトル検出回路308は、ライブビュー中の画像から、異なるフレーム間の画像データを比較して撮影領域内から移動する被写体を検出し、その被写体の位置及び大きさの情報を出力する。
The motion
顔認識回路309は、パターンマッチング等の手法により、人物又はペット(犬、猫等)の顔を被写体として検出し、その被写体の位置及び大きさを出力する。
The
万華鏡画像生成回路310は、動きベクトル検出回路308又は顔検出回路309によって検出された被写体等に基づいて、検出された画像データを用いて万華鏡状画像を生成して出力する。
The kaleidoscope
表示素子駆動回路332は、圧縮・伸長回路306から入力した画像データに基づく画像を表示素子334へ表示する。
The display
表示素子334は、タッチパネル338が配置される。タッチパネル検出回路336は、タッチパネル上の操作位置(後述のモード設定部材、指、ペン等で押圧(接触)された位置)を検出してシステムコントローラ300へ出力する。これら表示素子334及びタッチパネル338は一体に構成されており、画像データやデジタルカメラ100の情報を表示するディスプレイ132として機能する。
The
SDRAM344は、画像処理回路304、圧縮・伸長回路306が上述した処理をする際の作業領域(WorkArea)として主に用いられる。CPU302は、回路ブロックをFlashRom342に記録されたプログラムコードと制御パラメータに基づき制御する。
The
カメラ操作部350は、電源スイッチ(SW)106、レリーズスイッチ(SW)108、モード設定スイッチ(SW)120等の各種スイッチに対するユーザからの操作を検出して、検出結果をシステムコントローラ300に出力する。
The
次に、本発明の実施形態における万華鏡状画像の生成について説明する。 Next, generation of a kaleidoscope image in the embodiment of the present invention will be described.
万華鏡と呼ばれる玩具は、例えば3枚の長方形の鏡を三角柱状に組み合わせた筒状の形状を有し、筒の一端にはビーズ等のガラス片や色紙片を入れる収納部屋がある。この筒の他端からのぞき込むことにより、このガラス片や色紙片が、鏡によって無数の対称像が生成されるものである。 A toy called a kaleidoscope has a cylindrical shape in which, for example, three rectangular mirrors are combined in a triangular prism shape, and there is a storage room in which one piece of glass or colored paper such as beads is placed at one end of the cylinder. By looking into the other end of the cylinder, an infinite number of symmetrical images are generated from the glass pieces and the colored paper pieces by a mirror.
万華鏡は、収納部屋に収納されたガラス片や色紙片が鏡によって無数の対称像からなる幾何学的模様として観察されることにより、のぞき込む者に興趣を与える。また、万華鏡に振動を与えてガラス片や色紙片を移動させると、この幾何学模様に予期しない変化が発生することによる楽しさも存在する。 The kaleidoscope is interesting for those who look into it by observing glass pieces and colored paper pieces stored in the storage room as geometric patterns consisting of innumerable symmetrical images. In addition, when a kaleidoscope is vibrated to move a piece of glass or a piece of colored paper, there is a pleasure due to an unexpected change in the geometric pattern.
本発明は、この万華鏡を模した画像を画像処理技術によってデジタルカメラ100のディスプレイ132に再現するにあたり、次に説明するような動作を実行する。
In the present invention, when an image imitating this kaleidoscope is reproduced on the
図2は、本実施形態のデジタルカメラ100のシステムコントローラ300が実行する制御のフローチャートである。図2に示すフローチャートは、実施形態の特徴部分に関しての手順が記載されその他の手順は省略されている。
FIG. 2 is a flowchart of control executed by the
ユーザによって電源スイッチ106がオンされると、システムコントローラ300が起動する。システムコントローラ300は、まず、初期設定の動作(メモリの初期化、周辺回路の初期化など)を行う。そして、システムコントローラ300は、撮像素子314から所定のフレームレートで画像を取得し、被写体の画像を表示素子334に表示する動作(ライブビュー動作)を開始する(S100)。
When the
次に、システムコントローラ300は、タッチパネル検出回路336の動作を許可し、タッチパネル338に入力される情報の検出を開始する(S102)。また、顔認識回路309の動作を許可し、撮像された画像データから被写体の顔の情報の検出を開始する(S104)。また、動きベクトル検出回路308の動作を許可し、撮像された画像データから、移動する被写体の検出を開始する(S106)。
Next, the
次に、システムコントローラ300は、操作部材350のモード設定SW120によって、万華鏡モードが選択されているか否かを判定する。万華鏡モードが選択されたと判定した場合はステップS110へ移行し、選択されていないと判定した場合はステップS200へ移行する。ステップS200では、本フローチャートでは規定しないその他のカメラ動作(測光、合焦、撮像、再生等)が実行される。
Next, the
なお、このときユーザは、万華鏡モードを選択するだけではなく、どのような分割方法(例えば、2分割、4分割、8分割等)を選択するように構成してもよい。 At this time, the user may select not only the kaleidoscope mode but also any division method (for example, 2-division, 4-division, 8-division, etc.).
ステップS110では、システムコントローラ300は、顔認識回路309によって、被写体の中から顔を検出したか否かを判定する。顔が検出された場合はステップS118に移行する、顔が検出されなかった場合はステップS112に移行する。
In step S110, the
ステップS112では、システムコントローラ300は、動きベクトル検出回路308によって、被写体の動きベクトルを検出したか否かを判定する。動きベクトルが検出された場合はステップS118に移行する、動きベクトルが検出されなかった場合はステップS114に移行する。
In step S112, the
ステップS114では、システムコントローラ300は、タッチパネル検出回路336により、タッチパネル338から万華鏡状画像生成のための領域が指定されたか否かを判定する。領域が指定された場合はステップS118に移行する、領域が指定されなかった場合はステップS116に移行する。
In step S <b> 114, the
これらステップS110〜S114の処理により、万華鏡状画像の元画像となる被写体(顔、移動被写体等)が検出される。すなわち、被写体検出部が構成されている。 By the processes in steps S110 to S114, a subject (face, moving subject, etc.) that is the original image of the kaleidoscope image is detected. That is, a subject detection unit is configured.
ステップS116では、システムコントローラ300は、レリーズSW108の操作等によって、撮影開始の動作がされたか否かを判定する。撮影開始がされたと判定した場合はステップS130に移行する。撮影開始がされていない場合はステップS110に戻り、処理を繰り返す。
In step S116, the
ステップS118では、システムコントローラ300は、万華鏡状画像の生成の元となる元画像の領域を設定する。ここで設定される領域は、ライブビュー中の画像データから顔が検出された場合はその顔を含む領域が設定される。ライブビュー中の画像データから動きベクトルが検出された場合は移動中の被写体を含む領域が設定される。また、ユーザによって画像データ中の所定の領域が指定された場合は、指定された領域が設定される。
In step S <b> 118, the
次に、ステップS120では、システムコントローラ300は、万華鏡画像生成回路310の動作を許可して、万華鏡画像生成回路310による万華鏡生成処理を実行する。
Next, in step S120, the
万華鏡画像生成回路310は、設定された元画像から複数の鏡対象の画像を生成し、これを表示素子334に表示する。なお、万華鏡画像生成回路310による万華鏡状画像の生成の処理は後述する。
The kaleidoscope
次に、ステップS122において、システムコントローラ300は、顔認識回路309が顔を検出しなくなった、又は、動きベクトル検出回路が、設定した領域の動きベクトルを検出しなくなった、等、被写体として設定された元画像が画像データの撮像領域から消失したか否かを判定する。設定された元画像が撮像領域から消失した場合は、ステップS126に移行する。設定した元画像データが撮像領域から消失していない場合はステップS124に移行する。
Next, in step S122, the
ステップS124では、システムコントローラ300は、レリーズSW108の操作等によって、ユーザから撮影開始の操作がされたか否かを判定する。撮影開始の操作がされたと判定した場合はステップS130に移行する。撮影開始の操作がされていない場合はステップS122に戻り、処理を繰り返す。
In step S124, the
ステップS126では、システムコントローラ300は、万華鏡画像生成回路310の動作の許可を禁止して、万華鏡状画像をディスプレイ132に表示せず、通常のライブビュー画像表示に変更する。その後、ステップS110に戻る。
In step S126, the
ステップS130では、システムコントローラ300は、撮影準備動作を行う。具体的には、合焦や測光、ホワイトバランス等の対象となる被写体を、撮像素子314における撮像範囲の中から抽出し、抽出された被写体に対して合焦、測光、ホワイトバランスの設定を行う。
In step S130, the
次に、ステップS131では、システムコントローラ300は、ディスプレイ132でのライブビュー動作を停止する。次に、ステップS133では、システムコントローラ300は、撮像素子314によって取得された信号を、撮像素子IF回路312を介して取得し、これを画像データとして生成する。
Next, in step S131, the
次に、ステップS133では、システムコントローラ300は、万華鏡状画像の生成が可能か否かを判定する。前述のステップS110〜S114において、既に万華鏡状画像の元画像が設定されている場合は、万華鏡状画像が生成可能であると判定する。元画像が設定されなかった場合は、万華鏡状画像の生成が不可能であると判定する。
Next, in step S133, the
万華鏡状画像の生成が可能でないと判定した場合は、ステップS134に移行し、撮像された画像データをそのままメモリカード340に格納する。
If it is determined that a kaleidoscopic image cannot be generated, the process proceeds to step S134, and the captured image data is stored in the
万華鏡状画像の生成が可能であると判定した場合は、ステップS135に移行し、撮像された画像データをそのままメモリカード340に格納すると共に、万華鏡画像生成回路310によって生成された万華鏡状画像を、メモリカード340に格納する。
If it is determined that the kaleidoscopic image can be generated, the process proceeds to step S135, the captured image data is stored in the
以上のような処理によって、システムコントローラ300は、ライブビュー中の画面に万華鏡状画像を表示してユーザにどのような画像効果があるのかを指し示すと共に、撮像後は、これを万華鏡状画像として保存することができる。
Through the above processing, the
なお、ステップS110〜114の処理によって万華鏡画像生成の元画像となる被写体が検出された場合は、ライブビュー表示と共に万華鏡画像の表示を許可する。このときの表示態様を「第1表示モード」と呼ぶ。また、ステップS110〜114の処理によって被写体が検出されなかった、又は、ステップS122の処理において被写体が画面内から存在しなくなった場合は、万華鏡状画像の表示を許可しない。このときの表示態様を「第2表示モード」と呼ぶ。 In addition, when the subject used as the original image of kaleidoscope image generation is detected by the process of step S110-114, display of a kaleidoscope image is permitted with live view display. The display mode at this time is referred to as “first display mode”. Further, when the subject is not detected by the processing of steps S110 to 114, or when the subject no longer exists in the screen in the processing of step S122, display of the kaleidoscope image is not permitted. The display mode at this time is referred to as “second display mode”.
また、本実施形態では、前述のステップS110〜S114において、顔認識回路309によって検出された顔を万華鏡状画像の元画像として設定することを優先し、顔が検出されなかった場合は、動きベクトル検出回路308によって検出された移動する被写体を元画像として選択する。なお、これは逆でもよく、移動する被写体を顔よりも優先させてもよい。
Also, in this embodiment, in steps S110 to S114 described above, priority is given to setting the face detected by the
また、顔認識回路309が複数の顔を検出した場合に、ディスプレイ132にこれら複数の被写体を示して、タッチパネル338によってユーザにそのうちの一つを選択させてもよい。また、顔認識回路309が複数の顔を検出した場合に、最も撮像装置に近いものを元画像として選択してもよい。また、移動する被写体は、画面内の移動速度が最も大きい被写体を元画像として選択してもよい。
When the
また、ユーザがモード選択SW120やタッチパネル338を操作することによって、さらに異なる形状の万華鏡状画像を生成できるように構成してもよい。原理的には偶数の領域に分割可能な正多角形形状の万華鏡状画像を生成することが可能である。また、タッチパネル338によってユーザが元画像を選択するときは、前述のように検出された顔や移動被写体の複数の候補の中から一つ選択してもよいし、ユーザが大まかに範囲を指定し、デジタルカメラ100側でそれを正三角形等の元画像領域に修正してもよい。
In addition, a kaleidoscope-like image having a different shape may be generated by the user operating the
また、前述のフローチャートでは静止画を撮像する例を示したが、動画データを作成してもよい。例えば万華鏡画像生成回路310が元画像に基づいて万華鏡状画像を生成した段階で、その万華鏡状画像を動画データとして記録を開始し、被写体が消失した時点で動画データの記録を終了するようにしてもよい。
Moreover, although the example which image | photographs a still image was shown in the above-mentioned flowchart, you may produce moving image data. For example, when the kaleidoscope
次に、万華鏡画像生成回路310によって行われる万華鏡状画像の生成について説明する。
Next, generation of a kaleidoscope image performed by the kaleidoscope
図3は、本実施形態の万華鏡状画像の表示方法の一例を示す説明図である。 FIG. 3 is an explanatory diagram illustrating an example of a kaleidoscopic image display method according to the present embodiment.
この図3は、万華鏡画像生成回路310によって生成された万華鏡状画像を、ライブビュー表示中のディスプレイ132に表示する場合の一例を示す。
FIG. 3 shows an example in which the kaleidoscope image generated by the kaleidoscope
図3(A)は、ディスプレイ132におけるライブビュー表示中において、ユーザが、カメラ操作部材350のモード選択SW120によって万華鏡モードを選択した場合の一例を示す。また、ライブビュー画像は、背景(*0)に人物(*2)が画面右側に表示されている例を示す。
FIG. 3A shows an example when the user selects the kaleidoscope mode by the
図示するように、万華鏡モードが選択された場合は、ディスプレイ132の左上部分に、万華鏡モードが選択されたことを示すアイコン(*1)が表示される。このアイコンは、正六角形の万華鏡状画像が表示される場合の例であり、他の形状(例えば、正方形、正八角形等)では、その形状に対応したアイコンが表示される。
As illustrated, when the kaleidoscope mode is selected, an icon (* 1) indicating that the kaleidoscope mode is selected is displayed in the upper left portion of the
また、このライブビュー表示における画像データから、顔認識回路309によって検出された顔の位置を示す指示枠(*3)が表示される。そして、この顔画像を元画像として万華鏡状画像を生成する場合に、元画像として設定された領域(*4)が表示される。
In addition, an instruction frame (* 3) indicating the position of the face detected by the
図3(B)及び図3(C)は、ライブビュー表示において、生成された万華鏡状画像を表示したときの一例を示す。 FIG. 3B and FIG. 3C show an example when the generated kaleidoscope-like image is displayed in the live view display.
ディスプレイ132には、設定された元画像から生成された万華鏡状画像(*6)が表示される。なお、このときは、背景部分(*7)は表示せず、無地とする。
A kaleidoscope image (* 6) generated from the set original image is displayed on the
万華鏡状画像を表示するときは、撮像中の画像データの全体を縮小してディスプレイ132内の縮小表示部(*5)にライブビュー画像を縮小して表示する。また、縮小表示部(*5)に、元画像として設定された領域(*4)も縮小表示する。ユーザは、縮小表示部(*5)を観察することによって、万華鏡状画像(*6)の元画像が、ライブビュー画像中のどの部分に存在するのかを認識することができる。
When displaying a kaleidoscope image, the entire image data being captured is reduced and the live view image is reduced and displayed on the reduced display portion (* 5) in the
万華鏡状画像を表示しているときに元画像として選択された被写体が移動した場合は、ユーザは、図3(C)に示すように、縮小表示部(*5)において元画像の領域(*4)の移動を確認することができる。 When the subject selected as the original image moves while displaying the kaleidoscope-like image, as shown in FIG. 3C, the user displays the area (* of the original image in the reduced display portion (* 5). The movement of 4) can be confirmed.
さらに被写体が移動して、元画像の領域(*4)が撮像中のライブビュー画像の範囲外へと移動した場合は、図3(D)に示すような表示へと切り替わる。 When the subject further moves and the area (* 4) of the original image moves outside the range of the live view image being captured, the display is switched to the display as shown in FIG.
図3(D)に示すように、人物(*2)が撮像中のライブビュー画像の撮像範囲外へと移動し、元画像(*3)が撮像範囲外へと移動した場合は、元画像となる顔等を検出できなくなる。これにより、第2表示モードに移行し、万華鏡状画像の表示を禁止する。なお、万華鏡モードは設定されたままであるので、万華鏡モードであることを示すアイコン(*1)を表示したまま、図3(A)と同様に、ディスプレイ132全体でライブビュー表示を行う。
As shown in FIG. 3D, when the person (* 2) moves outside the imaging range of the live view image being captured and the original image (* 3) moves outside the imaging range, the original image It becomes impossible to detect the face and the like. Thereby, it transfers to 2nd display mode and the display of a kaleidoscope-like image is prohibited. Since the kaleidoscope mode remains set, the live view display is performed on the
次に、万華鏡画像生成回路310による万華鏡状画像の生成方法を説明する。
Next, a method for generating a kaleidoscope image by the kaleidoscope
図4及び図5は、万華鏡画像生成回路310によって実行される万華鏡状画像の生成方法の一例を示す説明図である。
4 and 5 are explanatory diagrams illustrating an example of a kaleidoscopic image generation method executed by the kaleidoscope
なお、この図4及び図5に示す例では、元画像に対して線対称又は点対称に正六角形状に形成される万華鏡状画像の例を示す。 The examples shown in FIGS. 4 and 5 show examples of kaleidoscopic images formed in a regular hexagonal shape with respect to the original image in line symmetry or point symmetry.
図4に示すように、万華鏡状画像データは、正六角形を6つの領域に分割し、分割された各々の三角形形状の領域を、それぞれSEG1〜SEG6と呼ぶ。また、正六角形の中心部分をP0と呼び、各頂点をそれぞれP1〜P6と呼ぶ。 As shown in FIG. 4, in the kaleidoscope image data, a regular hexagon is divided into six regions, and each of the divided triangular regions is referred to as SEG1 to SEG6. Moreover, the center part of a regular hexagon is called P0, and each vertex is called P1-P6, respectively.
万華鏡画像生成回路310は、顔認識回路309によって検出された顔を元画像として設定する。元画像は、検出された顔を含む正三角形の領域として設定する。図5(A)に示すように、検出された顔を含む正三角形の領域を、SEG1としてまず設定する。
The kaleidoscope
次に、万華鏡画像生成回路310は、設定されたSEG1に対して、この正三角形の一つの辺(P0−P2)を基準とした鏡対称な画像を生成する。この画像をSEG2として設定し、SEG1に合成する。同様に、設定されたSEG1に対して、この正三角形の一つの辺(P0−P1)を基準とした鏡対称な画像を生成する。この画像をSEG6として設定し、SEG1及びSEG2に合成する。このときの状態を図5(B)に示す。
Next, the kaleidoscope
次に、万華鏡画像生成回路310は、SEG1、SEG2及びSEG6から、正六角形中心を経由する辺(P6−P0−P3)を基準とした鏡対称の画像を生成する。このときの三つの領域がそれぞれSEG3、SEG4及びSEG5として生成する。そして、生成されたSEG3、SEG4及びSEG5を、SEG1、SEG2及びSEG6に合成する。このときの状態を図5(C)に示す。
Next, the kaleidoscope
このようにして、万華鏡生成回路310は、元画像に基づいて五つの鏡対称の画像を生成することによって、正六角形に分割された万華鏡状画像を生成する。
In this way, the
次に、本実施形態のデジタルカメラ100における画像データの記録形式について説明する。
Next, a recording format of image data in the
図6は、メモリカード340に記録される画像データの記録形式の一例を示す説明図である。
FIG. 6 is an explanatory diagram showing an example of a recording format of image data recorded on the
デジタルカメラ100において、通常撮像された画像データ(通常画像データ)と、万華鏡状画像として生成された画像データ(万華鏡状画像データ)との画像データの組が生成される。この一組の画像データを1ファイルとして記録し、一つのファイルのみで通常画像データと万華鏡状画像データとを再生、保存、コピー等を行うことができる。
In the
複数の画像データを1ファイルとして記録する場合は、マルチピクチャフォーマット(CIPA DC−007−2009)に規定された方法によって記録することができる。 When recording a plurality of image data as one file, it can be recorded by a method defined in a multi-picture format (CIPA DC-007-2009).
マルチピクチャフォーマットは、一つのファイルに複数の画像データを記録するフォーマットであり、本実施形態においては、通常画像データと、通常画像データに基づいて万華鏡状画像として生成された画像データとを、一のファイルとして記録する。 The multi-picture format is a format for recording a plurality of image data in one file. In this embodiment, normal image data and image data generated as a kaleidoscope image based on the normal image data are combined. Record as a file.
より具体的には、通常画像データ及びその画像データの情報を示すヘッダ情報1と、万華鏡状画像データ及びその画像データを示すヘッダ情報2とを一つのファイルとして生成する。生成されたファイルは、DCF規格に準拠したフォルダ名及びファイル名で、メモリカード340に記録される。
More specifically, the normal image data and
ヘッダ情報1には、例えば、通常画像データに対応する万華鏡状画像データの情報が記録される。また、万華鏡状画像データは1つではなく、2又はそれ以上の万華鏡状画像データが追加されていてもよい。
In the
このように記録されたファイルは、コンピュータ等で再生するときに、通常画像データと万華鏡状画像データを同時に表示したり、通常画像データと万華鏡状画像データとを連続で表示したり、一方をアイコン表示としてクリック表示により拡大表示する等の表示方法を採ることができる。 When the recorded file is played back on a computer or the like, normal image data and kaleidoscopic image data are displayed simultaneously, normal image data and kaleidoscopic image data are displayed continuously, or one of them is displayed as an icon. As a display, a display method such as an enlarged display by clicking display can be adopted.
図7は、メモリカード340に記録される画像データの記録形式の他の例を示す説明図である。
FIG. 7 is an explanatory diagram showing another example of the recording format of the image data recorded on the
図6で説明したように、一つのファイル内に複数の画像データを記録する方法とは別に、通常画像データと万華鏡状画像データとを、それぞれ別のフォルダに記録することもできる。 As described with reference to FIG. 6, apart from the method of recording a plurality of image data in one file, normal image data and kaleidoscopic image data can also be recorded in separate folders.
より具体的には、通常画像データをDCF規格に準拠したフォルダ名及びファイル名で、メモリカード340に記録される。
More specifically, normal image data is recorded on the
一方で、万華鏡状画像データは、万華鏡状画像データを記録するための専用のフォルダとして万華鏡状画像フォルダをメモリカード340内に生成し、この万華鏡状画像フォルダ内に万華鏡状画像データを記録する。なお、図7に示す例では、万華鏡状画像フォルダのフォルダ名を「Kaleidoscope Photo」としている。
On the other hand, the kaleidoscope image data generates a kaleidoscope image folder in the
万華鏡状画像フォルダに記録する万華鏡状画像データのファイル名は、通常画像データと同一でもよいし、通常画像データのファイル名に所定の文字列を負荷するなど、通常画像データのファイル名に関連した名称としてもよい。 The file name of the kaleidoscope image data to be recorded in the kaleidoscope image folder may be the same as that of the normal image data, or it is related to the file name of the normal image data, such as loading a predetermined character string into the file name of the normal image data. It is good also as a name.
またさらに、万華鏡状画像フォルダには、通常画像データと万華鏡状画像データとの関連づけを示す関連付けファイルを記録する。なお、図7に示す例では、関連付けファイルの名称を「LinkData.dat」としている。 Furthermore, an association file indicating the association between the normal image data and the kaleidoscope image data is recorded in the kaleidoscope image folder. In the example illustrated in FIG. 7, the name of the association file is “LinkData.dat”.
次に、本発明の実施形態の万華鏡状画像の変形例を説明する。 Next, a modified example of the kaleidoscopic image of the embodiment of the present invention will be described.
図4及び図5で前述したように、本実施形態では、正三角形の元画像領域を6つ組み合わせた正六角形の万華鏡状画像を一例として示したが、この形状に限られない。 As described above with reference to FIGS. 4 and 5, in the present embodiment, a regular hexagonal kaleidoscopic image obtained by combining six original image areas of regular triangles is shown as an example, but the shape is not limited thereto.
図8は、万華鏡画像生成回路310によって生成される万華鏡状画像の他の例を示す説明図である。
FIG. 8 is an explanatory diagram illustrating another example of a kaleidoscope image generated by the kaleidoscope
図8(A)は、正方形の万華鏡状画像の一例である。この場合は、元画像となる領域は二等辺三角形となり、この二等辺三角形を4つ組み合わせて正方形の万華鏡状画像を生成する。 FIG. 8A is an example of a square kaleidoscopic image. In this case, the region to be the original image is an isosceles triangle, and a square kaleidoscope-like image is generated by combining four isosceles triangles.
図8(B)は、正八角形の万華鏡状画像の一例である。この場合は、元画像となる領域は二等辺三角形となり、この二等辺三角形を8つ組み合わせて正八角形の万華鏡状画像を生成する。 FIG. 8B is an example of a regular octagon kaleidoscopic image. In this case, the region to be the original image is an isosceles triangle, and a regular octagon kaleidoscope-like image is generated by combining eight isosceles triangles.
このように、万華鏡画像生成回路310によって生成される万華鏡状画像は、様々な形状の態様を取ることができる。画像データの解像度にもよるが、原理的には偶数の領域に分割可能な正多角形形状の万華鏡状画像を生成することが可能であり、万華鏡状画像をどのような形状とするかをユーザによって選択するように構成してもよい。また、正n角形という選択ではなく、元画像の中心角度を、例えば60°(正六角形)、45°(正八角形)、30°(正十二角形)という数値としてユーザが指定するように構成してもよい。
As described above, the kaleidoscope image generated by the kaleidoscope
次に、ライブビュー表示において、万華鏡状画像を表示する際の変形例を説明する。 Next, a modified example of displaying a kaleidoscope-like image in live view display will be described.
図3で説明したように、ディスプレイ132に、生成され万華鏡状画像をライブビュー表示と共に表示する例を示したがこの表示形態に限られない。
As described with reference to FIG. 3, an example is shown in which the generated kaleidoscope-like image is displayed on the
図9は、ライブビュー表示において、生成されたた万華鏡状画像を表示するときの他の例を示す。 FIG. 9 shows another example when displaying the generated kaleidoscope image in the live view display.
図9に示す例では、ライブビュー画像を縮小表示とせずに、ディスプレイ132に撮像領域全体のライブビュー表示を行う。そして、生成された万華鏡状画像を、ライブビュー表示中の画像データに重ねて表示する。
In the example illustrated in FIG. 9, live view display of the entire imaging region is performed on the
このように、生成された万華鏡状画像を表示する際もディスプレイ132の全体でライブビュー表示を行うことで、万華鏡状画像が表示される部分が隠れてしまうものの、ユーザは撮像している画像の全体を把握しやすいという利点がある。
In this way, when displaying the generated kaleidoscope image, the live view display is performed on the
以上説明したように、本発明の実施形態では、デジタルカメラ100において、被写体検出部(動きベクトル検出回路308、顔検出回路309等)によって被写体(例えば顔)が検出された場合に、当該被写体を元画像として生成した万華鏡状画像をライブビュー表示中のディスプレイ132に表示する。また、被写体が検出されなくなった場合には、万華鏡状画像の表示を終了する。
As described above, in the embodiment of the present invention, when a subject (for example, a face) is detected by the subject detection unit (motion
このようにすることによって、デジタルカメラ100に単に万華鏡状画像を表示するのみでなく、ライブビュー表示される撮像中の画像と関連して表示されることで、状況に応じたダイナミックな表示を行うことができ、ユーザの興趣を高めることができて、ユーザが撮像装置を親しみながら使用することができる。
By doing so, not only a kaleidoscope-like image is displayed on the
また、万華鏡状画像を表示するときに、撮像領域の全体をディスプレイ132の一部に、万華鏡状画像と重なることなく縮小してライブビュー表示することによって、ライブビュー表示が万華鏡状画像によって妨げられることなく撮像中の画像を観察することができる。
Further, when displaying a kaleidoscopic image, the entire imaging area is reduced to a part of the
なお、ディスプレイ132全体でライブビュー表示を行い、その上に万華鏡状画像を重ねて表示してもよい。これにより、ユーザは撮像している画像の全体を把握しやすい。
In addition, live view display may be performed on the
また、被写体検出部は、顔検出回路309による顔を検出する、又は、動きベクトル検出部308による移動被写体を検出するので、万華鏡状画像として生成される元画像をデジタルカメラ100が自動的に検出し、自動的に万華鏡状画像を生成することにより、ユーザは顔等によって生成された万華鏡状画像により興趣を感じると共に、ライブビュー表示される予期しない変化の発生することによる楽しさを感じることができる。また、被写体としてはユーザがタッチパネル等によって指示することも可能であり、ユーザの意図に沿った万華鏡状画像を生成することもできる。
The subject detection unit detects the face by the
なお、本発明は上記の実施形態や変形例に限定されずに、その技術的な思想の範囲内において種々の変更がなしうることは明白である。また、被写体像を画像データとして取得し、表示できる電子機器全てに適用可能であることも明白である。 It should be noted that the present invention is not limited to the above-described embodiments and modifications, and it is obvious that various modifications can be made within the scope of the technical idea. It is also apparent that the present invention is applicable to all electronic devices that can acquire and display subject images as image data.
100 デジタルカメラ
102 撮影レンズ
132 タッチパネルディスプレイ
300 システムコントローラ(制御部)
308 動きベクトル検出回路
309 顔検出回路
310 万華鏡画像生成回路
314 撮像素子
350 カメラ操作部
100
308 Motion
Claims (6)
前記撮影レンズによって結像された光学像を画像データに変換して出力する撮像部と、
前記撮像部から出力された画像データをライブビュー表示可能な表示部と、
前記光学像から被写体を検出する被写体検出部と、
前記画像データの一部から万華鏡状画像データを生成する万華鏡状画像生成部と、
前記撮像部から出力された画像データを前記表示部にライブビュー表示させるとともに、前記万華鏡状画像生成部によって生成された万華鏡状画像データを前記表示部に表示させる制御部と、
を備え、
前記制御部は、ライブビュー表示において、前記被写体検出部が被写体を検出したときに、前記表示部に、当該被写体を用いて生成した万華鏡状画像をライブビュー表示と共に表示する第1表示モードと、前記被写体検出部が被写体を検出しないときに、万華鏡状画像を前記表示部に表示しない第2表示モードと、を切り換えることを特徴とする撮像装置。 A photographic lens for imaging the subject;
An imaging unit that converts an optical image formed by the photographing lens into image data and outputs the image data;
A display unit capable of live view display of image data output from the imaging unit;
A subject detection unit for detecting a subject from the optical image;
A kaleidoscope image generator for generating kaleidoscope image data from a part of the image data;
A control unit that displays the image data output from the imaging unit on the display unit in a live view, and displays the kaleidoscope image data generated by the kaleidoscope image generation unit on the display unit;
With
In the live view display, the control unit displays a kaleidoscope image generated using the subject together with the live view display on the display unit when the subject detection unit detects the subject, and a first display mode; An image pickup apparatus that switches between a second display mode in which a kaleidoscope-like image is not displayed on the display unit when the subject detection unit does not detect a subject.
前記制御部は、前記第1表示モードにおいて、前記表示部に、生成された万華鏡状画像を表示させるとともに、前記撮像部によって出力される画像データの全体を前記表示部の一部に前記万華鏡状画像と重なることなく縮小してライブビュー表示させることを特徴とする撮像装置。 The imaging device according to claim 1,
In the first display mode, the control unit causes the display unit to display the generated kaleidoscopic image, and the entire image data output by the imaging unit is displayed on the display unit as a part of the kaleidoscope shape. An image pickup apparatus that displays a live view by reducing the image without overlapping the image.
前記制御部は、前記第1表示モードにおいて、前記撮像部によって出力される画像データを前記表示部にライブビュー表示させるとともに、生成された万華鏡状画像を、前記ライブビュー表示に重ね合わせて表示することを特徴とする撮像装置。 The imaging device according to claim 1 or 2,
In the first display mode, the control unit displays the image data output by the imaging unit on the display unit in a live view, and displays the generated kaleidoscope image superimposed on the live view display. An imaging apparatus characterized by that.
前記被写体検出部は、人物又は動物の顔の位置を検出することを特徴とする撮像装置。 In the imaging device according to claims 1 to 3,
The imaging device according to claim 1, wherein the subject detection unit detects a position of a human or animal face.
前記被写体検出部は、移動中の物体の位置を検出することを特徴とする撮像装置。 The imaging device according to claim 1, wherein
The imaging device according to claim 1, wherein the subject detection unit detects a position of a moving object.
前記表示部にライブビュー表示を行い、
前記光学像から被写体を検出したときに、被写体を用いて生成した万華鏡状画像をライブビュー表示と共に表示し、
前記光学像から被写体を検出しないときは、万華鏡状画像を前記表示部に表示しないことを特徴とする撮像装置の表示方法。 An optical image formed by a photographic lens that forms an object is converted into image data, and the display method of an imaging apparatus including a display unit capable of performing live view display of the image data,
Live view display on the display unit,
When a subject is detected from the optical image, a kaleidoscope image generated using the subject is displayed together with a live view display,
A display method of an imaging apparatus, wherein when a subject is not detected from the optical image , a kaleidoscopic image is not displayed on the display unit.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010256776A JP5622535B2 (en) | 2010-11-17 | 2010-11-17 | Imaging device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010256776A JP5622535B2 (en) | 2010-11-17 | 2010-11-17 | Imaging device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012109778A JP2012109778A (en) | 2012-06-07 |
JP5622535B2 true JP5622535B2 (en) | 2014-11-12 |
Family
ID=46494932
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010256776A Expired - Fee Related JP5622535B2 (en) | 2010-11-17 | 2010-11-17 | Imaging device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5622535B2 (en) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9459781B2 (en) | 2012-05-09 | 2016-10-04 | Apple Inc. | Context-specific user interfaces for displaying animated sequences |
US10452253B2 (en) | 2014-08-15 | 2019-10-22 | Apple Inc. | Weather user interface |
EP4321088A2 (en) | 2015-08-20 | 2024-02-14 | Apple Inc. | Exercise-based watch face |
DK179412B1 (en) | 2017-05-12 | 2018-06-06 | Apple Inc | Context-Specific User Interfaces |
DK202070625A1 (en) | 2020-05-11 | 2022-01-04 | Apple Inc | User interfaces related to time |
CN115552375A (en) | 2020-05-11 | 2022-12-30 | 苹果公司 | User interface for managing user interface sharing |
US11694590B2 (en) | 2020-12-21 | 2023-07-04 | Apple Inc. | Dynamic user interface with time indicator |
US11720239B2 (en) | 2021-01-07 | 2023-08-08 | Apple Inc. | Techniques for user interfaces related to an event |
US11921992B2 (en) | 2021-05-14 | 2024-03-05 | Apple Inc. | User interfaces related to time |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004265168A (en) * | 2003-03-03 | 2004-09-24 | Sharp Corp | Image generating device, image generating method, image generating program, program recording medium and portable telephone terminal |
JP5328277B2 (en) * | 2008-09-26 | 2013-10-30 | 任天堂株式会社 | Image processing program and image processing apparatus |
-
2010
- 2010-11-17 JP JP2010256776A patent/JP5622535B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2012109778A (en) | 2012-06-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5622535B2 (en) | Imaging device | |
JP5115139B2 (en) | Composition determination apparatus, composition determination method, and program | |
KR20010100929A (en) | Image-capturing apparatus | |
US9596415B2 (en) | Control apparatus, imaging system, control method, and program for changing a composition of an image | |
JP2007295547A (en) | Digital camera | |
KR20120114177A (en) | Image processing device capable of generating wide-range image | |
JP2009218807A (en) | Imaging apparatus and image reproducing apparatus | |
KR20120115127A (en) | Image processing device capable of generating wide-range image | |
JP5966778B2 (en) | Imaging apparatus, imaging method, and program | |
JP2019012881A (en) | Imaging control device and control method of the same | |
JP2007251927A (en) | Camera with red-eye correction function | |
JP2003179798A (en) | Digital camera | |
JP2023164919A (en) | Video creating method | |
JP2010087899A (en) | Imaging apparatus, control method thereof, and program | |
JP2005229209A (en) | Imaging apparatus, photographing condition setting method, and program | |
JP2012124614A (en) | Imaging apparatus and imaging apparatus control method | |
JP5289354B2 (en) | Imaging device | |
JP5623247B2 (en) | Imaging apparatus and control method thereof | |
JP2010200243A (en) | Camera | |
JP2008065851A (en) | Information processing apparatus and recording medium | |
JP2007282279A (en) | Information processing apparatus and recording medium | |
JP6289037B2 (en) | IMAGING DEVICE AND IMAGING DEVICE CONTROL METHOD | |
JP5648563B2 (en) | Image processing apparatus, image processing method, and program | |
US20230300469A1 (en) | Image capture apparatus and control method therefor | |
JP2007124521A (en) | Image processing apparatus |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20131113 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140623 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140701 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140819 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140909 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140922 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5622535 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |