JP2006080737A - Navigation album system - Google Patents

Navigation album system Download PDF

Info

Publication number
JP2006080737A
JP2006080737A JP2004260723A JP2004260723A JP2006080737A JP 2006080737 A JP2006080737 A JP 2006080737A JP 2004260723 A JP2004260723 A JP 2004260723A JP 2004260723 A JP2004260723 A JP 2004260723A JP 2006080737 A JP2006080737 A JP 2006080737A
Authority
JP
Japan
Prior art keywords
image data
playback
reproduction
moving image
range
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2004260723A
Other languages
Japanese (ja)
Inventor
Koji Ujino
孝二 氏野
Masaaki Yugawa
正晃 湯川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Noritsu Koki Co Ltd
Original Assignee
Noritsu Koki Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Noritsu Koki Co Ltd filed Critical Noritsu Koki Co Ltd
Priority to JP2004260723A priority Critical patent/JP2006080737A/en
Publication of JP2006080737A publication Critical patent/JP2006080737A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Instructional Devices (AREA)
  • Navigation (AREA)
  • Television Signal Processing For Recording (AREA)
  • Traffic Control Systems (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To smoothly switch the display of image data at the time of reproducing a navigation album without having a user perform the troublesome work of editing or the like of moving image data. <P>SOLUTION: The reproduction time t of the moving image data at the time of album reproduction is set by a reproduction time setting means 70 and a prescribed range including data at the point of about half of the reproduction time T of the entire moving image data is set as a reproduction range by a reproduction range setting means 71. <P>COPYRIGHT: (C)2006,JPO&NCIPI

Description

本発明は、移動経路の位置情報にデジタル画像データをリンクさせた電子アルバムを作成可能なナビゲーションアルバムシステムに関し、特にデジタル画像データとしての動画像データを再生する技術に関する。   The present invention relates to a navigation album system capable of creating an electronic album in which digital image data is linked to position information of a movement path, and more particularly to a technique for reproducing moving image data as digital image data.

近年、カーナビゲーションシステムの高性能化、低価格化が進んでおり、カーナビゲーションシステムを搭載する車両が増加している。カーナビゲーションシステムは、例えば特許文献1に記載されているように、目的地をセットしておくことにより走行すべき経路をディスプレイに表示することや、自家用車が走行した経路を保存し、その経路をディスプレイ上に表示することが可能である。   In recent years, higher performance and lower prices of car navigation systems are progressing, and the number of vehicles equipped with car navigation systems is increasing. For example, as described in Patent Document 1, the car navigation system displays a route to be traveled by setting a destination on the display, or stores a route traveled by a private vehicle, and the route Can be displayed on the display.

特許文献1では、目的地までの案内経路データや実際に走行した軌跡データに対して付加情報としての画像データや音声データ等を対応付けて記億し、案内経路データや軌跡データを表示装置に表示する際には、対応付けられた画像データや音楽データ等を出力するように構成されている。このナビゲーション装置は、位置検出器で検出した現在位置をマップマッチング処理によって地図上に表示し、目的地や経由地点が入力された場合には、経路探索動作を行って案内経路データを地図上に表示し、この案内経路を登録した場合にはユーザーの操作に応じて案内経路に関連した任意の画像データ等の付加情報を案内経路に対応付けて記憶し、このように記憶した付加情報を選択的に呼び出して表示できるように構成されている。   In Patent Literature 1, image data, voice data, and the like as additional information are recorded in association with the guidance route data to the destination and the actually traveled locus data, and the guidance route data and the locus data are stored in the display device. When displaying, the image data and music data associated with each other are output. This navigation device displays the current position detected by the position detector on the map by map matching processing, and when a destination or waypoint is input, performs a route search operation to display the guidance route data on the map. When this guide route is registered, additional information such as arbitrary image data related to the guide route is stored in association with the guide route according to the user's operation, and the stored additional information is selected in this way. It can be called and displayed automatically.

一方、近年、デジタルカメラの高性能化、低価格化が進んでおり、車両で観光地等に旅行する際にはデジタルカメラを携行して名所や旧跡等を撮影することや、これらを背景にしてスナップ写真を撮影することも多くなっている。さらに、動画撮影が可能なデジタルカメラやデジタルビデオカメラを用いて観光地等で動画を撮影する機会も多くなっている。   On the other hand, in recent years, digital cameras have improved in performance and price, and when traveling to sightseeing spots etc. by vehicle, take digital cameras with them to take pictures of sights and historic sites. Taking snapshots is increasing. In addition, there are many opportunities to shoot movies in sightseeing spots using digital cameras and digital video cameras that can shoot movies.

そして、このように撮影した写真や動画をCD−RやDVD−R等の記録メディアに保存して電子アルバムを作成し、コンピュータやテレビモニタ等に写真や動画を表示させて楽しむといった使い方がなされている。   Then, the photograph and the video taken in this way are stored in a recording medium such as a CD-R or DVD-R, an electronic album is created, and the photo or the video is displayed on a computer, a TV monitor or the like for enjoyment. ing.

通常、電子アルバムは、デジタル画像データを単にサムネイル表示するか、又はスライドショー形式で画面に表示させるものが一般的であり、複数の観光地を周遊した場合に撮影した画像を後日見直したときに、いつどこで撮影した画像なのかを直ちに判別することが難しくなる等、旅行当時の思い出を想起する上で不利になることがあった。   Normally, electronic albums are generally those in which digital image data is simply displayed as thumbnails or displayed on the screen in a slide show format, and when images taken when traveling around multiple sightseeing spots are reviewed at a later date, When it comes to recalling memories at the time of travel, it was difficult to immediately determine when and where the images were taken.

そこで、本発明者は、ユーザーが容易に旅行当時の思い出を想起することができるように、前記カーナビゲーションシステムと電子アルバムとを融合させたナビゲーションアルバムを提案した。   Therefore, the present inventor has proposed a navigation album in which the car navigation system and the electronic album are fused so that the user can easily recall memories at the time of travel.

具体的に、前記ナビゲーションアルバムは、電子アルバムを開くと、旅行当日にユーザーが車両で走行した走行経路データをそのまま画面上に表示し、通常のカーナビゲーションのように画面上の現在地を示すカーソル(車両シンボル)が旅行当時の走行経路に沿って移動し、ユーザーが訪れた観光ポイントに到着すると、その場所で撮影したデジタル画像データがサムネイル表示又はスライドショー表示されるように構成されたものである。   Specifically, when the electronic album is opened, the navigation album displays the travel route data that the user has traveled on the vehicle on the day of travel as it is on the screen, and shows the current location on the screen as in normal car navigation ( When the vehicle symbol) moves along the travel route at the time of travel and arrives at a sightseeing point visited by the user, digital image data taken at that location is displayed as a thumbnail or a slide show.

これにより、旅行当時に自家用車で走行した経路をそのまま画面上で辿って旅行気分を再現することができ、さらに各観光地で撮影したデジタル画像データは、現在地カーソルがナビゲーションアルバム画面上のその観光地に移動したときにはじめて表示されるようになっているから、旅行の出発日から最終日までの日程をその旅行した順番通りに忠実に追体験でき、容易に旅行気分を再現することができる。
特開2002−81955号公報
As a result, the travel mood can be reproduced by tracing the route traveled by the private car at the time of travel on the screen as it is, and the current location cursor is displayed on the navigation album screen. Since it is displayed for the first time when moving to the ground, it is possible to relive the schedule from the departure date to the last date of the trip faithfully in the order of travel, and to easily reproduce the mood of the trip .
JP 2002-81955 A

しかし、写真と動画とが混在したデジタル画像データが記録されたナビゲーションアルバムをスライドショー形式で再生すると、写真の場合には所定の間隔(例えば、5〜10秒程度)でその表示が次々と切り替わっていくが、動画の場合にはその再生時間が終了するまでは延々と再生され続けて次のデータになかなか切り替わらないこととなる。このように、写真と動画との再生時間に差異が生じるとスライドショー表示の表示間隔のリズムが悪くなり、アルバム鑑賞者が退屈してしまうおそれがある。   However, when a navigation album in which digital image data in which photos and moving images are mixed is recorded is reproduced in a slide show format, in the case of photos, the display is switched one after another at a predetermined interval (for example, about 5 to 10 seconds). However, in the case of a moving image, it will continue to be played endlessly until the playback time ends, and will not switch to the next data. As described above, if there is a difference in the reproduction time between the photograph and the moving image, the rhythm of the display interval of the slide show display is deteriorated, and the album viewer may be bored.

また、一般に、ユーザーがデジタルビデオカメラ等で動画を撮影する場合、不必要な場面を延々と撮影してしまう傾向があり、他のユーザーが見ても楽しめるハイライトシーンは、撮影した映像のごく一部であることが多い。すなわち、撮影した動画を未編集の状態で延々と再生するよりも、ユーザーが必要と考える部分だけを抜き出して編集した動画をナビゲーションアルバムに記録した方が、アルバム鑑賞者にとって興味深く、また集中して鑑賞することができると考えられる。   Also, in general, when a user shoots a video with a digital video camera or the like, there is a tendency to shoot unnecessary scenes endlessly. Often part. In other words, it is more interesting and focused for the album viewer to record the edited video by extracting only the part that the user thinks necessary rather than playing the recorded video in an unedited state. It can be appreciated.

しかしながら、撮影した映像をユーザーがその都度編集してからナビゲーションアルバムに記録しなければならないとすると、その作業は非常に煩わしく時間がかかるため、ナビゲーションアルバムの作成自体を面倒に感じてしまうという問題がある。   However, if the user must edit the recorded video each time and then record it in the navigation album, the task is very cumbersome and time-consuming, which makes it difficult to create the navigation album itself. is there.

本発明は、かかる点に鑑みてなされたものであり、その目的とするところは、ユーザーが動画像データの編集等の煩わしい作業をすることなく、ナビゲーションアルバムの再生時においてスムーズに画像データの表示切替が行えるようにすることにある。   The present invention has been made in view of the above points, and an object of the present invention is to display image data smoothly at the time of reproduction of a navigation album without a user performing troublesome work such as editing of moving image data. The purpose is to enable switching.

前記目的を達成するため、本発明では、動画像データの再生時間を所定時間に設定してこの所定時間内に再生が完了するように動画像データの再生範囲の設定を行うようにした。   In order to achieve the above object, in the present invention, the playback time of moving image data is set to a predetermined time, and the playback range of the moving image data is set so that the playback is completed within the predetermined time.

すなわち、請求項1の発明は、ナビゲーション装置により特定された移動経路の位置情報に、該移動経路を移動したときに撮影したデジタル画像データをリンクさせて表示手段に表示させる電子アルバムを作成するナビゲーションアルバムシステムであって、
前記デジタル画像データは少なくとも動画像データを含んでおり、
前記動画像データを前記表示手段に再生表示する再生時間を設定する再生時間設定手段と、
前記再生時間設定手段で設定された再生時間だけ前記動画像データの全体又は一部を再生するようにその再生範囲を設定する再生範囲設定手段とを備えていることを特徴とする。
That is, the invention of claim 1 is a navigation for creating an electronic album in which digital image data taken when moving along the moving route is linked to position information of the moving route specified by the navigation device and displayed on the display means. An album system,
The digital image data includes at least moving image data,
Reproduction time setting means for setting a reproduction time for reproducing and displaying the moving image data on the display means;
Reproduction range setting means for setting the reproduction range so that the whole or part of the moving image data is reproduced for the reproduction time set by the reproduction time setting means.

従って、本発明によれば、再生時間設定手段で動画像データの再生時間が設定され、該再生時間だけ該動画像データを再生するようにその再生範囲が再生範囲設定手段で設定される。   Therefore, according to the present invention, the reproduction time of the moving image data is set by the reproduction time setting means, and the reproduction range is set by the reproduction range setting means so that the moving image data is reproduced for the reproduction time.

請求項2の発明は、請求項1に記載されたナビゲーションアルバムシステムにおいて、
前記再生範囲設定手段は、前記動画像データ全体の再生時間の略半分の時点におけるデータを少なくとも含む所定範囲を該動画像データの再生範囲として設定するように構成されていることを特徴とする。
The invention of claim 2 is the navigation album system according to claim 1,
The reproduction range setting means is configured to set a predetermined range including at least data at a time point substantially half the reproduction time of the entire moving image data as the reproduction range of the moving image data.

従って、本発明によれば、再生範囲設定手段によって、動画像データ全体の再生時間の略半分の時点におけるデータを少なくとも含む所定範囲が再生範囲として設定される。   Therefore, according to the present invention, the reproduction range setting means sets a predetermined range including at least data at a point approximately half the reproduction time of the entire moving image data as the reproduction range.

請求項3の発明は、請求項1に記載されたナビゲーションアルバムシステムにおいて、
前記動画像データに付加されている音声データの音量を判別する音量判別手段をさらに備え、
前記再生範囲設定手段は、前記音量判別手段で判別される前記音声データ中の音量が最大となる時点におけるデータを少なくとも含む所定範囲を前記動画像データの再生範囲として設定するように構成されていることを特徴とする。
The invention of claim 3 is the navigation album system according to claim 1,
A volume determination means for determining the volume of the audio data added to the moving image data;
The reproduction range setting unit is configured to set a predetermined range including at least data at a time point when the volume in the audio data determined by the volume determination unit is maximum as a reproduction range of the moving image data. It is characterized by that.

従って、本発明によれば、音量判別手段によって音声データ中の音量が最大となる時点におけるデータが判別され、再生範囲設定手段でこのデータを含む所定範囲が動画像データの再生範囲として設定される。   Therefore, according to the present invention, the data at the time when the volume in the audio data becomes maximum is determined by the volume determination means, and the predetermined range including this data is set as the reproduction range of the moving image data by the reproduction range setting means. .

請求項4の発明は、請求項1乃至3のうち何れか1項に記載されたナビゲーションアルバムシステムにおいて、
前記動画像データの再生速度を変更する再生速度変更手段をさらに備えていることを特徴とする。
The invention of claim 4 is the navigation album system according to any one of claims 1 to 3,
It further comprises a playback speed changing means for changing the playback speed of the moving image data.

従って、本発明によれば、再生速度変更手段により動画像データの再生速度が変更される。   Therefore, according to the present invention, the playback speed of the moving image data is changed by the playback speed changing means.

請求項5の発明は、請求項4に記載されたナビゲーションアルバムシステムにおいて、
前記再生速度変更手段は、前記再生時間設定手段で設定した再生時間内に前記再生範囲設定手段で設定した前記動画像データの再生範囲全体の再生が終了するように再生速度を変更するものであることを特徴とする。
The invention of claim 5 is the navigation album system according to claim 4,
The playback speed changing means changes the playback speed so that the playback of the entire playback range of the moving image data set by the playback range setting means ends within the playback time set by the playback time setting means. It is characterized by that.

従って、本発明によれば、再生速度変更手段により、設定された動画像データの再生範囲全体の再生が設定された再生時間内に終了するように該動画像データの再生速度が変更される。   Therefore, according to the present invention, the playback speed of the moving image data is changed by the playback speed changing means so that the playback of the entire playback range of the set moving image data is completed within the set playback time.

請求項6の発明は、請求項4に記載されたナビゲーションアルバムシステムにおいて、
前記再生速度変更手段は、前記再生時間設定手段で設定した再生時間内に前記再生範囲設定手段で設定した前記動画像データの再生範囲全体の再生が終了しない場合に、該再生時間経過後の未再生の再生範囲を該再生時間内よりも高速で再生するように再生速度を変更するものであることを特徴とする。
The invention of claim 6 is the navigation album system according to claim 4,
The playback speed changing means is the one that has not been finished after the playback time has elapsed when the playback of the entire playback range of the moving image data set by the playback range setting means does not end within the playback time set by the playback time setting means. The reproduction speed is changed so that the reproduction range of reproduction is reproduced at a higher speed than within the reproduction time.

従って、本発明によれば、再生速度変更手段によって、設定された再生時間の経過後においても未だ再生されていない動画像データの再生範囲の再生速度が変更されて該再生時間内よりも高速で再生される。   Therefore, according to the present invention, the playback speed changing means changes the playback speed of the playback range of the moving image data that has not been played back even after the set playback time has elapsed, so that the playback speed is higher than that within the playback time. Played.

請求項7の発明は、請求項1乃至6に記載されたナビゲーションアルバムシステムにおいて、
前記再生範囲設定手段で設定された前記動画像データの再生範囲を任意の範囲に補正する再生範囲補正手段をさらに備えていることを特徴とする。
The invention of claim 7 is the navigation album system according to any one of claims 1 to 6,
It further comprises reproduction range correction means for correcting the reproduction range of the moving image data set by the reproduction range setting means to an arbitrary range.

従って、本発明によれば、再生範囲補正手段によって、再生範囲設定手段で設定された動画像データの再生範囲が任意の範囲に補正される。   Therefore, according to the present invention, the reproduction range of the moving image data set by the reproduction range setting unit is corrected to an arbitrary range by the reproduction range correction unit.

以上のように、請求項1に係る発明によれば、動画像データの再生時間を設定することで、例えば写真と動画とが混在するナビゲーションアルバムの再生において、写真の表示時間と動画の再生時間とを合わせて画像データの表示切替をリズム良く行うことができ、アルバム鑑賞者を退屈させることなくナビゲーションアルバムの再生をスムーズに行うことができる。また、冗長に撮影された動画像データ中からハイライトシーンのみを再生範囲として設定することができ、他のアルバム鑑賞者にとっても興味深く楽しめるアルバム再生を実現することができる。   As described above, according to the first aspect of the invention, by setting the playback time of moving image data, for example, in playback of a navigation album in which photos and videos are mixed, the display time of photos and the playback time of videos Thus, the display switching of the image data can be performed with a good rhythm, and the navigation album can be reproduced smoothly without boring the viewer of the album. Further, it is possible to set only the highlight scene from the moving image data taken redundantly as the reproduction range, and it is possible to realize album reproduction that can be enjoyed and enjoyed by other album viewers.

請求項2に係る発明によれば、動画像データ全体の再生時間の略半分の時点におけるデータを含む所定範囲を再生範囲として設定することで、ユーザーがわざわざ動画全体をチェックしてハイライトシーンを探し出して再生範囲を設定するという作業をしなくても、ハイライトシーンである可能性の高い動画中央部分を含む所定範囲を再生範囲として再生するようにしているから、自動的にハイライトシーンを抜き出し得ることができ、動画編集の手間が削減されてアルバム作成の作業効率が向上する。   According to the second aspect of the present invention, the user can both check the entire moving image and set the highlight scene by setting the predetermined range including the data at a time point that is approximately half the playback time of the entire moving image data as the playback range. Even if you do not search for and set the playback range, the specified range including the central part of the movie that is likely to be a highlight scene is played as the playback range. It can be extracted, and the work of editing the movie is reduced and the work efficiency of creating the album is improved.

請求項3に係る発明によれば、動画像データに付加される音声データの音量が最大となる時点におけるデータを含む所定範囲を再生範囲として設定することで、動画の中で最も盛り上がっておりハイライトシーンであると推測される部分を自動的に抜き出すことができ、動画編集の手間が削減されてアルバム作成の作業効率が向上する。   According to the third aspect of the present invention, the predetermined range including the data at the time when the volume of the audio data added to the moving image data is maximized is set as the reproduction range, so that it is the most exciting in the video. It is possible to automatically extract a portion that is presumed to be a light scene, reducing the trouble of editing a movie and improving the work efficiency of album creation.

請求項4に係る発明によれば、再生速度変更手段により動画像データの再生速度を変更するから、例えば動画像データ全体を再生範囲とした場合でも、設定した再生時間内に再生が終了するように再生速度を変更することで、動画の一部をカットして再生範囲を設定する場合に比べて撮影した動画全体を早送りで鑑賞することができ、旅行当時の情景をより詳細に思い出す上で有利な効果が得られる。また、デジタル音程調整機能(デジタルピッチコントロール)を備えておけば、映像を早送りしながらでも音声データの音程を一定にした状態で再生できるためアルバム鑑賞者が違和感を感じることもない。   According to the fourth aspect of the present invention, since the playback speed of the moving image data is changed by the playback speed changing means, for example, even when the entire moving image data is in the playback range, the playback ends within the set playback time. By changing the playback speed to, you can watch the entire movie shot faster than when you cut a part of the movie and set the playback range, and remember the scene at the time of travel in more detail. An advantageous effect is obtained. Also, if a digital pitch adjustment function (digital pitch control) is provided, it is possible to reproduce the audio data with a constant pitch even while fast-forwarding the video, so that the album viewer does not feel uncomfortable.

請求項5に係る発明によれば、設定した動画像データの再生範囲の再生速度を変更することで、設定した再生時間内にこの再生範囲の再生が終了するように制御することができる。   According to the fifth aspect of the present invention, it is possible to control the reproduction of the reproduction range within the set reproduction time by changing the reproduction speed of the reproduction range of the set moving image data.

請求項6に係る発明によれば、設定した再生時間内に動画像データの再生範囲の再生が終了しなかった場合に、それ以降の未再生の動画像データの再生範囲を該再生時間内よりも高速で再生するようにしているから、アルバム再生時における画像データの表示切替間隔の変動を最小限に抑えてリズム良く再生する上で有利となる。   According to the sixth aspect of the present invention, when the reproduction of the moving image data reproduction range does not end within the set reproduction time, the subsequent reproduction range of the unreproduced moving image data is set within the reproduction time. Since the reproduction is performed at a high speed, it is advantageous for reproduction with a good rhythm while minimizing the fluctuation of the display switching interval of the image data during the reproduction of the album.

請求項7に係る発明によれば、再生範囲補正手段によって動画像データの再生範囲をユーザーが任意に補正することができるから、再生範囲設定手段により動画像データ中のハイライトシーンであると推測して自動的に設定された再生範囲がユーザーの意図していた再生範囲と異なっていた場合でも、その再生範囲をユーザーが補正することでユーザーの希望通りの再生範囲を設定することができて高い満足度が得られる。   According to the seventh aspect of the invention, since the user can arbitrarily correct the playback range of the moving image data by the playback range correcting means, it is estimated that the scene is a highlight scene in the moving image data by the playback range setting means. Even if the automatically set playback range is different from the playback range intended by the user, the playback range can be set as desired by the user by correcting the playback range. High satisfaction is obtained.

以下、本発明の実施形態を図面に基づいて詳細に説明する。以下の好ましい実施形態の説明は、本質的に例示に過ぎず、本発明、その適用物或いはその用途を制限することを意図するものでは全くない。   Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. The following description of the preferred embodiments is merely exemplary in nature and is in no way intended to limit the invention, its application, or its application.

[システム構成]
図1は、本発明の実施形態1に係るナビゲーションアルバムシステムの構成を示す図である。図1に示すように、このナビゲーションアルバムシステムは、アンテナユニットAで受信したGPS衛星からの信号及び車両の走行駆動系に搭載した車速センサSからの車速パルス信号を入力するシステム本体Bと、地図データや画像データを表示するディスプレイCと、必要な情報を入力する複数のスイッチ1と、音声情報を出力するスピーカ2と、リモートコントローラ3からの赤外線信号を受信する赤外線センサ4と、画像データにアクセスするための入出力ターミナル5と、ドライブユニットEとを備えている。
[System configuration]
FIG. 1 is a diagram showing a configuration of a navigation album system according to Embodiment 1 of the present invention. As shown in FIG. 1, the navigation album system includes a system main body B for inputting a signal from a GPS satellite received by an antenna unit A and a vehicle speed pulse signal from a vehicle speed sensor S mounted on a traveling drive system of the vehicle, and a map. A display C for displaying data and image data, a plurality of switches 1 for inputting necessary information, a speaker 2 for outputting audio information, an infrared sensor 4 for receiving an infrared signal from a remote controller 3, and image data An input / output terminal 5 for access and a drive unit E are provided.

このナビゲーションアルバムシステムは、自家用車等の車両に備えられるものであり、GPS衛星からの信号と車速センサSからの車速パルス信号とに基づき車両の走行時においても、その車両が存在する経度・緯度をリアルタイムで取得して対応する地図データを設定された拡大率でディスプレイCに表示し、その地図データ上に車両が存在する位置をシンボル等で表示する機能を備えている。さらに、目的とするポイントを指定することにより、そのポイントに至るまでに走行すべき経路を抽出し、案内(ナビゲーション)する機能を備えている。   This navigation album system is provided in a vehicle such as a private car. The longitude / latitude of the vehicle even when the vehicle is running based on the signal from the GPS satellite and the vehicle speed pulse signal from the vehicle speed sensor S. Is obtained in real time, and the corresponding map data is displayed on the display C at a set enlargement ratio, and the position where the vehicle is present on the map data is displayed with a symbol or the like. Furthermore, by specifying a target point, a route to be traveled to reach that point is extracted and guided (navigated).

前記ディスプレイCは、液晶表示部6と、接触操作位置を検出するタッチパネル部7とを備えて構成されている。前記複数のスイッチ1はナビゲーションアルバムシステムのON又はOFFを含め、表示モードの切り替え等の処理を実現する。前記リモートコントローラ3はシステム本体Bから離間した位置から必要とする操作を実現する。前記スピーカ2は人の言葉による案内を行うために用いられると共に、後述する音楽データの再生のために用いられる。   The display C includes a liquid crystal display unit 6 and a touch panel unit 7 that detects a contact operation position. The plurality of switches 1 realize processing such as display mode switching including ON / OFF of the navigation album system. The remote controller 3 realizes necessary operations from a position separated from the system main body B. The speaker 2 is used for providing guidance in human language and for reproducing music data to be described later.

前記ドライブユニットE(画像データ入力手段の一例)は、デジタルカメラCamで撮影された写真や動画を含む画像データが保存されたフラッシュメモリ等の半導体メディアMsからのデータを取得する(読み出す)半導体ドライブ8と、CD−RやDVD−R等の複数種類の大容量のディスク状メディアMdからのデータの取得及び書き込みを可能にするディスクドライブ9とを備えている。なお、半導体ドライブ8は、コンパクトフラッシュ(登録商標)やスマートメディア(登録商標)やメモリースティック(登録商標)等のフラッシュメモリの種類に対応できるように複数の挿入部を備えていることが好ましい。   The drive unit E (an example of image data input means) acquires (reads) data from a semiconductor medium Ms such as a flash memory in which image data including photographs and moving images taken by the digital camera Cam is stored. And a disk drive 9 that enables acquisition and writing of data from a plurality of types of large-capacity disk-shaped media Md such as CD-R and DVD-R. The semiconductor drive 8 preferably includes a plurality of insertion portions so as to be compatible with types of flash memories such as CompactFlash (registered trademark), SmartMedia (registered trademark), and Memory Stick (registered trademark).

また、前記入出力ターミナル5(画像データ入力手段の一例)は、デジタルカメラCamとの間に配置されるUSB(Universal Serial Bus)規格やIEEE1394規格等のケーブルXを介して、このデジタルカメラCamに保存されている画像データを取得するために機能するものである。なお、本発明では、無線によってデジタルカメラCamの画像データを取得するものを除外するものではなく、画像データ入力手段としてBluetooth(ブルートゥース)のように無線を利用して画像データを送るようにしてもよい。   The input / output terminal 5 (an example of image data input means) is connected to the digital camera Cam via a cable X such as a USB (Universal Serial Bus) standard or IEEE 1394 standard disposed between the digital camera Cam. It functions to obtain stored image data. In the present invention, it is not excluded that the image data of the digital camera Cam is acquired wirelessly, but the image data input means may transmit image data using wireless, such as Bluetooth (Bluetooth). Good.

図2は、このナビゲーションアルバムシステムの構成を示すブロック図である。図2に示すように、前記システム本体Bは、マイクロプロセッサへの情報のアクセスを実現する入出力インタフェースI/Oを備えており、この入出力インタフェースI/Oに対して位置取得手段P、前記液晶表示部6、前記タッチパネル部7、前記複数のスイッチ1、前記スピーカ2、前記赤外線センサ4、前記入出力ターミナル5、前記半導体ドライブ8、前記ディスクドライブ9、及びハードディスクHDそれぞれからのデータがアクセスする信号系を形成している。   FIG. 2 is a block diagram showing the configuration of this navigation album system. As shown in FIG. 2, the system main body B includes an input / output interface I / O that realizes access to information to the microprocessor. Data from the liquid crystal display unit 6, the touch panel unit 7, the plurality of switches 1, the speaker 2, the infrared sensor 4, the input / output terminal 5, the semiconductor drive 8, the disk drive 9, and the hard disk HD are accessed. A signal system is formed.

前記位置取得手段Pは、前記アンテナユニットAで受信したGPS衛星からの電波を取り込むと同時に、前記車速センサSからの車速パルス信号を取り込むことによりリアルタイムで車両の位置データ(経度・緯度のデータ)を取得するものである。   The position acquisition means P captures the radio wave from the GPS satellite received by the antenna unit A and simultaneously captures the vehicle speed pulse signal from the vehicle speed sensor S, thereby obtaining vehicle position data (longitude / latitude data) in real time. Is something to get.

前記ハードディスクHDは、画像データを目的地毎にグループ化して記憶するとともに、車両が走行した経路データを記憶するものである。また、このハードディスクHDは地図データを保存する地図データ保存部としての地図データベース、及び、音楽データを保存する音楽データベースとして機能するものである。前記目的地は車両の走行開始以前に設定するものの他に、走行を終えた後に設定するものであってもよい。なお、ハードディスクHDの代わりに半導体メモリを用いて構成することも可能である。   The hard disk HD stores image data grouped by destination and stores route data on which the vehicle has traveled. The hard disk HD functions as a map database as a map data storage unit for storing map data and a music database for storing music data. The destination may be set after the travel is finished, in addition to the destination set before the start of travel of the vehicle. Note that a semiconductor memory may be used instead of the hard disk HD.

前記処理装置Dは、マイクロプロセッサからのデータバスに接続する半導体メモリRAM/ROM、不揮発性メモリEEPROM、マップマッチング手段11、ナビゲーション手段12、画像記憶処理手段13、経路記憶処理手段14、リンクデータ生成手段15、出力手段16、保存処理手段17、日付情報読取手段18、判定手段19、経路表示手段20、再生時間設定手段70、再生範囲設定手段71、及び再生範囲補正手段72を備えている。   The processing device D includes a semiconductor memory RAM / ROM connected to a data bus from a microprocessor, a nonvolatile memory EEPROM, a map matching unit 11, a navigation unit 12, an image storage processing unit 13, a path storage processing unit 14, and link data generation. Means 15, output means 16, storage processing means 17, date information reading means 18, determination means 19, path display means 20, reproduction time setting means 70, reproduction range setting means 71, and reproduction range correction means 72.

なお、この処理装置Dにおいて制御を実現するためには、データバスの他にコントロールバスやアドレスバス等を必要とするものであるが、複雑化を避ける目的から図面にはコントロールバス、アドレスバス、及びインタフェース類の記載を省略している。   In order to realize control in this processing apparatus D, a control bus, an address bus, and the like are required in addition to the data bus, but for the purpose of avoiding complexity, the control bus, address bus, In addition, description of interfaces is omitted.

前記マップマッチング手段11は、前記位置取得手段Pからの位置データに対応する地図データを前記ハードディスクHDに保存された地図データベースから抽出して、ディスプレイCに対して予め設定された拡大率で表示する処理を行うものである。   The map matching unit 11 extracts map data corresponding to the position data from the position acquisition unit P from the map database stored in the hard disk HD and displays the map data on the display C at a preset magnification. The processing is performed.

前記ナビゲーション手段12は、予め設定された目的地に至る経路を前記地図データから抽出してディスプレイCに表示された地図データ上にライン状に表示する。   The navigation means 12 extracts a route to a preset destination from the map data and displays it on the map data displayed on the display C in a line.

前記画像記憶処理手段13は、前記半導体ドライブ8、ディスクドライブ9、又は入出力ターミナル5を介して取得した画像データを前記ハードディスクHDに保存する処理を行うものである。   The image storage processing means 13 performs processing for storing image data acquired via the semiconductor drive 8, the disk drive 9, or the input / output terminal 5 in the hard disk HD.

前記経路記憶処理手段14は、車両が走行した経路に対応する経路データR(図12を参照)を前記ハードディスクHDに保存する処理を行うものである。この経路データRはサンプリングタイミング毎の車両の座標を示すデータを保存した構造のファイルを想定しているが、基点となる複数の座標と、その座標毎において設定された走行方向と走行速度とをベクトルデータ化した構造であってもよい。また、この経路記憶処理手段14で保存した経路データRをディスプレイCに表示した場合には、図12において破線で示す経路が経路データRとなり、この経路データR上に車両シンボルVが示され、この経路データR上に複数の観光地P1,P2,P3・・・が示される。   The route storage processing means 14 performs processing for storing route data R (see FIG. 12) corresponding to the route traveled by the vehicle in the hard disk HD. The route data R is assumed to be a file having a structure in which data indicating the coordinates of the vehicle at each sampling timing is stored. The route data R includes a plurality of coordinates serving as a base point, a traveling direction and a traveling speed set for each coordinate. It may be a vector data structure. When the route data R stored by the route storage processing means 14 is displayed on the display C, the route indicated by the broken line in FIG. 12 becomes the route data R, and the vehicle symbol V is indicated on the route data R. On this route data R, a plurality of sightseeing spots P1, P2, P3.

前記リンクデータ生成手段15は、図6に示す画像編集画面をディスプレイCに表示した状態で、経路データR上に設定した観光地P1,P2,・・・毎に画像データの関連付けを行い、生成したリンクデータをファイル形式で保存する処理を行うものであり、この保存の際の順序で画像データが表示される。前記出力手段16は、後述するように経路データRと関連付けられた画像データをディスプレイCに表示する処理を行うものである。   The link data generation means 15 associates the image data for each of the sightseeing spots P1, P2,... Set on the route data R in a state where the image editing screen shown in FIG. The link data is stored in a file format, and the image data is displayed in the order of the storage. The output means 16 performs processing for displaying image data associated with the route data R on the display C as will be described later.

また、前記保存処理手段17は、選択した経路データRと、その経路データRに関連付けられた複数の画像データと、経路データに対応する地図データと、関連付けられた音楽データが存在する場合にはその音楽データと、プログラムとして構成された出力手段16とをディスク状メディアMd等の記憶メディアに保存する処理を行うものである。   In addition, the storage processing unit 17 selects the selected route data R, a plurality of image data associated with the route data R, map data corresponding to the route data, and associated music data. The music data and the output means 16 configured as a program are stored in a storage medium such as the disk-shaped medium Md.

前記日付情報読取手段18は、前記半導体ドライブ8、ディスクドライブ9、又は入出力ターミナル5を介して取得した画像データに付加されているExif情報から撮影日時を示す情報を読み取り、その画像データの撮影日時を特定するものである。   The date information reading means 18 reads information indicating the shooting date and time from the Exif information added to the image data acquired via the semiconductor drive 8, the disk drive 9, or the input / output terminal 5, and shoots the image data. The date and time are specified.

前記判定手段19は、前記日付情報読取手段18で読み取った複数の画像データの撮影日時情報のうち、最も古い日を出発日、最も新しい日を最終日と判定して旅行期間を特定するものである。   The determination means 19 determines the travel period by determining the oldest day as the departure date and the newest date as the final date among the shooting date and time information of the plurality of image data read by the date information reading means 18. is there.

前記経路表示手段20は、前記判定手段19の判定結果に基づいて、その旅行期間内に走行した経路データRをハードディスクHDから読み出してディスプレイCに表示するものである。   The route display means 20 reads the route data R traveled during the travel period from the hard disk HD based on the determination result of the determination means 19 and displays it on the display C.

前記再生時間設定手段70は、ナビアルバム再生時に、経路データRに関連付けられた前記画像データとしての動画像データをディスプレイCに再生表示する再生時間を設定するものである。   The reproduction time setting means 70 sets a reproduction time for reproducing and displaying the moving image data as the image data associated with the route data R on the display C when the navigation album is reproduced.

前記再生範囲設定手段71は、前記動画像データの全体又は一部を再生するようにその再生範囲を設定するものである。具体的には後述するが、動画像データ中でハイライトシーンであると推測される部分を含むように自動的に再生範囲が設定されるようになっている。   The reproduction range setting means 71 sets the reproduction range so as to reproduce all or part of the moving image data. Although specifically described later, the reproduction range is automatically set so as to include a portion that is presumed to be a highlight scene in the moving image data.

前記再生範囲補正手段72は、前記再生範囲設定手段71で設定された動画像データの再生範囲を任意の範囲に補正するものである。具体的に、ユーザーがタッチパネルやリモートコントローラ等の外部入力手段で動画像データの再生範囲を再設定することにより行われる。   The reproduction range correction unit 72 corrects the reproduction range of the moving image data set by the reproduction range setting unit 71 to an arbitrary range. Specifically, this is performed by the user resetting the playback range of the moving image data with an external input means such as a touch panel or a remote controller.

なお、前記マップマッチング手段11、ナビゲーション手段12、画像記憶処理手段13、経路記憶処理手段14、リンクデータ生成手段15、出力手段16、日付情報読取手段18、判定手段19、経路表示手段20、再生時間設定手段70、再生範囲設定手段71、及び再生範囲補正手段72は半導体メモリRAM上に展開したソフトウェア(プログラム)を想定しているが、一部又は全てをロジック等のハードウェアで構成することも可能である。   The map matching means 11, navigation means 12, image storage processing means 13, route storage processing means 14, link data generation means 15, output means 16, date information reading means 18, determination means 19, route display means 20, reproduction The time setting means 70, the reproduction range setting means 71, and the reproduction range correction means 72 are assumed to be software (programs) developed on the semiconductor memory RAM, but a part or all of them are configured by hardware such as logic. Is also possible.

[経路データRの特定]
次に、本発明の実施形態1に係るナビゲーションアルバムシステムにおける旅行期間内に走行した経路データを特定する手順について説明する。図3に示すように、ステップS101で、半導体メディアMsやディスク状メディアMd等の記憶メディアに記憶されている写真及び動画が混在した画像データを、前記半導体ドライブ8、ディスクドライブ9、又は入出力ターミナル5を介してハードディスクHDに入力する。
[Specification of route data R]
Next, a procedure for specifying route data that has traveled during the travel period in the navigation album system according to the first embodiment of the present invention will be described. As shown in FIG. 3, in step S101, image data mixed with photographs and moving images stored in a storage medium such as the semiconductor medium Ms or the disk-shaped medium Md is transferred to the semiconductor drive 8, the disk drive 9, or the input / output. Input to the hard disk HD via the terminal 5.

なお、本実施形態1では、ユーザーが撮影に使用していた記憶メディアのみから画像データを読み取るようにしているが、これに限定されず、例えば、一緒に旅行していた他のメンバーが各々撮影に使用していた記憶メディアからも画像データを読み取って、ハードディスクHDに追加入力するようにしても構わない。また、他のメンバーの記憶メディアのみから画像データをハードディスクHDに入力するようにしても構わないのはもちろんである。これは、以下の実施形態2又は3においても同様である。   In the first embodiment, the image data is read only from the storage medium used by the user for shooting. However, the present invention is not limited to this. For example, other members who traveled together may shoot each image. Alternatively, the image data may be read from the storage medium used for the recording and additionally input to the hard disk HD. Of course, the image data may be input to the hard disk HD only from the storage media of other members. The same applies to the following Embodiment 2 or 3.

次に、ステップS102で、前記ハードディスクHDに入力した複数の画像データの中から、ユーザーがアルバムに載せる必要はないと判断した画像データを選択して削除する。   Next, in step S102, image data that the user determines is not necessary to be placed on the album is selected and deleted from the plurality of image data input to the hard disk HD.

そして、ステップS103で、入力されたデジタル画像データに撮影日時情報を含むExif情報が付加されているかを判定する。ステップS103での判定が「YES」の場合には、ステップS104に分岐する。   In step S103, it is determined whether Exif information including shooting date / time information is added to the input digital image data. If “YES” at step S103, the process branches to step S104.

ステップS104で、前記日付情報読取手段18により、Exif情報から撮影日時を示す情報を読み取り、その画像データの撮影日時を特定してステップS105に進む。ステップS105で、前記判定手段19により、前記日付情報読取手段18で読み取った複数の画像データの撮影日時のうち最も古い日を出発日、最も新しい日を最終日と判定して旅行期間を特定する。   In step S104, the date information reading means 18 reads information indicating the shooting date and time from the Exif information, specifies the shooting date and time of the image data, and proceeds to step S105. In step S105, the determination means 19 determines the travel period by determining the oldest day as the departure date and the newest date as the final date among the shooting dates and times of the plurality of image data read by the date information reading means 18. .

そして、ステップS106で、前記経路表示手段20により、前記判定手段19で特定された旅行期間内に車両が走行した経路データRをハードディスクHDから読み出してディスプレイCに表示することで、ナビゲーションアルバムの作成のための経路データRの特定が完了する。   In step S106, the route display means 20 reads the route data R traveled by the vehicle within the travel period specified by the determination means 19 from the hard disk HD and displays it on the display C, thereby creating a navigation album. The specification of the route data R for is completed.

一方、ステップS103での判定が「NO」の場合には、ステップS107に分岐し、ステップS107で、ディスプレイCに旅行期間の日付入力をユーザーに促す日付入力画面を表示する。そして、ステップS108で日付入力が終わるまで待機する。日付入力が終了するとステップS105に分岐する。   On the other hand, if the determination in step S103 is “NO”, the process branches to step S107, and a date input screen prompting the user to input the date of the travel period is displayed on display C in step S107. In step S108, the process waits until the date input is completed. When the date input is completed, the process branches to step S105.

以上のように、デジタル画像データに撮影日時情報を含むExif情報が付加されていた場合には、ユーザーはデジタル画像データを本ナビゲーションアルバムシステムに入力するだけで、旅行期間の日付をわざわざ入力指定しなくても自動的に旅行期間内に走行した経路データRを特定することができる。そのため、ナビゲーションアルバムを作成する上でユーザーの作業負担が軽減されることになる。   As described above, when the Exif information including the shooting date / time information is added to the digital image data, the user can input and specify the date of the travel period simply by inputting the digital image data into the navigation album system. Even if it is not, it is possible to automatically specify the route data R that has traveled within the travel period. For this reason, the burden on the user in creating the navigation album is reduced.

また、デジタル画像データに撮影日時を含むExif情報が付加されていない場合でも、ディスプレイCに旅行期間の日付入力をユーザーに促す日付入力画面が表示されるから、日付入力漏れを防止する上で有利である。   Further, even when Exif information including the shooting date and time is not added to the digital image data, a date input screen prompting the user to input a date for the travel period is displayed on the display C, which is advantageous in preventing omission of date input. It is.

[画像データと観光地との関連付け]
旅行においてデジタルカメラCamで撮影したスナップ写真及び動画等が混在したデジタル画像データとその画像データを撮影した観光地情報とを関連付ける場合には、旅行を終えて自宅に戻った後に、図4に示す処理メニュー28をディスプレイCに表示して「画像データの取得」ボタン21を操作することになる。なお、この処理メニュー28には、「画像データの取得」ボタン21の他に「再生処理(実走行モード)」ボタン22と、「再生処理(リプレイモード)」ボタン23と、「メディアに保存」ボタン24と、「OK」ボタン25とが表示される。
[Association between image data and sightseeing spot]
In the case of associating digital image data in which snapshots and moving images taken with the digital camera Cam are mixed with the sightseeing spot information in which the image data was taken during the trip, it is shown in FIG. The processing menu 28 is displayed on the display C and the “image data acquisition” button 21 is operated. In this processing menu 28, in addition to the “obtain image data” button 21, a “playback processing (actual running mode)” button 22, a “playback processing (replay mode)” button 23, and “save to media”. A button 24 and an “OK” button 25 are displayed.

この「画像データの取得」ボタン21を操作し、「OK」ボタン25を操作した場合には、まず、図6のフローチャート図に示す関連付け処理が実行される。   When the “acquire image data” button 21 is operated and the “OK” button 25 is operated, first, the association process shown in the flowchart of FIG. 6 is executed.

前記関連付け処理では、ステップS201で、前記半導体ドライブ8等を介して取得した複数の画像データのうち1つを図5に示す画像取得画面27に表示する。ステップS202で、画像取得画面27よりも下側位置に、ハードディスクHDに記録されている観光地情報のタイトル(図5では“USJ”や“海遊館”)の候補を一覧表示する。   In the association process, in step S201, one of a plurality of image data acquired via the semiconductor drive 8 or the like is displayed on the image acquisition screen 27 shown in FIG. In step S202, candidates for the titles of sightseeing spot information ("USJ" and "Kaiyukan" in FIG. 5) recorded on the hard disk HD are displayed in a list below the image acquisition screen 27.

前記観光地タイトルは、画像取得画面27に表示された画像データに付加されているExif情報から撮影日時を特定し、この撮影日時に車両を停車していた位置情報を前記経路記憶処理手段14に記憶されている経路データRから読み出すことで、その位置における最寄りの観光地タイトルの候補を一覧表示するようにしている。そして、スクロールカーソル26を操作することにより、全ての観光地タイトルの候補を確認することができるようになっている。   The sightseeing spot title specifies the shooting date and time from the Exif information added to the image data displayed on the image acquisition screen 27, and the location information of the vehicle stopped at this shooting date and time is stored in the route storage processing means 14. By reading out from the stored route data R, candidates for the nearest sightseeing spot title at the position are displayed as a list. Then, by operating the scroll cursor 26, all the tourist destination title candidates can be confirmed.

そして、ステップS203で、画像取得画面27に表示された画像データが、観光地タイトルに関連付ける必要があるかを判定する。ステップS203での判定が「YES」の場合には、ステップS204に分岐して、ステップS204で、画像取得画面27に表示されている画像データを撮影した観光地のタイトルを選択した状態で「登録」ボタン29を操作する。これにより、画像取得画面27に表示された画像データと、撮影場所の観光地タイトルとの関連付けが終了し、ステップS205に進む。   In step S203, it is determined whether the image data displayed on the image acquisition screen 27 needs to be associated with the tourist destination title. If the determination in step S203 is “YES”, the process branches to step S204, and “registration” is performed in the state where the title of the sightseeing spot where the image data displayed on the image acquisition screen 27 is captured is selected in step S204. "Button 29 is operated. As a result, the association between the image data displayed on the image acquisition screen 27 and the sightseeing spot title of the shooting location ends, and the process proceeds to step S205.

ステップS203での判定が「NO」の場合(写真写りが悪かったり同じようなアングルの写真が何枚もある等の理由による)には、「キャンセル」ボタン30を操作することで、観光地タイトルに画像データを関連付けることなくステップS205に分岐する。   If the determination in step S203 is “NO” (because the photo is not good or there are many photos with similar angles, etc.), the “Cancel” button 30 is operated to display the title of the tourist destination. The process branches to step S205 without associating the image data with.

ステップS205で、次の画像データが存在するかを判定し、ステップS205での判定が「YES」の場合には、ステップS201に分岐して、次の画像データが画像取得画面27に表示される。ステップS205での判定が「NO」の場合には、画像データと観光地タイトルとの関連付け作業を終了する。   In step S205, it is determined whether the next image data exists. If the determination in step S205 is “YES”, the process branches to step S201, and the next image data is displayed on the image acquisition screen 27. . If the determination in step S205 is “NO”, the process of associating the image data with the tourist destination title is terminated.

次に、ディスプレイCに図7に示す画像編集画面31が表示される。この画像編集画面31では、先ほど観光地タイトルに関連付けた画像データが1枚ずつ表示される。画像編集画面31の下側位置にはタイトルバー32が表示され、このタイトルバー32の左端には画像データと関連付けられた観光地タイトル(図7では“USJ”)が表示され、タイトルバー32の中央右寄り位置には画像データのExif情報から取得した撮影日時が表示されている。   Next, the image editing screen 31 shown in FIG. On the image editing screen 31, the image data associated with the tourist destination title is displayed one by one. A title bar 32 is displayed at the lower position of the image editing screen 31, and a sightseeing spot title (“USJ” in FIG. 7) associated with the image data is displayed at the left end of the title bar 32. The shooting date and time acquired from the Exif information of the image data is displayed at the right center position.

そして、タイトルバー32の右端には、その観光地毎に予め登録されている観光地にちなんだ画像がはめ込み合成されるようになっており、複数の画像の中からユーザーの好みに合わせて選択して切り替えることができるようになっている。   At the right end of the title bar 32, an image associated with a sightseeing spot registered in advance for each sightseeing spot is inserted and combined, and a plurality of images are selected according to the user's preference. And can be switched.

また、画面右上にはサブ画像表示画面33が表示されており、観光地の位置情報が地図データとして表示されている。なお、このサブ画像表示画面33は、表示されている画像データとオーバーラップして表示されているため、画像データが見づらい等の場合には非表示に設定することもできる。   In addition, a sub image display screen 33 is displayed at the upper right of the screen, and the location information of the sightseeing spot is displayed as map data. The sub-image display screen 33 is displayed so as to overlap the displayed image data, and can be set to non-display when the image data is difficult to see.

[動画像データの再生時間及び再生範囲の設定手順]
ここで、画像データが動画像データを含んでいる場合、この動画像データに対する再生時間や再生範囲を設定する必要がある。以下、動画像データの再生時間及び再生範囲の設定手順について、図8に示すフローチャート図に基づいて説明する。
[Procedure for setting the playback time and playback range of moving image data]
Here, when the image data includes moving image data, it is necessary to set a reproduction time and a reproduction range for the moving image data. Hereinafter, the procedure for setting the playback time and playback range of moving image data will be described with reference to the flowchart shown in FIG.

まず、ディスプレイCに動画編集画面(図示せず)を表示し、図8に示すように、ステップS301で、動画像データ全体の再生時間Tを算出する。図9に示すように、本実施形態1では再生時間Tが60secであるとする。   First, a moving image editing screen (not shown) is displayed on the display C, and as shown in FIG. 8, the reproduction time T of the entire moving image data is calculated in step S301. As shown in FIG. 9, in the first embodiment, it is assumed that the reproduction time T is 60 sec.

ステップS302で、再生時間設定手段70により動画像データの再生時間tを設定する。この設定方法としては、例えば、ナビゲーションアルバムをスライドショー形式で再生するときの写真の表示間隔を10secと設定している場合に動画像データの再生時間tも同じく10secに合わせて設定したり、ユーザーがキーボードやタッチパネル等を用いて再生時間tを直接入力する等が考えられる。以下、再生時間tを10secに設定したとして説明する。   In step S302, the playback time setting means 70 sets the playback time t of the moving image data. As this setting method, for example, when the photo display interval when the navigation album is played in the slide show format is set to 10 sec, the playback time t of the moving image data is also set to 10 sec. It is conceivable to directly input the playback time t using a keyboard, a touch panel, or the like. In the following description, it is assumed that the playback time t is set to 10 sec.

次に、ステップS303で、動画像データ全体の再生時間Tが再生時間設定手段70で設定した再生時間tよりも長いかどうか、すなわちT≧tを満たすかを判定する。   Next, in step S303, it is determined whether the reproduction time T of the entire moving image data is longer than the reproduction time t set by the reproduction time setting means 70, that is, whether T ≧ t is satisfied.

ステップS303での判定が「NO」の場合には、ステップS308に分岐し、ステップS308で、再生時間tを動画像データ全体の再生時間Tに再設定する。そして、ステップS309で、再生範囲設定手段71により再生範囲を動画像データ全体に設定して再生範囲の設定を終了する。   If the determination in step S303 is “NO”, the process branches to step S308, and the reproduction time t is reset to the reproduction time T of the entire moving image data in step S308. In step S309, the reproduction range setting unit 71 sets the reproduction range for the entire moving image data, and the setting of the reproduction range ends.

ステップS303での判定が「YES」の場合には、ステップS304に分岐し、ステップS304で、動画像データ全体の再生時間Tに基づいて動画像データの中央位置を検出する。具体的に、図9に示すように、動画像データ全体の再生時間Tが60secであることから、その半分の時点(30sec)におけるデータを検出する。   If “YES” at step S303, the process branches to step S304, and the central position of the moving image data is detected based on the reproduction time T of the entire moving image data at step S304. Specifically, as shown in FIG. 9, since the reproduction time T of the entire moving image data is 60 seconds, data at half the time point (30 seconds) is detected.

そして、ステップS305で、再生範囲設定手段71により、前記検出した動画中央部分を含む所定範囲を再生範囲として設定する。具体的に、設定した再生時間tが10secであるから、動画中央部分を中心にその前後5secを含む範囲を再生範囲として設定することが好ましい。   In step S305, the reproduction range setting means 71 sets a predetermined range including the detected moving image central portion as a reproduction range. Specifically, since the set playback time t is 10 sec, it is preferable to set a range including 5 sec before and after the central portion of the moving image as the playback range.

なお、この動画中央部分を含む所定範囲を再生範囲と設定したのは、この部分が動画像データ中のハイライトシーンである可能性が最も高く、他のユーザーがアルバム鑑賞するときにも退屈することが少ないと考えられるからである。   It should be noted that the reason why the predetermined range including the central portion of the moving image is set as the playback range is most likely that this portion is a highlight scene in the moving image data, and when other users watch the album, they are bored. This is because there are few things.

次に、ステップS306で、前記設定した再生範囲をディスプレイCにプレビューして、ユーザーの希望通りの再生範囲となっているかを判定する。ステップS306での判定が「YES」の場合には、再生範囲の設定を終了する。   Next, in step S306, the set playback range is previewed on the display C to determine whether the playback range is as desired by the user. If the determination in step S306 is “YES”, the setting of the reproduction range ends.

ステップS306での判定が「NO」の場合には、ステップS307に分岐して、ステップS307で、ユーザーが任意の範囲に再生範囲を指定して再生範囲補正手段72で補正する。ここで、再生範囲の指定は、タッチパネルやリモートコントローラ等の外部入力手段により行う。   If “NO” at step S306, the process branches to step S307, where the user designates a reproduction range in an arbitrary range and corrects it by the reproduction range correction means 72. Here, the reproduction range is designated by an external input means such as a touch panel or a remote controller.

なお、このような再生範囲の設定は、あくまでも動画像データ中にチャプターを付加して行うものであり、設定した再生範囲外の動画像データをトリミングして消去するものではない。このように、元の動画像データに何ら変更が加えられることなくそのデータが残っているため、必要に応じて動画像データ全体を再生範囲に設定したり、又は他の再生範囲に設定し直すことができるようになっている。これは、以下の実施形態2又は3においても同様である。   Such setting of the reproduction range is performed by adding a chapter to the moving image data, and does not trim and delete moving image data outside the set reproduction range. In this way, since the original moving image data remains without any change, the entire moving image data is set as the reproduction range or reset to another reproduction range as necessary. Be able to. The same applies to the following Embodiment 2 or 3.

以上のように、動画像データの再生時間を設定することで、写真と動画とが混在したナビゲーションアルバムをスライドショー形式で再生する際に、写真の表示時間と動画の再生時間とを合わせて画像データの表示切替をリズム良く行うことができる。また、動画像データ中のハイライトシーンであると推測される動画中央部分を含む所定範囲を再生範囲として自動的に設定することができるため、ユーザーが動画像データ全体をわざわざチェックする必要がなくアルバム作成の作業効率が向上する。   As described above, by setting the playback time of moving image data, when playing a navigation album in which photos and videos are mixed in a slide show format, the display time of the photos and the playback time of the videos are combined. Can be switched with good rhythm. In addition, since a predetermined range including the central part of the moving image that is presumed to be a highlight scene in the moving image data can be automatically set as the reproduction range, the user does not have to check the entire moving image data. Work efficiency of album creation is improved.

[その他の関連付け手順]
次の処理では、ディスプレイCに対して図10に示すBGMセット画面40を表示し、ユーザーが必要とした場合には、「YES」ボタン41を操作し、不要であると判断した場合には「NO」ボタン42を操作し、「YES」ボタン41を操作した場合には、前記音楽データベースに保存された曲名を曲名表示部43に一覧化して表示し、試聴する場合には「試聴」ボタン44を操作することにより前記スピーカ2で音楽の試聴を行え、音楽の選択を終えた場合に「OK」ボタン45を操作することにより、その音楽データが、BGMとして1つの経路データRに対してセットして次の処理に移行する。なお、このように音楽データをセットする場合、観光地タイトル毎に異なる音楽データをセットするようにしてもよい。さらに、例えば、USJ内のジョーズのアトラクションにおいて撮影した画像データに対して映画“ジョーズ”で使用されていたBGMを流すように設定する等、より詳細な音楽データの設定を行っても構わない。
[Other association procedures]
In the next process, the BGM set screen 40 shown in FIG. 10 is displayed on the display C. When the user needs it, the “YES” button 41 is operated. When the “NO” button 42 is operated and the “YES” button 41 is operated, the song names stored in the music database are displayed in a list on the song name display unit 43, and when auditioning, the “trial listening” button 44 is displayed. The music data can be auditioned by the speaker 2 by operating the “OK” button 45 when the music selection is completed, and the music data is set as one BGM for the route data R. The process proceeds to the next process. When music data is set in this way, different music data may be set for each tourist destination title. Further, for example, more detailed music data may be set, such as setting the BGM used in the movie “Jaws” to flow for the image data shot at the Joe's attraction in USJ.

次の処理では、ディスプレイCにタイトル入力画面(図示せず)を表示する。タイトル入力作業は、先ほど選択した観光地タイトルがそのまま入力されるためユーザーがわざわざ作業する必要がない。ユーザーが任意のタイトルに修正したい場合には、このタイトル入力画面に表示されたキーボードを用いて必要とする文字を入力することができる。   In the next process, a title input screen (not shown) is displayed on the display C. In the title input work, the tourist destination title selected previously is input as it is, so that the user does not have to work. When the user wants to correct to an arbitrary title, he / she can input necessary characters using the keyboard displayed on the title input screen.

[ナビゲーションアルバムの起動]
このように、画像データと観光地情報との関連付けが全て完了した後で、前記処理メニュー28から「メディアに保存」ボタン24を操作することにより、前記保存処理手段17によってディスク状メディアMdに保存する処理が実行され、ナビゲーションアルバムが作成される。
[Launch Navigation Album]
As described above, after all the association between the image data and the sightseeing spot information is completed, the “save to media” button 24 is operated from the processing menu 28 to save the image data to the disk-like medium Md. The process to perform is performed, and a navigation album is created.

前記ナビゲーションアルバムは、一般家庭のコンピュータ等にセットすることにより、図11に示すタイトルメニュー画面50が表示される。このタイトルメニュー画面50には、アルバムのタイトルを示すタイトル表示部50A、旅行の日付を示す日付表示部50Bが表示されていつどこに旅行したときの電子アルバムであるかが判別できるようになっている。さらに、ナビスライド51、Mapスライド52、スライドショー53の3つのメニューが表示されており、後述するように、3つのメニューはそれぞれ画像の表示方式に違いがある。   When the navigation album is set in a general household computer or the like, a title menu screen 50 shown in FIG. 11 is displayed. On the title menu screen 50, a title display section 50A indicating the title of the album and a date display section 50B indicating the date of travel are displayed so that it is possible to determine when and where the electronic album is traveled. . Further, three menus of a navigation slide 51, a map slide 52, and a slide show 53 are displayed. As will be described later, the three menus have different image display methods.

前記ナビスライドメニュー51を選択すると、図12に示すように、地図表示画面60に切り替わる。この地図表示画面60には、タイムラインバー61と複数の再生制御ボタン62とが表示されており、再生制御ボタン62のうちの再生ボタンを操作することやタイムラインバー61を操作することにより、経路データR上に車両シンボルVが移動する状態が時間を短縮した状態で(シミュレーションした状態で)表示される。   When the navigation slide menu 51 is selected, the screen is switched to a map display screen 60 as shown in FIG. On this map display screen 60, a timeline bar 61 and a plurality of playback control buttons 62 are displayed. By operating a playback button of the playback control buttons 62 or operating the timeline bar 61, A state in which the vehicle symbol V moves on the route data R is displayed with a reduced time (in a simulated state).

そして、車両シンボルVが出発位置Stを出発して経路データR上を走行し、最初の観光地P1に到着すると、その観光地P1に関連付けて登録されていた画像データが、図7に示すような表示形式で、予め設定された順序であって設定されたインターバルで表示されるようになっている。ここで、前記画像データが動画の場合には、前記再生範囲設定手段71で設定した再生範囲が再生表示され、設定された再生時間が経過すると次の画像データに切り替わるようになっている。   Then, when the vehicle symbol V departs from the departure position St and travels on the route data R and arrives at the first sightseeing spot P1, the image data registered in association with the sightseeing spot P1 is as shown in FIG. Are displayed in a preset order and at preset intervals. Here, when the image data is a moving image, the reproduction range set by the reproduction range setting means 71 is reproduced and displayed, and when the set reproduction time elapses, the next image data is switched.

前記観光地P1に登録されている画像データを全て見終わった後、再び地図表示画面60に切り替わり、車両シンボルVが次の観光地P2に向けて走行する。このように、全ての観光地P1〜P3を車両シンボルVが走行して到着位置Gに到着するまでの間に、各々の観光地P1〜P3で登録されていた画像データを時系列に沿って楽しむことができる。   After all the image data registered in the sightseeing spot P1 has been viewed, the display is switched again to the map display screen 60, and the vehicle symbol V travels toward the next sightseeing spot P2. As described above, the image data registered in each of the sightseeing spots P1 to P3 in chronological order until the vehicle symbol V travels through all the sightseeing spots P1 to P3 and arrives at the arrival position G. I can enjoy it.

なお、経路データRの途中に有名な観光地がある場合には、その観光地情報がハードディスクHDに登録されていれば、車両シンボルVが有名観光地付近を走行したときにその観光地情報を表示するようにしても構わない。   If there is a famous sightseeing spot in the route data R, if the sightseeing spot information is registered in the hard disk HD, the sightseeing spot information is displayed when the vehicle symbol V travels around the famous sightseeing spot. You may make it display.

また、前記Mapスライドメニュー52を選択すると、前記ナビスライドメニュー51のときと同様、地図表示画面60が表示される。ここで、登録されている観光地P1〜P3のうち1つを選択することにより、その選択した観光地に関連付けられている画像データのみが、予め設定された順序で、設定されたインターバルで表示されるようになっている。これにより、ユーザーが見たい観光地の画像データを素早く表示させることができる。   When the Map slide menu 52 is selected, the map display screen 60 is displayed as in the case of the navigation slide menu 51. Here, by selecting one of the registered sightseeing spots P1 to P3, only the image data associated with the selected sightseeing spot is displayed at a set interval in a preset order. It has come to be. Thereby, the image data of the sightseeing spot that the user wants to see can be quickly displayed.

なお、Mapスライドメニュー52では、前記ナビスライド51のように地図表示画面60を表示させず、登録されている観光地タイトルの一覧を表示してそのタイトル情報を選択することで画像データを表示させるようにしても構わない。   In the Map slide menu 52, the map display screen 60 is not displayed as in the case of the navigation slide 51, but a list of registered sightseeing spot titles is displayed and image data is displayed by selecting the title information. It doesn't matter if you do.

そして、前記スライドショーメニュー53を選択すると、このナビゲーションアルバムに記憶されている画像データが、予め設定された順序で、設定されたインターバルで表示されるようになっている。   When the slide show menu 53 is selected, the image data stored in the navigation album is displayed at a set interval in a preset order.

また、タイトルメニュー画面50には、「設定」ボタン54が表示されており、この「設定」ボタン54を操作することにより、例えば音声データの切り替え等、種々の設定を行うことができるようになっている。   Further, a “setting” button 54 is displayed on the title menu screen 50, and various settings such as switching of audio data can be performed by operating the “setting” button 54. ing.

[その他の画像データ表示方法]
本実施形態1のナビゲーションアルバムシステムは、主にディスク状メディアMd等にナビゲーションアルバムを作成して一般家庭のコンピュータ等で鑑賞することを目的とするものであるが、その他にもディスプレイC上で画像データを鑑賞することができる。
[Other image data display methods]
The navigation album system according to the first embodiment is mainly intended to create a navigation album on a disc-shaped medium Md or the like and view it on a computer at home, etc. You can enjoy the data.

つまり、図4に示すように、ディスプレイCに処理メニュー28を表示し、この処理メニュー28の「再生処理(実走行モード)」ボタン22を操作した場合には、観光地タイトルを一覧化して選択画面(図示せず)が表示され、再生すべきアルバムタイトルを選択して「OK」ボタンを操作することにより、そのタイトルに対応した経路データRが指定され、実走行モード画面がディスプレイCに表示される。   In other words, as shown in FIG. 4, when the processing menu 28 is displayed on the display C and the “reproduction processing (actual driving mode)” button 22 of the processing menu 28 is operated, a list of tourist destination titles is selected. A screen (not shown) is displayed. By selecting the album title to be played and operating the “OK” button, the route data R corresponding to the title is designated, and the actual driving mode screen is displayed on the display C. Is done.

そして、図12に示すように車両の走行により車両シンボルVが経路データR上の観光地P1に近接すると、地図データの一部の領域に重なる状態で新たにウィンドウを開き、その観光地P1に関連付けられた複数の画像データが、予め設定された順序で、設定されたインターバルで表示され、音楽データが関連付けられている場合には、その音楽データを再生する。   Then, as shown in FIG. 12, when the vehicle symbol V approaches the tourist spot P1 on the route data R as the vehicle travels, a new window is opened in a state of overlapping a part of the map data, and the tourist spot P1 is opened. A plurality of associated image data is displayed in a preset order at a set interval, and when music data is associated, the music data is reproduced.

また、ディスプレイCに表示された処理メニュー28の「再生処理(リプレイモード)」ボタン23を操作した場合には、前述と同様に選択画面が表示され、再生すべきアルバムタイトルを選択して「OK」ボタンを操作することにより、そのタイトルに対応した経路データRが指定され、リプレイモード画面がディスプレイCに表示される。   Further, when the “playback processing (replay mode)” button 23 of the processing menu 28 displayed on the display C is operated, a selection screen is displayed in the same manner as described above, and an album title to be played back is selected and “OK” is displayed. ”Button is designated, the route data R corresponding to the title is designated, and the replay mode screen is displayed on the display C.

このリプレイモード画面は、図12における地図表示画面60と同様のものであり、ディスプレイC上でナビゲーションアルバムの動作をシミュレーションすることができるため、ディスク状メディアMdにナビゲーションアルバムのデータを保存する前のプレビュー画面として有効である。   This replay mode screen is the same as the map display screen 60 in FIG. 12, and the operation of the navigation album can be simulated on the display C. Therefore, before the navigation album data is stored in the disc-shaped medium Md. It is effective as a preview screen.

以上のように、実走行モードを選択した場合には、経路データR上において設定された観光地P1に車両が近接した際に、その観光地P1に関連付けられた画像データがディスプレイCに表示されるため、過去に訪れた観光地P1で撮影した画像データを同乗者が観賞できるものとなる。この場合、車両は経路データR上を走行する必要はなく、観光地P1に近接する毎に複数の画像データが自動的に表示されるのである。   As described above, when the actual driving mode is selected, when the vehicle approaches the sightseeing spot P1 set on the route data R, the image data associated with the sightseeing spot P1 is displayed on the display C. Therefore, the passenger can view the image data taken at the sightseeing spot P1 visited in the past. In this case, the vehicle does not need to travel on the route data R, and a plurality of image data is automatically displayed every time the vehicle approaches the sightseeing spot P1.

また、リプレイモードを選択した場合には、車両を停車させた状態でもディスプレイCに表示された地図データに経路データRを表示し、この経路データR上に車両シンボルVを移動させて表示し、車両シンボルVが観光地P1に接近すると、その観光地P1に設定された複数の画像データを自動的に表示するので、例えば、旅行で撮影した画像データを観光地毎に表示できるものとなっている。   When the replay mode is selected, the route data R is displayed on the map data displayed on the display C even when the vehicle is stopped, and the vehicle symbol V is moved and displayed on the route data R. When the vehicle symbol V approaches the sightseeing spot P1, a plurality of image data set in the sightseeing spot P1 is automatically displayed, so that, for example, image data taken during a trip can be displayed for each sightseeing spot. Yes.

なお、本実施形態1では、位置取得手段としてGPS衛星からの信号を用いるように構成していたが、この位置取得手段は、例えばPHS型の携帯電話機で実現されている位置取得方法と同様に、地上に設置された複数の電波の発信源からの電波を受信することにより、これらの発信源を基準にして車両の位置を取得するものであってもよい。これは、以下の実施形態2,3においても同様である。   In the first embodiment, a signal from a GPS satellite is used as the position acquisition unit. However, this position acquisition unit is similar to the position acquisition method realized by, for example, a PHS mobile phone. Alternatively, by receiving radio waves from a plurality of radio wave transmission sources installed on the ground, the position of the vehicle may be acquired based on these transmission sources. The same applies to the following second and third embodiments.

また、本実施形態1では、カーナビゲーションの表示画面上でナビゲーションアルバムを作成する形態について説明しているが、この形態に限定するものではなく、例えば、特定された移動経路の位置情報をカーナビゲーションから読み取り、家庭内のパソコンに搭載されたプログラム等を活用してナビゲーションアルバムを作成するようにしてもよい。これは、以下の実施形態2,3においても同様である。   Further, in the first embodiment, the form of creating a navigation album on the car navigation display screen has been described. However, the present invention is not limited to this form. For example, the position information of the specified travel route is displayed as car navigation. The navigation album may be created using a program installed in a personal computer at home. The same applies to the following second and third embodiments.

<実施形態2>
図13は、本発明の実施形態2に係るナビゲーションアルバムシステムの構成を示すブロック図である。本実施形態2は、前記実施形態1に対して音量判別手段73を追加したものである。ここで、音量判別手段73は、動画像データに付加されている音声データの音量を判別するものである。
<Embodiment 2>
FIG. 13 is a block diagram showing a configuration of a navigation album system according to Embodiment 2 of the present invention. In the second embodiment, a volume discriminating means 73 is added to the first embodiment. Here, the volume discrimination means 73 discriminates the volume of the audio data added to the moving image data.

次に、本実施形態2に係るナビゲーションアルバムシステムにおける動画像データの再生時間及び再生範囲を設定する手順について、図14に示すフローチャート図に基づいて説明する。   Next, a procedure for setting the playback time and playback range of moving image data in the navigation album system according to the second embodiment will be described with reference to the flowchart shown in FIG.

まず、ディスプレイCに動画編集画面(図示せず)を表示し、ステップS401で、動画像データ全体の再生時間Tを算出する。図15に示すように、本実施形態2では再生時間Tが60secであるとする。   First, a moving image editing screen (not shown) is displayed on the display C, and the reproduction time T of the entire moving image data is calculated in step S401. As shown in FIG. 15, in the second embodiment, it is assumed that the reproduction time T is 60 sec.

そして、ステップS402で、再生時間設定手段70により動画像データの再生時間tを設定する。この設定方法としては、例えば、ナビゲーションアルバムをスライドショー形式で再生するときの写真の表示間隔を10secと設定している場合には動画像データの再生時間tも同じく10secに合わせて設定したり、ユーザーがタッチパネルやリモートコントローラ等を用いて再生時間tを直接入力することが考えられる。以下、再生時間tを10secに設定したとして説明する。   In step S402, the reproduction time setting means 70 sets the reproduction time t of the moving image data. As this setting method, for example, when the photo display interval when the navigation album is played in the slide show format is set to 10 sec, the playback time t of the moving image data is also set to 10 sec. May directly input the reproduction time t using a touch panel, a remote controller, or the like. In the following description, it is assumed that the playback time t is set to 10 sec.

次に、ステップS403で、動画像データの再生時間Tが再生時間設定手段70で設定した再生時間tよりも長いかどうか、すなわちT≧tを満たすかを判定する。   Next, in step S403, it is determined whether the playback time T of the moving image data is longer than the playback time t set by the playback time setting means 70, that is, whether T ≧ t is satisfied.

ステップS403での判定が「NO」の場合には、ステップS408に分岐し、ステップS408で、再生時間tを動画像データ全体の再生時間Tに再設定する。そして、ステップS409で、再生範囲設定手段71により再生範囲を動画像データ全体に設定して再生範囲の設定を終了する。   If “NO” in step S403, the process branches to step S408, and the reproduction time t is reset to the reproduction time T of the entire moving image data in step S408. In step S409, the reproduction range setting unit 71 sets the reproduction range for the entire moving image data, and the setting of the reproduction range ends.

ステップS403での判定が「YES」の場合には、ステップS404に分岐し、ステップS404で、音量判別手段73により動画像データに付加されている音声データの音量を示す波形を動画像データ全体にわたって判別し、この判別結果に基づいて動画像データ中で音声データの音量が最大となる時点におけるデータを検出する。具体的に、図15に示す音声データの場合には、動画像データの再生開始から40sec経過した位置での音量が最大となっていることから、その時点におけるデータを検出する。   If the determination in step S403 is “YES”, the process branches to step S404, and in step S404, a waveform indicating the volume of the audio data added to the moving image data by the volume determination unit 73 is displayed over the entire moving image data. Based on the determination result, data at the time when the volume of the audio data is maximum is detected in the moving image data. Specifically, in the case of the audio data shown in FIG. 15, the volume at the position where 40 seconds have elapsed from the start of the reproduction of the moving image data is maximum, so the data at that time is detected.

そして、ステップS405で、再生範囲設定手段71により、前記検出した音量最大部分を含む所定範囲を再生範囲として設定する。具体的に、設定した再生時間tが10secであるから、音量最大位置を中心にその前後5secを含む範囲を再生範囲として設定することが好ましい。   In step S405, the reproduction range setting means 71 sets a predetermined range including the detected maximum volume as a reproduction range. Specifically, since the set playback time t is 10 sec, it is preferable to set a range including 5 sec before and after the maximum volume position as the playback range.

なお、この音量最大部分を含む所定範囲を再生範囲と設定したのは、この再生範囲が、例えば歓喜や驚きの声、又は周囲の音響の変化など何らかの出来事が起こった場面であり、動画像データ中のハイライトシーンである可能性が最も高く、他のユーザーがアルバム鑑賞するときにも退屈することが少ないと考えられるからである。   The predetermined range including the maximum volume portion is set as the playback range. This playback range is a scene in which some event such as joy or surprise, or a change in the surrounding sound occurs. This is because it is most likely to be a highlight scene in the middle, and it is considered that other users are less bored when viewing the album.

次に、ステップS406で、前記設定した再生範囲をディスプレイCにプレビューして、ユーザーの希望通りの再生範囲となっているかを判定する。ステップS406での判定が「YES」の場合には、再生範囲の設定を終了する。   In step S406, the set playback range is previewed on the display C to determine whether the playback range is as desired by the user. If the determination in step S406 is “YES”, the setting of the reproduction range ends.

ステップS406での判定が「NO」の場合には、ステップS407に分岐して、ステップS407で、ユーザーが任意の範囲に再生範囲を指定して再生範囲補正手段72で補正する。ここで、再生範囲の指定は、タッチパネルやリモートコントローラ等の外部入力手段により行う。   If the determination in step S406 is “NO”, the process branches to step S407. In step S407, the user designates a reproduction range in an arbitrary range, and the reproduction range correction unit 72 corrects the reproduction range. Here, the reproduction range is designated by an external input means such as a touch panel or a remote controller.

以上のように、動画像データ中のハイライトシーンであると推測される音量最大部分を含む所定範囲を再生範囲として自動的に設定することができるため、ユーザーが動画像データ全体をわざわざチェックする必要がなくアルバム作成の作業効率が向上する。   As described above, a predetermined range including a maximum volume portion that is presumed to be a highlight scene in moving image data can be automatically set as a reproduction range, so the user bothers to check the entire moving image data. There is no need to improve the work efficiency of album creation.

<実施形態3>
図16は、本発明の実施形態3に係るナビゲーションアルバムシステムの構成を示すブロック図である。本実施形態3は、前記実施形態1に対して再生速度変更手段74を追加したものである。ここで、再生速度変更手段74は、動画像データの再生速度を任意の速度に変更して再生するものである。
<Embodiment 3>
FIG. 16 is a block diagram showing a configuration of a navigation album system according to Embodiment 3 of the present invention. In the third embodiment, reproduction speed changing means 74 is added to the first embodiment. Here, the reproduction speed changing means 74 changes the reproduction speed of the moving image data to an arbitrary speed and reproduces it.

次に、本実施形態3に係るナビゲーションアルバムシステムにおける動画像データの再生処理手順について、図17に示すフローチャート図に基づいて説明する。   Next, a procedure for reproducing moving image data in the navigation album system according to the third embodiment will be described with reference to the flowchart shown in FIG.

まず、ディスプレイCに動画編集画面(図示せず)を表示し、ステップS501で、再生時間設定手段70により動画像データの再生時間t1を設定する。以下、再生時間tを10secに設定したとして説明する。 First, a moving image editing screen (not shown) is displayed on the display C, and the reproduction time t 1 of the moving image data is set by the reproduction time setting means 70 in step S501. In the following description, it is assumed that the playback time t is set to 10 sec.

ステップS502で、再生範囲設定手段71により動画像データの再生範囲を設定する。この再生範囲の設定は、前記実施形態1又は2で説明したような方法で自動的に行っても良いし、ユーザーがタッチパネルやリモートコントローラ等の外部入力手段により直接入力して行うようにしても良い。   In step S502, the reproduction range of the moving image data is set by the reproduction range setting means 71. The reproduction range may be set automatically by the method described in the first or second embodiment, or may be directly input by the user using an external input unit such as a touch panel or a remote controller. good.

次に、ステップS503で、動画像データの再生範囲の再生時間t2が再生時間設定手段70で設定した再生時間t1よりも長いかどうか、すなわちt2≧t1を満たすかを判定する。 Next, it is determined whether or not at step S503, whether the reproduction time t 2 of the playback range of the moving image data is longer than the reproduction time t 1 set by the reproduction time setting unit 70, namely satisfy t 2 ≧ t 1.

ステップS503での判定が「NO」の場合には、ステップS504に分岐し、ステップS504で、設定した再生時間t1を再生範囲の再生時間t2に再設定して終了する。このときには動画像データの再生速度の変更は行われず、通常の再生速度での再生が実行されることとなる。 If the determination in step S503 is “NO”, the process branches to step S504. In step S504, the set reproduction time t 1 is reset to the reproduction range reproduction time t 2 and the process ends. At this time, the playback speed of the moving image data is not changed, and playback at the normal playback speed is executed.

ステップS503での判定が「YES」の場合には、ステップS505に分岐し、ステップS505で、再生速度変更手段74により、設定した再生時間t1内に動画像データの再生範囲全体の再生が終了するように、すなわちt1=t2を満たすように再生範囲の再生速度を変更する。具体的に、例えば再生時間が10secに設定されており、動画像データの再生範囲が20secに設定されている場合には、この再生範囲を2倍速再生するように再生速度を変更することで、設定した再生時間の10sec以内に再生範囲の再生が終了するようにしている。同様に、総再生時間が60secである動画像データ全体を再生する場合には、動画像データ全体を6倍速再生すれば設定した再生時間10sec以内に再生が終了することとなる。 If “YES” in step S503, the process branches to step S505. In step S505, the reproduction speed changing unit 74 finishes reproducing the entire reproduction range of the moving image data within the set reproduction time t 1 . In other words, the playback speed of the playback range is changed so as to satisfy t 1 = t 2 . Specifically, for example, when the playback time is set to 10 sec and the playback range of the moving image data is set to 20 sec, by changing the playback speed so that this playback range is played back at double speed, The reproduction of the reproduction range is completed within 10 seconds of the set reproduction time. Similarly, in the case of reproducing the entire moving image data having a total reproduction time of 60 seconds, if the entire moving image data is reproduced at 6 times speed, the reproduction ends within the set reproduction time of 10 seconds.

以上のように、再生速度変更手段74により、設定した再生時間内に動画像データの再生範囲の再生が終了するようにこの再生範囲の再生速度を変更するから、例えば動画像データ全体を再生範囲とした場合でも、動画の一部をカットする等しなくても動画全体を鑑賞することができるようになり、旅行当時の情景をより詳細に思い出す上で有利な効果が得られる。   As described above, the playback speed changing unit 74 changes the playback speed of the playback range so that the playback of the playback range of the moving image data is completed within the set playback time. Even in such a case, the entire moving image can be viewed without cutting a part of the moving image, and an advantageous effect can be obtained in remembering the scene at the time of travel in more detail.

次に、ナビゲーションアルバムシステムにおける動画像データの再生処理の別の手順について、図18に示すフローチャート図に基づいて説明する。   Next, another procedure for reproducing moving image data in the navigation album system will be described with reference to the flowchart shown in FIG.

まず、ディスプレイCに動画編集画面(図示せず)を表示し、ステップS601で、再生時間設定手段70により動画像データの再生時間t1を設定する。以下、再生時間t1を10secに設定したとして説明する。 First, a moving image editing screen (not shown) is displayed on the display C, and the reproduction time t 1 of the moving image data is set by the reproduction time setting means 70 in step S601. In the following description, it is assumed that the playback time t 1 is set to 10 sec.

ステップS602で、再生範囲設定手段71により動画像データの再生範囲を設定する。この再生範囲の設定は、前記実施形態1又は2で説明したような方法で行っても良いし、ユーザーがタッチパネルやリモートコントローラ等の外部入力手段により直接入力して行うようにしても良い。   In step S602, the reproduction range setting unit 71 sets the reproduction range of the moving image data. The setting of the reproduction range may be performed by the method described in the first or second embodiment, or may be performed by the user directly inputting with an external input unit such as a touch panel or a remote controller.

次に、ステップS603で、動画像データの再生範囲の再生時間t2が再生時間設定手段70で設定した再生時間t1よりも長いかどうか、すなわちt2≧t1を満たすかを判定する。 Next, it is determined whether or not at step S603, whether the reproduction time t 2 of the playback range of the moving image data is longer than the reproduction time t 1 set by the reproduction time setting unit 70, namely satisfy t 2 ≧ t 1.

ステップS603での判定が「NO」の場合には、ステップS604に分岐し、ステップS604で、設定した再生時間t1を再生範囲の再生時間t2に再設定して終了する。このときには動画像データの再生速度の変更は行われず、通常の再生速度での再生が実行されることとなる。 If the determination is "NO" in step S603, branches to step S604, the in step S604, the ends reconfigure the reproduction time t 1 set to the reproduction time t 2 of the playback range. At this time, the playback speed of the moving image data is not changed, and playback at the normal playback speed is executed.

ステップS603での判定が「YES」の場合には、ステップS605に分岐し、ステップS605で、再生速度変更手段74により、再生時間t1が経過した後の再生範囲(t2−t1)を高速再生するように再生速度を変更する。具体的に、例えば再生時間が10secに設定されており、動画像データの再生範囲が30secに設定されている場合には、再生時間10secが経過するまでは通常の再生速度で再生し、10sec経過後に未だ再生されていない残り20secの再生範囲の再生速度を変更して高速再生するようにしている。 If the determination in step S603 is “YES”, the process branches to step S605. In step S605, the reproduction range (t 2 −t 1 ) after the reproduction time t 1 has elapsed is determined by the reproduction speed changing unit 74. Change the playback speed to play faster. Specifically, for example, when the playback time is set to 10 sec and the playback range of the moving image data is set to 30 sec, playback is performed at a normal playback speed until the playback time of 10 sec elapses, and 10 sec elapses. The playback speed of the remaining 20 sec playback range that has not been played back later is changed to perform high-speed playback.

以上のように、設定した再生時間内に設定した再生範囲の再生が終了しなかった場合に、それ以降の未再生の再生範囲の再生速度を再生速度変更手段74で変更して再生時間内よりも高速で再生するようにしているから、アルバム再生時における画像データの表示切替間隔の変動を最小限に抑えることができリズム良く再生する上で有利な効果が得られる。   As described above, when the playback of the set playback range does not end within the set playback time, the playback speed of the subsequent playback range that has not been played is changed by the playback speed changing means 74 and the playback speed is changed. Since the image data is reproduced at a high speed, fluctuations in the display switching interval of the image data during album reproduction can be minimized, and an advantageous effect can be obtained in reproducing with good rhythm.

以上説明したように、本発明は、ユーザーが動画像データの編集等の煩わしい作業をすることなく、写真や動画が混在した画像データのスムーズな表示切替を実現した電子アルバムを作成できるという実用性の高い効果が得られることから、きわめて有用で産業上の利用可能性は高い。   As described above, the present invention can be used to create an electronic album that realizes smooth display switching of image data in which pictures and videos are mixed, without requiring the user to perform troublesome operations such as editing of moving image data. Therefore, it is extremely useful and has high industrial applicability.

本発明の実施形態1に係るナビゲーションアルバムシステムの構成を示す図である。It is a figure which shows the structure of the navigation album system which concerns on Embodiment 1 of this invention. 本実施形態1に係るナビゲーションアルバムシステムの構成を示すブロック図である。It is a block diagram which shows the structure of the navigation album system which concerns on this Embodiment 1. FIG. 本実施形態1に係るナビゲーションアルバムシステムにおける経路データを特定する手順を示すフローチャート図である。It is a flowchart figure which shows the procedure which pinpoints the route data in the navigation album system concerning this Embodiment 1. 処理メニューを示す図である。It is a figure which shows a process menu. 関連付け処理を行うメニュー画面を示す図である。It is a figure which shows the menu screen which performs an association process. 関連付け処理のフローチャート図である。It is a flowchart figure of an association process. アルバム表示された画像データを示す図である。It is a figure which shows the image data displayed on the album. 本実施形態1に係るナビゲーションアルバムシステムにおける動画像データの再生時間及び再生範囲の設定手順を示すフローチャート図である。It is a flowchart figure which shows the setting procedure of the reproduction time and reproduction | regeneration range of moving image data in the navigation album system which concerns on this Embodiment 1. FIG. 本実施形態1に係る動画像データのフレーム構造を示す図である。It is a figure which shows the frame structure of the moving image data which concerns on this Embodiment 1. FIG. BGMセット画面を示す図である。It is a figure which shows a BGM set screen. ナビゲーションアルバムのタイトルメニューを示す図である。It is a figure which shows the title menu of a navigation album. 地図表示画面を示す図である。It is a figure which shows a map display screen. 本発明の実施形態2に係るナビゲーションアルバムシステムの構成を示すブロック図である。It is a block diagram which shows the structure of the navigation album system which concerns on Embodiment 2 of this invention. 本実施形態2に係るナビゲーションアルバムシステムにおける動画像データの再生時間及び再生範囲の設定手順を示すフローチャート図である。It is a flowchart figure which shows the setting procedure of the reproduction | regeneration time and reproduction | regeneration range of moving image data in the navigation album system which concerns on this Embodiment 2. FIG. 本実施形態2に係る動画像データのフレーム構造及び音声データの音量波形を示す図である。It is a figure which shows the frame structure of the moving image data which concerns on this Embodiment 2, and the volume waveform of audio | voice data. 本発明の実施形態3に係るナビゲーションアルバムシステムの構成を示すブロック図である。It is a block diagram which shows the structure of the navigation album system which concerns on Embodiment 3 of this invention. 本実施形態3に係るナビゲーションアルバムシステムにおける動画像データの再生処理手順を示すフローチャート図である。It is a flowchart figure which shows the reproduction | regeneration processing procedure of the moving image data in the navigation album system which concerns on this Embodiment 3. FIG. 本実施形態3に係るナビゲーションアルバムシステムにおける動画像データの再生処理の別の手順を示すフローチャート図である。It is a flowchart figure which shows another procedure of the reproduction | regeneration processing of the moving image data in the navigation album system which concerns on this Embodiment 3. FIG.

符号の説明Explanation of symbols

70 再生時間設定手段
71 再生範囲設定手段
72 再生範囲補正手段
73 音量判別手段
74 再生速度変更手段
B システム本体
C ディスプレイ(表示手段)
Cam デジタルカメラ
D 処理手段
E ドライブユニット(画像データ入力手段)
HD ハードディスク(経路記憶手段)
P 位置取得手段(ナビゲーション装置)
70 playback time setting means 71 playback range setting means 72 playback range correction means 73 volume discrimination means 74 playback speed changing means B system main body C display (display means)
Cam Digital camera D Processing means E Drive unit (image data input means)
HD hard disk (route storage means)
P Position acquisition means (navigation device)

Claims (7)

ナビゲーション装置により特定された移動経路の位置情報に、該移動経路を移動したときに撮影したデジタル画像データをリンクさせて表示手段に表示させる電子アルバムを作成するナビゲーションアルバムシステムであって、
前記デジタル画像データは少なくとも動画像データを含んでおり、
前記動画像データを前記表示手段に再生表示する再生時間を設定する再生時間設定手段と、
前記再生時間設定手段で設定された再生時間だけ前記動画像データの全体又は一部を再生するようにその再生範囲を設定する再生範囲設定手段とを備えていることを特徴とするナビゲーションアルバムシステム。
A navigation album system for creating an electronic album for displaying on a display means by linking digital image data taken when moving along the movement route to position information of the movement route specified by the navigation device,
The digital image data includes at least moving image data,
Reproduction time setting means for setting a reproduction time for reproducing and displaying the moving image data on the display means;
A navigation album system comprising playback range setting means for setting the playback range so that all or part of the moving image data is played back for the playback time set by the playback time setting means.
請求項1に記載されたナビゲーションアルバムシステムにおいて、
前記再生範囲設定手段は、前記動画像データ全体の再生時間の略半分の時点におけるデータを少なくとも含む所定範囲を該動画像データの再生範囲として設定するように構成されていることを特徴とするナビゲーションアルバムシステム。
In the navigation album system according to claim 1,
The reproduction range setting means is configured to set a predetermined range including at least data at a time point substantially half the reproduction time of the entire moving image data as a reproduction range of the moving image data. Album system.
請求項1に記載されたナビゲーションアルバムシステムにおいて、
前記動画像データに付加されている音声データの音量を判別する音量判別手段をさらに備え、
前記再生範囲設定手段は、前記音量判別手段で判別される前記音声データ中の音量が最大となる時点におけるデータを少なくとも含む所定範囲を前記動画像データの再生範囲として設定するように構成されていることを特徴とするナビゲーションアルバムシステム。
In the navigation album system according to claim 1,
A volume determination means for determining a volume of audio data added to the moving image data;
The reproduction range setting unit is configured to set a predetermined range including at least data at a time point when the volume in the audio data determined by the volume determination unit is maximum as a reproduction range of the moving image data. This is a navigation album system.
請求項1乃至3のうち何れか1項に記載されたナビゲーションアルバムシステムにおいて、
前記動画像データの再生速度を変更する再生速度変更手段をさらに備えていることを特徴とするナビゲーションアルバムシステム。
The navigation album system according to any one of claims 1 to 3,
A navigation album system, further comprising reproduction speed changing means for changing the reproduction speed of the moving image data.
請求項4に記載されたナビゲーションアルバムシステムにおいて、
前記再生速度変更手段は、前記再生時間設定手段で設定した再生時間内に前記再生範囲設定手段で設定した前記動画像データの再生範囲全体の再生が終了するように再生速度を変更するものであることを特徴とするナビゲーションアルバムシステム。
In the navigation album system according to claim 4,
The playback speed changing means changes the playback speed so that the playback of the entire playback range of the moving image data set by the playback range setting means ends within the playback time set by the playback time setting means. This is a navigation album system.
請求項4に記載されたナビゲーションアルバムシステムにおいて、
前記再生速度変更手段は、前記再生時間設定手段で設定した再生時間内に前記再生範囲設定手段で設定した前記動画像データの再生範囲全体の再生が終了しない場合に、該再生時間経過後の未再生の再生範囲を該再生時間内よりも高速で再生するように再生速度を変更するものであることを特徴とするナビゲーションアルバムシステム。
In the navigation album system according to claim 4,
The playback speed changing means is the one that has not been finished after the playback time has elapsed when the playback of the entire playback range of the moving image data set by the playback range setting means does not end within the playback time set by the playback time setting means. A navigation album system characterized in that the playback speed is changed so that the playback range of playback is played at a higher speed than within the playback time.
請求項1乃至6に記載されたナビゲーションアルバムシステムにおいて、
前記再生範囲設定手段で設定された前記動画像データの再生範囲を任意の範囲に補正する再生範囲補正手段をさらに備えていることを特徴とするナビゲーションアルバムシステム。
In the navigation album system according to claim 1 to 6,
A navigation album system, further comprising reproduction range correction means for correcting the reproduction range of the moving image data set by the reproduction range setting means to an arbitrary range.
JP2004260723A 2004-09-08 2004-09-08 Navigation album system Pending JP2006080737A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004260723A JP2006080737A (en) 2004-09-08 2004-09-08 Navigation album system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004260723A JP2006080737A (en) 2004-09-08 2004-09-08 Navigation album system

Publications (1)

Publication Number Publication Date
JP2006080737A true JP2006080737A (en) 2006-03-23

Family

ID=36159846

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004260723A Pending JP2006080737A (en) 2004-09-08 2004-09-08 Navigation album system

Country Status (1)

Country Link
JP (1) JP2006080737A (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010164486A (en) * 2009-01-16 2010-07-29 Pioneer Electronic Corp Information processor, information processing method, information processing program, and recording medium
WO2014010601A1 (en) * 2012-07-10 2014-01-16 国立大学法人千葉大学 Method for creating tracking data and program for creating tracking data
JP2015064385A (en) * 2014-12-26 2015-04-09 ソニー株式会社 Information processing device, information processing method, and program
US9363495B2 (en) 2010-07-22 2016-06-07 Sony Corporation Information processing apparatus, information processing method, program, and recording medium
JP2021019275A (en) * 2019-07-19 2021-02-15 株式会社デンソーテン Display control device, data collection system, and display control method

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0814932A (en) * 1994-07-05 1996-01-19 Fujitsu Ten Ltd Navigation apparatus
JP2003125346A (en) * 2001-10-16 2003-04-25 Sony Corp Recording and regenerating equipment and method, recording medium and program
JP2003189218A (en) * 2001-12-21 2003-07-04 Fujitsu Ltd Picture recording and reproducing device
JP2004040628A (en) * 2002-07-05 2004-02-05 Sony Corp Information signal processing apparatus and information signal processing method
JP2004045651A (en) * 2002-07-10 2004-02-12 Victor Co Of Japan Ltd Motion picture processing method
JP2004134943A (en) * 2002-10-09 2004-04-30 Canon Inc Image processing apparatus, and image processing method and program

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0814932A (en) * 1994-07-05 1996-01-19 Fujitsu Ten Ltd Navigation apparatus
JP2003125346A (en) * 2001-10-16 2003-04-25 Sony Corp Recording and regenerating equipment and method, recording medium and program
JP2003189218A (en) * 2001-12-21 2003-07-04 Fujitsu Ltd Picture recording and reproducing device
JP2004040628A (en) * 2002-07-05 2004-02-05 Sony Corp Information signal processing apparatus and information signal processing method
JP2004045651A (en) * 2002-07-10 2004-02-12 Victor Co Of Japan Ltd Motion picture processing method
JP2004134943A (en) * 2002-10-09 2004-04-30 Canon Inc Image processing apparatus, and image processing method and program

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010164486A (en) * 2009-01-16 2010-07-29 Pioneer Electronic Corp Information processor, information processing method, information processing program, and recording medium
US9363495B2 (en) 2010-07-22 2016-06-07 Sony Corporation Information processing apparatus, information processing method, program, and recording medium
WO2014010601A1 (en) * 2012-07-10 2014-01-16 国立大学法人千葉大学 Method for creating tracking data and program for creating tracking data
JP2015064385A (en) * 2014-12-26 2015-04-09 ソニー株式会社 Information processing device, information processing method, and program
JP2021019275A (en) * 2019-07-19 2021-02-15 株式会社デンソーテン Display control device, data collection system, and display control method
JP7386008B2 (en) 2019-07-19 2023-11-24 株式会社デンソーテン Display control device, data collection system, display control method, and display control program

Similar Documents

Publication Publication Date Title
JP4604833B2 (en) Electronic album system
US10296173B2 (en) In-vehicle apparatus and control method of in-vehicle apparatus
EP1806920A1 (en) Moving picture data edition device and moving picture data edition method
JP4470105B2 (en) Navigation system and program
JP2005128785A (en) Recording medium and electronic album producing device
JP4829839B2 (en) Mobile communication terminal
JP2007323698A (en) Multi-media content display device, method, and program
JP2006139106A (en) Image processing system and image processing method
JP4363272B2 (en) Navigation album system
JP2006080737A (en) Navigation album system
JP4572683B2 (en) Electronic album system
JP4363318B2 (en) Navigation album system
JP4422539B2 (en) Video playback device
JP4466248B2 (en) Navigation album creation device
JP2006178856A (en) Image processing system and image processing method
JP2006109151A (en) Image recording device and electronic album creation system
JP2006126954A (en) Image processing system and image processing method
JP4483494B2 (en) Navigation album system
JP4492277B2 (en) Navigation album system
JP4559210B2 (en) Electronic album creation apparatus and electronic album creation system
JP2006053111A (en) Navigation album system
JP2006038514A (en) Navigation album system
JP2004304486A (en) Moving picture editing apparatus and moving picture editing method
JP2006005788A (en) Image displaying method and image display system
JP2023125029A (en) video creation program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070327

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090814

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090818

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20091015

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20091117

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20100413