JP2010187247A - Image processing apparatus, server device, and image processing method - Google Patents
Image processing apparatus, server device, and image processing method Download PDFInfo
- Publication number
- JP2010187247A JP2010187247A JP2009030643A JP2009030643A JP2010187247A JP 2010187247 A JP2010187247 A JP 2010187247A JP 2009030643 A JP2009030643 A JP 2009030643A JP 2009030643 A JP2009030643 A JP 2009030643A JP 2010187247 A JP2010187247 A JP 2010187247A
- Authority
- JP
- Japan
- Prior art keywords
- data
- image data
- image
- wireless communication
- communication terminal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
Description
本技術は、通信端末装置と、ネットワークを介して接続されたサーバ装置間のデータの送受信動作制御に関するものであり、特に通信端末装置をデジタルカメラとした場合において、デジタルカメラから撮影データのサーバ装置への転送(以下、アップロード)およびサーバ装置からデジタルカメラへの転送(以下、ダウンロード)が効率的に行えるよう構成された通信端末装置およびサーバ装置に関するものである。 The present technology relates to data transmission / reception operation control between a communication terminal device and a server device connected via a network, and in particular, when the communication terminal device is a digital camera, a server device for photographing data from the digital camera. The present invention relates to a communication terminal device and a server device that are configured to efficiently perform transfer (hereinafter, upload) and transfer from a server device to a digital camera (hereinafter, download).
近年、デジタルカメラの高性能化や、ネットワークの普及により、通信機能を持つデジタルカメラが開発されている。 In recent years, digital cameras having communication functions have been developed due to the high performance of digital cameras and the spread of networks.
今後、デジタルカメラの高解像度化やネットワーク化、ネットワークの無線化、広帯域化により、デジタルカメラの撮影データをサーバ装置に蓄積する無線通信端末装置およびサーバ装置が普及するものと思われる。 In the future, it is expected that wireless communication terminal devices and server devices that store digital camera shooting data in server devices will become widespread as digital cameras have higher resolution, networking, wireless networking, and wider bandwidth.
一般に、無線通信機能を持つデジタルカメラと、ネットワークを介して接続されたサーバ装置間では、無線通信が場所や構造物の影響、移動速度などの影響により、常に安定しているとは限らない。 In general, between a digital camera having a wireless communication function and a server device connected via a network, wireless communication is not always stable due to the influence of location, structure, moving speed, and the like.
この為、現状の無線通信機能を持つデジタルカメラでは、デジタルカメラ内の蓄積用メモリを一次記憶として使い、ユーザが必要に応じて撮影データをサーバ装置にアップロードし、アップロードが終わった撮影データについては、デジタルカメラ内の蓄積用メモリから削除する事で、デジタルカメラ内の蓄積用メモリの空き保存容量を確保している。 For this reason, in digital cameras with the current wireless communication function, the storage memory in the digital camera is used as a primary storage, and the user uploads shooting data to the server device as necessary. By deleting from the storage memory in the digital camera, the free storage capacity of the storage memory in the digital camera is secured.
ところが、上記の使用方法では、ネットワークを介してサーバ装置に接続できている場合には、全ての撮影データをダウンロード可能なので、全ての撮影データが参照可能だが、ネットワークが接続されていない状態では、デジタルカメラ内の蓄積用メモリの中にある撮影データしか参照する事ができず、撮影データの確認や、参照が全くできないという課題がある。 However, in the above usage method, when the camera device can be connected to the server device via the network, all the shooting data can be downloaded, so that all the shooting data can be referred to, but in a state where the network is not connected, There is a problem that only the shooting data in the storage memory in the digital camera can be referred to, and the shooting data cannot be confirmed or referred to at all.
本技術による無線通信端末装置およびサーバ装置では、サーバ装置で無線通信端末装置からアップロードされた撮影データをストレージに蓄積すると共に、解析処理を行い、解析結果を無線通信端末装置にダウンロードし、無線通信端末装置内の予め準備した管理データベースを解析結果により更新する。 In the wireless communication terminal device and the server device according to the present technology, shooting data uploaded from the wireless communication terminal device by the server device is stored in the storage, an analysis process is performed, an analysis result is downloaded to the wireless communication terminal device, and wireless communication is performed. The management database prepared in advance in the terminal device is updated with the analysis result.
無線通信端末装置は、撮影データ用の管理データベースを構築する事で、ネットワークが接続されていない状態でも、管理データベースを参照する事により、解析結果を用いた画像表示が行えるようになる。 By constructing a management database for shooting data, the wireless communication terminal device can display an image using the analysis result by referring to the management database even when the network is not connected.
これにより、ユーザが撮影データの参照を行う際、撮影データの表示のための、無線通信端末装置およびサーバ装置のデータトラフィックを減らすと共に、ユーザの利便性を高めることができる。 Thereby, when the user refers to the shooting data, the data traffic of the wireless communication terminal device and the server device for displaying the shooting data can be reduced and the convenience of the user can be improved.
以下、実施の形態を図面に基づいて詳細に説明する。 Hereinafter, embodiments will be described in detail with reference to the drawings.
まず、本実施例の概要について説明する。
図1は実施例の概要である。100は、デジタルカメラの機能や無線通信機能を持つネットワークにアクセス可能な無線通信端末装置である。101は、無線通信機能やインターネット回線と通信を行う機能を有するアクセスポイントである。103は、インターネット回線と通信を行う機能や無線通信端末装置100からの要求に従い、撮影データの蓄積(以下、「アップロード」という。)したり、無線通信端末装置100からの要求に従い、撮影データを送信(以下、ダウンロードという。)したりするサーバ装置である。
First, an outline of the present embodiment will be described.
FIG. 1 is an outline of the embodiment.
なお、本実施例におけるサーバ装置103には、無線通信端末装置100からアクセスポイント101とネットワーク102を経由して撮影データのアップロードの処理の際、アップロードされた撮影データを蓄積すると共に、撮影データの中に含まれる撮影画像データや付加情報を解析、データベース化し、撮影画像データや付加情報に関する解析結果を、ネットワーク102とアクセスポイント101を経由して、無線通信端末装置100にダウンロードさせることができる。
The
ここで、無線通信端末装置100で、写真の撮影が行われた場合、撮影データは、無線通信端末装置100の蓄積用メモリに蓄積、管理データベースに登録されると共に、アクセスポイント101とネットワーク102を介して、サーバ装置103にアップロードされる。サーバ装置103では、アップロードされた撮影データをストレージに蓄積すると共に、撮影データの画像解析や付加情報の処理を行う。その画像解析や付加情報の処理結果は、解析結果情報として、ネットワーク102、アクセスポイント101を介して、無線通信端末装置100にダウンロードさせ、無線通信端末装置100は、撮影データに関連した解析結果情報を取得し、その解析結果情報を管理データベースに登録することができる。
Here, when a photograph is taken by the wireless
また、無線通信端末装置100で、写真の閲覧が行われた場合、無線通信端末装置100に登録された管理データベースおよび蓄積された撮影データを蓄積用メモリから参照、表示するが、その際、参照すべき撮影データがない場合には、管理データベースの情報に従い、アクセスポイント101とネットワーク102を介して、サーバ装置103に撮影データのダウンロード要求が送信される。サーバ装置103では、要求された撮影データをストレージから読出し、読出した撮影データを、ネットワーク102、アクセスポイント101を介して、無線通信端末装置100の蓄積用メモリにダウンロードさせ、蓄積用メモリに蓄積されると共に管理データベースを更新し、蓄積用メモリから参照、表示することができる。
Further, when a photograph is browsed in the wireless
次に、アクセスポイント101、ネットワーク101、または、サーバ装置103の何れかに障害がある場合に、無線通信端末装置100で、写真の閲覧が行われた場合について説明する。まず、無線通信端末装置100で、写真の閲覧が行われた場合、無線通信端末装置100に蓄積された管理データベースおよび撮影データを蓄積用メモリから参照、表示するが、その際、参照すべき撮影データがない場合には、管理データベースの情報に従いアクセスポイント101とネットワーク102を介して、サーバ装置103に撮影データのダウンロード要求が送信しようとする。
Next, a case where a photograph is browsed by the wireless
しかし、何らかの障害によりネットワーク接続が行えない場合には、無線通信端末装置100で、蓄積用メモリの管理データベースを参照し、閲覧しようとする撮影データに類似した撮影データを検索し、類似した撮影データがあった場合には、その撮影データを元に蓄積用メモリから参照、表示することができる。
However, when the network connection cannot be performed due to some trouble, the wireless
これにより、無線通信端末装置100で、写真の閲覧が行われた場合に、撮影データが蓄積用メモリに存在せず、かつ、アクセスポイント101、ネットワーク101、または、サーバ装置103の何れかに障害があった場合においても、類似した撮影データを表示することで、ユーザの利便性を高めることができる。
As a result, when a photograph is browsed in the wireless
更に、上記の類似した撮影データを表示することを、撮影データの縮小画像(以下、サムネールと呼ぶ。)の時のみ動作するようにしても良い。 Further, the display of the similar imaged data may be performed only when the imaged data is a reduced image (hereinafter referred to as a thumbnail).
次に、実施例における無線通信端末装置100について説明する。
図2は実施例1における第一の無線通信端末装置のハードウェアの構成の一例を示すブロック図である。
Next, the radio
FIG. 2 is a block diagram illustrating an example of a hardware configuration of the first wireless communication terminal device according to the first embodiment.
通信用アンテナ105、無線通信ユニット106、レンズ107、撮像素子108、イメージプロセッサ109、キー入力ユニット110、RAM111、CPU112、プログラムROM113、表示ユニット114、蓄積用メモリ115、GPSユニット116、GPS用アンテナ117から構成されており、無線通信端末装置の制御ソフトウェアは、プログラムROM113に格納されているソフトウェアをCPU112とRAM111で解釈し実行し、無線通信ユニット106、イメージプロセッサ109、キー入力ユニット110、GPSユニット116、表示ユニット114、蓄積用メモリ115を制御している。
まず、写真の撮影の場合の動作について説明する。
写真の撮影の場合は、レンズ107、撮像素子108、イメージプロセッサ109からの出力データは、CPU112により、表示ユニット114に表示されており、シャッターボタンが押されると、キー入力ユニット110でシャッターボタンが押された事を検出し、イメージプロセッサ109の出力データをCPU112で処理する。その際、GPS用アンテナ117、GPSユニット116から得られる位置情報を含め、撮影データを生成し、蓄積用メモリ115に蓄積すると共に、蓄積用メモリ115の管理データベースに登録する。
First, the operation in the case of taking a picture will be described.
In the case of taking a picture, output data from the
更に、撮影データを、無線通信ユニット106、通信用アンテナ105を用いて、ネットワークを介し、サーバ装置にアップロードするよう動作すると共に、サーバ装置からアップロードした撮影データの解析結果情報をダウンロードし、蓄積用メモリ115の管理データベースを更新するよう動作する。
Furthermore, the radio communication unit 106 and the
次ぎに、写真の閲覧の場合の動作について説明する。
写真の閲覧の場合は、蓄積メモリ115の管理データベースに従い、撮影データを読出し、CPU112で処理し、表示ユニット114に表示するが、該当する撮影データが蓄積用メモリ115にない場合には、無線通信ユニット106、通信用アンテナ105を用いて、ネットワークを介し、サーバ装置に要求する。サーバ装置は、該当する撮影データを蓄積用メモリ115にダウンロードさせ、蓄積すると共に、CPU112で処理し、表示ユニット114に表示すると共に、蓄積メモリ115の管理データベースを更新するよう動作する。
Next, the operation in the case of browsing photos will be described.
In the case of browsing a photograph, the shooting data is read out according to the management database of the
更に、アクセスポイント101、ネットワーク101、または、サーバ装置103の何れかに障害があった場合における、写真の閲覧の場合の動作について説明する。
Furthermore, an operation in the case of browsing a photograph when any of the
アクセスポイント101、ネットワーク101、または、サーバ装置103の何れかに障害があった場合における、写真の閲覧の場合は、蓄積メモリ115の管理データベースに従い、撮影データを読出し、CPU112で処理し、表示ユニット114に表示するが、該当する撮影データが蓄積用メモリ115にない場合には、無線通信ユニット106、通信用アンテナ105を用いて、ネットワークを介し、サーバ装置に要求するが、何らかの障害によりネットワーク接続が行えない場合には、サーバ装置に要求できない。
In the case of browsing a photograph when there is a failure in any of the
このような場合は、蓄積メモリ115の管理データベースを参照し、閲覧しようとする撮影データに類似した撮影データを検索し、類似した撮影データがあった場合には、その撮影データを元に蓄積用メモリから参照、表示するよう動作する。
In such a case, the management database of the
次に、写真の撮影時に生成される、無線通信端末装置100および、サーバ装置103で扱っている撮影データのデータ構造について説明する。
Next, a description will be given of the data structure of shooting data generated by the wireless
図3は実施例1における撮影データのデータ構造図である。
撮影データは、データの種類を識別するための「ヘッダ」、主画像である「撮影画像データ」、主画像の縮小された画像である「撮影画像サムネールデータ」、カメラの撮影情報である「撮影情報」、GPS測位情報である「GPS情報」、データフォーマットの互換情報である「フォーマット互換情報」、デジタルカメラメーカ別の固有情報である「メーカ固有情報」から構成されている。
FIG. 3 is a data structure diagram of shooting data in the first embodiment.
Shooting data includes a “header” for identifying the type of data, “captured image data” that is a main image, “captured image thumbnail data” that is a reduced image of the main image, and “capturing” that is camera shooting information. Information ”,“ GPS information ”that is GPS positioning information,“ format compatibility information ”that is data format compatibility information, and“ manufacturer specific information ”that is unique information for each digital camera manufacturer.
一般的デジタルカメラの撮影データのデータ構造を規定したものには、業界標準技術であるExif(Exchangeable image file format)がある。 Exif (Exchangeable image file format), which is an industry standard technology, defines the data structure of shooting data of a general digital camera.
通常、撮影画像データが撮影データの大半を占めており、次が撮影画像サムネールデータであり、その他のデータ量は、撮影画像データや撮影画像サムネールデータと比較すると非常に小さいな容量である。 Usually, the photographic image data occupies most of the photographic data, the next is the photographic image thumbnail data, and the other data amount is very small compared with the photographic image data and the photographic image thumbnail data.
次に、実施例におけるサーバ装置103について説明する。
図4は、実施例1におけるサーバ装置のブロック図である。ここでは、無線通信端末装置100とサーバ装置103間で行われる撮影データのアップロードおよび、ダウンロードの際のサーバ装置の処理をブロック図を用いて説明する。
Next, the
FIG. 4 is a block diagram of the server device according to the first embodiment. Here, processing of the server apparatus at the time of uploading and downloading of photographing data performed between the wireless
サーバ装置103は、ストレージ118、ファイルシステムインターフェース119、撮影データ書込処理部120、撮影データ読出処理部121、ネットワークインターフェース122、ネットワーク123から構成されており、無線通信端末装置からの撮影データのアップロードに対しは、ネットワーク123、ネットワークインターフェース122、撮影データ書込処理部120、ファイルシステムインターフェース119、ストレージ118で処理を行い、無線通信端末装置への撮影データのダウンロードに対しては、ストレージ118、ファイルシステムインターフェース119、撮影データ読出処理部121、ネットワークインターフェース112、ネットワーク123で処理を行うよう構成されている。
The
更に、撮影データ書込処理部120は、撮影データ受信124、画像解析付加情報処理125、画像解析データベース付加情報データベース参照更新126、解析結果情報送信か127から構成される。また、撮影データ読出処理部121は、撮影データ送信128から、構成される。撮影データ受信124の入力にネットワークインターフェース122の出力が接続される。撮影データ受信124の出力にファイルシステムインターフェース119の入力および画像解析付加情報処理125の入力が接続される。
Further, the photographing data writing
画像解析付加情報処理125の入力に撮影データ受信124の出力が接続される。画像解析付加情報処理125の出力に画像解析データベース付加情報処理データベース参照更新126の入力が接続される。画像解析データベース付加情報処理データベース参照更新126の入力に画像解析付加情報処理125の出力が接続される。画像解析データベース付加情報処理データベース参照更新126の出力に解析結果情報送信127の入力が接続される。画像解析データベース付加情報処理データベース参照更新126の入出力にファイルシステムインターフェース119の入出力が接続される。
The output of the photographing
解析結果情報送信127の入力に画像解析データベース付加情報処理データベース参照更新126の出力が接続される。解析結果情報送信127の出力にネットワークインターフェース122の入力が接続される。また、撮影データ読出処理部121では、撮影データ送信128の入力にファイルシステムインターフェース119の出力が接続され、撮影データ送信128の出力にネットワークインターフェース122の入力が接続される。
The output of the image analysis database additional information processing
ストレージ118は、撮影データ(日付別フォルダ)、画像解析データベース、付加情報データベースから構成され、撮影データを日付別フォルダに蓄積する機能(複数ユーザを扱う場合は、更にユーザ別に分離する機能)、画像解析データベースの蓄積参照機能、付加情報データベースの蓄積参照機能を含んでおり、ストレージ118の入出力は、ファイルシステムインターフェース119の入出力と接続される。
The
無線通信端末装置100とサーバ装置103間で行われる撮影データのアップロードの場合は、無線通信端末装置100より送られて来た撮影データは、ネットワーク123、ネットワークインターフェース122、撮影データ書込処理部120、ファイルシステムインターフェース119を介して、ストレージ118に撮影データとして日付別フォルダに蓄積される。
In the case of uploading of shooting data performed between the wireless
また、撮影データ書込処理部120では、ネットワークインターフェース122からの出力が、の撮影データ受信124に入力され、撮影データ受信124の出力は、ファイルインターフェース119への入力と、画像解析付加情報処理125に入力される。画像解析付加情報処理125では、画像解析として、画像の特徴量(コントラスト、色合い、濃淡分布、映像周波数成分、特徴的な構造の解析(例えば、人物の顔の検出)、背景情報、前景情報)の解析や、付加情報処理として、撮影情報、GPS情報、フォーマット互換情報、メーカ固有情報に基づいた関連情報の取得(GPS情報からの観光地情報や、撮影日付時刻とGPS情報からの天気、気温、湿度の情報の取得、GPS情報が得られない場合は、アクセスポイントを用いた情報)、撮影データのネットワーク上蓄積位置情報(URI(Uniform Resource Identifier))を処理する。
In the photographing data writing
画像解析付加情報処理125の出力は、画像解析データベース付加情報処理データベース参照更新126に入力される。画像解析データベース付加情報処理データベース参照更新126では、画像解析と付加情報のデータを、ファイルシステムインターフェース119を介して、ストレージ118の画像解析データベースと、付加情報データベースの参照更新を行い、画像解析データベース付加情報処理データベース参照更新126での処理結果を、解析結果情報送信127の入力する。解析結果情報送信127では、無線通信端末装置の管理データベースに合致するデータに整形し、解析結果情報送信127の出力は、ネットワークインターフェース122に入力される。
The output of the image analysis
無線通信端末装置とサーバ装置間で行われる撮影データのダウンロードの場合は、無線通信端末装置から、ダウンロード要求のあった撮影データを、ストレージ118の日付別フォルダから読出し、ファイルシステムインターフェース119、撮影データ読出処理部121、ネットワークインターフェース122、ネットワーク123を介して無線通信端末装置に送信される。また、撮影データ読出処理部121では、ファイルインターフェース119からの出力が、撮影データ送信128に入力され、撮影データ送信128の出力は、ネットワークインターフェース122に入力する動作を行う。
When shooting data is downloaded between the wireless communication terminal device and the server device, the shooting data requested to be downloaded from the wireless communication terminal device is read from the folder by date in the
また、上記の撮影データのダウンロードの場合、無線通信端末装置100から、ダウンロード要求のあった撮影データが、図3に示した「撮影画像データ」であるのか、「撮影画像サムネールデータ」何れであるか、判別できる場合には、撮影データ送信128において、「撮影画像データ」を含む撮影データをネットワークインターフェース122に入力するのか、「撮影画像データ」を含まない撮影データをネットワークインターフェース122に入力するのかを切り替えるよう動作しても良い。
Further, in the case of downloading the above-described shooting data, the shooting data requested to be downloaded from the wireless
これにより、サーバ装置から無線通信端末装置へのダウンロードする撮影データのデータ量を削減することができる。 Thereby, the data amount of the imaging | photography data downloaded from a server apparatus to a wireless communication terminal device can be reduced.
次に、実施例における無線通信端末装置100の動作についてフローチャートを用いて説明する。フローチャートにおいて「S」は「ステップ」を意味する。
図5は実施例1における無線通信端末装置100での撮影時のフローチャートである。
Next, the operation of the wireless
FIG. 5 is a flowchart at the time of shooting by the wireless
図5は、無線通信端末装置100において、写真の撮影を行った場合の処理を示すフローチャートである。当該処理は、無線通信端末装置100中のCPUが無線通信端末装置100の各部を制御することで実現される。
FIG. 5 is a flowchart illustrating processing when a photograph is taken in the wireless
無線通信端末装置100は、写真の撮影を行うと、撮影動作を開始し(S501)、撮影及び撮影データの蓄積を行い(S502)、同期して管理データベースに登録を実行(S503)する。そして、ネットワークの接続確認を行い(S504)、ネットワーク接続確認が正しく取得でき、サーバ装置に接続可能な場合は、サーバ装置103に撮影データをアップロードし(S505)、サーバ装置103で実行された撮影データに関する解析結果情報をダウンロードし(S506)、得られた解析結果情報で管理データベースを更新し(S507)、写真の撮影処理を終わる(S501)。
When the wireless
しかし、ネットワークの接続確認を行い(S504)、ネットワーク接続確認が正しく取得できず、サーバ装置に接続不可能な場合は、サーバ装置103への撮影データのアップロード処理をキューイング(S508)し、暫く待機処理した後(ウェイト)、再度、ネットワークの接続確認を行い(S504)を行い、サーバ装置103への撮影データのアップロードを試みるよう動作処理が行われる。
However, network connection confirmation is performed (S504), and if the network connection confirmation cannot be obtained correctly and connection to the server apparatus cannot be established, the process of uploading shooting data to the
これにより、無線通信端末装置100において、写真の撮影を行った場合、サーバ装置103への撮影データを確実にアップロードすると共に、サーバ装置103で実行された撮影データに関する解析結果情報をダウンロードも確実にダウンロードするよう動作することができる。
As a result, when the wireless
次に、実施例における無線通信端末装置100の管理データベースについて説明する。
図6は実施例1における無線通信端末装置100の管理データベースの例である。
Next, a management database of the wireless
FIG. 6 is an example of a management database of the wireless
管理データベース用のパラメータとして、ID番号、撮影画像データの有無、撮影画像サムネールデータの有無、メタデータ:日付・時刻・場所・天候・気温・湿度、撮影データのネットワーク上蓄積位置情報(URI)、類似画像パラメータから構成されており、ID番号は写真を撮影する度に数字が1ずつ加算されるようにし、ID番号に関連する各パラメータは、それぞれ独立した値を保持できるようになっている。 As parameters for the management database, ID number, presence / absence of captured image data, presence / absence of captured image thumbnail data, metadata: date / time / location / weather / temperature / humidity, storage location information (URI) of captured data on the network, It consists of similar image parameters, and the ID number is incremented by 1 each time a picture is taken, and each parameter related to the ID number can hold an independent value.
ここでの管理データベースの各パラメータは、この実施例では、以下のような意味付けを行っている。
ID番号は、数字が1ずつ加算されるため、1つの無線通信端末装置においては、必ずユニークが番号(数字が飛んでも良いが隣接するID番号は必ず小さい数字から大きな数字となる)となるようにしている。
Each parameter of the management database here has the following meaning in this embodiment.
Since the ID number is incremented by one, one wireless communication terminal device always has a unique number (a number may be skipped, but an adjacent ID number is always a small number to a large number). I have to.
撮影画像データの有無は、1が撮影画像データが蓄積用メモリにある事を、0が撮影画像データが蓄積用メモリにない事を示している。
撮影画像サムネールデータの有無は、1が撮影画像サムネールデータが蓄積用メモリにある事を、0が撮影画像サムネールデータが蓄積用メモリにない事を示している。
メタデータ:日付・時刻・場所・天候・気温・湿度については、日付は西暦の日付、時刻は24時間表記(標準時刻かローカル時刻かの記載をしても良い)、場所はGPSの情報(緯度、経度の情報)、天候は、晴れ/曇り/雨/雪に対して1/2/3/4の数字を割り付けたもの、気温は、-99度から+99度に対して、199〜99(100の位はマイナスの意)、湿度は、0%から99%に対して、0〜99としている。
The presence / absence of photographed image data indicates that the photographed image data is in the storage memory, and that the photographed image data is not in the storage memory.
The presence / absence of photographed image thumbnail data indicates that the photographed image thumbnail data is in the storage memory, and that the photographed image thumbnail data is not in the storage memory.
Metadata: Date / Time / Location / Weather / Temperature / Humidity: Date is the date of the year, time is expressed in 24 hours (standard time or local time may be indicated), and location is GPS information ( (Latitude and longitude information), weather is assigned to 1/2/3/4 for sunny / cloudy / rainy / snow, temperature ranges from -99 degrees to +99 degrees, 199 to 99 (The sign of 100 is negative.) Humidity ranges from 0% to 99%, from 0% to 99%.
撮影データのネットワーク上蓄積位置情報(URI)は、サーバ装置の撮影データにアクセスする為の情報であり、ユニークな文字列となるようURIを使った表記としている。
類似画像パラメータは、画像の特徴量(コントラスト、色合い、濃淡分布、映像周波数成分、特徴的な構造の解析(例えば、人物の顔の検出))をそれぞれ特定のパターンでモデル化し、各画像の特徴量をアルファベットの26文字に割り当て、5つのアルファベット列で示している。
Shooting data storage location information (URI) on the network is information for accessing the shooting data of the server device, and is represented using a URI so as to be a unique character string.
Similar image parameters model image features (contrast, hue, shading distribution, video frequency component, characteristic structure analysis (for example, human face detection)) with specific patterns, respectively. The quantity is assigned to 26 letters of the alphabet and is indicated by five alphabetical strings.
上記を元に例として、図7におけるID番号1〜ID番号3のデータベースの意味を説明する。ID番号「1」のデータは、撮影画像データは「蓄積用メモリにある」、撮影画像サムネールデータは「蓄積用メモリにある」、メタデータは、日付「2008年1月1日」、時刻「09:00」、場所「北緯39度、東経139度」、天候「晴れ」、気温「5度」、湿度「15%」、撮影データのネットワーク上蓄積位置情報は「photo.com/user/080101/000001.jpg」、類似画像パラメータは「abcde」となることを意味している。
Based on the above, the meaning of the database of
ID番号「2」のデータは、撮影画像データは「蓄積用メモリにない」、撮影画像サムネールデータは「蓄積用メモリにない」、メタデータは、日付「2008年1月1日」、時刻「09:05」、場所「北緯39度、東経139度」、天候「晴れ」、気温「5度」、湿度「15%」、撮影データのネットワーク上蓄積位置情報は「photo.com/user/080101/000002.jpg」、類似画像パラメータは「abcde」となることを意味している。 The data of ID number “2” is that the captured image data is “not in storage memory”, the captured image thumbnail data is “not in storage memory”, the metadata is date “January 1, 2008”, and the time “ 09:05 ”, location“ 39 ° North latitude, 139 ° East longitude ”,“ Sunny ”weather,“ 5 ° C. ”temperature,“ 15% ”humidity, and network location information for photo data is“ photo.com/user/080101 ” /000002.jpg ”, which means that the similar image parameter is“ abcde ”.
ID番号「3」のデータは、撮影画像データは「蓄積用メモリにない」、撮影画像サムネールデータは「蓄積用メモリにある」、メタデータは、日付「2008年1月1日」、時刻「09:30」、場所「北緯39度、東経139度」、天候「晴れ」、気温「5度」、湿度「15%」、撮影データのネットワーク上蓄積位置情報は「photo.com/user/080101/000003.jpg」、類似画像パラメータは「abcdf」となることを意味している。 The data of ID number “3” is that the captured image data is “not in storage memory”, the captured image thumbnail data is “in storage memory”, the metadata is date “January 1, 2008”, and the time “ 09:30 ”, location“ 39 ° N latitude, 139 ° E ”, weather“ clear ”, temperature“ 5 ° ”, humidity“ 15% ”, and the location information of the shooting data on the network is“ photo.com/user/080101 ” /000003.jpg ”, which means that the similar image parameter is“ abcdf ”.
次に、実施例における無線通信端末装置100の動作についてフローチャートを用いて説明する。フローチャートにおいて「S」は「ステップ」を意味する。
図7、図8は実施例1における無線通信端末装置100での写真の閲覧時の一連のフローチャートである。
図7、図8は、無線通信端末装置100において、写真の閲覧を行った場合の処理を示すフローチャートである。当該処理は、無線通信端末装置100中のCPUが無線通信端末装置100の各部を制御することで実現される。
Next, the operation of the wireless
7 and 8 are a series of flowcharts at the time of browsing a photograph in the wireless
FIG. 7 and FIG. 8 are flowcharts showing processing when the wireless
ここでは、図7の実施例1における無線通信端末装置100での撮影画像サムネール閲覧時のフローチャートと、図8の実施例1における無線通信端末装置での撮影画像データ閲覧時のフローチャートを分けて説明する。(以下、説明の中では、「サムネール」は、「撮影画像サムネール」を意味する)
まず、図7のサムネール閲覧時のフローチャートを説明する。
無線通信端末装置100は、写真の閲覧を行うと、閲覧動作を開始し(S601)、閲覧する撮影データIDの選択を行い(S602)、その撮影データIDで管理データベースを参照する(S603)。そして、撮影データIDのサムネールデータの有無の確認を行い(S604)、サムネールデータがある場合には、サムネールを表示し(S605)、接点Aとなる(S614)。
Here, the flowchart for browsing the captured image thumbnail in the wireless
First, a flowchart for browsing thumbnails in FIG. 7 will be described.
When browsing the photo, the wireless
撮影データIDのサムネールデータの有無の確認を行い(S604)、サムネールデータが無い場合には、ネットワークの接続確認を行う(S606)。ネットワークの接続確認の結果、ネットワーク接続確認が正しく取得でき、サーバ装置103に接続可能な場合は、サーバ装置103から撮影データをダウンロードし(S607)、ダウンロードした撮影データを用い、サムネールを表示し(S608)、撮影データを蓄積用メモリに蓄積し、管理データベースを更新し(S609)、接点Aとなる(S614)。
The presence / absence of thumbnail data of the photographing data ID is confirmed (S604). If there is no thumbnail data, the network connection is confirmed (S606). As a result of the network connection confirmation, if the network connection confirmation is correctly acquired and the
一方、ネットワークの接続確認の結果、ネットワーク接続確認が正しく取得できず、サーバ装置103に接続不可能な場合は、管理データベースより撮影データIDの類似画像を確認し(S610)、類似画像がある場合には、類似画像を選択し(S611)、類似サムネールを表示し(S612)、接点Aとなる(S614)。管理データベースより撮影データIDの類似画像を確認し(S610)、類似画像がない場合には、「x」マークを表示し(S613)、接点Aとなる(S614)。
On the other hand, as a result of the network connection confirmation, if the network connection confirmation cannot be acquired correctly and the
次に、図8の撮影画像データ閲覧時のフローチャートを説明する。
接点Aとなった(S614)後、サムネールに対する操作選択がなされ(S615)、サムネールの表示を終了する(S616)、または、サムネールを削除する(S617)、または、サムネールを選んで拡大表示を行う(S620)の何れかが選択される。
Next, a flowchart when browsing captured image data in FIG. 8 will be described.
After reaching the contact A (S614), the operation selection for the thumbnail is made (S615), the thumbnail display is ended (S616), the thumbnail is deleted (S617), or the thumbnail is selected and enlarged display is performed. One of (S620) is selected.
サムネールの表示を終了する(S616)が選択された場合は、サムネールの表示を終了し(S616)、閲覧を終了する(S628)。 When the display of thumbnails is selected (S616), the display of thumbnails is ended (S616), and the browsing is ended (S628).
サムネールを削除する(S617)が、選択された場合は、撮影データの削除処理が実行し(S618)、更に、撮影データに関する管理データベースの情報を削除更新し(S619)、閲覧を終了する(S628)。 If delete thumbnail (S617) is selected, shooting data deletion processing is executed (S618), information in the management database related to shooting data is deleted and updated (S619), and browsing ends (S628). ).
サムネールを選んで拡大表示を行う(S620)が、選択された場合は、管理データベースより撮影画像データの有無を確認し(S621)、撮影画像データがある場合には、撮影画像データを表示し(S622)、閲覧を終了する。(S628)。 When a thumbnail is selected and enlarged display (S620) is selected, the presence or absence of photographed image data is confirmed from the management database (S621). If photographed image data exists, the photographed image data is displayed ( S622), browsing ends. (S628).
サムネールを選んで拡大表示を行う(S620)が、選択された場合は、管理データベースより撮影画像データの有無を確認し(S621)、撮影画像データがない場合には、ネットワークの接続確認を行う(S623)。 When the thumbnail is selected and enlarged (S620) is selected, the presence / absence of photographed image data is confirmed from the management database (S621), and if there is no photographed image data, the network connection is confirmed (S620). S623).
ネットワークの接続確認の結果、ネットワーク接続確認が正しく取得でき、サーバ装置103に接続可能な場合は、サーバ装置103から撮影データをダウンロードし(S624)、ダウンロードした撮影データを用い、撮影画像データを表示し(S625)、撮影データを蓄積用メモリに蓄積し、管理データベースを更新し(S626)、閲覧を終了する(S628)。
If the network connection confirmation is correctly acquired as a result of the network connection confirmation and the
一方、ネットワークの接続確認の結果、ネットワーク接続確認が正しく取得できず、サーバ装置103に接続不可能な場合は、「ネットワークに接続できませんでした」を表示し(S627)、閲覧を終了する(S628)。
On the other hand, as a result of the network connection confirmation, when the network connection confirmation cannot be obtained correctly and the
図9は実施例における無線通信端末装置100の写真の閲覧表示の例である。
ここでは、実施例1における無線通信端末装置100において、撮影データを閲覧した場合の画面例を示す。
FIG. 9 is an example of a photo browsing display of the wireless
Here, an example of a screen when browsing radiographed data in the wireless
図9の4つの画面例は、「ネットワークが利用可能な場合」と「ネットワークが利用不可能な場合」において、それぞれ、「サムネール表示」を行った場合と、「撮影画像データの表示」を行った場合とを示している。 The four screen examples in FIG. 9 show the case where “thumbnail display” and “display of photographed image data” are performed in “when the network is available” and “when the network is unavailable”, respectively. Shows the case.
また、サムネール表示においては、縦3列、横3行の9枚のサムネールを表示した場合を示しており、それぞれの画像に関しては、図6の実施例1の管理データベースの例と合致したものである。サムネールの左上からID番号「1」として、中央上がID番号「2」、右上がID番号「3」、左中段がID番号「4」、中央中段がID番号「5」、右中段がID番号「6」、左下がID番号「7」、中央下がID番号「8」、右下がID番号「9」となっている例である。撮影画像データを表示する為の選択カーソルは、中央上のID番号「2」のところにあり、ユーザはこのサムネールデータの撮影画像データをサムネール拡大表示選択したものとする。 In addition, the thumbnail display shows a case where nine thumbnails of three columns and three rows are displayed, and each image is consistent with the management database example of the first embodiment in FIG. is there. The ID number is “1” from the top left of the thumbnail, the ID number is “2” in the center, the ID number is “3” in the upper right, the ID number is “4” in the middle left, the ID number is “5” in the middle middle, and the ID is in the middle right In this example, the number is “6”, the lower left is the ID number “7”, the lower center is the ID number “8”, and the lower right is the ID number “9”. It is assumed that the selection cursor for displaying the photographed image data is at the ID number “2” in the center, and the user has selected the photographed image data of the thumbnail data to be enlarged and displayed as thumbnails.
「ネットワークが利用可能な場合」で、「サムネール表示」を行った場合は、全て正しいサムネールを表示する事ができるので、この場合のサムネールは全て正しいサムネールである事を示している。 When “display thumbnails” in “when the network is available”, all the correct thumbnails can be displayed, indicating that all the thumbnails in this case are correct thumbnails.
次に、「ネットワークが利用可能な場合」で、「撮影画像データの表示」を行った場合も、拡大表示されたID番号「2」に撮影画像データは、正しい撮影画像データである事を示している。 Next, even when “Display of photographed image data” is performed in “When network is available”, the ID number “2” displayed in an enlarged manner indicates that the photographed image data is correct photographed image data. ing.
更に、「ネットワークが利用不可能な場合」で、「サムネール表示」を行った場合は、ID番号「1」「3」「5」「7」「8」はサムネールが存在するので、正しいサムネールであり、ID番号「2」「4」「6」「9」はサムネールが存在しないが、類似画像パラメータで同じ値のもの存在するので、類似サムネールを表示できるため、ID番号「2」「4」「6」は、それぞれID番号「1」「3」「5」が類似サムネールとして表示されている。 In addition, when “Display of thumbnail” is performed in “when the network is not available”, since the thumbnails exist for ID numbers “1”, “3”, “5”, “7”, and “8”, the correct thumbnails are displayed. Yes, the ID numbers “2”, “4”, “6”, and “9” do not have thumbnails, but similar image parameters with the same value exist, so that similar thumbnails can be displayed. Therefore, the ID numbers “2” and “4” are displayed. In “6”, ID numbers “1”, “3”, and “5” are displayed as similar thumbnails, respectively.
そして、「ネットワークが利用不可能な場合」で、「撮影画像データの表示」を行った場合は、ID番号「2」は撮影画像データが存在しない為、「ネットワークに接続できませんでした」の表示となる。 When “Display of captured image data” is performed in “When the network is not available”, the display of “Could not be connected to the network” because ID number “2” has no captured image data. It becomes.
以上、実施例1の効果として、図9の無線通信端末装置100の撮影データの「サムネール表示」の画面例にあるように、管理データベースを参照することで、類似したサムネールをユーザに提示することができ、ネットワークが繋がっていない場合においても、違和感の無いサムネール表示を行う事ができ、ユーザインターフェース上好ましい。
As described above, as an effect of the first embodiment, similar thumbnails are presented to the user by referring to the management database as shown in the screen example of the “thumbnail display” of the shooting data of the wireless
また、図9の無線通信端末装置100の撮影データの「撮影画像データの表示」の画面例にあるにようにサムネール拡大表示選択が実行された場合には、ネットワークに接続でない旨の表示を行うことにより、本来の正しい「撮影画像データの表示」がネットワーク接続可能な場合には可能であることを知らせることができ、単に類似サムネールを拡大表示した場合と比較し、正しい画像表示か、類似した画像表示かの誤解を招くことを防止することができる。
Further, when the thumbnail enlargement display selection is executed as shown in the screen example of “display captured image data” of the captured data of the wireless
更に、本実施例1では、サーバ装置にはすべての正しい撮影データがアップロードされており、かつ、無線通信端末装置に管理データベースを持つことで、全ての撮影データを無線通信端末装置に保持しなくても良い為、蓄積用メモリの容量の制限がある場合には、見掛け上多くの撮影データを無線通信端末装置に蓄積しているのと同等の効果が得られる。 Furthermore, in the first embodiment, all correct shooting data is uploaded to the server device, and the wireless communication terminal device has a management database, so that all shooting data is not held in the wireless communication terminal device. Therefore, when there is a limit on the capacity of the storage memory, it is possible to obtain an effect equivalent to storing apparently a large amount of shooting data in the wireless communication terminal device.
本実施例1では、無線通信端末装置100として説明したが、無線でなくても適用可能であるが、特に無線の場合には、サーバ装置103への接続の場合、無線通信が可能なの範囲かどうかの判定が、サーバ装置103への接続確認に先立ち判定可能なので、ネットワーク接続確認(S504やS606)の内部処理を階層化することで、高速な判定処理ができ、無線通信端末装置100の動作の高速化に有効である。
In the first embodiment, the wireless
また、本実施例1では、無線通信端末装置100として、図2のように撮影データの取得部分(レンズ107、撮像素子108、イメージプロセッサ109)とし、カメラ一体型の無線通信端末装置として説明したが、カメラ部分は一体型でなくとも、有線、無線、光等の通信手段を用いて接続されていれば良い。
Further, in the first embodiment, the wireless
一方、本実施例1により、ネットワークが繋がっていない場合においても、違和感の無いサムネール表示が可能となるため、意図的に無線通信ユニットを停止させることで、無線通信端末装置100の省電力化に対しても、効果が期待できる。
On the other hand, according to the first embodiment, even when the network is not connected, thumbnail display without a sense of incongruity becomes possible. Therefore, by intentionally stopping the wireless communication unit, power saving of the wireless
更に、本実施例1においては、撮影画像データを一枚、一枚に対して、ダウンロード、アップロード処理するよう説明したが、一定の纏まり単位、例えば、図9のサムネール表示の場合、9枚単位の撮影画像を纏めて、ダウンロード処理することで、無線通信端末装置100での処理速度や省電力化に効果が期待できる。
Furthermore, in the first embodiment, it has been described that the captured image data is downloaded and uploaded for each image. However, in the case of the thumbnail display in FIG. By collecting the captured images together and performing a download process, an effect can be expected in the processing speed and power saving in the wireless
以後、実施例2について述べるが、同じ機能のものには実施例1の場合と同じ番号を付加している。 Hereinafter, the second embodiment will be described. The same functions as those in the first embodiment are denoted by the same reference numerals.
実施例2では、図1の無線通信端末装置100において、図2のプログラムROM113または、蓄積用メモリ115に推定画像用の情報(推定背景、推定前景)が、保持されているものとする。
In the second embodiment, it is assumed that information (estimated background and estimated foreground) for estimated images is held in the
図10は実施例2における無線通信端末装置の管理データベースの例である。
ここでは、無線通信端末装置の蓄積用用メモリにある撮影データ用の管理データベースについて説明する。
図10の管理データベースは、図6の管理データベースと類似しているので、差分のみを説明する。
FIG. 10 is an example of a management database of the wireless communication terminal device according to the second embodiment.
Here, a management database for shooting data in the storage memory of the wireless communication terminal device will be described.
Since the management database in FIG. 10 is similar to the management database in FIG. 6, only the differences will be described.
図10は、図6の管理データベース用のパラメータに、推定背景、推定前景を加えたものから構成されている。
推定背景は、画像の特徴量から類推した背景となる画像の例を元にモデル化し、アルファベットの26文字に割り当て、1つのアルファベットで示している。
推定前景は、画像の特徴量から類推した前傾または中心部分となる画像の例を元にモデル化し、アルファベットの26文字に割り当て、1つのアルファベットで示している。
FIG. 10 is configured by adding the estimated background and estimated foreground to the parameters for the management database of FIG.
The estimated background is modeled on the basis of an example of an image serving as a background analogized from the feature amount of the image, and is assigned to 26 letters of the alphabet and is represented by one alphabet.
The estimated foreground is modeled on the basis of an example of an image having a forward tilt or a central portion inferred from the feature amount of the image, and is assigned to 26 letters of the alphabet, and is represented by one alphabet.
上記を元に例として、図10のID番号1〜ID番号3のデータベースの意味を説明する。ID番号「1」のデータは、撮影画像データは「蓄積用メモリにある」、撮影画像サムネールデータは「蓄積用メモリにある」、メタデータは、日付「2008年1月1日」、時刻「09:00」、場所「北緯39度、東経139度」、天候「晴れ」、気温「5度」、湿度「15%」、撮影データのネットワーク上蓄積位置情報は「photo.com/user/080101/000001.jpg」、類似画像パラメータは「abcde」、推定背景は「a」、推定前景「b」となることを意味している。
Based on the above, the meaning of the database of
ID番号「2」のデータは、撮影画像データは「蓄積用メモリにない」、撮影画像サムネールデータは「蓄積用メモリにない」、メタデータは、日付「2008年1月1日」、時刻「09:05」、場所「北緯39度、東経139度」、天候「晴れ」、気温「5度」、湿度「15%」、撮影データのネットワーク上蓄積位置情報は「photo.com/user/080101/000002.jpg」、類似画像パラメータは「abcde」、推定背景は「a」、推定前景「b」となることを意味している。 The data of ID number “2” is that the captured image data is “not in storage memory”, the captured image thumbnail data is “not in storage memory”, the metadata is date “January 1, 2008”, and the time “ 09:05 ”, location“ 39 ° North latitude, 139 ° East longitude ”,“ Sunny ”weather,“ 5 ° C. ”temperature,“ 15% ”humidity, and network location information for photo data is“ photo.com/user/080101 ” /000002.jpg ”, the similar image parameter is“ abcde ”, the estimated background is“ a ”, and the estimated foreground is“ b ”.
ID番号「3」のデータは、撮影画像データは「蓄積用メモリにない」、撮影画像サムネールデータは「蓄積用メモリにある」、メタデータは、日付「2008年1月1日」、時刻「09:30」、場所「北緯39度、東経139度」、天候「晴れ」、気温「5度」、湿度「15%」、撮影データのネットワーク上蓄積位置情報は「photo.com/user/080101/000003.jpg」、類似画像パラメータは「abcdf」、推定背景は「a」、推定前景「b」となることを意味している。 The data of ID number “3” is that the captured image data is “not in storage memory”, the captured image thumbnail data is “in storage memory”, the metadata is date “January 1, 2008”, and the time “ 09:30 ”, location“ 39 ° N latitude, 139 ° E ”, weather“ clear ”, temperature“ 5 ° ”, humidity“ 15% ”, and the location information of the shooting data on the network is“ photo.com/user/080101 ” /000003.jpg ”, the similar image parameter is“ abcdf ”, the estimated background is“ a ”, and the estimated foreground is“ b ”.
次に、実施例における無線通信端末装置100の動作についてフローチャートを用いて説明する。フローチャートにおいて「S」は「ステップ」を意味する。
図11、図12は実施例2における無線通信端末装置100での写真の閲覧時の一連のフローチャートである。
図11、図12は、無線通信端末装置100において、写真の閲覧を行った場合の処理を示すフローチャートである。当該処理は、無線通信端末装置100中のCPUが無線通信端末装置100の各部を制御することで実現される。
Next, the operation of the wireless
11 and 12 are a series of flowcharts at the time of browsing a photograph in the wireless
FIG. 11 and FIG. 12 are flowcharts showing processing when the wireless
ここでは、図11の実施例2における無線通信端末装置100での撮影画像サムネール閲覧時のフローチャートと、図12の実施例2における無線通信端末装置での撮影画像データ閲覧時のフローチャートを分けて説明する。(以下、説明の中では、「サムネール」は、「撮影画像サムネール」を意味する)
まず、図11のサムネール閲覧時のフローチャートを説明する。
無線通信端末装置100は、写真の閲覧を行うと、閲覧動作を開始し(S601)、閲覧する撮影データIDの選択を行い(S602)、その撮影データIDで管理データベースを参照する(S603)。そして、撮影データIDのサムネールデータの有無の確認を行い(S604)、サムネールデータがある場合には、サムネールを表示し(S605)、接点Bとなる(S632)。
Here, the flowchart for browsing the captured image thumbnail in the wireless
First, a flowchart when browsing thumbnails in FIG. 11 will be described.
When browsing the photo, the wireless
撮影データIDのサムネールデータの有無の確認を行い(S604)、サムネールデータが無い場合には、ネットワークの接続確認を行う(S606)。ネットワークの接続確認の結果、ネットワーク接続確認が正しく取得でき、サーバ装置103に接続可能な場合は、サーバ装置103から撮影データをダウンロードし(S607)、ダウンロードした撮影データを用い、サムネールを表示し(S608)、撮影データを蓄積用メモリに蓄積し、管理データベースを更新し(S609)、接点Bとなる(S632)。
The presence / absence of thumbnail data of the photographing data ID is confirmed (S604). If there is no thumbnail data, the network connection is confirmed (S606). As a result of the network connection confirmation, if the network connection confirmation is correctly acquired and the
一方、ネットワークの接続確認の結果、ネットワーク接続確認が正しく取得できず、サーバ装置103に接続不可能な場合は、管理データベースより撮影データIDの類似画像を確認し(S610)、類似画像がある場合には、類似画像を選択し(S611)、類似サムネールを表示し(S612)、接点Bとなる(S632)。
On the other hand, as a result of the network connection confirmation, if the network connection confirmation cannot be acquired correctly and the
管理データベースより撮影データIDの類似画像を確認し(S610)、類似画像がない場合には、管理データベースより推定背景を選択し(S629)、更に、推定前景を選択し(S630)、推定背景と推定前景を合成し、代替サムネールを表示し(S631)、接点Bとなる(S632)。 A similar image of the shooting data ID is confirmed from the management database (S610). If there is no similar image, an estimated background is selected from the management database (S629), and an estimated foreground is selected (S630). The estimated foreground is synthesized, an alternative thumbnail is displayed (S631), and contact B is obtained (S632).
次に、図12の撮影画像データ閲覧時のフローチャートを説明する。
接点Bとなった(S632)後、サムネールに対する操作選択がなされ(S615)、サムネールの表示を終了する(S616)、または、サムネールを削除する(S617)、または、サムネールを選んで拡大表示を行う(S620)の何れかが選択される。
Next, a flowchart when browsing captured image data in FIG. 12 will be described.
After reaching the contact B (S632), an operation selection for the thumbnail is made (S615), the thumbnail display is ended (S616), the thumbnail is deleted (S617), or the thumbnail is selected and enlarged display is performed. One of (S620) is selected.
サムネールの表示を終了する(S616)が選択された場合は、サムネールの表示を終了し(S616)、閲覧を終了する(S628)。
サムネールを削除する(S617)が、選択された場合は、撮影データの削除処理が実行し(S618)、更に、撮影データに関する管理データベースの情報を削除更新し(S619)、閲覧を終了する(S628)。
When the display of thumbnails is selected (S616), the display of thumbnails is ended (S616), and the browsing is ended (S628).
If delete thumbnail (S617) is selected, shooting data deletion processing is executed (S618), information in the management database related to shooting data is deleted and updated (S619), and browsing ends (S628). ).
サムネールを選んで拡大表示を行う(S620)が、選択された場合は、管理データベースより撮影画像データの有無を確認し(S621)、撮影画像データがある場合には、撮影画像データを表示し(S622)、閲覧を終了する。(S628)。
サムネールを選んで拡大表示を行う(S620)が、選択された場合は、管理データベースより撮影画像データの有無を確認し(S621)、撮影画像データがない場合には、ネットワークの接続確認を行う(S623)。
When a thumbnail is selected and enlarged display (S620) is selected, the presence or absence of photographed image data is confirmed from the management database (S621). If photographed image data exists, the photographed image data is displayed ( S622), browsing ends. (S628).
If a thumbnail is selected and enlarged display (S620) is selected, the presence or absence of photographed image data is confirmed from the management database (S621), and if there is no photographed image data, network connection confirmation is performed ( S623).
ネットワークの接続確認の結果、ネットワーク接続確認が正しく取得でき、サーバ装置103に接続可能な場合は、サーバ装置103から撮影データをダウンロードし(S624)、ダウンロードした撮影データを用い、撮影画像データを表示し(S625)、撮影データを蓄積用メモリに蓄積し、管理データベースを更新し(S626)、閲覧を終了する(S628)。
If the network connection confirmation is correctly acquired as a result of the network connection confirmation and the
一方、ネットワークの接続確認の結果、ネットワーク接続確認が正しく取得できず、サーバ装置103に接続不可能な場合は、「ネットワークに接続できませんでした」を表示し(S627)、閲覧を終了する(S628)。
On the other hand, as a result of the network connection confirmation, when the network connection confirmation cannot be obtained correctly and the
図13は実施例2における無線通信端末装置100の写真の閲覧表示の例である。
ここでは、実施例2における無線通信端末装置100において、撮影データを閲覧した場合の画面例を示す。
図13の4つの画面例は、「ネットワークが利用可能な場合」と「ネットワークが利用不可能な場合」において、それぞれ、「サムネール表示」を行った場合と、「撮影画像データの表示」を行った場合とを示している。
FIG. 13 shows an example of a photo browsing display of the wireless
Here, in the wireless
The four screen examples of FIG. 13 show the case where “Thumbnail Display” and “Display of Captured Image Data” are performed in “When the network is available” and “When the network is unavailable”, respectively. Shows the case.
また、サムネール表示においては、縦3列、横3行の9枚のサムネールを表示した場合を示しており、それぞれの画像に関しては、図10の実施例2の管理データベースの例と合致したもので、サムネールの左上からID番号「1」として、中央上がID番号「2」、右上がID番号「3」、左中段がID番号「4」、中央中段がID番号「5」、右中段がID番号「6」、左下がID番号「7」、中央下がID番号「8」、右下がID番号「9」となっている例であり、撮影画像データを表示する為の選択カーソルは、中央上のID番号「2」のところにあり、ユーザはこのサムネールデータの撮影画像データをサムネール拡大表示選択したものとする。 In addition, the thumbnail display shows a case where nine thumbnails in three columns and three rows are displayed, and each image is consistent with the example of the management database of the second embodiment in FIG. , ID number “1” from the top left of the thumbnail, ID number “2” on the center, ID number “3” on the top right, ID number “4” on the middle left, ID number “5” on the middle middle, In this example, the ID number is “6”, the lower left is the ID number “7”, the lower center is the ID number “8”, and the lower right is the ID number “9”. The selection cursor for displaying the captured image data is It is assumed that the user has the ID number “2” in the center, and the user has selected the captured image data of the thumbnail data for thumbnail enlargement display.
「ネットワークが利用可能な場合」で、「サムネール表示」を行った場合は、全て正しいサムネールを表示する事ができるので、この場合のサムネールは全て正しいサムネールである事を示している。
次に、「ネットワークが利用可能な場合」で、「撮影画像データの表示」を行った場合も、拡大表示されたID番号「2」に撮影画像データは、正しい撮影画像データである事を示している。
When “display thumbnails” in “when the network is available”, all the correct thumbnails can be displayed, indicating that all the thumbnails in this case are correct thumbnails.
Next, even when “Display of photographed image data” is performed in “When network is available”, the ID number “2” displayed in an enlarged manner indicates that the photographed image data is correct photographed image data. ing.
更に、「ネットワークが利用不可能な場合」で、「サムネール表示」を行った場合は、ID番号「1」「3」「5」「7」「8」はサムネールが存在するので、正しいサムネールであり、ID番号「2」「4」「6」「9」はサムネールが存在しないが、類似画像パラメータで同じ値のもの存在するので、類似サムネールを表示できるため、ID番号「2」「4」「6」は、それぞれID番号「1」「3」「5」が類似サムネールとして表示されている。ID番号「9」については、サムネールも存在せず、類似画像パラメータも同じものが存在しないが、推定背景と推定前景の情報により、代替サムネールを生成に表示している。 In addition, when “Display of thumbnail” is performed in “when the network is not available”, since the thumbnails exist for ID numbers “1”, “3”, “5”, “7”, and “8”, the correct thumbnails are displayed. Yes, the ID numbers “2”, “4”, “6”, and “9” do not have thumbnails, but similar image parameters with the same value exist, so that similar thumbnails can be displayed. Therefore, the ID numbers “2” and “4” are displayed. In “6”, ID numbers “1”, “3”, and “5” are displayed as similar thumbnails, respectively. For the ID number “9”, there is no thumbnail and the similar image parameter does not exist, but an alternative thumbnail is generated and displayed based on the estimated background and estimated foreground information.
そして、「ネットワークが利用不可能な場合」で、「撮影画像データの表示」を行った場合は、ID番号「2」は撮影画像データが存在しない為、「ネットワークに接続できませんでした」の表示となる。 When “Display of captured image data” is performed in “When the network is not available”, the display of “Could not be connected to the network” because ID number “2” has no captured image data. It becomes.
以上、実施例2の効果として、実施例1の効果に加え、図13の無線通信端末装置100の撮影データの「サムネール表示」の画面例にあるように、管理データベースを参照することで、代替サムネールをユーザに提示するこおとができ、ネットワークが繋がっていない場合においても、更に、違和感の無いサムネール表示を行うことができ、ユーザインターフェース上好ましい。
As described above, as an effect of the second embodiment, in addition to the effect of the first embodiment, referring to the management database as shown in the “thumbnail display” screen example of the photographing data of the wireless
以後、実施例3について述べるが、同じ機能のものには実施例1、実施例2の場合と同じ番号を付加している。 Hereinafter, the third embodiment will be described. The same functions as those in the first and second embodiments are denoted by the same reference numerals.
まず、本実施例の概要について説明する。図14は本発明の実施例の概要である。100は、デジタルカメラの機能や無線通信機能を持つネットワークにアクセス可能な無線通信端末装置である。101は、無線通信機能やインターネット回線と通信を行う機能を有するアクセスポイントである。103は、インターネット回線と通信を行う機能や無線通信端末装置100からの要求に従い、撮影データの蓄積(以下、「アップロード」という。)したり、無線通信端末装置100からの要求に従い、撮影データを送信(以下、ダウンロードという。)したりするサーバ装置である。129は、無線通信端末装置100とは異なった通信方式を持つカメラ付き携帯電話である。130は、カメラ付き携帯電話129をネットワーク102にアクセスさせるための中継局である。
First, an outline of the present embodiment will be described. FIG. 14 is an outline of an embodiment of the present invention.
ここでは、図1の実施例1との差分について説明する。
無線通信端末装置100で、写真の撮影が行われた場合は、実施例1と全く同じ動作となるため、説明を省略する。
無線通信端末装置100で、写真の閲覧が行われた場合、アクセスポイント101、ネットワーク101、または、サーバ装置103の何れかに障害がない場合には、実施例1と全く同じ動作となるため、説明を省略する。
Here, differences from the first embodiment of FIG. 1 will be described.
When the wireless
When the wireless
次に、無線通信端末装置100で、アクセスポイント101、ネットワーク101、または、サーバ装置103の何れかに障害がある場合に、無線通信端末装置100で、写真の閲覧が行われた場合について説明する。まず、無線通信端末装置100で、写真の閲覧が行われた場合、無線通信端末装置100に蓄積された管理データベースおよび撮影データを蓄積用メモリから参照、表示するが、その際、参照すべき撮影データがない場合には、管理データベースの情報に従いアクセスポイント101とネットワーク102を介して、サーバ装置103に撮影データのダウンロード要求が送信しようとする。
Next, a case where a photograph is browsed in the wireless
しかし、何らかの障害によりネットワーク接続が行えない場合には、無線通信端末装置100で、蓄積用メモリの管理データベースを参照し、閲覧しようとする撮影データに類似した撮影データを検索し、類似した撮影データがあった場合には、その撮影データを元に蓄積用メモリから参照、表示することができる。
However, when the network connection cannot be performed due to some trouble, the wireless
これにより、無線通信端末装置100で、写真の閲覧が行われた場合に、撮影データが蓄積用メモリに存在せず、かつ、アクセスポイント101、ネットワーク101、または、サーバ装置103の何れかに障害があった場合においても、類似した撮影データを表示することで、ユーザの利便性を高めることができる。
As a result, when a photograph is browsed in the wireless
更に、ここで、無線通信端末装置100において、撮影データの表示(サムメールではない)を行う場合、撮影データが蓄積用メモリにない場合は、管理データベースにある撮影データのサーバ装置上の場所(URI)をQRコード化した画像を表示する事が有効である。
Further, here, in the wireless
これは、無線通信端末装置100でQRコードを表示する事で、カメラ付き携帯電話129の機能を用いて、130の中継局経由で、サーバ装置の撮影画像データをダウンロードする事ができるようになる為である。
This is because the QR code is displayed on the wireless
次に、実施例における無線通信端末装置100の動作についてフローチャートを用いて説明する。フローチャートにおいて「S」は「ステップ」を意味する。
図15、図16は実施例3における無線通信端末装置100での写真の閲覧時の一連のフローチャートである。
図15、図16は、無線通信端末装置100において、写真の閲覧を行った場合の処理を示すフローチャートである。当該処理は、無線通信端末装置100中のCPUが無線通信端末装置100の各部を制御することで実現される。
Next, the operation of the wireless
15 and 16 are a series of flowcharts at the time of browsing a photograph in the wireless
FIG. 15 and FIG. 16 are flowcharts showing processing when the wireless
ここでは、図15の実施例3における無線通信端末装置100での撮影画像サムネール閲覧時のフローチャートと、図16の実施例3における無線通信端末装置での撮影画像データ閲覧時のフローチャートを分けて説明する。(以下、説明の中では、「サムネール」は、「撮影画像サムネール」を意味する)
まず、図15のサムネール閲覧時のフローチャートを説明する。
無線通信端末装置100は、写真の閲覧を行うと、閲覧動作を開始し(S601)、閲覧する撮影データIDの選択を行い(S602)、その撮影データIDで管理データベースを参照する(S603)。そして、撮影データIDのサムネールデータの有無の確認を行い(S604)、サムネールデータがある場合には、サムネールを表示し(S605)、接点Cとなる(S633)。
Here, the flowchart for browsing the captured image thumbnail in the wireless
First, a flowchart for browsing thumbnails in FIG. 15 will be described.
When browsing the photo, the wireless
撮影データIDのサムネールデータの有無の確認を行い(S604)、サムネールデータが無い場合には、ネットワークの接続確認を行う(S606)。ネットワークの接続確認の結果、ネットワーク接続確認が正しく取得でき、サーバ装置103に接続可能な場合は、サーバ装置103から撮影データをダウンロードし(S607)、ダウンロードした撮影データを用い、サムネールを表示し(S608)、撮影データを蓄積用メモリに蓄積し、管理データベースを更新し(S609)、接点Cとなる(S633)。
The presence / absence of thumbnail data of the photographing data ID is confirmed (S604). If there is no thumbnail data, the network connection is confirmed (S606). As a result of the network connection confirmation, if the network connection confirmation is correctly acquired and the
一方、ネットワークの接続確認の結果、ネットワーク接続確認が正しく取得できず、サーバ装置103に接続不可能な場合は、管理データベースより撮影データIDの類似画像を確認し(S610)、類似画像がある場合には、類似画像を選択し(S611)、類似サムネールを表示し(S612)、接点Cとなる(S633)。
On the other hand, as a result of the network connection confirmation, if the network connection confirmation cannot be acquired correctly and the
管理データベースより撮影データIDの類似画像を確認し(S610)、類似画像がない場合には、管理データベースより推定背景を選択し(S629)、更に、推定前景を選択し(S630)、推定背景と推定前景を合成し、代替サムネールを表示し(S631)、接点Cとなる(S633)。 A similar image of the shooting data ID is confirmed from the management database (S610). If there is no similar image, an estimated background is selected from the management database (S629), and an estimated foreground is selected (S630). The estimated foreground is synthesized, an alternative thumbnail is displayed (S631), and a contact C is obtained (S633).
次に、図16の撮影画像データ閲覧時のフローチャートを説明する。
接点Cとなった(S633)後、サムネールに対する操作選択がなされ(S615)、サムネールの表示を終了する(S616)、または、サムネールを削除する(S617)、または、サムネールを選んで拡大表示を行う(S620)の何れかが選択される。
Next, a flowchart when browsing captured image data in FIG. 16 will be described.
After reaching the contact C (S633), the operation selection for the thumbnail is made (S615), the display of the thumbnail is ended (S616), the thumbnail is deleted (S617), or the thumbnail is selected and enlarged display is performed. One of (S620) is selected.
サムネールの表示を終了する(S616)が選択された場合は、サムネールの表示を終了し(S616)、閲覧を終了する(S628)。
サムネールを削除する(S617)が、選択された場合は、撮影データの削除処理が実行し(S618)、更に、撮影データに関する管理データベースの情報を削除更新し(S619)、閲覧を終了する(S628)。
When the display of thumbnails is selected (S616), the display of thumbnails is ended (S616), and the browsing is ended (S628).
When delete thumbnail (S617) is selected, shooting data deletion processing is executed (S618), information in the management database related to shooting data is deleted and updated (S619), and browsing ends (S628). ).
サムネールを選んで拡大表示を行う(S620)が、選択された場合は、管理データベースより撮影画像データの有無を確認し(S621)、撮影画像データがある場合には、撮影画像データを表示し(S622)、閲覧を終了する。(S628)。 When a thumbnail is selected and enlarged display (S620) is selected, the presence or absence of photographed image data is confirmed from the management database (S621). If photographed image data exists, the photographed image data is displayed ( S622), browsing ends. (S628).
サムネールを選んで拡大表示を行う(S620)が、選択された場合は、管理データベースより撮影画像データの有無を確認し(S621)、撮影画像データがない場合には、ネットワークの接続確認を行う(S623)。 When the thumbnail is selected and enlarged (S620) is selected, the presence / absence of photographed image data is confirmed from the management database (S621), and if there is no photographed image data, the network connection is confirmed (S620). S623).
ネットワークの接続確認の結果、ネットワーク接続確認が正しく取得でき、サーバ装置103に接続可能な場合は、サーバ装置103から撮影データをダウンロードし(S624)、ダウンロードした撮影データを用い、撮影画像データを表示し(S625)、撮影データを蓄積用メモリに蓄積し、管理データベースを更新し(S626)、閲覧を終了する(S628)。
If the network connection confirmation is correctly acquired as a result of the network connection confirmation and the
一方、ネットワークの接続確認の結果、ネットワーク接続確認が正しく取得できず、サーバ装置103に接続不可能な場合は、管理データベースより、撮影画像データのネットワーク上の蓄積位置情報(URI)をQRコードに変換し(S634)、変換し得られたQRコード画像を表示し(S635)、閲覧を終了する(S628)。
On the other hand, as a result of the network connection confirmation, if the network connection confirmation cannot be acquired correctly and the
図17は実施例3における無線通信端末装置100の写真の閲覧表示の例である。
ここでは、実施例3における無線通信端末装置100において、撮影データを閲覧した場合の画面例を示す。
FIG. 17 shows an example of a photo browsing display of the wireless
Here, an example of a screen when browsing radiographed data in the wireless
図17の4つの画面例は、「ネットワークが利用可能な場合」と「ネットワークが利用不可能な場合」において、それぞれ、「サムネール表示」を行った場合と、「撮影画像データの表示」を行った場合とを示している。 The four screen examples in FIG. 17 show a case where “Thumbnail Display” is performed and “Display of Captured Image Data” are respectively performed in “When the network is available” and “When the network is unavailable”. Shows the case.
また、サムネール表示においては、縦3列、横3行の9枚のサムネールを表示した場合を示しており、それぞれの画像に関しては、図10の実施例2の管理データベースの例と合致したもので、サムネールの左上からID番号「1」として、中央上がID番号「2」、右上がID番号「3」、左中段がID番号「4」、中央中段がID番号「5」、右中段がID番号「6」、左下がID番号「7」、中央下がID番号「8」、右下がID番号「9」となっている例である。撮影画像データを表示する為の選択カーソルは、中央上のID番号「2」のところにあり、ユーザはこのサムネールデータの撮影画像データをサムネール拡大表示選択したものとする。 In addition, the thumbnail display shows a case where nine thumbnails in three columns and three rows are displayed, and each image is consistent with the example of the management database of the second embodiment in FIG. , ID number “1” from the top left of the thumbnail, ID number “2” on the center, ID number “3” on the top right, ID number “4” on the middle left, ID number “5” on the middle middle, In this example, the ID number is “6”, the lower left is the ID number “7”, the lower center is the ID number “8”, and the lower right is the ID number “9”. It is assumed that the selection cursor for displaying the photographed image data is at the ID number “2” in the center, and the user has selected the photographed image data of the thumbnail data to be enlarged and displayed as thumbnails.
「ネットワークが利用可能な場合」で、「サムネール表示」を行った場合は、全て正しいサムネールを表示する事ができるので、この場合のサムネールは全て正しいサムネールである事を示している。 When “display thumbnails” in “when the network is available”, all the correct thumbnails can be displayed, indicating that all the thumbnails in this case are correct thumbnails.
次に、「ネットワークが利用可能な場合」で、「撮影画像データの表示」を行った場合も、拡大表示されたID番号「2」に撮影画像データは、正しい撮影画像データである事を示している。 Next, even when “Display of photographed image data” is performed in “When network is available”, the ID number “2” displayed in an enlarged manner indicates that the photographed image data is correct photographed image data. ing.
更に、「ネットワークが利用不可能な場合」で、「サムネール表示」を行った場合は、ID番号「1」「3」「5」「7」「8」はサムネールが存在するので、正しいサムネールであり、ID番号「2」「4」「6」「9」はサムネールが存在しないが、類似画像パラメータで同じ値のもの存在するので、類似サムネールを表示できるため、ID番号「2」「4」「6」は、それぞれID番号「1」「3」「5」が類似サムネールとして表示されている。ID番号「9」については、サムネールも存在せず、類似画像パラメータも同じものが存在しないが、推定背景と推定前景の情報により、代替サムネールを生成に表示している。 In addition, when “Display of thumbnail” is performed in “when the network is not available”, since the thumbnails exist for ID numbers “1”, “3”, “5”, “7”, and “8”, the correct thumbnails are displayed. Yes, the ID numbers “2”, “4”, “6”, and “9” do not have thumbnails, but similar image parameters with the same value exist, so that similar thumbnails can be displayed. Therefore, the ID numbers “2” and “4” are displayed. In “6”, ID numbers “1”, “3”, and “5” are displayed as similar thumbnails, respectively. For the ID number “9”, there is no thumbnail and the similar image parameter does not exist, but an alternative thumbnail is generated and displayed based on the estimated background and estimated foreground information.
そして、「ネットワークが利用不可能な場合」で、「撮影画像データの表示」を行った場合は、ID番号「2」は撮影画像データが存在しない為、撮影画像データのネットワーク上の蓄積位置情報(URI)のQRコード画像を表示となる。 When “Display of photographed image data” is performed in “When the network is not available”, since the photographed image data does not exist for the ID number “2”, the storage location information of the photographed image data on the network The (URI) QR code image is displayed.
以上、実施例3の効果として、実施例1、実施例2の効果に加え、図17の無線通信端末装置100の撮影データの「撮影画像データ表示」の画面例にあるように、管理データベースを参照することで、撮影画像データのネットワーク上の蓄積位置情報(URI)をQRコードでユーザに提示することができ、カメラ付き携帯電話129の機能を用いて、サーバ装置の撮影画像データをダウンロード、表示することができるようになり、ユーザの利便性が向上する。
As described above, as an effect of the third embodiment, in addition to the effects of the first and second embodiments, the management database is set as shown in the “photographed image data display” screen example of the photographing data of the wireless
また、実施例3では、撮影画像データの表示を携帯電話129で可能なので、図2の「撮影画像データ確認(S621)」のNOの場合の処理を直接「URI→QRコード変換(S634)」に接続し、ネットワーク接続(S623)以降の処理を行わない動作モード設けることで、無線通信端末装置100でのサムネールのみの表示を行い、通信の消費電力を減らし、撮影時間が長く取れるような撮影優先モードを設けるようなことも可能である。
Further, in the third embodiment, since the captured image data can be displayed by the
以後、実施例4について述べるが、同じ機能のものには実施例1、実施例2、実施例3の場合と同じ番号を付加している。
次に、実施例における無線通信端末装置100の動作についてフローチャートを用いて説明する。フローチャートにおいて「S」は「ステップ」を意味する。
図18、図19は実施例4における無線通信端末装置100での写真の閲覧時の一連のフローチャートである。
図18、図19は、無線通信端末装置100において、写真の閲覧を行った場合の処理を示すフローチャートである。当該処理は、無線通信端末装置100中のCPUが無線通信端末装置100の各部を制御することで実現される。
Hereinafter, the fourth embodiment will be described, but the same functions as those in the first, second, and third embodiments are denoted by the same numbers.
Next, the operation of the wireless
18 and 19 are a series of flowcharts at the time of browsing a photograph in the wireless
FIG. 18 and FIG. 19 are flowcharts showing processing when the wireless
ここでは、図18の実施例4における無線通信端末装置100での撮影画像サムネール閲覧時のフローチャートと、図19の実施例4における無線通信端末装置での撮影画像データ閲覧時のフローチャートを分けて説明する。(以下、説明の中では、「サムネール」は、「撮影画像サムネール」を意味する)
まず、図18のサムネール閲覧時のフローチャートを説明する。
無線通信端末装置100は、写真の閲覧を行うと、閲覧動作を開始し(S601)、閲覧する撮影データIDの選択を行い(S602)、その撮影データIDで管理データベースを参照する(S603)。そして、撮影データIDのサムネールデータの有無の確認を行い(S604)、サムネールデータがある場合には、サムネールを表示し(S605)、接点Cとなる(S633)。
Here, the flowchart for browsing the captured image thumbnail in the wireless
First, a flowchart for browsing thumbnails in FIG. 18 will be described.
When browsing the photo, the wireless
撮影データIDのサムネールデータの有無の確認を行い(S604)、サムネールデータが無い場合には、管理データベースより撮影データIDの類似画像を確認し(S610)、類似画像がある場合には、類似画像を選択し(S611)、類似サムネールを表示し(S612)、ネットワークの接続確認を行う(S606)。 The presence / absence of thumbnail data of the shooting data ID is checked (S604). If there is no thumbnail data, a similar image of the shooting data ID is checked from the management database (S610). Is selected (S611), a similar thumbnail is displayed (S612), and the network connection is confirmed (S606).
管理データベースより撮影データIDの類似画像を確認し(S610)、類似画像がない場合には、管理データベースより推定背景を選択し(S629)、更に、推定前景を選択し(S630)、推定背景と推定前景を合成し、代替サムネールを表示し(S631)、ネットワークの接続確認を行う(S606)。 A similar image of the shooting data ID is confirmed from the management database (S610). If there is no similar image, an estimated background is selected from the management database (S629), and an estimated foreground is selected (S630). The estimated foreground is synthesized, an alternative thumbnail is displayed (S631), and the network connection is confirmed (S606).
ネットワークの接続確認の結果、ネットワーク接続確認が正しく取得でき、サーバ装置103に接続可能な場合は、サーバ装置103から撮影データをダウンロードし(S607)、ダウンロードした撮影データを用い、サムネールを表示し(S608)、撮影データを蓄積用メモリに蓄積し、管理データベースを更新し(S609)、接点Dとなる(S636)。一方、ネットワークの接続確認の結果、ネットワーク接続確認が正しく取得できず、サーバ装置103に接続不可能な場合は、何も行わず、接点Dとなる(S636)。
As a result of the network connection confirmation, if the network connection confirmation is correctly acquired and the
次に、図19の撮影画像データ閲覧時のフローチャートを説明する。
接点Dとなった(S636)後、サムネールに対する操作選択がなされ(S615)、サムネールの表示を終了する(S616)、または、サムネールを削除する(S617)、または、サムネールを選んで拡大表示を行う(S620)の何れかが選択される。
Next, a flowchart for browsing captured image data in FIG. 19 will be described.
After reaching the contact D (S636), the operation selection for the thumbnail is made (S615), the thumbnail display is ended (S616), the thumbnail is deleted (S617), or the thumbnail is selected and enlarged display is performed. One of (S620) is selected.
サムネールの表示を終了する(S616)が選択された場合は、サムネールの表示を終了し(S616)、閲覧を終了する(S628)。
サムネールを削除する(S617)が、選択された場合は、撮影データの削除処理が実行し(S618)、更に、撮影データに関する管理データベースの情報を削除更新し(S619)、閲覧を終了する(S628)。
When the display of thumbnails is selected (S616), the display of thumbnails is ended (S616), and the browsing is ended (S628).
If delete thumbnail (S617) is selected, shooting data deletion processing is executed (S618), information in the management database related to shooting data is deleted and updated (S619), and browsing ends (S628). ).
サムネールを選んで拡大表示を行う(S620)が、選択された場合は、現在表示されているサムネールを拡大して表示し(S637)、その後、管理データベースより撮影画像データの有無を確認し(S621)、撮影画像データがある場合には、撮影画像データを表示し(S622)、閲覧を終了する。(S628)。 When a thumbnail is selected and enlarged (S620) is selected, the currently displayed thumbnail is enlarged (S637), and then the presence or absence of photographed image data is confirmed from the management database (S621). ) If there is photographed image data, the photographed image data is displayed (S622), and the browsing is terminated. (S628).
一方、管理データベースより撮影画像データの有無を確認し(S621)、撮影画像データがない場合には、ネットワークの接続確認を行う(S623)。
ネットワークの接続確認の結果、ネットワーク接続確認が正しく取得でき、サーバ装置103に接続可能な場合は、サーバ装置103から撮影データをダウンロードし(S624)、ダウンロードした撮影データを用い、撮影画像データを表示し(S625)、撮影データを蓄積用メモリに蓄積し、管理データベースを更新し(S626)、閲覧を終了する(S628)。
On the other hand, the presence / absence of photographed image data is confirmed from the management database (S621). If there is no photographed image data, network connection confirmation is performed (S623).
If the network connection confirmation is correctly acquired as a result of the network connection confirmation and the
一方、ネットワークの接続確認の結果、ネットワーク接続確認が正しく取得できず、サーバ装置103に接続不可能な場合は、管理データベースより、撮影画像データのネットワーク上の蓄積位置情報(URI)をQRコードに変換し(S634)、変換し得られたQRコード画像を表示し(S635)、閲覧を終了する(S628)。
On the other hand, as a result of the network connection confirmation, if the network connection confirmation cannot be acquired correctly and the
図20は実施例4における無線通信端末装置の閲覧時表示の例である。
ここでは、実施例4における無線通信端末装置において、撮影データを閲覧した場合の画面例を示す。
図20は、先に説明した図18と同じ条件で、4つの画面例示したものである。
FIG. 20 is an example of display during browsing of the wireless communication terminal device according to the fourth embodiment.
Here, in the wireless communication terminal device according to the fourth embodiment, a screen example in the case of browsing shooting data is shown.
FIG. 20 shows an example of four screens under the same conditions as FIG. 18 described above.
図20と図18の実施例との差分は、「ネットワークが利用可能な場合」で、「サムネール表示」および「撮影画像データ表示」を行った場合、「ネットワークが利用不可能な場合」で、「撮影画像データ表示」を行った場合であり、この部分について説明する。 The difference between the embodiment of FIG. 20 and FIG. 18 is “when the network is available”, and when “thumbnail display” and “photographed image data display” are performed, “when the network is unavailable”, This is a case where “photographed image data display” is performed, and this portion will be described.
図20において、「ネットワークが利用可能な場合」で、「サムネール表示」場合、図18のフローの処理により、ID番号「1」「3」「5」「7」「8」はサムネールが存在するので、正しいサムネールである。ID番号「2」「4」「6」「9」はサムネールが存在しないが、類似画像パラメータで同じ値のもの存在するので、サムネール表示においては、類似サムネールを表示するようになる。ID番号「2」「4」「6」は、それぞれID番号「1」「3」「5」が類似サムネールとして表示し、ID番号「9」は、サムネールも存在せず、類似画像パラメータも同じものが存在しないが、推定背景と推定前景の情報により、代替サムネールを生成に表示し、その表示後、ネットワーク接続確認が行われ、全て正しいサムネールを表示する。 In FIG. 20, in the case of “when network is available” and “display thumbnail”, thumbnails exist for ID numbers “1”, “3”, “5”, “7”, and “8” by the processing of the flow of FIG. So it is a correct thumbnail. The ID numbers “2”, “4”, “6”, and “9” do not have thumbnails, but similar image parameters having the same value exist, so that similar thumbnails are displayed in the thumbnail display. ID numbers “2”, “4”, and “6” are displayed as similar thumbnails with ID numbers “1”, “3”, and “5”, respectively, and ID number “9” has no thumbnail and similar image parameters. Although there is nothing, an alternative thumbnail is displayed in the generation based on the estimated background and estimated foreground information, and after that, network connection confirmation is performed and all correct thumbnails are displayed.
図20において、「ネットワークが利用可能な場合」で、「撮影画像データ表示」場合、図19のフローの処理により、まず、ID番号「2」のサムネールが拡大表示され、その表示後、ネットワーク接続確認が行われ、正しい撮影画像データ表示する。 In FIG. 20, when “network is available” and “photographed image data display”, the thumbnail of ID number “2” is first enlarged and displayed by the processing of the flow of FIG. Confirmation is performed and correct captured image data is displayed.
図20において、「ネットワークが利用不可能な場合」で、「撮影画像データ表示」場合、図19のフローの処理により、まず、ID番号「2」のサムネールが拡大表示され、その表示後、撮影データが保存されているネットワーク上蓄積位置情報(URI)をQRコード変換したものを生成し表示する。 In FIG. 20, in the case of “when the network is not available” and “display captured image data”, the thumbnail of ID number “2” is first enlarged and displayed by the processing of the flow of FIG. Generate and display the QR code converted storage location information (URI) on the network where the data is stored.
以上、実施例4の効果として、実施例1、実施例2、実施例3の効果に加え、無線通信端末装置のサムネール表示を行う場合、管理データベースを参照することで、サムネール、類似サムネール、または、代替サムネールを表示した後、ネットワーク接続を行い、サーバ装置から、正しいサムネールデータをダウンロードし、表示する処理ができる。撮影画像データの表示を行う場合、サムネールを拡大表示した後、ネットワーク接続を行い、サーバ装置から、正しい撮影データをダウンロードし、表示する処理を行うため、特にネットワーク回線が低速場合に、画像表示が速く行えるようになり、ユーザの利便性を向上させることができる。 As described above, as an effect of the fourth embodiment, in addition to the effects of the first embodiment, the second embodiment, and the third embodiment, when the thumbnail display of the wireless communication terminal device is performed, by referring to the management database, the thumbnail, the similar thumbnail, or After displaying the alternative thumbnail, network connection can be performed, and the correct thumbnail data can be downloaded from the server device and displayed. When displaying captured image data, the thumbnail is enlarged and then connected to the network, and the correct captured data is downloaded from the server device and displayed, so the image is displayed especially when the network line is slow. It becomes possible to perform it quickly, and the convenience of the user can be improved.
また、上記のおいてネットワーク接続(S623)以降の処理を行わない動作モード設けることで、無線通信端末装置100の通信の消費電力を減らし、撮影時間が長く取れるような撮影時間を優先した動作モードを設けるようなことも可能である。
In addition, by providing an operation mode in which the processing after the network connection (S623) is not performed in the above, an operation mode that prioritizes shooting time so as to reduce the power consumption of communication of the wireless
次に、実施例における無線通信端末装置100の動作についてフローチャートを用いて説明する。フローチャートにおいて「S」は「ステップ」を意味する。
図21は実施例1〜4に共通な無線通信端末装置での撮影データ削除の内部フローチャートで一例であり、撮影データ削除選択の処理(S618)の内部を説明したものである。
撮影データ削除の処理(S618)は、選択操作により(S638)、撮影データの削除処理を中止する(S639)、撮影データから、撮影画像データを削除する(S640)、
撮影データから、撮影画像データおよびサムネールデータを削除する(S641)、撮影データを全て削除し、管理データベースからも削除する(S642)の何れかが実行される。
Next, the operation of the wireless
FIG. 21 is an example of an internal flowchart of shooting data deletion in the wireless communication terminal apparatus common to
In the shooting data deletion process (S618), the selection process (S638) stops the shooting data deletion process (S639), and the shot image data is deleted from the shooting data (S640).
One of the photographic image data and the thumbnail data is deleted from the photographic data (S641), all the photographic data is deleted, and the management database is also deleted (S642).
なお、図21の説明では、ユーザが、撮影データの削除処理を中止する(S639)、撮影データから、撮影画像データを削除する(S640)、撮影データから、撮影画像データおよびサムネールデータを削除する(S641)、撮影データを全て削除し、管理データベースからも削除する(S642)の何れかを実行するような説明を行ったが、無線通信端末装置100の蓄積用メモリの空き容量により、空き容量がある設定された設定値以上であれば、撮影データから、撮影画像データを削除する(S640)を実行し、空き容量がある設定された設定値より下であれば、撮影データから、撮影画像データおよびサムネールデータを削除する(S641)を実行するようにしても良い。
In the description of FIG. 21, the user cancels the shooting data deletion process (S639), deletes the shot image data from the shot data (S640), and deletes the shot image data and the thumbnail data from the shot data. (S641) It has been described that all of the shooting data is deleted and also deleted from the management database (S642). However, depending on the free space of the storage memory of the wireless
図22は図21と同様に実施例1〜4における無線通信端末装置での撮影データ削除を行う場合の撮影データのデータ構造および、管理データベースの内部データの処理内容を説明したものである。
図22では場合分けとして、撮影が実行された場合と、撮影画像データ削除が実行された場合と、撮影データ削除が実行された場合と、完全削除が実行された場合のそれぞれについての撮影データのデータ構造および、管理データベースの内部データを示している。
FIG. 22 explains the data structure of the shooting data and the processing contents of the internal data of the management database when the shooting data is deleted in the wireless communication terminal device according to the first to fourth embodiments as in FIG.
In FIG. 22, as the case classification, the shooting data for each of the case where shooting is executed, the case where shooting image data deletion is executed, the case where shooting data deletion is executed, and the case where complete deletion is executed are shown. The data structure and internal data of the management database are shown.
撮影が実行された場合は、撮影データとして、ヘッダ、撮影画像データ、撮影画像サムネールデータ、付加情報の全てを保持しており、管理データベースの内部データとしては、ID番号は新規生成されたもの、撮影画像データは1、撮影画像サムネールデータは1、付加情報であるその他のデータは新規生成となっている。
(この管理データベースの内部データ1/0は、データの有/無を示しているものとする)
撮影画像データ削除が実行された場合は、撮影データとして、ヘッダ、撮影画像サムネールデータ、付加情報となっており、管理データベースの内部データとしては、ID番号はそのまま、撮影画像データは0、撮影画像サムネールデータは1、付加情報であるその他のデータはそのままという処理がなされる。
When shooting is performed, the header, shot image data, shot image thumbnail data, and additional information are all held as shooting data, and the ID number is newly generated as internal data in the management database, The photographed image data is 1, the photographed image thumbnail data is 1, and other data as additional information is newly generated.
(
When the photographed image data deletion is executed, the photographed data includes a header, photographed image thumbnail data, and additional information. As internal data of the management database, the ID number remains unchanged, the photographed image data is 0, the photographed image data Processing is performed in which the thumbnail data is 1 and other data as additional information is left as it is.
撮影データ削除が実行された場合は、撮影データとして、ヘッダ、付加または、データなし、となっており、管理データベースの内部データとしては、ID番号はそのまま、撮影画像データは0、撮影画像サムネールデータは0、付加情報であるその他のデータはそのまま、または、データなしという処理がなされる。 When shooting data deletion is executed, the header is added, or there is no data as shooting data, and the internal number of the management database is the ID number as it is, the shooting image data is 0, and the shooting image thumbnail data. 0, and other data as additional information is processed as it is or without data.
完全削除が実行された場合は、撮影データとして、データなし、管理データベースの内部データとしては、ID番号を含む全ての該当ID番号のデータを削除処理がなされる。 When the complete deletion is executed, there is no data as shooting data, and the data of all corresponding ID numbers including ID numbers is deleted as internal data of the management database.
以上、実施例の共通的効果として、図21および図22で説明した処理において、扱われる撮影データのデータ構造は、ヘッダ、撮影画像データ、撮影画像サムネールデータ、付加情報から構成されているが、一般に、各部分のデータ量を比較すると、撮影データの大半は、撮影画像データ、撮影画像サムネールデータであり、かつ、撮影画像データ、撮影画像サムネールデータのデータ量を比較すると、撮影画像データの方が大半である為、図22および図23で説明した処理を用いる事で、無線通信端末装置内で、扱う撮影データの枚数を増やせ、効率的なデータ管理が可能となる事を示している。 As described above, as a common effect of the embodiment, in the processing described with reference to FIGS. 21 and 22, the data structure of shooting data handled includes a header, shooting image data, shooting image thumbnail data, and additional information. Generally, when comparing the data amount of each part, most of the shooting data is shot image data and shot image thumbnail data, and when comparing the data amount of shot image data and shot image thumbnail data, the shot image data Therefore, by using the processing described with reference to FIGS. 22 and 23, it is possible to increase the number of photographed data to be handled in the wireless communication terminal device and to enable efficient data management.
これにより、無線通信端末装置100において、図2の蓄積用メモリ(115)の容量の削減または、効率的な利用に効果が期待できる。
Thereby, in the wireless
次に、実施例1〜4におけるサーバ装置103の動作についてフローチャートを用いて説明する。フローチャートにおいて「S」は「ステップ」を意味する。
図23は実施例1〜4におけるサーバ装置103でのフローチャートである。
図23は、サーバ装置103において、無線通信端末装置100の要求により、撮影データのアップロードおよび、ダウンロードを行った場合の処理を示すフローチャートである。当該処理は、サーバ装置103中のCPUがサーバ装置103の各部を制御することで実現される。
Next, operation | movement of the
FIG. 23 is a flowchart in the
FIG. 23 is a flowchart showing processing when the
サーバ装置103は起動されると(S643)、無線通信端末装置100の処理の要求を受信し(S644)、要求の内容により分岐し(S645)、撮影データのアップロードの要求を受け付けた(S646)場合と、撮影データのダウンロードの要求を受け付けた(S652)場合とで、それぞれに対応した処理を実行する。
When the
撮影データのアップロード要求の場合、無線通信端末装置100からの撮影データを受信(S647)し、受信した撮影データをストレージに蓄積し(S648)、更に撮影データの解析処理や付加情報の処理を行い(S649)、その処理結果を元にデータベースを参照、データベースへ登録(S650)という処理を行い、その結果の情報を無線通信端末装置100にダウンロードさせるよう送信処理(S651)を行い、次の処理を受け付ける(S644)よう動作する。
In the case of a shooting data upload request, the shooting data from the wireless
撮影データのダウンロード要求の場合は、無線通信端末装置100からの要求に従い、該当する撮影データをストレージから読出し(S653)、その読出した撮影データの情報を無線通信端末装置100にダウンロードさせるよう送信処理(S654)を行い、次の処理を受け付ける(S644)よう動作する。
In the case of a shooting data download request, in accordance with a request from the wireless
以上、実施例の共通的効果として、サーバ装置103のアップロード、ダウンロードの場合の処理について説明したが、これにより、撮影画像データのID番号に依存せず、アップロード、ダウンロードの処理が独立して行え、サーバ装置103でのリソース(CPUやメモリ)を有効に活用できるようになる。
As described above, the processing in the case of uploading and downloading of the
100 無線通信端末装置
101 アクセスポイント
102 ネットワーク
103 サーバ装置
105 通信用アンテナ
106 無線通信ユニット
107 レンズ
108 撮像素子
109 イメージプロセッサ
110 キー入力ユニット
111 RAM
112 CPU
113 プログラムROM
114 表示ユニット
115 蓄積用メモリ
116 GPSユニット
117 GPS用アンテナ
118 ストレージ
119 ファイルシステムインターフェース
120 撮影データ書込処理部
121 撮影データ読出処理部
122 ネットワークインターフェース
123 ネットワーク
124 撮影データ受信
125 画像解析付加情報処理
126 画像解析データベース付加情報データベース参照更新
127 解析結果情報送信
128 撮影データ送信
129 携帯電話
130 中継局
DESCRIPTION OF
112 CPU
113 Program ROM
114
Claims (6)
前記画像データをサーバ装置に送信する通信ユニットと、
前記画像データを管理する管理データベースとを備え、
前記管理データベースは、前記画像データと類似した画像に関する情報、及び、前記画像データのサーバ装置上の蓄積位置を示す情報を管理情報として持つこと
を特徴とする画像処理装置。 A storage memory for storing a plurality of image data;
A communication unit for transmitting the image data to a server device;
A management database for managing the image data,
The image processing apparatus characterized in that the management database has, as management information, information related to an image similar to the image data and information indicating a storage position of the image data on a server apparatus.
画像データの表示ユニットを備え、
前記表示ユニットは、前記通信ユニットを介して、サーバ装置からを受信した前記画像データを表示し、
前記サーバ装置と接続が行えない場合に、前記管理データベースを検索し、前記画像データの類似画像を推定し、前記画像データに代えて、類似画像データを表示すること
を特徴とする画像処理装置。 The image processing apparatus according to claim 1.
It has a display unit for image data,
The display unit displays the image data received from the server device via the communication unit;
An image processing apparatus that searches the management database, estimates a similar image of the image data, and displays similar image data instead of the image data when connection to the server apparatus is not possible.
画像データの表示ユニットを備え、
前記表示ユニットは、前記通信ユニットを介して、サーバ装置からを受信した前記画像データを表示し、
前記サーバ装置と接続が行えない場合に、前記管理データベースを検索し、前記画像データのサーバ装置上の蓄積位置を示す情報に対応したコードを表示すること
を特徴とする画像処理装置。 The image processing apparatus according to claim 1.
It has a display unit for image data,
The display unit displays the image data received from the server device via the communication unit;
An image processing apparatus that searches the management database and displays a code corresponding to information indicating a storage position of the image data on the server apparatus when the server apparatus cannot be connected.
画像データの表示ユニットを備え、
前記表示ユニットは、前記画像データが蓄積用メモリに蓄積されていない場合に、前記画像データの類似画像を表示した後、前記通信ユニットを介して、サーバ装置からを受信した前記画像データを表示すること
を特徴とする画像処理装置。 The image processing apparatus according to claim 1.
It has a display unit for image data,
The display unit displays the image data received from the server device via the communication unit after displaying a similar image of the image data when the image data is not stored in the storage memory. An image processing apparatus.
前記画像データを解析する画像解析ユニットと、
前記画像解析ユニットの出力結果をデータベース化する類似画像データベースと、
前記画像データを画像処理装置から受信、及び、前記類似画像データベースの情報を送信する通信ユニットを備え、
画像処理装置から画像データを受信した際、前記画像データを蓄積ユニットに蓄積すると共に、前記画像データを前記画像解析ユニットで解析し、前記類似画像データベースを検索、更新すると共に、前記画像データと類似した画像に関する情報、及び、前記画像データのサーバ装置上の蓄積位置を示す情報を前記画像処理装置へ送信すること
を特徴とするサーバ装置。 A storage unit for storing a plurality of image data;
An image analysis unit for analyzing the image data;
A similar image database for creating a database of output results of the image analysis unit;
A communication unit that receives the image data from an image processing device and transmits information of the similar image database;
When receiving the image data from the image processing apparatus, the image data is stored in the storage unit, the image data is analyzed by the image analysis unit, the similar image database is searched and updated, and the image data is similar to the image data. A server apparatus that transmits information related to the image and information indicating a storage position of the image data on the server apparatus to the image processing apparatus.
前記画像データをサーバ装置に送信し、
前記画像データを管理し、
前記画像データと類似した画像に関する情報、及び、前記画像データのサーバ装置上の蓄積位置を示す情報を管理情報として持つこと
を特徴とする画像処理方法。 Accumulate multiple image data,
Transmitting the image data to a server device;
Managing the image data;
An image processing method characterized by having, as management information, information related to an image similar to the image data and information indicating a storage position of the image data on a server device.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009030643A JP2010187247A (en) | 2009-02-13 | 2009-02-13 | Image processing apparatus, server device, and image processing method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009030643A JP2010187247A (en) | 2009-02-13 | 2009-02-13 | Image processing apparatus, server device, and image processing method |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2010187247A true JP2010187247A (en) | 2010-08-26 |
Family
ID=42767616
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009030643A Pending JP2010187247A (en) | 2009-02-13 | 2009-02-13 | Image processing apparatus, server device, and image processing method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2010187247A (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014204280A (en) * | 2013-04-04 | 2014-10-27 | 株式会社サムスン日本研究所 | Camera device and radio communication terminal with the same |
US11368531B2 (en) | 2013-10-16 | 2022-06-21 | Samsung Electronics Co., Ltd. | Method and apparatus for file management |
-
2009
- 2009-02-13 JP JP2009030643A patent/JP2010187247A/en active Pending
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014204280A (en) * | 2013-04-04 | 2014-10-27 | 株式会社サムスン日本研究所 | Camera device and radio communication terminal with the same |
US11368531B2 (en) | 2013-10-16 | 2022-06-21 | Samsung Electronics Co., Ltd. | Method and apparatus for file management |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP3944160B2 (en) | Imaging apparatus, information processing apparatus, control method thereof, and program | |
US7844611B2 (en) | Time-shift image distribution system, time-shift image distribution method, time-shift image requesting apparatus, and image server | |
US7525578B1 (en) | Dual-location tagging of digital image files | |
US20060044398A1 (en) | Digital image classification system | |
US20110184980A1 (en) | Apparatus and method for providing image | |
JP2004135230A (en) | Panorama compositing of two or more image data | |
JP6108755B2 (en) | Shooting device, shot image transmission method, and shot image transmission program | |
JP4949924B2 (en) | Imaging system and imaging apparatus | |
JP6598136B2 (en) | Setting information management system | |
KR20120017172A (en) | Apparatus and method for controlling power in portable terminal when a geotagging | |
JP2011078008A (en) | Content sharing apparatus, content editing apparatus, content sharing program, and content editing program | |
JP2010187247A (en) | Image processing apparatus, server device, and image processing method | |
US20140104442A1 (en) | Image information processing system | |
JP5900490B2 (en) | Information terminal, image display method and program | |
JP2014023098A (en) | Information processing device, imaging device, information processing program, and information processing method | |
KR20100101960A (en) | Digital camera, system and method for grouping photography | |
JP2009111827A (en) | Photographing apparatus and image file providing system | |
JP2010130039A (en) | Information classifying system and information classifying method | |
US20140139703A1 (en) | Camera Resolution Modification Based on Intended Printing Location | |
KR100987401B1 (en) | Method for editing image files | |
JP6089515B2 (en) | Image processing apparatus, image processing method, and program | |
JP5088472B2 (en) | Information processing device | |
JP2014230198A (en) | Digital camera | |
JP6291759B2 (en) | Image rearrangement method, image device and program | |
JP4854757B2 (en) | Portable information terminal |