JP2018049666A - Information processing device, control method and program thereof, information processing system, and control method and program thereof - Google Patents

Information processing device, control method and program thereof, information processing system, and control method and program thereof Download PDF

Info

Publication number
JP2018049666A
JP2018049666A JP2017240166A JP2017240166A JP2018049666A JP 2018049666 A JP2018049666 A JP 2018049666A JP 2017240166 A JP2017240166 A JP 2017240166A JP 2017240166 A JP2017240166 A JP 2017240166A JP 2018049666 A JP2018049666 A JP 2018049666A
Authority
JP
Japan
Prior art keywords
sns
post data
screen
sns post
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017240166A
Other languages
Japanese (ja)
Other versions
JP6485529B2 (en
JP2018049666A5 (en
Inventor
智子 松本
Tomoko Matsumoto
智子 松本
英奈 福島
Ena Fukushima
英奈 福島
岡崎 慎也
Shinya Okazaki
慎也 岡崎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Marketing Japan Inc
Canon IT Solutions Inc
Original Assignee
Canon Marketing Japan Inc
Canon IT Solutions Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Marketing Japan Inc, Canon IT Solutions Inc filed Critical Canon Marketing Japan Inc
Priority to JP2017240166A priority Critical patent/JP6485529B2/en
Publication of JP2018049666A publication Critical patent/JP2018049666A/en
Publication of JP2018049666A5 publication Critical patent/JP2018049666A5/ja
Application granted granted Critical
Publication of JP6485529B2 publication Critical patent/JP6485529B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To display candidates for a comment to be added to an online album.SOLUTION: When an upload image is uploaded to an online photograph storage server which provides an online album, a tweet tweeted by a user when a photograph was taken is identified on the basis of location information such as exif information contained in image data, photographed date, and location information and date information of posted data posted to user's SNS. A tweet by the user is also identified from the photographing time and location information contained in image data posted to the SNS. The identified tweets are displayed to the user.SELECTED DRAWING: Figure 9

Description

本発明は、アップロードされる画像データに付与するコメントの入力候補をユーザに提示することの可能な情報処理装置、その制御方法、及びプログラム、並びに、情報処理システム、その制御方法、及びプログラムに関する。   The present invention relates to an information processing apparatus capable of presenting a user with input candidates for comments to be added to uploaded image data, a control method thereof, a program, an information processing system, a control method thereof, and a program.

オンラインストレージ上にユーザごとに画像データのアルバムを作成し、ユーザからの画像データのアップロードと、それに付するコメントとを関連付けて記憶するようなオンラインストレージアルバムを提供するシステムがある。   There is a system that provides an online storage album in which an album of image data is created for each user on the online storage, and uploading of image data from the user and a comment attached thereto are stored in association with each other.

ユーザは、そのようなオンラインストレージアルバムに画像データをアップロードし、コメントを付与して登録しておく。そして他のユーザなどにオンラインストレージアルバムのURLや、ユーザのIDを伝えることで簡単に画像データを共有することが可能になっている。   The user uploads image data to such an online storage album, adds a comment, and registers it. Then, it is possible to easily share the image data by communicating the URL of the online storage album and the user ID to other users.

そのような状況では、画像データに対して付与されるコメントが重要となっている。なぜならば、他のユーザからすると画像データが撮影された状況がわからない場合に、当該画像データのコメントを参考にするためである。また、コメントはユーザが撮影を行った時の心情などを示していることもあり、撮影を行ったユーザの感想を知る手がかりにもなる。   In such a situation, comments given to image data are important. This is because the comment of the image data is used as a reference when other users do not know the situation in which the image data was captured. In addition, the comment may indicate a feeling or the like when the user has taken a picture, and is a clue to know the impression of the user who has taken the picture.

そのため、ユーザは画像データのアップロードをするに当たって、画像データひとつひとつにコメントを付けている。   Therefore, the user adds a comment to each image data when uploading the image data.

オンラインストレージアルバムなどへのアップロードする画像データのコメント作成を支援するための種々の発明がなされている。例えば、アップロードする画像に対して自動的にコメントを付与する仕組みが開示されている。画像データを解析し、画像データに含まれる被写体を特定し、特定した被写体に関する情報を画像データに付与するためのいくつかの条件設定をユーザから受け付け、それを基にしてコメントを生成する。   Various inventions have been made to support the creation of comments on image data to be uploaded to an online storage album or the like. For example, a mechanism for automatically giving a comment to an image to be uploaded is disclosed. The image data is analyzed, a subject included in the image data is specified, a number of condition settings for giving information related to the specified subject to the image data are received from the user, and a comment is generated based on the setting.

特開2013−97631号公報JP 2013-97631 A

ユーザから受け付けた条件設定を基に、特定された被写体に対してコメントを付与する場合、日時や場所、天候などの機械的な情報やあらかじめ登録されている情報が付与される。つまり撮影を行ったユーザの意思や感情というものは反映されていない。そのため機械的な情報ではなく、オリジナリティのあるコメントを付与するためには、ユーザはこのような日時や場所の情報を基にして自分の記憶をたどり、自分で再度入力をする手間が生じている。   When a comment is given to the specified subject based on the condition setting received from the user, mechanical information such as date / time, place, and weather, or information registered in advance is given. That is, the intention and emotion of the user who has taken the image are not reflected. Therefore, in order to give original comments instead of mechanical information, the user has to go back to his / her memory based on such date / time and place information and input again by himself / herself. .

更に、ユーザは撮影当時の記憶が曖昧になっていたりすることが多く、画像データに対してオリジナルなコメントを付与することが困難となっていた。   Furthermore, the user often has ambiguous memories at the time of shooting, making it difficult to give original comments to image data.

そこで、本発明は、上記の課題を鑑みてなされたものであってアップロードされる画像データに付与するコメントの入力候補をユーザに提示することを目的とする。   Therefore, the present invention has been made in view of the above problems, and an object of the present invention is to present to a user input candidates for comments to be added to uploaded image data.

上記の目的を達成するために、本発明の情報処理システムは、少なくとも撮影された位置情報または日時情報のいずれか一方を含む画像データがアップロードされるオンラインストレージサーバと、少なくとも位置情報または日時情報のいずれか一方を含む、ユーザからSNSへ投稿された情報を示すSNS投稿データを複数格納し、前記オンラインストレージサーバにSNS投稿データを複数送信するSNS投稿データ送信手段を備えるSNSサーバとを含み、前記オンラインストレージサーバは、複数の前記SNS投稿データを前記SNSサーバに要求するSNS投稿データ要求手段と、前記SNSサーバから送信される複数の前記SNS投稿データを受信するSNS投稿データ受信手段と、前記画像データに含まれる、前記位置情報または前記日時情報を取得するEXIF情報取得手段と、前記SNS投稿データ受信手段で受信した複数の前記SNS投稿データから、前記EXIF情報取得手段で取得した前記画像データの前記位置情報または日時情報に基づいて、アップロードされる当該画像データに紐づく前記SNS投稿データを特定するSNS投稿データ特定手段と、前記SNS投稿データ特定手段で特定した前記SNS投稿データとアップロードされる前記画像データとを併せて表示させる画面を生成する画面生成手段と、前記画面生成手段で生成した画面を前記クライアント端末に送信する画面送信手段とを備え、前記クライアント端末は、前記オンラインストレージサーバから送信される画面を受信する画面受信手段と、前記画面受信手段で受信した画面を表示する画面表示手段とを備えることを特徴とする。   In order to achieve the above object, an information processing system of the present invention includes an online storage server to which image data including at least one of photographed location information and date / time information is uploaded, and at least location information or date / time information. A plurality of SNS post data indicating information posted to the SNS from the user, including any one of them, and an SNS server including SNS post data transmission means for transmitting a plurality of SNS post data to the online storage server, The online storage server includes an SNS post data request unit that requests the SNS server for a plurality of SNS post data, an SNS post data reception unit that receives the plurality of SNS post data transmitted from the SNS server, and the image The location information included in the data Is based on the position information or date / time information of the image data acquired by the EXIF information acquisition unit from the plurality of SNS post data received by the SNS post data reception unit and the EXIF information acquisition unit for acquiring the date / time information. The SNS post data specifying means for specifying the SNS post data associated with the uploaded image data, the SNS post data specified by the SNS post data specifying means, and the uploaded image data are displayed together. A screen generating means for generating a screen to be transmitted and a screen transmitting means for transmitting the screen generated by the screen generating means to the client terminal, wherein the client terminal receives a screen transmitted from the online storage server. The receiving means and the screen received by the screen receiving means are displayed. Characterized in that it comprises a screen display unit that.

本発明によれば、アップロードされる画像データに付与するコメントの入力候補をユーザに提示することのできる効果を奏する。   According to the present invention, there is an effect that it is possible to present a user with input candidates for comments to be added to uploaded image data.

本発明のオンラインフォトストレージサーバ103とSNS投稿連携システムの構成の一例を示すシステム構成図である。It is a system configuration figure showing an example of composition of online photo storage server 103 and SNS contribution cooperation system of the present invention. クライアント端末101、オンラインフォトストレージサーバ103、SNSサーバ104のハードウェア構成の一例を示すブロック図である。2 is a block diagram illustrating an example of a hardware configuration of a client terminal 101, an online photo storage server 103, and an SNS server 104. FIG. 本発明の実施形態に係る撮影装置102の概要構成の一例を示す模式図である。It is a schematic diagram which shows an example of schematic structure of the imaging device 102 which concerns on embodiment of this invention. 携帯端末105のハードウェア構成の一例を示すブロック図である。2 is a block diagram illustrating an example of a hardware configuration of a mobile terminal 105. FIG. オンラインフォトストレージサーバ103のモジュール構成を示す機能構成図である。2 is a functional configuration diagram showing a module configuration of an online photo storage server 103. FIG. 本実施形態の事前準備に当たる画像データ生成のための撮影処理を説明するフローチャートである。It is a flowchart explaining the imaging | photography process for the image data production | generation which corresponds to the advance preparation of this embodiment. 本実施形態の事前準備に当たるSNSへの投稿処理を説明するフローチャートである。It is a flowchart explaining the posting process to SNS which corresponds to prior preparation of this embodiment. 図7に引き続き本実施形態の事前準備に当たるSNSへの投稿処理を説明するフローチャートである。FIG. 8 is a flowchart for explaining post processing to the SNS corresponding to advance preparation of the present embodiment following FIG. 7. オンラインフォトストレージサーバ103へのアップロードを行う画像データであるアップロード画像とSNS投稿データとのリンク処理の説明を行うフローチャートである。It is a flowchart explaining the link process of the upload image and SNS contribution data which are the image data which upload to the online photo storage server 103. FIG. 図9に示すクライアント端末101が、ユーザからオンラインアルバムにログインを受け付ける処理を詳細に説明するフローチャートである。10 is a flowchart for explaining in detail processing in which the client terminal 101 shown in FIG. 9 accepts login from the user to the online album. 図9のSNS投稿データ紐づけ処理の詳細な説明を示すフローチャートである。It is a flowchart which shows the detailed description of the SNS post | mailbox data correlation process of FIG. 図11に引き続いて図9のSNS投稿データ紐づけ処理の詳細な説明を示すフローチャートである。FIG. 12 is a flowchart showing a detailed description of the SNS post data association process of FIG. 9 following FIG. 11. FIG. クライアント端末101が、実際にアップロードされた、アップロード画像とコメントを併せて表示することが可能な画面を表示するためのフローチャートである。6 is a flowchart for displaying a screen on which the client terminal 101 can display an uploaded image and a comment that are actually uploaded. 撮影装置102の撮影により生成された画像データを記憶するための撮影装置EXIFテーブル1400データテーブルの構成の一例を示す構成図である。It is a block diagram which shows an example of a structure of the imaging device EXIF table 1400 data table for memorize | storing the image data produced | generated by imaging | photography of the imaging device 102. FIG. SNSサーバ102が保存している、SNSにログインするための情報を記憶する認証テーブル1500の構成の一例を示す構成図である。It is a block diagram which shows an example of a structure of the authentication table 1500 which memorize | stores the information for logging in to SNS which the SNS server 102 preserve | saved. SNSが「Txxxxx」で、アカウントが、「abc123」のSNS投稿データを記憶しているSNS投稿データテーブル1600の構成の一例を示す構成図である。It is a block diagram which shows an example of a structure of the SNS posting data table 1600 which has stored the SNS posting data whose SNS is "Txxxx" and the account is "abc123". SNSが「Txxxxx」で、アカウントが「tyu444h」のSNS投稿データを記憶しているSNS投稿データテーブル1700の構成の一例を示す構成図である。It is a block diagram which shows an example of a structure of the SNS contribution data table 1700 which has memorize | stored the SNS contribution data whose SNS is "Txxxxxxxx" and an account is "tyu444h". SNSが「fxxxxx」で、アカウントが「890xyz」のSNS投稿データを記憶しているSNS投稿データテーブル1800の構成の一例を示す構成図である。It is a block diagram which shows an example of a structure of the SNS contribution data table 1800 which has memorize | stored the SNS contribution data whose SNS is "fxxxx" and an account is "890xyz". SNSに投稿された画像データが含む撮影日時情報とGPS情報とを格納するSNS画像EXIFテーブル1900の構成の一例を示す構成図である。It is a block diagram which shows an example of a structure of the SNS image EXIF table 1900 which stores the imaging | photography date information and GPS information which the image data contributed to SNS contains. 最終的にオンラインアルバムにコメントとして登録されたデータを格納するオンラインアルバムテーブル2000の構成の一例を示す構成図である。It is a block diagram which shows an example of a structure of the online album table 2000 which stores the data finally registered as a comment in an online album. ユーザからアップロード画像の選択を受け付けることが可能な画面の一例を示す模式図である。It is a schematic diagram which shows an example of the screen which can receive selection of the upload image from a user. 複数あるアップロード画像にそれぞれコメントをユーザから付加、編集されることが可能な画面の一例を示す模式図である。It is a schematic diagram which shows an example of the screen which can add and edit a comment to a several uploaded image from a user, respectively. アップロード画像をアップロードした後の、オンラインアルバムに実際にアクセスをしたときにクライアント端末101で表示される画面の一例を示す模式図である。FIG. 10 is a schematic diagram illustrating an example of a screen displayed on the client terminal 101 when an online album is actually accessed after uploading an uploaded image. SNS投稿コメントリンク機能を使用するために事前にユーザから情報の入力を受け付けることの可能な画面の一例を示す模式図である。It is a schematic diagram which shows an example of the screen which can receive the input of information from a user beforehand in order to use a SNS contribution comment link function. SNS投稿コメントリンク機能を使用可能なオンライアルバムへのログインに必要なユーザ名2502とパスワード2503とを格納する認証テーブル2500の構成の一例を示す構成図である。It is a block diagram which shows an example of a structure of the authentication table 2500 which stores the user name 2502 and the password 2503 required for login to the online album which can use a SNS contribution comment link function. 図24で受け付けた連携するSNSのアカウントの情報を格納する登録SNSデータテーブル2600の構成の一例を示す構成図である。It is a block diagram which shows an example of a structure of the registration SNS data table 2600 which stores the information of the cooperated SNS account received in FIG. 図24で受け付けた、アップロード画像とSNS投稿データとの紐づけの基準となる時間設定2701と距離設定2702とアカウント数2703とを格納する初期情報テーブル2700の構成の一例を示す構成図である。FIG. 25 is a configuration diagram illustrating an example of a configuration of an initial information table 2700 that stores a time setting 2701, a distance setting 2702, and an account number 2703, which are references for associating an uploaded image with SNS posting data, accepted in FIG. 特定したSNS投稿データと、アップロード画像とを紐づけたテーブルであるSNS投稿データリンク結果テーブル2800の構成の一例を示す構成図である。It is a block diagram which shows an example of a structure of the SNS contribution data link result table 2800 which is the table which linked | related the specified SNS contribution data and the upload image.

以下、図面を参照して、本発明の実施形態を詳細に説明する。   Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.

図1は、本発明のオンラインフォトストレージサーバ103(オンラインストレージサーバ)とSNS投稿連携システム(情報処理システム)の構成の一例を示すシステム構成図である。   FIG. 1 is a system configuration diagram showing an example of the configuration of an online photo storage server 103 (online storage server) and an SNS posting cooperation system (information processing system) according to the present invention.

図1は、1又は複数のPC、タブレット等のクライアント端末101(クライアント端末)と、スマートフォンなどの携帯端末105と、1又は複数のオンラインフォトストレージサーバ103と、1又は複数のSNSサーバ104(SNSサーバ)とがインターネット110を介して接続される構成となっている。   FIG. 1 illustrates a client terminal 101 (client terminal) such as one or a plurality of PCs or tablets, a portable terminal 105 such as a smartphone, one or more online photo storage servers 103, and one or more SNS servers 104 (SNS. Server) via the Internet 110.

オンラインフォトストレージサーバ103は、クライアント端末101などからのログインを受け付けそれぞれのユーザ毎に画像データのアップロードを受け付ける。   The online photo storage server 103 accepts login from the client terminal 101 or the like and accepts upload of image data for each user.

SNSサーバ104は、クライアント端末101や携帯端末105によりユーザ毎の投稿を受け付け、それらの投稿をユーザ毎に表示させることが可能なソーシャルネットワーキングサービス(SNS)を提供する。   The SNS server 104 provides a social networking service (SNS) that can accept posts for each user by the client terminal 101 and the mobile terminal 105 and display those posts for each user.

図2はクライアント端末101、オンラインフォトストレージサーバ103、SNSサーバ104のハードウェア構成の一例を示すブロック図である。   FIG. 2 is a block diagram illustrating an example of a hardware configuration of the client terminal 101, the online photo storage server 103, and the SNS server 104.

以下、図2を用いて、図1に示したクライアント端末101、オンラインフォトストレージサーバ103、SNSサーバ104のハードウェア構成について説明する。   Hereinafter, the hardware configuration of the client terminal 101, the online photo storage server 103, and the SNS server 104 illustrated in FIG. 1 will be described with reference to FIG.

図2において、CPU201はCPUであり、システムバス204に接続される各デバイスやコントローラを統括的に制御する。また、ROM202あるいは外部メモリ211には、CPU201の制御プログラムであるBIOS(Basic Input / Output System)やオペレーティングシステムプログラム(以下、OS)や、各サーバ或いは各PCの実行する機能を実現するために必要な後述する各種プログラム等が記憶されている。   In FIG. 2, a CPU 201 is a CPU, and comprehensively controls each device and controller connected to the system bus 204. Further, the ROM 202 or the external memory 211 is necessary to realize a BIOS (Basic Input / Output System) or an operating system program (hereinafter referred to as an OS), which is a control program of the CPU 201, or a function executed by each server or each PC. Various programs to be described later are stored.

203はRAMで、CPU201の主メモリ、ワークエリア等として機能する。CPU201は、処理の実行に際して必要なプログラム等をROM202あるいは外部メモリ211からRAM203にロードして、ロードしたプログラムを実行することで各種動作を実現するものである。   A RAM 203 functions as a main memory, work area, and the like for the CPU 201. The CPU 201 implements various operations by loading a program necessary for execution of processing from the ROM 202 or the external memory 211 into the RAM 203 and executing the loaded program.

また、205は入力コントローラで、キーボード209や不図示のマウス等のポインティングデバイス等からの入力を制御する。   An input controller 205 controls input from a keyboard 209 or a pointing device such as a mouse (not shown).

206はビデオコントローラで、ディスプレイ210等の表示器への表示を制御する。 207はメモリコントローラで、ブートプログラム,各種のアプリケーション,フォントデータ,ユーザファイル,編集ファイル,各種データ等を記憶する外部記憶装置(ハードディスク(HD)や、フレキシブルディスク(FD)、或いはPCMCIAカードスロットにアダプタを介して接続されるカード型メモリ等)の外部メモリ211へのアクセスを制御する。   A video controller 206 controls display on a display device such as the display 210. A memory controller 207 is an external storage device (hard disk (HD), flexible disk (FD), or PCMCIA card slot that stores boot programs, various applications, font data, user files, editing files, various data, etc.). The access to the external memory 211 of a card type memory or the like connected via the USB is controlled.

208は通信コントローラで、ネットワーク(例えば、図1に示したインターネット110)を介して外部機器と接続・通信するものであり、ネットワークでの通信制御処理を実行する。例えば、TCP/IPを用いた通信等が可能である。   A communication controller 208 connects and communicates with an external device via a network (for example, the Internet 110 shown in FIG. 1), and executes communication control processing in the network. For example, communication using TCP / IP is possible.

なお、CPU201は、例えばRAM203内の表示情報用領域へアウトラインフォントの展開(ラスタライズ)処理を実行することにより、ディスプレイ210上での表示を可能としている。また、CPU201は、ディスプレイ210上の不図示のマウスカーソル等でのユーザ指示を受け付けることを可能とする。   Note that the CPU 201 enables display on the display 210 by executing outline font rasterization processing on a display information area in the RAM 203, for example. Further, the CPU 201 can accept a user instruction with a mouse cursor (not shown) on the display 210.

本発明を実現するための後述する各種プログラムは、外部メモリ211(記憶手段)に記録されており、必要に応じてRAM203にロードされることによりCPU201によって実行されるものである。さらに、上記プログラムの実行時に用いられる定義ファイル及び各種情報テーブル等も、外部メモリ211に格納されており、これらについての詳細な説明も後述する。   Various programs to be described later for realizing the present invention are recorded in the external memory 211 (storage means), and are executed by the CPU 201 by being loaded into the RAM 203 as necessary. Furthermore, definition files and various information tables used when executing the program are also stored in the external memory 211, and a detailed description thereof will be described later.

図3は、本発明の実施形態に係る撮影装置102の概要構成の一例を示す模式図である。   FIG. 3 is a schematic diagram illustrating an example of a schematic configuration of the imaging apparatus 102 according to the embodiment of the present invention.

図3において、撮影装置102は、いわゆるデジタルカメラ等であり、撮影用のレンズ301、撮像素子(以下、「CCD」と称する)302、アナログ−デジタルコンバータ(以下、「ADC」と称する)303、画像処理部304、コントローラ310、バッファメモリ311、フラッシュROM312、インターフェース回路(以下、「I/F回路」と称する)313、カードホルダ314、メモリーカード315、ディスプレイドライバ316、USBドライバ318、操作部320,及びGPS装置327を備える。   In FIG. 3, the photographing apparatus 102 is a so-called digital camera or the like, and includes a photographing lens 301, an imaging element (hereinafter referred to as “CCD”) 302, an analog-digital converter (hereinafter referred to as “ADC”) 303, Image processing unit 304, controller 310, buffer memory 311, flash ROM 312, interface circuit (hereinafter referred to as “I / F circuit”) 313, card holder 314, memory card 315, display driver 316, USB driver 318, operation unit 320 , And a GPS device 327.

レンズ301は、対物レンズ、ズームレンズ、およびフォーカスレンズなどで構成される。ズームレンズおよびフォーカスレンズについては、不図示の駆動機構により光軸方向へ駆動される。CCD302は、レンズ301を介して入射される光学画像を結像し、電気信号(アナログ信号)に変換して出力するCCDイメージセンサで構成される。ADC303は、CCD302から出力される電気信号(アナログ信号)をデジタル信号に変換する機能を有する。   The lens 301 includes an objective lens, a zoom lens, a focus lens, and the like. The zoom lens and the focus lens are driven in the optical axis direction by a driving mechanism (not shown). The CCD 302 is composed of a CCD image sensor that forms an optical image incident through the lens 301, converts it into an electrical signal (analog signal), and outputs the electrical signal. The ADC 303 has a function of converting an electrical signal (analog signal) output from the CCD 302 into a digital signal.

画像処理部304は、前処理部305、YC処理部306、電子ズーム処理部307、圧縮部308、および伸長部309を備え、ADC303から出力されるデジタル信号から画像データを生成し、各種画像処理を行う機能を有する。   The image processing unit 304 includes a preprocessing unit 305, a YC processing unit 306, an electronic zoom processing unit 307, a compression unit 308, and an expansion unit 309. The image processing unit 304 generates image data from the digital signal output from the ADC 303, and performs various image processing. It has a function to perform.

前処理部305は、入力される画像データに基づく画像のホワイトバランスを調整するホワイトバランス処理や画像のガンマ補正処理を行う機能を有する。ホワイトバランス処理は、画像の色合いを、実物の色合いに近くなるように調整したり、光源(蛍光灯や太陽光など)に合った適正な色に調整したりする処理である。ガンマ補正処理は、画像のコントラストを調整する処理である。なお、前処理部305は、ホワイトバランス処理およびガンマ補正処理以外の画像処理を実行することも可能である。   The pre-processing unit 305 has a function of performing white balance processing for adjusting the white balance of an image based on input image data and image gamma correction processing. The white balance process is a process of adjusting the color of an image so as to be close to the actual color, or adjusting the color to an appropriate color that matches a light source (such as a fluorescent lamp or sunlight). The gamma correction process is a process for adjusting the contrast of an image. Note that the pre-processing unit 305 can also perform image processing other than white balance processing and gamma correction processing.

YC処理部306は、入力される画像データに基づく画像を、輝度情報「Y」と、輝度信号と青色の色差情報「Cb」と、輝度信号と赤色の色差情報「Cr」とに分離する機能を有する。電子ズーム処理部307は、画像の一部(例えば中央部)を所定の大きさでトリミングし、トリミングした画像を信号処理で元画像の大きさに拡大する機能を有する。電子ズーム処理部307は、例えば、撮影された1600×3200ドットの画像から中央の3024×768ドットの画像を切り出し、データ補間を行いながら1600×3200ドットのサイズに拡大することができる。   The YC processing unit 306 has a function of separating an image based on input image data into luminance information “Y”, luminance signal and blue color difference information “Cb”, and luminance signal and red color difference information “Cr”. Have The electronic zoom processing unit 307 has a function of trimming a part of an image (for example, a central part) with a predetermined size and enlarging the trimmed image to the size of the original image by signal processing. The electronic zoom processing unit 307 can, for example, cut out a central 3024 × 768 dot image from a photographed 1600 × 3200 dot image and enlarge it to a size of 1600 × 3200 dot while performing data interpolation.

圧縮部308は、画像データをJPEG(Joint Photographic Expert Group)方式などの圧縮形式によって圧縮する機能を有する。伸長部309は、圧縮されている画像データを伸長する機能を有する。例えば、画像データをJPEG方式で圧縮する場合、まず、画像データの高周波成分と低周波成分の割合を数値化する離散コサイン変換処理が行われる(DCT処理)。次に、画像の階調やグラデーションを表現する段階を数値(量子化ビット数)で表現する量子化処理が行われる。最後に、ハフマン符号化処理で画像データが圧縮される。具体的には、画像データの信号文字列が一定のビット毎に区切られ、出現頻度が高い文字列に対してより短い符号が与えてられていく。なお、圧縮処理を行わないで画像データを記録する方式の場合は、圧縮部308および伸長部309を省略することができる。また、画像データの圧縮形式は、JPEG方式に限らず、GIF(Graphical Interchange Format)形式などであっても、同様に処理を行うことができる。   The compression unit 308 has a function of compressing image data by a compression format such as JPEG (Joint Photographic Expert Group). The decompression unit 309 has a function of decompressing compressed image data. For example, when compressing image data using the JPEG method, first, a discrete cosine transform process is performed (DCT process) that digitizes the ratio of high-frequency components and low-frequency components of image data. Next, a quantization process is performed for expressing the gradation or gradation of the image by a numerical value (quantization bit number). Finally, the image data is compressed by the Huffman encoding process. Specifically, the signal character string of the image data is segmented every predetermined bit, and a shorter code is given to a character string having a high appearance frequency. Note that the compression unit 308 and the decompression unit 309 can be omitted in the case of a method of recording image data without performing compression processing. Further, the image data compression format is not limited to the JPEG format, and the same processing can be performed even in a GIF (Graphical Interchange Format) format.

コントローラ310は、画像処理部304、バッファメモリ311、フラッシュROM312、I/F回路313、ディスプレイドライバ316、USBドライバ318、操作部320、及びGPS装置327に接続されている。また、コントローラ310は、機能的な構成として、操作部320からの入力信号に応じて各部を動作制御するための制御信号を出力する制御部(不図示)と、ユーザに関する認識を行う認識部(不図示)とを備える。   The controller 310 is connected to the image processing unit 304, the buffer memory 311, the flash ROM 312, the I / F circuit 313, the display driver 316, the USB driver 318, the operation unit 320, and the GPS device 327. In addition, as a functional configuration, the controller 310 has a control unit (not shown) that outputs a control signal for controlling the operation of each unit in accordance with an input signal from the operation unit 320, and a recognition unit (recognizing a user). (Not shown).

バッファメモリ311には、画像処理部304において画像処理が行われる際に、一時的に画像データが保存される。フラッシュROM312には、撮影装置102の各種設定情報が保存される。I/F回路313は、コントローラ310から出力される画像データを、メモリーカード315に記録可能なデータ形式に変換する。また、I/F回路313は、メモリーカード315から読み出された画像データ等を、コントローラ310で処理可能なデータ形式に変換する。   The buffer memory 311 temporarily stores image data when the image processing unit 304 performs image processing. The flash ROM 312 stores various setting information of the photographing apparatus 102. The I / F circuit 313 converts the image data output from the controller 310 into a data format that can be recorded on the memory card 315. The I / F circuit 313 converts image data read from the memory card 315 into a data format that can be processed by the controller 310.

カードホルダ314は、記憶媒体であるメモリーカード315を撮影装置102に着脱可能にする機構を備えると共に、メモリーカード315との間でデータ通信が可能な電気接点を備える。また、カードホルダ314は、撮影装置102で利用される記憶媒体の種類に応じた構造を有する。メモリーカード315は、フラッシュメモリなどの半導体記憶素子を内蔵し、カードホルダ314に着脱可能なカード型の記憶媒体である。メモリーカード315には、撮影装置102で撮影された画像データを記録することができる。尚、本実施例では撮影装置102のみの構成として説明をするが、撮影装置102と通信可能な情報処理装置等に備えられた記憶手段をメモリーカード315の代わりとしてもよい。撮影装置102と情報処理装置との通信方法は特に問わない。有線でも無線でもよい。この場合、撮影装置102が通信インターフェースコントローラを備え、通信インターフェースコントローラを通じて情報処理装置と通信する。   The card holder 314 includes a mechanism that allows the memory card 315 that is a storage medium to be attached to and detached from the photographing apparatus 102, and includes an electrical contact that enables data communication with the memory card 315. Further, the card holder 314 has a structure corresponding to the type of storage medium used in the photographing apparatus 102. The memory card 315 is a card-type storage medium that incorporates a semiconductor storage element such as a flash memory and is detachable from the card holder 314. The memory card 315 can record image data shot by the shooting device 102. In the present embodiment, the configuration of only the photographing apparatus 102 will be described. However, a storage unit provided in an information processing apparatus or the like that can communicate with the photographing apparatus 102 may be used in place of the memory card 315. The communication method between the imaging device 102 and the information processing device is not particularly limited. It may be wired or wireless. In this case, the photographing apparatus 102 includes a communication interface controller, and communicates with the information processing apparatus through the communication interface controller.

ディスプレイドライバ316は、コントローラ310から出力される画像データを液晶ディスプレイ317で表示可能な信号に変換する。具体的には、ディスプレイドライバ316は、コントローラ310から出力されるデジタルの画像データをアナログ画像信号に変換する処理を行い、次に画像サイズを液晶ディスプレイ317の表示可能エリアのサイズに適したサイズに変換する処理を行う。   The display driver 316 converts the image data output from the controller 310 into a signal that can be displayed on the liquid crystal display 317. Specifically, the display driver 316 performs processing for converting digital image data output from the controller 310 into an analog image signal, and then sets the image size to a size suitable for the size of the displayable area of the liquid crystal display 317. Perform the conversion process.

操作部320は、電源スイッチ321、モードダイヤル322、撮影ボタン323、カーソルキー324、ズームボタン325、および閲覧(再生)ボタン326を備え、ユーザからの操作入力を受け付けて、操作内容に応じた信号をコントローラ310に出力する。なお、操作部320には、図示の操作ボタン以外の操作ボタン類も含まれるが、それらの説明は省略する。   The operation unit 320 includes a power switch 321, a mode dial 322, a shooting button 323, a cursor key 324, a zoom button 325, and a browse (playback) button 326. The operation unit 320 accepts an operation input from the user and receives a signal corresponding to the operation content. Is output to the controller 310. Note that the operation unit 320 includes operation buttons other than the illustrated operation buttons, but a description thereof will be omitted.

モードダイヤル322は、撮影動作のモードを切り替えるための回転可能なダイヤルである。ユーザはモードダイヤル322を回転操作することで、複数の撮影動作モードを選択することが可能である。   The mode dial 322 is a rotatable dial for switching the mode of the photographing operation. The user can select a plurality of shooting operation modes by rotating the mode dial 322.

撮影動作モードとは、例えば、予め撮影装置102が保持している撮影設定(ホワイトバランスやシャッタースピード等)をユーザに選択しやすく表したAutoモードや夜景モード、風景モードやポートレートモード、或いはユーザが任意に撮影設定を設定することができるマニュアルモードなどである。   The shooting operation mode is, for example, an Auto mode, a night view mode, a landscape mode, a portrait mode, or a user that easily displays the shooting settings (white balance, shutter speed, etc.) held by the shooting apparatus 102 in advance. Is a manual mode in which shooting settings can be arbitrarily set.

閲覧ボタン326は、撮影した画像データを閲覧する閲覧モード(画像再生モード)に切り替えるためのボタンである。閲覧ボタン326が押下されると、撮影モードから閲覧モードに移行する。なお、閲覧モードへの切替方法については、閲覧ボタン326の押下に限定されず、液晶ディスプレイ317上のタッチパネル(不図示)などによる移行方法であってもよい。   The browse button 326 is a button for switching to a browse mode (image reproduction mode) for browsing captured image data. When the browse button 326 is pressed, the shooting mode is changed to the browsing mode. Note that the method for switching to the viewing mode is not limited to pressing the viewing button 326, and may be a transition method using a touch panel (not shown) on the liquid crystal display 317.

閲覧モードでは、コントローラ310が、I/F回路313を介して、カードホルダ314に装着されているメモリーカード315から設定情報と画像データを読み出す。設定情報は、現在装着されているメモリーカード315に記録されている画像の枚数および記録されている画像データの容量などである。読み出される画像データは、例えば、画像1枚分の画像データまたはサムネイルデータである。なお、メモリーカード315から読み出される画像データは、上述したように所定の圧縮形式で圧縮されている。   In the browsing mode, the controller 310 reads setting information and image data from the memory card 315 mounted on the card holder 314 via the I / F circuit 313. The setting information includes the number of images recorded on the currently installed memory card 315 and the capacity of the recorded image data. The read image data is, for example, image data or thumbnail data for one image. Note that the image data read from the memory card 315 is compressed in a predetermined compression format as described above.

メモリーカード315から読み出された画像データは、I/F回路313およびコントローラ310を介して、ディスプレイドライバ316へ入力される。ディスプレイドライバ316は、入力された画像データを液晶ディスプレイ317に表示させる。   The image data read from the memory card 315 is input to the display driver 316 via the I / F circuit 313 and the controller 310. The display driver 316 displays the input image data on the liquid crystal display 317.

カーソルキー324は、ユーザが撮影装置102に対する所定の指示や機能選択を行うためのキーである。ユーザは、カーソルキー324により、撮影装置102に対する各種設定情報やユーザ認識情報などの操作入力を行うことができる。また、カーソルキー324により、液晶ディスプレイ317にメニュー画面を表示させたり、撮影装置102が有する所定の機能を選択させたりすることができる。   The cursor key 324 is a key for the user to perform a predetermined instruction or function selection for the photographing apparatus 102. The user can perform operation inputs such as various setting information and user recognition information with respect to the imaging apparatus 102 with the cursor key 324. The cursor key 324 can display a menu screen on the liquid crystal display 317 and can select a predetermined function of the photographing apparatus 102.

GPS装置327は、GPS(Global Positioning System)人工衛星が逐次送信する電波を受信し、復調して信号を取り出し、この信号をコントローラ310に送信することの可能な装置である。   The GPS device 327 is a device that can receive radio waves sequentially transmitted by GPS (Global Positioning System) satellites, demodulate them, extract signals, and transmit the signals to the controller 310.

図4は、携帯端末105のハードウェア構成の一例を示すブロック図である。   FIG. 4 is a block diagram illustrating an example of a hardware configuration of the mobile terminal 105.

CPU401は、システムバス404に接続される各デバイスやコントローラを統括的に制御する。   The CPU 401 comprehensively controls each device and controller connected to the system bus 404.

また、ROM402あるいはフラッシュメモリ414には、CPU401の制御プログラムであるBIOS(Basic Input / OutputSystem)やオペレーティングシステムプログラム(以下、OS)や、当該携帯端末が実行する機能を実現するために必要な、後述する各種プログラム等が記憶されている。RAM403は、CPU401の主メモリ、ワークエリア等として機能する。   Further, the ROM 402 or the flash memory 414 has a BIOS (Basic Input / Output System), an operating system program (hereinafter referred to as an OS), which is a control program of the CPU 401, and a function necessary for realizing the functions executed by the portable terminal, which will be described later. Various programs to be stored are stored. The RAM 403 functions as a main memory, work area, and the like for the CPU 401.

CPU401は、処理の実行に際して必要なプログラム等をRAM403にロードして、プログラムを実行することで各種動作を実現するものである。   The CPU 401 implements various operations by loading a program or the like necessary for execution of processing into the RAM 403 and executing the program.

また、入力コントローラ405は、タッチパネル410、マイク411、カメラ412、GPS受信機416からの入力を制御する。タッチパネル410からはユーザのタッチ操作に関する入力を制御し、マイク411からは音声の入力を制御し、カメラ412からは撮影された静止画、動画の入力を制御し、更にGPS受信機416からはGPS人工衛星が逐次送信する電波を受信し、復調して信号を取り出した信号の入力を制御する。出力コントローラ406は、タッチパネル410、スピーカ413への出力を制御する。   The input controller 405 controls input from the touch panel 410, the microphone 411, the camera 412, and the GPS receiver 416. The touch panel 410 controls input related to a user's touch operation, the microphone 411 controls audio input, the camera 412 controls captured still images and moving images, and the GPS receiver 416 receives GPS. Controls the input of the signal that is received and demodulated by receiving the radio waves sequentially transmitted by the artificial satellite. The output controller 406 controls output to the touch panel 410 and the speaker 413.

タッチパネル410は、ユーザからのタッチ操作を検知すると共に、前述した出力コントローラ406から送られた映像を表示する。タッチパネル410は、表示器と位置入力装置とが一体となった部品である。複数の箇所に対するタッチ操作(以下、マルチタッチ)も検知可能である。   The touch panel 410 detects the touch operation from the user and displays the video sent from the output controller 406 described above. The touch panel 410 is a component in which a display and a position input device are integrated. Touch operations (hereinafter referred to as multi-touch) for a plurality of locations can also be detected.

メモリコントローラ(MC)407は、ブートプログラム、ブラウザソフトウエア、各種のアプリケーション、フォントデータ、ユーザファイル、編集ファイル、各種データ等を記憶するフラッシュメモリ414へのアクセスを制御する。本実施形態においては、フラッシュメモリとして説明を行うが、ハードディスク(HD)やフレキシブルディスク(FD)或いはPCMCIAカードスロットにアダプタを介して接続されるカード型メモリ等の記憶媒体であってもよい。   A memory controller (MC) 407 controls access to a flash memory 414 that stores a boot program, browser software, various applications, font data, user files, editing files, various data, and the like. In the present embodiment, the flash memory is described, but a storage medium such as a hard disk (HD), a flexible disk (FD), or a card type memory connected to a PCMCIA card slot via an adapter may be used.

通信I/Fコントローラ409は、ネットワークを介して、外部機器と接続・通信するものであり、ネットワークでの通信制御処理を実行する。例えば、TCP/IPを用いたインターネット通信等が可能である。   The communication I / F controller 409 is connected to and communicates with an external device via a network, and executes communication control processing on the network. For example, Internet communication using TCP / IP is possible.

センサコントローラ408は、携帯端末105が備えるセンサ415からの入力を制御する。携帯端末105のセンサ415には様々なセンサが存在し、例えば方位センサ、加速度センサ等である。   The sensor controller 408 controls input from the sensor 415 included in the mobile terminal 105. Various sensors exist in the sensor 415 of the portable terminal 105, such as an orientation sensor and an acceleration sensor.

尚、CPU401は、例えばRAM403内の表示情報用領域へアウトラインフォントの展開(ラスタライズ)処理を実行することにより、タッチパネル410上での表示を可能としている。   Note that the CPU 401 can perform display on the touch panel 410 by executing, for example, outline font development (rasterization) processing on a display information area in the RAM 403.

本発明の携帯端末105が後述する各種処理を実行するために用いられる各種プログラム等はフラッシュメモリ414に記録されており、必要に応じてRAM403にロードされることによりCPU401によって実行されるものである。さらに、本発明に係わるプログラムが用いる定義ファイルや各種情報テーブルはフラッシュメモリ414に格納されている。   Various programs and the like used for the portable terminal 105 of the present invention to execute various processes to be described later are recorded in the flash memory 414 and executed by the CPU 401 by being loaded into the RAM 403 as necessary. . Further, definition files and various information tables used by the program according to the present invention are stored in the flash memory 414.

GPS受信機416は、GPS(Global Positioning System)人工衛星が逐次送信する電波を受信し、復調して信号を取り出し、入力コントローラ405に送信するGPS電波の受信機である。   The GPS receiver 416 is a GPS radio wave receiver that receives radio waves sequentially transmitted by GPS (Global Positioning System) satellites, demodulates them, extracts signals, and transmits them to the input controller 405.

次に、クライアント端末101、オンラインフォトストレージサーバ103、SNSサーバ104のモジュール構成を示す機能構成図について、図5を用いて説明する。なお、図5の装置のモジュール構成は一例であり、用途や目的に応じて様々な構成例がある。   Next, a functional configuration diagram showing module configurations of the client terminal 101, the online photo storage server 103, and the SNS server 104 will be described with reference to FIG. Note that the module configuration of the apparatus in FIG. 5 is an example, and there are various configuration examples depending on the application and purpose.

本実施例ではクライアント端末101は、通信制御部509、画面表示部510、入力受付部511を備える。   In this embodiment, the client terminal 101 includes a communication control unit 509, a screen display unit 510, and an input reception unit 511.

クライアント端末101の通信制御部509は、オンラインフォトストレージとの通信を制御する。   A communication control unit 509 of the client terminal 101 controls communication with the online photo storage.

クライアント端末101の画面表示部510は、ディスプレイ210に画面を表示する機能である。   The screen display unit 510 of the client terminal 101 has a function of displaying a screen on the display 210.

クライアント端末101の入力受付部511は、ユーザからの入力を受け付けることが可能な機能である。   The input reception unit 511 of the client terminal 101 is a function that can receive input from the user.

本実施例ではオンラインフォトストレージサーバ103は、通信制御部501、文字列解析部502、画像データ解析部503、日時・位置情報判定部504、SNS投稿データ特定部505、画像保存部506、画面生成部507を備える。   In this embodiment, the online photo storage server 103 includes a communication control unit 501, a character string analysis unit 502, an image data analysis unit 503, a date / position information determination unit 504, an SNS post data specifying unit 505, an image storage unit 506, a screen generation. Part 507 is provided.

オンラインフォトストレージサーバ103の通信制御部501は、クライアント端末101やSNSサーバ104との通信を行うモジュールである。クライアント端末101からの画面の要求を受信したり、オンラインフォトストレージサーバ103が生成した画面をクライアント端末101に送信したりする。また、SNSサーバ104からSNS投稿データを受信することが可能なモジュールである。   The communication control unit 501 of the online photo storage server 103 is a module that performs communication with the client terminal 101 and the SNS server 104. A screen request from the client terminal 101 is received, or a screen generated by the online photo storage server 103 is transmitted to the client terminal 101. Further, the module is capable of receiving SNS posting data from the SNS server 104.

文字列解析部502は、SNS投稿データのコメント部分を解析することのできるモジュールである。   The character string analysis unit 502 is a module that can analyze the comment portion of the SNS post data.

オンラインフォトストレージサーバ103の画像データ解析部503は、アップロード画像や、SNSに投稿されている画像データのEXIF(Exchangeable image file format)情報などを解析することにより、画像データの撮影日時や撮影場所を解析する。   The image data analysis unit 503 of the online photo storage server 103 analyzes the image capture date / time and location of the image data by analyzing uploaded images and EXIF (Exchangeable image file format) information of image data posted to the SNS. To analyze.

オンラインフォトストレージサーバ103の日時・位置情報判定部504は、アップロード画像に含まれる位置情報や日時情報と、SNS投稿データやSNS投稿データに含まれる画像データの位置情報や日時情報とを比較する。   The date / position information determination unit 504 of the online photo storage server 103 compares the position information and date information included in the uploaded image with the position information and date information of the image data included in the SNS post data and SNS post data.

オンラインフォトストレージサーバ103のSNS投稿データ特定部505は、アップロード画像に紐づくSNS投稿データを特定する。   The SNS post data specifying unit 505 of the online photo storage server 103 specifies the SNS post data associated with the uploaded image.

オンラインフォトストレージサーバ103の画像保存部506は、アップロード画像とそれに付するコメントとを併せて外部メモリ211に保存する。   The image storage unit 506 of the online photo storage server 103 stores the uploaded image and the comment attached thereto in the external memory 211 together.

オンラインフォトストレージサーバ103の画面生成部507は、クライアント端末101に送信するオンラインアルバムを表示させることのできる画面を生成する。   The screen generation unit 507 of the online photo storage server 103 generates a screen on which an online album to be transmitted to the client terminal 101 can be displayed.

本実施例ではSNSサーバ104は、通信制御部512、SNS投稿データ取得部513、SNS投稿データ保存部514を備える。   In this embodiment, the SNS server 104 includes a communication control unit 512, an SNS post data acquisition unit 513, and an SNS post data storage unit 514.

SNSサーバ104の、通信制御部512は携帯端末105とSNS投稿データを通信したり、オンラインフォトストレージサーバ103とさまざまな通信をしたりすることを可能としている。   The communication control unit 512 of the SNS server 104 can communicate the SNS post data with the mobile terminal 105 and can perform various communications with the online photo storage server 103.

SNSサーバ104のSNS投稿データ取得部513は、SNSサーバ104内で記憶しているSNS投稿データを取得する機能である。   The SNS post data acquisition unit 513 of the SNS server 104 has a function of acquiring SNS post data stored in the SNS server 104.

SNSサーバ104のSNS投稿データ保存部514は、投稿を受け付けたSNS投稿データを保存することができる。   The SNS post data storage unit 514 of the SNS server 104 can store the SNS post data that has received a post.

以下、本実施形態におけるオンラインフォトストレージ投稿画像へのSNS投稿コメントリンク機能の全体の流れを説明する。   The overall flow of the SNS post comment link function to the online photo storage post image in this embodiment will be described below.

図6では、本実施形態の事前準備に当たる画像データ生成のための撮影処理について説明する。   In FIG. 6, a photographing process for generating image data corresponding to advance preparation of the present embodiment will be described.

本処理は撮影装置102にて実施され、撮影装置102に備えられる撮影ボタン(不図示)を押下されると、撮影処理が行われこれにより生成された画像データの保存が行われる。   This processing is performed by the photographing apparatus 102, and when a photographing button (not shown) provided in the photographing apparatus 102 is pressed, photographing processing is performed and image data generated thereby is stored.

ステップS601では撮影装置102のコントローラ310が不図示の撮影ボタンが押下されることを検知する。   In step S601, the controller 310 of the photographing apparatus 102 detects that a photographing button (not shown) is pressed.

ステップS602では、撮影装置102のコントローラ310が撮影可能領域内の被写体の撮影処理を行う。撮影処理により、画像データ(画像データ)を生成する。   In step S <b> 602, the controller 310 of the photographing apparatus 102 performs photographing processing for the subject in the photographing possible area. Image data (image data) is generated by photographing processing.

ステップS603では、撮影装置102のコントローラ310がステップS602で撮影処理を行った日時情報や位置情報を取得する。   In step S603, the controller 310 of the photographing apparatus 102 acquires date information and position information on which the photographing process is performed in step S602.

ステップS604では、撮影装置102のコントローラ310がステップS603で取得した日時情報や、位置情報を撮影に生成された画像データに付加する。   In step S604, the date / time information and the position information acquired by the controller 310 of the photographing apparatus 102 in step S603 are added to the image data generated for photographing.

ステップS605では、撮影装置102のコントローラ310がステップS604で日時情報や位置情報が付加された画像データを撮影装置102内のメモリーカード315に図14に示す撮影装置EXIFテーブル1400データテーブルを保存する。図14の撮影装置EXIFテーブル1400、画像データと日時情報と位置情報との対応関係を示すテーブルである。ファイル名1401は画像データのファイル名を示している。画像データ日時情報1402は、画像データが生成された日時情報を格納している。GPS情報1403は、撮影が行われたGPS(Global Positioning System)情報などの位置情報を格納している。   In step S605, the controller 310 of the imaging apparatus 102 stores the imaging apparatus EXIF table 1400 data table illustrated in FIG. 14 in the memory card 315 in the imaging apparatus 102 with the date and time information and position information added in step S604. FIG. 15 is a table illustrating a correspondence relationship between image data, date / time information, and position information of the imaging apparatus EXIF table 1400 of FIG. 14. A file name 1401 indicates the file name of the image data. The image data date / time information 1402 stores date / time information when the image data was generated. The GPS information 1403 stores position information such as GPS (Global Positioning System) information on which shooting has been performed.

図7、図8では、本実施形態の事前準備に当たるSNSへの投稿処理について記載する。本処理は携帯端末105とSNSサーバ104にて実施され、SNSへのユーザの投稿がSNSサーバ104に保存される一連の流れを示している。なお、ユーザがSNSへの投稿をするための機器はこれに限定されない。   In FIG. 7 and FIG. 8, the posting process to the SNS corresponding to the advance preparation of the present embodiment will be described. This process is performed by the mobile terminal 105 and the SNS server 104, and shows a series of flows in which a user's post to the SNS is stored in the SNS server 104. In addition, the apparatus for a user to post to SNS is not limited to this.

まず、図7から説明する。   First, FIG. 7 will be described.

ステップS701では携帯端末105のCPU401が、SNSにログインするためのユーザ名とパスワードとをユーザから入力受付可能な画面を表示する。   In step S <b> 701, the CPU 401 of the mobile terminal 105 displays a screen on which a user name and password for logging in to the SNS can be received from the user.

ステップS702では、携帯端末105のCPU401が、ユーザからのSNSにログインするための情報の入力を受け付ける。   In step S702, the CPU 401 of the mobile terminal 105 receives an input of information for logging in to the SNS from the user.

ステップS703では、携帯端末105のCPU401が、ユーザからの認証要求ボタン押下などの指示を受け付け、SNSサーバ104にSNSのログイン要求を送信する。ログイン要求には、ユーザを一意に識別する名前であるユーザ名と、それにひもづくパスワードとを送信している。   In step S <b> 703, the CPU 401 of the mobile terminal 105 receives an instruction from the user such as pressing an authentication request button, and transmits an SNS login request to the SNS server 104. In the login request, a user name that uniquely identifies the user and a password associated with the user name are transmitted.

ステップS704では、SNSサーバ104のCPU201が、ステップS703で携帯端末105から送信されたログイン要求を受信する。   In step S704, the CPU 201 of the SNS server 104 receives the login request transmitted from the portable terminal 105 in step S703.

ステップS705では、SNSサーバ104のCPU201が、外部メモリ211から認証テーブル1500を取得する。例えば図15にある認証テーブル1500である。ユーザID1501はSNSのアカウントを一意に特定することのできるIDである。ユーザ名1502はユーザからSNSに登録された名前を示すものであり、他のユーザとは被らないようにユーザより作成されるものである。password1503は、ユーザ名1502に紐づくログインに必要なパスワードを示している。   In step S <b> 705, the CPU 201 of the SNS server 104 acquires the authentication table 1500 from the external memory 211. For example, the authentication table 1500 shown in FIG. The user ID 1501 is an ID that can uniquely identify an SNS account. The user name 1502 indicates a name registered in the SNS by the user, and is created by the user so as not to suffer from other users. A password 1503 indicates a password necessary for login associated with the user name 1502.

ステップS706では、SNSサーバ104のCPU201が、ステップS705で取得した認証テーブル1500に基づいて、ステップS704で受信したログイン要求に含まれるユーザ名の登録があるか否かを判定する。ユーザの登録があると判定され、ステップS704で受信したパスワードとpassword1503を照合し一致した場合、ステップS707に処理を進める。一方、ユーザの登録がない又はステップS704で受信したパスワードとpassword1503を照合し一致しなかったと判定された場合、ステップS708に処理を進める。   In step S706, the CPU 201 of the SNS server 104 determines whether there is a registration of the user name included in the login request received in step S704, based on the authentication table 1500 acquired in step S705. If it is determined that there is a user registration and the password received in step S704 matches the password 1503, the process proceeds to step S707. On the other hand, if it is determined that there is no user registration or the password received in step S704 and the password 1503 are not matched, the process proceeds to step S708.

ステップS707では、SNSサーバ104のCPU201が、ステップS704で受信したパスワードとpassword1503を照合した結果、一致すると判定された当該ユーザのログインが成功した情報を示すログインOKデータを生成する。   In step S <b> 707, the CPU 201 of the SNS server 104 generates login OK data indicating information on successful login of the user determined to match as a result of collating the password received in step S <b> 704 with the password 1503.

ステップS708では、SNSサーバ104のCPU201が、ユーザの登録がない又はステップS704で受信したパスワードとpassword1503を照合した結果、一致すると判定されなかった当該ユーザのログインが失敗した情報を示す、ログインNGデータを生成する。ログインNG情報を生成した後、ステップS709へ処理を進める。   In step S708, login NG data indicating information indicating that the login of the user that has not been determined to match as a result of the CPU 201 of the SNS server 104 not registering or matching the password received in step S704 with the password 1503 has failed. Is generated. After generating login NG information, the process proceeds to step S709.

ステップS709では、SNSサーバ104のCPU201が、ステップS707やステップS708で生成されたログイン結果の情報を、携帯端末105に送信する。   In step S <b> 709, the CPU 201 of the SNS server 104 transmits the login result information generated in step S <b> 707 or step S <b> 708 to the mobile terminal 105.

ステップS710では、携帯端末105のCPU401が、SNSサーバ104から送信されたログイン結果を受信する。   In step S <b> 710, the CPU 401 of the mobile terminal 105 receives the login result transmitted from the SNS server 104.

ステップS711では、携帯端末105のCPU401が、ステップS710で受信したログイン結果に基づいてステップS703で受け付けたログイン要求が受け付けられたか否かを判定する。ログイン要求が受け付けられた場合は、ステップS712へ処理を進め、ログイン要求が受け付けられなかった場合は、ステップS713へ処理を進める。   In step S711, the CPU 401 of the mobile terminal 105 determines whether or not the login request received in step S703 has been received based on the login result received in step S710. If the login request is accepted, the process proceeds to step S712. If the login request is not accepted, the process proceeds to step S713.

ステップS712では、携帯端末105のCPU401が、ステップS710で受信したログイン結果を基に、ログインが成功した画面を表示させる。   In step S712, the CPU 401 of the mobile terminal 105 displays a screen on which login is successful based on the login result received in step S710.

ステップS713では、携帯端末105のCPU401が、ステップS710で受信したログイン結果を基に、ログインが失敗した画面を表示させる。   In step S713, the CPU 401 of the mobile terminal 105 displays a screen on which login failed based on the login result received in step S710.

次に図8に説明を移す。   Next, the description will be shifted to FIG.

ステップS714では、携帯端末105のCPU401が、SNSへの投稿するためユーザから入力を受け付けることが可能な画面を表示する。   In step S714, the CPU 401 of the mobile terminal 105 displays a screen that can accept input from the user for posting to the SNS.

ステップS715では、携帯端末105のCPU401が、ステップS714で表示した画面上でユーザからの入力を受け付ける。   In step S715, the CPU 401 of the mobile terminal 105 receives an input from the user on the screen displayed in step S714.

ステップS716では、携帯端末105のCPU401がユーザから投稿指示を受け付ける。本実施例では表示画面上の不図示の投稿ボタンが押下されたか否かによって指示を判断している。   In step S716, the CPU 401 of the mobile terminal 105 receives a posting instruction from the user. In this embodiment, the instruction is determined based on whether or not a posting button (not shown) on the display screen is pressed.

ステップS717では、携帯端末105のCPU401がステップS716で投稿指示を受け付けた時点の携帯端末105の日時情報と位置情報を取得する。   In step S717, the CPU 401 of the mobile terminal 105 acquires date information and position information of the mobile terminal 105 at the time when the posting instruction is received in step S716.

ステップS718では、携帯端末105のCPU401がステップS715で入力を受け付けたユーザのSNS投稿データ(SNS投稿データ)に、ステップS717で取得した日時情報と位置情報とを含めてSNSサーバ104に送信する。   In step S718, the CPU 401 of the mobile terminal 105 transmits the SNS post data (SNS post data) received in step S715 to the SNS server 104 including the date information and the position information acquired in step S717.

ステップS719では、SNSサーバ104のCPU201が、ステップS718で携帯端末105から送信されたと、日時情報と位置情報とを含むSNS投稿データを受信する。   In step S719, the CPU 201 of the SNS server 104 receives the SNS posting data including the date information and the position information when transmitted from the portable terminal 105 in step S718.

ステップS720では、SNSサーバ104のCPU201がステップS719で受信したSNS投稿データを外部メモリ211に保存する保存処理を行う。保存の形式は図16、17、18に示すような形式で保存する。   In step S720, the CPU 201 of the SNS server 104 performs storage processing for storing the SNS post data received in step S719 in the external memory 211. The storage format is as shown in FIGS.

図16のSNS投稿データテーブル1600は、SNSが「Txxxxx」で、アカウントが、「abc123」のSNS投稿データを記憶している。   The SNS post data table 1600 in FIG. 16 stores SNS post data with an SNS of “Txxxx” and an account of “abc123”.

SNSID1601は、ユーザの投稿したSNS投稿データを一意に識別するIDを示している。   The SNS ID 1601 indicates an ID for uniquely identifying the SNS post data posted by the user.

日時1602は、SNS投稿データが投稿された日時情報を示している。   A date and time 1602 indicates date and time information when the SNS posting data is posted.

GPS1603は、SNS投稿データが投稿された位置情報を示すGPS情報を格納している。   The GPS 1603 stores GPS information indicating the position information where the SNS posting data is posted.

画像ファイル1604はSNS投稿データに含まれる画像データのファイル名を示している。   An image file 1604 indicates the file name of the image data included in the SNS post data.

投稿文1605はSNS投稿データに含まれるコメント部分を格納している。   The posted text 1605 stores a comment part included in the SNS posted data.

図17のSNS投稿データテーブル1700は、SNSが「Txxxxx」で、アカウントが「tyu444h」のSNS投稿データを記憶している。   The SNS post data table 1700 in FIG. 17 stores SNS post data with an SNS of “Txxxx” and an account of “tyu444h”.

図18のSNS投稿データテーブル1800は、SNSが「fxxxxx」で、アカウントが「890xyz」のSNS投稿データを記憶している。   The SNS post data table 1800 in FIG. 18 stores SNS post data with an SNS of “fxxxxx” and an account of “890 xyz”.

ステップS721では、SNSサーバ104のCPU201がステップS720で保存したSNS投稿データの投稿成功の結果を送信する。   In step S721, the CPU 201 of the SNS server 104 transmits a result of successful posting of the SNS posting data stored in step S720.

ステップS722では、携帯端末105のCPU401がステップS721で送信された投稿結果を受信する。   In step S722, the CPU 401 of the mobile terminal 105 receives the posting result transmitted in step S721.

ステップS723では、携帯端末105のCPU401がステップS722で受信した投稿結果を基にユーザに投稿結果を知らせる画面を生成し、表示させる。   In step S723, the CPU 401 of the mobile terminal 105 generates and displays a screen that notifies the user of the posting result based on the posting result received in step S722.

次にオンラインアルバムを提供するオンラインフォトストレージサーバ103への画像アップロードの一連の流れについて説明を行う。   Next, a series of flow of image upload to the online photo storage server 103 that provides an online album will be described.

図9では、オンラインフォトストレージサーバ103へのアップロードを行う画像データであるアップロード画像とSNS投稿データとのリンク処理のフローを記載している。   FIG. 9 shows a flow of a link process between an upload image that is image data to be uploaded to the online photo storage server 103 and the SNS post data.

ステップS801では、クライアント端末101のCPU201が、ユーザからオンラインアルバムにログインを受け付ける処理を行う。なお、本処理は後の図10にて詳細に説明を行う。ユーザからログインを受け付けると、ステップS802へ処理を進める。   In step S <b> 801, the CPU 201 of the client terminal 101 performs processing for accepting login to the online album from the user. This process will be described in detail later with reference to FIG. When the login is accepted from the user, the process proceeds to step S802.

ステップS802では、クライアント端末101のCPU201が、ユーザからアップロード画像のアップロードを受け付けることが可能なモードに切り替える指示を受け付ける画面をオンラインフォトストレージサーバ103から取得し、表示する(不図示)。   In step S802, the CPU 201 of the client terminal 101 acquires from the online photo storage server 103 a screen for accepting an instruction to switch to a mode in which uploading of uploaded images can be accepted from the user, and displays the screen (not shown).

ステップS803では、クライアント端末101のCPU201が、ユーザからアップロード画像のアップロードを受け付けることが可能なモードに切り替える指示を受け付けたか否かを判定する。この判定は不図示の画像データアップロードボタンなどの押下を受け付けることにより判定する。なお、判定方法は一例であってこれに限定されない。ユーザからアップロード画像のアップロードを受け付けることが可能なモードに切り替える指示を受け付けたと判定された場合にはステップS804に処理を進める。ユーザからアップロード画像のアップロードを受け付けることが可能なモードに切り替える指示を受け付けたと判定されなかった場合には本処理を終了させる。   In step S <b> 803, the CPU 201 of the client terminal 101 determines whether an instruction to switch to a mode in which uploading of uploaded images can be received from the user has been received. This determination is made by accepting pressing of an image data upload button (not shown). The determination method is an example and is not limited to this. If it is determined that the user has received an instruction to switch to a mode in which uploading of uploaded images can be accepted, the process proceeds to step S804. If it is not determined that an instruction to switch to a mode in which uploading of uploaded images can be received from the user is received, this processing is terminated.

ステップS804では、クライアント端末101のCPU201が、ユーザからアップロード画像の選択を受け付けることが可能な画面を表示する。例えば、図21が、ユーザからアップロード画像の選択を受け付けることが可能な画面のイメージ図である。   In step S804, the CPU 201 of the client terminal 101 displays a screen that can accept selection of an upload image from the user. For example, FIG. 21 is an image diagram of a screen that can accept selection of an upload image from the user.

ステップS805では、クライアント端末101のCPU201が、アップロード画像の選択を受け付ける。図21において、画像の追加ボタン2101の選択を受け付けると、アップロード画像を選択可能な画面を表示させる(不図示)。その画面でユーザからアップロード画像の選択を受け付けると、画像表示エリア2102に当該アップロード画像を表示させる。これにより、ユーザはアップロードしようとするアップロード画像を目で確認することができる。   In step S805, the CPU 201 of the client terminal 101 accepts selection of an upload image. In FIG. 21, when selection of the add image button 2101 is accepted, a screen on which an upload image can be selected is displayed (not shown). When an upload image selection is received from the user on the screen, the upload image is displayed in the image display area 2102. As a result, the user can visually confirm the uploaded image to be uploaded.

ステップS806では、クライアント端末101のCPU201が、まずアップロード画像とSNS投稿データとを紐づける処理であるSNS投稿コメントリンク機能を使用するか否かの選択を受け付ける。当該選択を受け付けた後、その選択結果とステップS805で選択された画像データとともに、複数あるアップロード画像にそれぞれコメントをユーザから付加、編集されることが可能な画面の要求を、オンラインフォトストレージサーバ103に送信する。   In step S806, the CPU 201 of the client terminal 101 first accepts a selection as to whether or not to use the SNS post comment link function, which is a process for associating the uploaded image with the SNS post data. After accepting the selection, together with the selection result and the image data selected in step S805, the online photo storage server 103 sends a request for a screen that allows a user to add and edit a comment to each of a plurality of uploaded images. Send to.

例えば図21では、自動リンク選択受付エリア2103は、アップロード画像とSNS投稿データとのリンクを行うか否かの指定を受け付けるための項目である。本実施例では「リンクする」の選択を受け付けるとアップロード画像とSNS投稿データとのリンクを行う機能を使用する。一方、「リンクしない」の選択を受け付けるとアップロード画像とSNS投稿データとのリンクを行う機能を使用しない。いずれかの選択を受け付けない限り、アップロードイメージを確認2104はグレーアウトし選択できないようになっている。アップロードイメージを確認2104の選択を受け付けると、アップロード画像にそれぞれコメントをユーザから付加、編集されることが可能な画面の要求をオンラインフォトストレージサーバ103に対して要求する。尚、自動リンクをするか否かの選択の受け付け方法については一例であってこれに限定されない。   For example, in FIG. 21, an automatic link selection reception area 2103 is an item for receiving designation as to whether or not to link an uploaded image and SNS posting data. In this embodiment, when the selection of “link” is accepted, a function for linking the uploaded image and the SNS post data is used. On the other hand, if the selection of “no link” is accepted, the function for linking the uploaded image and the SNS post data is not used. Unless any selection is accepted, the upload image confirmation 2104 is grayed out and cannot be selected. When the selection of the upload image confirmation 2104 is accepted, the online photo storage server 103 is requested to request a screen on which comments can be added and edited from the user. Note that the method of accepting selection of whether to perform automatic linking is merely an example, and the present invention is not limited to this.

ステップS807では、オンラインフォトストレージサーバ103のCPU201が、ステップS806で送信された画面の要求と、SNS投稿コメントリンク機能を使用するか否かの選択結果と、ステップS805で選択されたアップロード画像の画像データとを受信する。   In step S807, the CPU 201 of the online photo storage server 103 requests the screen transmitted in step S806, the selection result of whether or not to use the SNS post comment link function, and the image of the upload image selected in step S805. Data and receive.

ステップS808では、オンラインフォトストレージサーバ103のCPU201が、ステップS807で受信した画像データをRAM203に読み込む。   In step S808, the CPU 201 of the online photo storage server 103 reads the image data received in step S807 into the RAM 203.

ステップS809では、オンラインフォトストレージサーバ103のCPU201が、ステップS807で受信したSNS投稿コメントリンクシステムを使用するか否かの選択結果を基にSNS投稿コメントリンクシステムを使用するか否かを判定する。SNS投稿コメントリンクシステムを使用すると判定された場合は、ステップS810に処理を進める。SNS投稿コメントリンクシステムを使用すると判定されなかった場合は、ステップS811に処理を進める。   In step S809, the CPU 201 of the online photo storage server 103 determines whether to use the SNS post comment link system based on the selection result of whether to use the SNS post comment link system received in step S807. If it is determined that the SNS post comment link system is used, the process proceeds to step S810. If it is not determined that the SNS post comment link system is used, the process proceeds to step S811.

ステップS810では、オンラインフォトストレージサーバ103のCPU201が、アップロード画像にSNS投稿データを紐づける処理を行う。アップロード画像にSNS投稿データを紐づける処理の結果のデータテーブルの一例が、図28に示すSNS投稿データリンク結果テーブル2800である。   In step S810, the CPU 201 of the online photo storage server 103 performs processing for associating SNS posting data with an uploaded image. An example of a data table as a result of processing for associating SNS post data with an upload image is an SNS post data link result table 2800 shown in FIG.

図28において、ID2001はアップロード画像を一意に識別するためのIDである。画像タイトル2002はアップロード画像に付するタイトルである。   In FIG. 28, ID 2001 is an ID for uniquely identifying an uploaded image. An image title 2002 is a title attached to the uploaded image.

画像ファイル名2003はアップロード画像のファイル名を示すものである。   An image file name 2003 indicates the file name of the uploaded image.

撮影日時2004はアップロード画像が撮影された日時を示す情報を格納している。   The shooting date 2004 stores information indicating the date and time when the uploaded image was shot.

画像GPS情報2005はアップロード画像の撮影された位置情報を格納している。   The image GPS information 2005 stores location information of the uploaded image taken.

関連SNS2006はステップS810で紐づけ処理をされたSNSとSNSのアカウントと、当該アカウントのSNS投稿データを一意に識別する情報とを格納している。   The related SNS 2006 stores the SNS and the SNS account that have been linked in step S810, and information that uniquely identifies the SNS post data of the account.

アカウント参照数2007はSNSのアカウントを参照した回数が格納されている。ステップS1021で参照していないSNS投稿データが無いと判定されたときにアカウント参照数2007を1つカウントアップする。「99」はステップS1022で特定したSNS投稿データとアップロード画像とを紐づけ処理が完了した時に、SNS投稿データを特定できたという意味で付される数字である。「3」は3つのアカウントを参照したという意味を示しており、図26の登録SNSデータテーブル2600の優先順位ナンバー2601の「3」まで参照したことを表している。つまり、SNS2602が「Txxxxx」の、ユーザ名2603が「tyu444h」を参照したということを示している。   The account reference number 2007 stores the number of times the SNS account is referenced. When it is determined in step S1021 that there is no SNS post data that is not referenced, the account reference number 2007 is incremented by one. “99” is a number assigned in the sense that the SNS post data can be specified when the SNS post data specified in step S1022 and the upload image are linked. “3” indicates that three accounts have been referred to, and that “3” in the priority number 2601 of the registered SNS data table 2600 in FIG. 26 has been referred to. That is, the SNS 2602 refers to “Txxxx” and the user name 2603 refers to “tyu444h”.

他人フラグ2008はアップロード画像に紐づくSNSのアカウントが他人のものか否かを示す情報を格納している。これは関連SNS2006に示すアカウントの、図26の登録SNSデータテーブル2600の他人フラグ2604に付されている情報を基に作成される。   The other person flag 2008 stores information indicating whether or not the SNS account associated with the uploaded image belongs to another person. This is created based on information attached to the other person flag 2604 of the registered SNS data table 2600 in FIG.

登録コメント文2009はアップロード画像に紐づけされたSNS投稿データのコメントを格納している。   A registered comment sentence 2009 stores a comment of SNS post data associated with an uploaded image.

詳細は後の図11にて説明する。処理を終えた後ステップS812に移行する。   Details will be described later with reference to FIG. After the processing is completed, the process proceeds to step S812.

ステップS811では、オンラインフォトストレージサーバ103のCPU201が、SNS投稿コメントリンクシステムを使用すると判定されなかったので、アップロード画像のコメント欄を空欄のままにして処理をステップS812に進める。   In step S811, the CPU 201 of the online photo storage server 103 has not determined to use the SNS post comment link system, so the process advances to step S812 while leaving the comment column of the uploaded image blank.

ステップS812では、オンラインフォトストレージサーバ103のCPU201が、複数あるアップロード画像にそれぞれコメントをユーザから付加、編集されることが可能な画面を生成する。(画面生成手段)例えば図22の画面例のようなアップロードイメージ確認画面2200が生成される。   In step S812, the CPU 201 of the online photo storage server 103 generates a screen on which comments can be added and edited by the user to each of a plurality of uploaded images. (Screen generation means) For example, an upload image confirmation screen 2200 as shown in the screen example of FIG. 22 is generated.

図22の画像データ表示エリア2201は、アップロード画像を表示するエリアを示している。これは図28に示すSNS投稿データリンク結果テーブル2800の画像ファイル名2003から取得している。   An image data display area 2201 in FIG. 22 indicates an area for displaying an uploaded image. This is acquired from the image file name 2003 in the SNS post data link result table 2800 shown in FIG.

コメントエリア2202は、アップロード画像に紐づくコメントを編集可能に表示するエリアを示している。ステップS810でアップロード画像にSNS投稿データが紐づけられたときは、そのSNS投稿データを表示させる。これは図28に示すSNS投稿データリンク結果テーブル2800の登録コメント文2009から取得している。   A comment area 2202 indicates an area in which a comment associated with the uploaded image is displayed in an editable manner. When SNS posting data is linked to the uploaded image in step S810, the SNS posting data is displayed. This is acquired from the registered comment sentence 2009 in the SNS post data link result table 2800 shown in FIG.

コメント引用元情報2203はアップロード画像に紐づくSNS投稿データの情報を示している。本実施例では、紐づくSNSの名前、アカウント、投稿日時が記載されている。これは図28に示すSNS投稿データリンク結果テーブル2800の関連SNS2006から取得している。   The comment citation source information 2203 indicates information of SNS posting data associated with the uploaded image. In the present embodiment, the name, account, and posting date / time of the SNS to be linked are described. This is acquired from the related SNS 2006 of the SNS post data link result table 2800 shown in FIG.

また、SNS投稿データリンク結果テーブル2800の関連SNS2006を基に、関連SNS2006が重複しているアップロード画像があるか否かを判定し(判定手段)アップロード画像がある場合には、図28のアップロード画像2と3の部分で示すように関連SNS2006が重複しているアップロード画像を小さく表示し、同一コメントが付与されている旨を表示し通知させる。これにより、ユーザは同一コメントでそのまま登録してしまうことを認識することが可能になる。   Further, based on the related SNS 2006 in the SNS post data link result table 2800, it is determined whether there is an upload image with the related SNS 2006 overlapping (determination means). If there is an upload image, the upload image in FIG. As shown by the parts 2 and 3, the uploaded images overlapping the related SNS 2006 are displayed small, and the fact that the same comment is given is displayed and notified. As a result, the user can recognize that the same comment is registered as it is.

ステップS813では、オンラインフォトストレージサーバ103のCPU201が、ステップS812で生成した画面をクライアント端末101に送信する。(画面送信手段)   In step S813, the CPU 201 of the online photo storage server 103 transmits the screen generated in step S812 to the client terminal 101. (Screen transmission means)

ステップS814では、クライアント端末101のCPU201が、ステップS813で送信された画面を受信する。(画面受信手段)   In step S814, the CPU 201 of the client terminal 101 receives the screen transmitted in step S813. (Screen receiving means)

ステップS815では、クライアント端末101のCPU201が、ステップS814で受信した画面をディスプレイ210に表示させる。(画面表示手段)   In step S815, the CPU 201 of the client terminal 101 causes the display 210 to display the screen received in step S814. (Screen display means)

ステップS816では、クライアント端末101のCPU201が、ステップS815で表示させた画面でアップロード画像ごとにコメントの編集を受け付ける。   In step S816, the CPU 201 of the client terminal 101 accepts editing of a comment for each uploaded image on the screen displayed in step S815.

ステップS817では、クライアント端末101のCPU201が、ステップS816で編集を受け付けたコメント(コメント)をオンラインフォトストレージサーバ103に送信する。   In step S817, the CPU 201 of the client terminal 101 transmits the comment (comment) accepted for editing in step S816 to the online photo storage server 103.

ステップS818では、オンラインフォトストレージサーバ103のCPU201が、ステップS817で送信されたコメントを受信する。   In step S818, the CPU 201 of the online photo storage server 103 receives the comment transmitted in step S817.

ステップS819では、オンラインフォトストレージサーバ103のCPU201が、ステップS818で受信したコメントを、アップロード画像に紐づくコメントとして登録する。例えば図28に示すSNS投稿データリンク結果テーブル2800の登録コメント文2009に上書きする形で登録する(コメント登録手段)。上書きをした結果が図20に示すオンラインアルバムテーブル2000である。これは最終的にオンラインアルバムにコメントとして登録されたデータとなる。   In step S819, the CPU 201 of the online photo storage server 103 registers the comment received in step S818 as a comment associated with the uploaded image. For example, registration is performed by overwriting the registered comment sentence 2009 in the SNS post data link result table 2800 shown in FIG. 28 (comment registration means). The result of overwriting is an online album table 2000 shown in FIG. This finally becomes data registered as a comment in the online album.

図10は、オンラインフォトストレージサーバ103が提供するオンライアルバムへのログイン受付処理の詳細を説明するフローチャートである。なお、オンラインアルバムへのログインの方法はこれに限定されない。   FIG. 10 is a flowchart for explaining the details of the login acceptance process to the online album provided by the online photo storage server 103. Note that the method for logging in to the online album is not limited to this.

ステップS901ではクライアント端末101のCPU201が、ユーザがオンラインフォトストレージサーバ103にログインするための情報を入力可能な画面を表示する。   In step S <b> 901, the CPU 201 of the client terminal 101 displays a screen that allows the user to input information for logging in to the online photo storage server 103.

ステップS902ではクライアント端末101のCPU201が、ユーザからのオンラインフォトストレージサーバ103にログインするための情報の入力を受け付ける。   In step S902, the CPU 201 of the client terminal 101 receives an input of information for logging in to the online photo storage server 103 from the user.

ステップS903ではクライアント端末101のCPU201が、ユーザからの認証要求ボタン押下などの指示を受け付け、オンラインフォトストレージサーバ103にログイン要求を送信する。ここでは、ログイン要求には、ユーザがオンラインアルバムに登録した名前であるユーザ名と、それにひもづくパスワードとを含めて送信している。オンラインアルバムとは、ユーザのアカウントごとに記憶している画像データとコメントとを併せて表示することができるインターネット上のアルバムである。   In step S <b> 903, the CPU 201 of the client terminal 101 receives an instruction from the user, such as pressing an authentication request button, and transmits a login request to the online photo storage server 103. Here, the login request includes a user name that is registered by the user in the online album and a password associated therewith. An online album is an album on the Internet that can display image data and comments stored for each user account.

ステップS904では、オンラインフォトストレージサーバ103のCPU201が、ステップS903でクライアント端末101から送信されたログイン要求を受信する。   In step S904, the CPU 201 of the online photo storage server 103 receives the login request transmitted from the client terminal 101 in step S903.

ステップS905では、オンラインフォトストレージサーバ103のCPU201が、外部メモリ211から認証テーブル2500を取得する。例えば図25にある認証テーブル2500である。管理番号2501はオンラインアルバムのアカウントを一意に特定することのできる番号である。ユーザ名2502はユーザがオンラインアルバムに登録した名前を示すものであり、他のユーザとは被らないようにユーザより作成されるものである。パスワード2503は、ユーザ名2502に紐づくパスワードを示している。   In step S <b> 905, the CPU 201 of the online photo storage server 103 acquires the authentication table 2500 from the external memory 211. For example, the authentication table 2500 shown in FIG. The management number 2501 is a number that can uniquely identify the account of the online album. A user name 2502 indicates a name registered by the user in the online album, and is created by the user so as not to suffer from other users. A password 2503 indicates a password associated with the user name 2502.

ステップS906では、オンラインフォトストレージサーバ103のCPU201が、ステップS905で取得した認証テーブル2500に基づいて、ステップS904で受信したログイン要求に含まれるユーザ名とパスワードとが登録されているか否かを判定する。ユーザの登録があると判定され、ステップS904で受信したパスワードとパスワード2503を照合し一致した場合、ステップS908に処理を進める。ユーザの登録がない又はステップS904で受信したパスワードとパスワード2503を照合し一致しなかったと判定された場合、ステップS907に処理を進める。   In step S906, the CPU 201 of the online photo storage server 103 determines whether the user name and password included in the login request received in step S904 are registered based on the authentication table 2500 acquired in step S905. . If it is determined that there is a user registration and the password received in step S904 matches the password 2503, the process proceeds to step S908. If there is no user registration or the password received in step S904 and the password 2503 are collated and it is determined that they do not match, the process proceeds to step S907.

ステップS907では、オンラインフォトストレージサーバ103のCPU201が、ユーザの登録がない又はステップS904で受信したパスワードとパスワード2503とを照合した結果、一致しないと判定された当該ユーザのログインが失敗した情報を示す、ログインNGデータを生成する。ログインNGデータを生成した後、ステップS909へ処理を進める。   In step S907, the CPU 201 of the online photo storage server 103 indicates information indicating that the user has failed to log in as a result of checking that the user has not registered or the password received in step S904 does not match the password 2503. , Login NG data is generated. After generating login NG data, the process proceeds to step S909.

ステップS908では、オンラインフォトストレージサーバ103のCPU201が、ステップS906でユーザの登録がない又はステップS904で受信したパスワードとパスワード2503とを照合した結果、一致したと判定された当該ユーザのログインが成功した情報を示す、ログインOKデータを生成する。ログインOKデータを生成したのちステップS909に処理を進める。   In step S908, the CPU 201 of the online photo storage server 103 has succeeded in the login of the user who has been determined to match as a result of collating the password not registered in step S906 or the password received in step S904 with the password 2503. The login OK data indicating the information is generated. After the login OK data is generated, the process proceeds to step S909.

ステップS909では、オンラインフォトストレージサーバ103のCPU201が、ステップS907やステップS908で生成されたログインの結果のデータを、クライアント端末101に送信する。   In step S909, the CPU 201 of the online photo storage server 103 transmits the login result data generated in step S907 or step S908 to the client terminal 101.

ステップS910では、クライアント端末101は、オンラインフォトストレージサーバ103から送信されたログイン結果を受信する。   In step S <b> 910, the client terminal 101 receives the login result transmitted from the online photo storage server 103.

ステップS911では、クライアント端末101のCPU201が、ステップS910で受信したログイン結果に基づいてステップS903で受け付けたログイン要求が受け付けられたか否かを判定する。ログイン要求が受け付けられた場合は、ステップS913へ処理を進め、ログイン要求が受け付けられなかった場合は、ステップS912へ処理を進める。   In step S911, the CPU 201 of the client terminal 101 determines whether or not the login request received in step S903 has been received based on the login result received in step S910. If the login request is accepted, the process proceeds to step S913. If the login request is not accepted, the process proceeds to step S912.

ステップS912では、クライアント端末101のCPU201が、ステップS910で受信したログイン結果を基に、ログインが成功した画面を表示させる。   In step S912, the CPU 201 of the client terminal 101 displays a screen on which login was successful based on the login result received in step S910.

ステップS913では、クライアント端末101のCPU201が、ステップS910で受信したログイン結果を基に、ログインが失敗した画面を表示させる。   In step S913, the CPU 201 of the client terminal 101 displays a screen on which login failed, based on the login result received in step S910.

図11は、ステップS810の画像データにSNS投稿データを紐づける処理の詳細な説明を示すフローチャートである。   FIG. 11 is a flowchart showing a detailed description of the process of associating the SNS post data with the image data in step S810.

ステップS1001では、オンラインフォトストレージサーバ103のCPU201がSNS投稿コメントリンク機能の初期設定を読み込む。例えば図26、27のデータテーブルを読み込む。   In step S1001, the CPU 201 of the online photo storage server 103 reads the initial setting of the SNS post comment link function. For example, the data tables in FIGS. 26 and 27 are read.

図26はオンラインアルバムに紐づけるSNSのアカウントの優先順位を示すテーブルである登録SNSデータテーブル2600である。優先順位ナンバー2601は、登録されているSNSのアカウントの優先順位を一意に示すものである。SNS2602は登録されているSNSの種類を示すものである。ユーザ名2603はSNS2602のログインの際に使用するユーザIDのようなものを示している。他人フラグ2604(アカウント情報)は、アカウントが他人のアカウントであるか否かを示す情報を格納している。図26では、「1」が他人のアカウントであることを示すフラグであり、「0」は他人のフラグではないこと(自分)を示すフラグである。図24の画面例でアカウントの情報を入力される欄が「他ユーザ投稿参照」の欄に該当する場合に、他人のアカウントであることを示す「1」を格納する。なお、登録SNSデータテーブル2600は一例であってこれに限定されない。   FIG. 26 shows a registered SNS data table 2600 which is a table showing the priority order of SNS accounts associated with online albums. The priority number 2601 uniquely indicates the priority order of registered SNS accounts. The SNS 2602 indicates the type of registered SNS. A user name 2603 indicates a user ID used when logging in to the SNS 2602. The other person flag 2604 (account information) stores information indicating whether the account is an account of another person. In FIG. 26, “1” is a flag indicating that it is an account of another person, and “0” is a flag indicating that it is not a flag of another person (self). When the field for entering account information in the screen example of FIG. 24 corresponds to the “reference to other user posting” field, “1” indicating that the account is for another person is stored. The registered SNS data table 2600 is an example, and the present invention is not limited to this.

図27は、アップロード画像とSNS投稿データとの紐づけの基準となるデータテーブルである初期情報テーブル2700である。時間設定2701はアップロード画像に紐づくSNS投稿データを検索する際に基準となる時間の設定を示す。図27では、「5min.」となっているので、画像データの撮影日時との差異が5分以内のSNS投稿データを検索するという設定を示している。距離設定2702は、アップロード画像に紐づくSNS投稿データを検索する際に基準となる距離の設定を示す。図27では、「500m」となっているので、画像データの撮影場所との差異が500m以内のSNS投稿データを検索するという設定である。アカウント数2703はユーザがSNS投稿コメントリンク機能で使用するSNSのアカウントの上限数を示している。これは登録SNSデータテーブル2600を基に生成される。これにより、SNSからSNS投稿データを取得する上限回数を把握することができる。なお、初期情報テーブル2700は一例であってこれに限定されない。   FIG. 27 shows an initial information table 2700 which is a data table serving as a reference for associating uploaded images with SNS post data. A time setting 2701 indicates a setting of a reference time when searching for SNS post data associated with an uploaded image. In FIG. 27, since “5 min.” Is set, the setting is such that SNS posted data whose difference from the shooting date and time of the image data is within 5 minutes is searched. The distance setting 2702 indicates a setting of a distance as a reference when searching for SNS post data associated with an uploaded image. In FIG. 27, since it is “500 m”, the setting is to search for SNS posted data whose difference from the image data shooting location is within 500 m. The number of accounts 2703 indicates the upper limit number of SNS accounts used by the user in the SNS post comment link function. This is generated based on the registered SNS data table 2600. Thereby, the upper limit frequency | count which acquires SNS contribution data from SNS can be grasped | ascertained. The initial information table 2700 is an example, and the present invention is not limited to this.

なお、初期情報テーブル2700は、事前にユーザから図24の初期設定登録画面2400のような画面より入力を受け付けることで生成されるものである。日時誤差許容範囲2402が時間設定2701、GPS誤差許容範囲2403が距離設定2702に紐づいており、更新ボタン2404が押下されると、それぞれ更新を行う。また、連携SNS2401と登録SNSデータテーブル2600が紐づいており更新ボタン2404が押下されるとそれぞれ更新される。   Note that the initial information table 2700 is generated by receiving input from a user in advance from a screen such as the initial setting registration screen 2400 of FIG. The date / time error allowable range 2402 is associated with the time setting 2701 and the GPS error allowable range 2403 is associated with the distance setting 2702, and when the update button 2404 is pressed, the update is performed. Further, the linked SNS 2401 and the registered SNS data table 2600 are linked to each other and updated when the update button 2404 is pressed.

ステップS1002では、オンラインフォトストレージサーバ103のCPU201がSNS投稿データを要求するSNS及びSNSのアカウントの特定を行う。   In step S <b> 1002, the CPU 201 of the online photo storage server 103 specifies an SNS and an SNS account that request SNS posting data.

特定の方法は、ステップS1001に引き続きステップS1002の処理を行う場合は図26の登録SNSデータテーブル2600の優先順位ナンバー2601とユーザ名2603を基に最も優先順位の高いSNSのアカウントを特定する。   In the specific method, when the process of step S1002 is performed subsequent to step S1001, the SNS account with the highest priority is specified based on the priority number 2601 and the user name 2603 of the registered SNS data table 2600 of FIG.

図26では、最も優先順位の高いSNSのアカウントは「abc123」である。   In FIG. 26, the SNS account with the highest priority is “abc123”.

一方、ステップS1024に引き続きステップS1002の処理を行う場合は、ステップS1007で既にSNS投稿データを取得しているアカウントでないアカウントを図26の登録SNSデータテーブル2600のユーザ名2603により特定する。   On the other hand, when the process of step S1002 is performed subsequent to step S1024, an account that is not an account for which SNS post data has already been acquired in step S1007 is specified by the user name 2603 of the registered SNS data table 2600 of FIG.

例えばすでに「abc123」のSNS投稿データをステップS1007で取得している場合には、図26の登録SNSデータテーブル2600のユーザ名2603で次に優先順位ナンバーの高いアカウントである「890xyz」を特定する。   For example, if the SNS post data “abc123” has already been acquired in step S1007, the user name 2603 of the registered SNS data table 2600 in FIG. 26 identifies “890xyz”, which is the next highest priority number account. .

ステップS1003では、オンラインフォトストレージサーバ103のCPU201がステップS1002で特定したSNSのアカウントを保持するSNSサーバ104に対してSNS投稿データの取得要求を送信する。(SNS投稿データ要求手段)   In step S1003, the CPU 201 of the online photo storage server 103 transmits an SNS post data acquisition request to the SNS server 104 that holds the SNS account specified in step S1002. (SNS post data request means)

取得要求はステップS1002で特定した図26に示すユーザ名2603のアカウントのSNS投稿データの要求である。   The acquisition request is a request for SNS posting data of the account with the user name 2603 shown in FIG. 26 identified in step S1002.

ステップS1004では、SNSサーバ104のCPU201がステップS1003で送信されたSNS投稿データの取得要求を受信する。   In step S1004, the CPU 201 of the SNS server 104 receives the SNS post data acquisition request transmitted in step S1003.

ステップS1005では、SNSサーバ104のCPU201がステップS1004で受信したユーザ名2603のアカウントの複数あるSNS投稿データの取得要求を基に当該アカウントのすべてのSNS投稿データを検索し、取得する。   In step S1005, the CPU 201 of the SNS server 104 searches for and acquires all the SNS post data of the account based on the acquisition request for a plurality of SNS post data for the user name 2603 received in step S1004.

例えば、図16、図17、図18のようなアカウントごとのSNS投稿データのデータテーブルであるSNS投稿データテーブル1600、1700、1800を取得する。図16を例にとって説明する。ユーザ毎にSNS投稿データテーブル1600を格納しており、SNSID1601はユーザのSNS投稿データを一意に示すIDである。日時1602はユーザがSNSに投稿した日時情報を示すものである。GPS1603はユーザがSNSに投稿をした位置情報を示すものである。画像ファイル1604はユーザがSNSに画像データを添付した投稿をした場合の当該画像データのファイル名が記載されている。投稿文1605はユーザがSNSに投稿した内容を示すものである。   For example, SNS post data tables 1600, 1700, and 1800, which are data tables of SNS post data for each account as shown in FIGS. A description will be given by taking FIG. 16 as an example. The SNS post data table 1600 is stored for each user, and the SNS ID 1601 is an ID that uniquely indicates the SNS post data of the user. The date 1602 indicates date information posted by the user to the SNS. GPS1603 shows the positional information which the user contributed to SNS. The image file 1604 describes the file name of the image data when the user makes a post with the image data attached to the SNS. The posted text 1605 indicates the content posted by the user to the SNS.

ステップS1006では、SNSサーバ104のCPU201がステップS1005で取得した複数のSNS投稿データをオンラインフォトストレージサーバ103に送信する。(SNS投稿データ送信手段)   In step S1006, the CPU 201 of the SNS server 104 transmits the plurality of SNS post data acquired in step S1005 to the online photo storage server 103. (SNS post data transmission means)

ステップS1007では、オンラインフォトストレージサーバ103のCPU201がステップS1006で送信されたSNS投稿データを受信する。(SNS投稿データ受信手段)   In step S1007, the CPU 201 of the online photo storage server 103 receives the SNS post data transmitted in step S1006. (SNS post data receiving means)

ステップS1008では、オンラインフォトストレージサーバ103のCPU201がステップS808で読み込んだ画像データの中から、ステップS1002で特定したSNSのSNS投稿データを参照していない画像データがあるか否かを判定する。SNS投稿データを参照していない画像データがあると判定された場合はステップS1009に処理を進め、SNS投稿データを参照していない画像データがあると判定されなかった場合はステップS1023に処理を進める。   In step S1008, the CPU 201 of the online photo storage server 103 determines whether there is image data that does not refer to the SNS post data specified in step S1002 from the image data read in step S808. If it is determined that there is image data that does not refer to SNS post data, the process proceeds to step S1009. If it is not determined that there is image data that does not refer to SNS post data, the process proceeds to step S1023. .

ステップS1009では、オンラインフォトストレージサーバ103のCPU201がSNS投稿データの紐づけを行うアップロード画像に含まれる画像データ日時情報1402とGPS情報1403とを取得する。(EXIF情報取得手段)   In step S <b> 1009, the CPU 201 of the online photo storage server 103 acquires image data date / time information 1402 and GPS information 1403 included in an upload image for linking SNS post data. (EXIF information acquisition means)

ステップS1010では、オンラインフォトストレージサーバ103のCPU201がステップS1007で受信したSNS投稿データに含まれる日時1602とGPS1603とを取得する。   In step S1010, the CPU 201 of the online photo storage server 103 acquires the date 1602 and GPS 1603 included in the SNS post data received in step S1007.

ステップS1011では、オンラインフォトストレージサーバ103のCPU201がステップS1009で取得したアップロード画像の画像データ日時情報1402と、ステップS1010で取得したSNS投稿データの日時1602とを参照し、ステップS1001で読み込んだ時間設定2701の条件内か否かを判定する。条件内と判定された場合にステップS1022に処理を進める。条件内と判定されなかった場合ステップS1012に処理を進める。(SNS投稿データ特定手段)   In step S1011, the CPU 201 of the online photo storage server 103 refers to the image data date / time information 1402 of the uploaded image acquired in step S1009 and the date / time 1602 of the SNS post data acquired in step S1010, and the time setting read in step S1001. It is determined whether or not the condition 2701 is satisfied. If it is determined that the condition is satisfied, the process proceeds to step S1022. If it is not determined that the condition is satisfied, the process proceeds to step S1012. (SNS post data identification means)

例えば、図14のテーブルの「P1000054.JPG」に紐づくSNS投稿データを、図16のSNS投稿データテーブル1600から特定する方法を説明する。   For example, a method of specifying the SNS post data associated with “P1000054.JPG” in the table of FIG. 14 from the SNS post data table 1600 of FIG.

ステップS1009で、「P1000054.JPG」の日時情報である画像データ日時情報1402と、GPS情報であるGPS情報1403を取得する。   In step S1009, image data date / time information 1402 which is date / time information of “P1000054.JPG” and GPS information 1403 which is GPS information are acquired.

ステップS1010で、SNS投稿データテーブル1600のSNSID1601の「1」の日時情報である日時1602とGPS情報であるGPS1603とを取得する。   In step S1010, date 1602 which is date information of “1” of SNS ID 1601 of the SNS post data table 1600 and GPS 1603 which is GPS information are acquired.

ステップS1011で、「P1000054.JPG」の画像データ日時情報1402とステップS1010で取得した日時1602とを比較し、その差分が図27の時間設定2701の範囲内か否かを判定する。この場合、時間設定2701の範囲内であるので、ここで「P1000054.JPG」の紐づくSNS投稿データは、SNSID1601が「1」のSNS投稿データであると特定される。   In step S1011, the image data date / time information 1402 of “P1000054.JPG” is compared with the date / time 1602 acquired in step S1010, and it is determined whether or not the difference is within the range of the time setting 2701 in FIG. In this case, since it is within the range of the time setting 2701, the SNS posting data associated with “P1000054.JPG” is specified as the SNS posting data with the SNS ID 1601 of “1”.

次に図12を用いて引き続きSNS投稿データ紐づけ処理の詳細な説明を行う。   Next, the SNS post data linking process will be described in detail with reference to FIG.

ステップS1012では、オンラインフォトストレージサーバ103のCPU201がステップS1009で取得したアップロード画像のGPS情報1403と、ステップS1010で取得したSNS投稿データのGPS1603とを参照し、ステップS1001で読み込んだ距離設定2702の条件内か否かを判定する。(SNS投稿データ特定手段)   In step S1012, the CPU 201 of the online photo storage server 103 refers to the GPS information 1403 of the uploaded image acquired in step S1009 and the GPS 1603 of the SNS post data acquired in step S1010, and the conditions of the distance setting 2702 read in step S1001 It is determined whether it is within. (SNS post data identification means)

なお、アップロード画像の画像データ日時情報1402と日時1602が24時間以内とする。これはGPSの条件でSNS投稿データを判定すると、全く違う日にちのSNS投稿データも拾ってしまうためでありこれを防止するためである。   Note that the image data date / time information 1402 and date / time 1602 of the uploaded image are within 24 hours. This is to prevent SNS post data from a completely different date when SNS post data is determined under GPS conditions.

条件内と判定された場合にステップS1022に処理を進める。条件内と判定されなかった場合ステップS1013に処理を進める。   If it is determined that the condition is satisfied, the process proceeds to step S1022. If it is not determined that the condition is satisfied, the process proceeds to step S1013.

ステップS1013では、オンラインフォトストレージサーバ103のCPU201がSNS投稿データに含まれる画像データを取得する。例えば図19のような画像データのデータテーブルであるSNS画像EXIFテーブル1900を取得する。   In step S1013, the CPU 201 of the online photo storage server 103 acquires image data included in the SNS post data. For example, an SNS image EXIF table 1900 which is a data table of image data as shown in FIG. 19 is acquired.

ステップS1014では、オンラインフォトストレージサーバ103のCPU201がステップS1013で取得した画像データに含まれる日時情報とGPS情報とを取得する。図19のSNS画像EXIFテーブルの撮影日時1902とGPS情報1903とを取得する。   In step S1014, the CPU 201 of the online photo storage server 103 acquires date information and GPS information included in the image data acquired in step S1013. The shooting date 1902 and GPS information 1903 of the SNS image EXIF table of FIG. 19 are acquired.

ステップS1015では、オンラインフォトストレージサーバ103のCPU201がステップS1009で取得したアップロード画像の画像データ日時情報1402と、ステップS1014で取得した画像データの撮影日時1902とを参照し、ステップS1001で読み込んだ時間設定2701の条件内か否かを判定する。条件内と判定された場合にステップS1022に処理を進める。条件内と判定されなかった場合ステップS1016に処理を進める。(SNS投稿データ特定手段)   In step S1015, the CPU 201 of the online photo storage server 103 refers to the image data date / time information 1402 of the uploaded image acquired in step S1009 and the shooting date / time 1902 of the image data acquired in step S1014, and the time setting read in step S1001. It is determined whether or not the condition 2701 is satisfied. If it is determined that the condition is satisfied, the process proceeds to step S1022. If it is not determined that the condition is satisfied, the process proceeds to step S1016. (SNS post data identification means)

ステップS1016では、オンラインフォトストレージサーバ103のCPU201がステップS1009で取得したアップロード画像のGPS情報1403と、ステップS1014で取得した画像データのGPS情報1903とを参照し、ステップS1001で読み込んだ距離設定2702の条件内か否かを判定する。(SNS投稿データ特定手段)   In step S1016, the CPU 201 of the online photo storage server 103 refers to the GPS information 1403 of the uploaded image acquired in step S1009 and the GPS information 1903 of the image data acquired in step S1014, and the distance setting 2702 read in step S1001. It is determined whether or not the condition is satisfied. (SNS post data identification means)

なお、アップロード画像の画像データ日時情報1402と撮影日時1902が24時間以内とする。これはGPSの条件でSNS投稿データを判定すると、全く違う日にちのSNS投稿データも拾ってしまうためでありこれを防止するためである。   Note that the image data date / time information 1402 and the shooting date / time 1902 of the uploaded image are within 24 hours. This is to prevent SNS post data from a completely different date when SNS post data is determined under GPS conditions.

条件内と判定された場合にステップS1022に処理を進める。条件内と判定されなかった場合ステップS1017に処理を進める。   If it is determined that the condition is satisfied, the process proceeds to step S1022. If it is not determined that the condition is satisfied, the process proceeds to step S1017.

ステップS1017では、オンラインフォトストレージサーバ103のCPU201がSNS投稿データに含まれるコメントを取得する。ここでは、日時とGPSの条件で検出することのできなかったSNS投稿データを、SNS投稿データに含まれるコメントを基にして検出するために行う処理である。   In step S1017, the CPU 201 of the online photo storage server 103 acquires a comment included in the SNS post data. Here, it is a process performed in order to detect the SNS posting data which could not be detected by the date and GPS conditions based on the comments included in the SNS posting data.

ステップS1018では、オンラインフォトストレージサーバ103のCPU201がステップS1017で取得したコメントの単語(文字列)の解析処理を行う(位置情報解析手段)。コメントの解析方法は従来技術を用いるものとする。例えば、「東京タワーにいる」というコメントがあった場合に、「東京タワー」を単語として解析する。   In step S1018, the CPU 201 of the online photo storage server 103 analyzes the comment word (character string) acquired in step S1017 (position information analysis unit). The comment analysis method uses conventional technology. For example, when there is a comment “I am in Tokyo Tower”, “Tokyo Tower” is analyzed as a word.

ステップS1019では、オンラインフォトストレージサーバ103のCPU201がステップS1018で解析した結果に基づいて当該SNS投稿データが紐づく位置情報を特定し取得する(位置情報特定手段)。位置情報の特定は従来技術を用いるものとする。例えば、インターネット経由で提供されている地図情報サービスのAPIにステップS1018で解析した単語を送信することで当該単語が示す地名やランドマークが存在する位置情報を取得できる。ステップS1018で解析した「東京タワー」という単語から、東京タワーの位置情報を特定する。特定したのち東京タワーの位置情報を取得する。   In step S1019, based on the result analyzed by the CPU 201 of the online photo storage server 103 in step S1018, the position information associated with the SNS post data is specified and acquired (position information specifying means). The position information is specified using a conventional technique. For example, by transmitting the word analyzed in step S1018 to the API of the map information service provided via the Internet, it is possible to acquire location information where the place name or landmark indicated by the word exists. The location information of Tokyo Tower is specified from the word “Tokyo Tower” analyzed in Step S1018. After identifying the location information of Tokyo Tower.

ステップS1020では、オンラインフォトストレージサーバ103のCPU201がステップS1009で取得したアップロード画像のGPS情報1403と、ステップS1019で取得したSNS投稿データの位置情報とを参照し、ステップS1001で読み込んだ距離設定2702の条件内か否かを判定する。条件内と判定された場合にステップS1022に処理を進める。条件内と判定されなかった場合ステップS1021に処理を進める。(SNS投稿データ特定手段)   In step S1020, the CPU 201 of the online photo storage server 103 refers to the GPS information 1403 of the uploaded image acquired in step S1009 and the location information of the SNS post data acquired in step S1019, and the distance setting 2702 read in step S1001 is read. It is determined whether or not the condition is satisfied. If it is determined that the condition is satisfied, the process proceeds to step S1022. If it is not determined that the condition is satisfied, the process proceeds to step S1021. (SNS post data identification means)

ステップS1021では、オンラインフォトストレージサーバ103のCPU201がステップS1007で受信したSNS投稿データの中で参照していないSNS投稿データがあるか否かを判定している。参照していないSNS投稿データがあると判定された場合ステップS1010に処理を戻す。参照していないSNS投稿データがあると判定されなかった場合ステップS1008に処理を戻す。   In step S1021, the CPU 201 of the online photo storage server 103 determines whether there is SNS post data that is not referred to in the SNS post data received in step S1007. If it is determined that there is SNS post data that has not been referenced, the process returns to step S1010. If it is not determined that there is SNS post data that is not referenced, the process returns to step S1008.

ステップS1022では、オンラインフォトストレージサーバ103のCPU201が特定されたSNS投稿データと、画像データとを紐づけて記憶する。(SNS投稿データ特定手段)   In step S1022, the SNS post data specified by the CPU 201 of the online photo storage server 103 and the image data are stored in association with each other. (SNS post data identification means)

特定したSNS投稿データと、アップロード画像とを紐づけたデータデーブルが、図28に示すSNS投稿データリンク結果テーブル2800である。特定されたSNS投稿データのSNSの名前や、ユーザ名1502、SNSID1601情報は関連SNS2006に格納される。特定されたSNS投稿データのコメントは登録コメント文2009に格納される。   A data table in which the identified SNS post data and the uploaded image are linked is the SNS post data link result table 2800 shown in FIG. The SNS name, the user name 1502, and the SNS ID 1601 information of the specified SNS post data are stored in the related SNS 2006. The comment of the specified SNS posting data is stored in the registered comment sentence 2009.

ステップS1023では、オンラインフォトストレージサーバ103のCPU201が画像データすべてについているオンラインアルバムテーブル2000のアカウント参照数2007が初期情報テーブル2700のアカウント数2703に達しているか否かを判定している。画像データすべてについているオンラインアルバムテーブル2000のアカウント参照数2007が初期情報テーブル2700のアカウント数2703に達していると判定された場合、処理を終了させる。画像データすべてについているオンラインアルバムテーブル2000のアカウント参照数2007が初期情報テーブル2700のアカウント数2703に達していると判定されなかった場合処理をステップS1024に進める。   In step S1023, the CPU 201 of the online photo storage server 103 determines whether the account reference number 2007 in the online album table 2000 for all image data has reached the account number 2703 in the initial information table 2700. If it is determined that the account reference number 2007 in the online album table 2000 for all the image data has reached the account number 2703 in the initial information table 2700, the process is terminated. If it is not determined that the account reference number 2007 of the online album table 2000 for all the image data has reached the account number 2703 of the initial information table 2700, the process proceeds to step S1024.

ステップS1024では、オンラインフォトストレージサーバ103のCPU201が次のレベルのSNSのアカウントがあるか否かを判定している。   In step S1024, the CPU 201 of the online photo storage server 103 determines whether there is an SNS account at the next level.

SNS投稿データリンク結果テーブル2800のアカウント参照数2007の数字の次の数の、図26の登録SNSデータテーブル2600の優先順位ナンバー2601のデータがあるか否かを判定している。例えばアカウント参照数2007が「3」だった場合に、優先順位ナンバー2601が「4」のデータがあるか否かを判定する。   It is determined whether or not there is data of the priority number 2601 of the registered SNS data table 2600 of FIG. 26, which is the next number after the number of the account reference number 2007 of the SNS post data link result table 2800. For example, when the account reference number 2007 is “3”, it is determined whether or not there is data having a priority number 2601 of “4”.

次のレベルのSNSのアカウントがあると判定された場合ステップS1002に処理を戻す。次のレベルのSNSのアカウントがあると判定されなかった場合、処理を終了させる。   If it is determined that there is an account of the next level SNS, the process returns to step S1002. If it is not determined that there is a next level SNS account, the process is terminated.

図13はクライアント端末101が、実際にアップロードされた、アップロード画像とコメントを併せて表示することが可能な画面を表示するためのフローチャートである。   FIG. 13 is a flowchart for displaying a screen on which the client terminal 101 can display an uploaded image and a comment that are actually uploaded.

ステップS1101では、クライアント端末101のCPU201が、実際にアップロードされた、アップロード画像とコメントを併せて表示することが可能な画面を表示する要求を受け付ける。   In step S <b> 1101, the CPU 201 of the client terminal 101 receives a request to display a screen that can be displayed together with an uploaded image and a comment that are actually uploaded.

ステップS1102では、クライアント端末101のCPU201が、ステップS1101で受け付けた画面の表示要求をオンラインフォトストレージサーバ103に送信する。   In step S1102, the CPU 201 of the client terminal 101 transmits the screen display request received in step S1101 to the online photo storage server 103.

ステップS1103では、オンラインフォトストレージサーバ103のCPU201が、ステップS1102で送信された画面の表示要求を受信する。   In step S1103, the CPU 201 of the online photo storage server 103 receives the screen display request transmitted in step S1102.

ステップS1104では、オンラインフォトストレージサーバ103のCPU201が、オンラインアルバムテーブル2000を取得する。   In step S1104, the CPU 201 of the online photo storage server 103 acquires the online album table 2000.

ステップS1105では、オンラインフォトストレージサーバ103のCPU201が、ステップS1104で取得したテーブルを基に、表示する画面を生成する。例えば、図23の画面例が生成される。アップロード画像表示エリア2301にはオンラインアルバムテーブル2000の画像ファイル名2003の画像データが表示される。コメント欄2302にはユーザが最終的に登録したコメントであるオンラインアルバムテーブル2000の登録コメント文2009表示される。撮影情報2303にはオンラインアルバムテーブル2000の撮影日時2004の情報を基にしてアップロード画像がアップロードされた撮影日時が表示される。   In step S1105, the CPU 201 of the online photo storage server 103 generates a screen to be displayed based on the table acquired in step S1104. For example, the screen example of FIG. 23 is generated. In the upload image display area 2301, image data of the image file name 2003 in the online album table 2000 is displayed. The comment field 2302 displays a registered comment sentence 2009 in the online album table 2000 that is a comment finally registered by the user. The shooting information 2303 displays the shooting date and time when the uploaded image is uploaded based on the information of the shooting date and time 2004 in the online album table 2000.

ステップS1106では、オンラインフォトストレージサーバ103のCPU201が、オンラインアルバムテーブル2000の他人フラグ2008を基にして、アップロード画像に紐づくSNS投稿データが他人のアカウントであるかを判別し、他人のアカウントである場合に場合に、当該アカウントのSNS投稿データへのリンクを張る処理を行う。   In step S1106, the CPU 201 of the online photo storage server 103 determines whether the SNS post data associated with the uploaded image is an account of another person based on the other person flag 2008 of the online album table 2000, and is the account of the other person. In some cases, a process for creating a link to the SNS posting data of the account is performed.

例えば、図23で、SNSリンク2304が表示されている。   For example, in FIG. 23, the SNS link 2304 is displayed.

当該アップロード画像のID2001に紐づくSNS投稿データが他人フラグ2008により他人のアカウントであることを示している。他人のアカウントであるので、関連SNS2006を基にして当該アカウントのSNS投稿データへのリンクのボタンであるSNSリンク2304が生成される。   The SNS post data associated with the ID 2001 of the upload image indicates that the other person's account is indicated by the other person flag 2008. Since it is another person's account, based on related SNS2006, the SNS link 2304 which is a button of the link to the SNS contribution data of the said account is produced | generated.

ステップS1107では、オンラインフォトストレージサーバ103のCPU201が、ステップS1105で生成された画面をクライアント端末101に送信する。   In step S 1107, the CPU 201 of the online photo storage server 103 transmits the screen generated in step S 1105 to the client terminal 101.

ステップS1108では、クライアント端末101のCPU201が、ステップS1107で送信された画面を受信する。   In step S1108, the CPU 201 of the client terminal 101 receives the screen transmitted in step S1107.

ステップS1109では、クライアント端末101のCPU201が、ステップS1108で受信した画面を表示する。   In step S1109, the CPU 201 of the client terminal 101 displays the screen received in step S1108.

以上説明したように、本実施形態によれば、アップロードされる画像データに付与するコメントの入力候補をユーザに提示することのできる効果を奏する。   As described above, according to the present embodiment, there is an effect that it is possible to present to the user input candidates for comments to be given to uploaded image data.

本発明は、例えば、システム、装置、方法、プログラム若しくは記憶媒体等としての実施形態も可能であり、具体的には、複数の機器から構成されるシステムに適用してもよいし、また、1つの機器からなる装置に適用してもよい。   The present invention can be implemented as a system, apparatus, method, program, storage medium, or the like, and can be applied to a system including a plurality of devices. You may apply to the apparatus which consists of one apparatus.

なお、本発明は、前述した実施形態の機能を実現するソフトウェアのプログラムを、システム或いは装置に直接、或いは遠隔から供給するものを含む。そして、そのシステム或いは装置のコンピュータが前記供給されたプログラムコードを読み出して実行することによっても達成される場合も本発明に含まれる。   Note that the present invention includes a software program that implements the functions of the above-described embodiments directly or remotely from a system or apparatus. The present invention also includes a case where the system or the computer of the apparatus is achieved by reading and executing the supplied program code.

したがって、本発明の機能処理をコンピュータで実現するために、前記コンピュータにインストールされるプログラムコード自体も本発明を実現するものである。つまり、本発明は、本発明の機能処理を実現するためのコンピュータプログラム自体も含まれる。   Accordingly, since the functions of the present invention are implemented by computer, the program code installed in the computer also implements the present invention. In other words, the present invention includes a computer program itself for realizing the functional processing of the present invention.

その場合、プログラムの機能を有していれば、オブジェクトコード、インタプリタにより実行されるプログラム、OSに供給するスクリプトデータ等の形態であってもよい。   In that case, as long as it has the function of a program, it may be in the form of object code, a program executed by an interpreter, script data supplied to the OS, and the like.

プログラムを供給するための記録媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、MO、CD−ROM、CD−R、CD−RWなどがある。また、磁気テープ、不揮発性のメモリカード、ROM、DVD(DVD−ROM,DVD−R)などもある。   Examples of the recording medium for supplying the program include a flexible disk, hard disk, optical disk, magneto-optical disk, MO, CD-ROM, CD-R, and CD-RW. In addition, there are magnetic tape, nonvolatile memory card, ROM, DVD (DVD-ROM, DVD-R), and the like.

その他、プログラムの供給方法としては、クライアントコンピュータのブラウザを用いてインターネットのホームページに接続する。そして、前記ホームページから本発明のコンピュータプログラムそのもの、若しくは圧縮され自動インストール機能を含むファイルをハードディスク等の記録媒体にダウンロードすることによっても供給できる。   As another program supply method, a browser on a client computer is used to connect to an Internet home page. The computer program itself of the present invention or a compressed file including an automatic installation function can be downloaded from the homepage by downloading it to a recording medium such as a hard disk.

また、本発明のプログラムを構成するプログラムコードを複数のファイルに分割し、それぞれのファイルを異なるホームページからダウンロードすることによっても実現可能である。つまり、本発明の機能処理をコンピュータで実現するためのプログラムファイルを複数のユーザに対してダウンロードさせるWWWサーバも、本発明に含まれるものである。   It can also be realized by dividing the program code constituting the program of the present invention into a plurality of files and downloading each file from a different homepage. That is, a WWW server that allows a plurality of users to download a program file for realizing the functional processing of the present invention on a computer is also included in the present invention.

また、本発明のプログラムを暗号化してCD−ROM等の記憶媒体に格納してユーザに配布し、所定の条件をクリアしたユーザに対し、インターネットを介してホームページから暗号化を解く鍵情報をダウンロードさせる。そして、ダウンロードした鍵情報を使用することにより暗号化されたプログラムを実行してコンピュータにインストールさせて実現することも可能である。   In addition, the program of the present invention is encrypted, stored in a storage medium such as a CD-ROM, distributed to users, and key information for decryption is downloaded from a homepage via the Internet to users who have cleared predetermined conditions. Let It is also possible to execute the encrypted program by using the downloaded key information and install the program on a computer.

また、コンピュータが、読み出したプログラムを実行することによって、前述した実施形態の機能が実現される。その他、そのプログラムの指示に基づき、コンピュータ上で稼動しているOSなどが、実際の処理の一部又は全部を行い、その処理によっても前述した実施形態の機能が実現され得る。   Further, the functions of the above-described embodiments are realized by the computer executing the read program. In addition, based on the instructions of the program, an OS or the like running on the computer performs part or all of the actual processing, and the functions of the above-described embodiments can also be realized by the processing.

さらに、記録媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれる。その後、そのプログラムの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるCPUなどが実際の処理の一部又は全部を行い、その処理によっても前述した実施形態の機能が実現される。   Further, the program read from the recording medium is written in a memory provided in a function expansion board inserted into the computer or a function expansion unit connected to the computer. Thereafter, the CPU of the function expansion board or function expansion unit performs part or all of the actual processing based on the instructions of the program, and the functions of the above-described embodiments are realized by the processing.

なお、前述した実施形態は、本発明を実施するにあたっての具体化の例を示したものに過ぎず、これらによって本発明の技術的範囲が限定的に解釈されてはならないものである。即ち、本発明はその技術思想、又はその主要な特徴から逸脱することなく、様々な形で実施することができる。


The above-described embodiments are merely examples of implementation in carrying out the present invention, and the technical scope of the present invention should not be construed as being limited thereto. That is, the present invention can be implemented in various forms without departing from the technical idea or the main features thereof.


101 クライアント端末
102 撮影装置
103 オンラインフォトストレージサーバ
104 SNSサーバ
105 携帯端末
201 CPU
202 ROM
203 RAM
204 システムバス
205 入力コントローラ
206 ビデオコントローラ
207 メモリコントローラ
208 通信I/F(インターフェース)コントローラ
209 入力デバイス
210 ディスプレイ
211 外部メモリ
300 撮影装置
301 光学系(レンズ)
302 撮像素子(CCD)
303 カメラ信号処理部
310 システムコントローラ
317 ディスプレイ
320 操作部
101 Client Terminal 102 Imaging Device 103 Online Photo Storage Server 104 SNS Server 105 Portable Terminal 201 CPU
202 ROM
203 RAM
204 System Bus 205 Input Controller 206 Video Controller 207 Memory Controller 208 Communication I / F (Interface) Controller 209 Input Device 210 Display 211 External Memory 300 Imaging Device 301 Optical System (Lens)
302 Image sensor (CCD)
303 Camera Signal Processing Unit 310 System Controller 317 Display 320 Operation Unit

Claims (15)

少なくとも撮影された位置情報または日時情報のいずれか一方を含む画像データがアップロードされるオンラインストレージサーバと、
少なくとも位置情報または日時情報のいずれか一方を含む、ユーザからSNSへ投稿された情報を示すSNS投稿データを複数格納し、前記オンラインストレージサーバにSNS投稿データを複数送信するSNS投稿データ送信手段を備えるSNSサーバと、
クライアント端末とを含む情報処理システムであって、
前記オンラインストレージサーバは、
複数の前記SNS投稿データを前記SNSサーバに要求するSNS投稿データ要求手段と、
前記SNSサーバから送信される複数の前記SNS投稿データを受信するSNS投稿データ受信手段と、
前記画像データに含まれる、前記位置情報または前記日時情報を取得するEXIF情報取得手段と、
前記SNS投稿データ受信手段で受信した複数の前記SNS投稿データから、前記EXIF情報取得手段で取得した前記画像データの前記位置情報または日時情報に基づいて、アップロードされる当該画像データに紐づく前記SNS投稿データを特定するSNS投稿データ特定手段と、
前記SNS投稿データ特定手段で特定した前記SNS投稿データとアップロードされる前記画像データとを併せて表示させる画面を生成する画面生成手段と、
前記画面生成手段で生成した画面を前記クライアント端末に送信する画面送信手段とを備え、
前記クライアント端末は、
前記オンラインストレージサーバから送信される画面を受信する画面受信手段と、
前記画面受信手段で受信した画面を表示する画面表示手段とを備えることを特徴とする情報処理システム。
An online storage server to which image data including at least one of location information and date / time information taken is uploaded;
SNS post data transmission means for storing a plurality of SNS post data indicating information posted to the SNS from the user, including at least one of position information and date / time information, and transmitting a plurality of SNS post data to the online storage server. An SNS server;
An information processing system including a client terminal,
The online storage server
SNS post data request means for requesting a plurality of the SNS post data to the SNS server;
SNS post data receiving means for receiving a plurality of the SNS post data transmitted from the SNS server;
EXIF information acquisition means for acquiring the position information or the date / time information included in the image data;
The SNS associated with the image data to be uploaded based on the position information or date / time information of the image data acquired by the EXIF information acquisition unit from the plurality of SNS post data received by the SNS post data reception unit SNS post data specifying means for specifying post data;
Screen generating means for generating a screen for displaying the SNS post data specified by the SNS post data specifying means and the uploaded image data;
Screen transmitting means for transmitting the screen generated by the screen generating means to the client terminal,
The client terminal is
Screen receiving means for receiving a screen transmitted from the online storage server;
An information processing system comprising screen display means for displaying a screen received by the screen receiving means.
前記画面生成手段は、前記SNS投稿データ特定手段で特定した前記SNS投稿データを、編集可能に表示する画面を生成することを特徴とする請求項1に記載の情報処理システム。   The information processing system according to claim 1, wherein the screen generation unit generates a screen that displays the SNS post data specified by the SNS post data specification unit in an editable manner. 前記画面生成手段は、前記画像データに紐づくSNS投稿データを特定できなかった場合に、当該画像データにSNS投稿データを併せて表示させない画面を生成することを特徴とする請求項1または2に記載の情報処理システム。   3. The screen according to claim 1, wherein when the SNS post data associated with the image data cannot be specified, the screen generation unit generates a screen that does not display the SNS post data together with the image data. The information processing system described. 前記オンラインストレージサーバは、前記SNS投稿データを取得するSNSのアカウントが他人のアカウントか否かを判別できる情報であるアカウント情報を記憶する記憶手段を更に備え、
前記SNS投稿データ要求手段は、前記アカウント情報に基づいて、前記SNS投稿データ特定手段で自分のSNSのアカウントのSNS投稿データの中から前記画像データに紐づくSNS投稿データを特定することができなかった場合に、他人のSNSのアカウントのSNS投稿データを要求することを特徴とする請求項1乃至3のいずれか1項に記載の情報処理システム。
The online storage server further comprises storage means for storing account information which is information for determining whether or not the SNS account for acquiring the SNS post data is an account of another person,
The SNS post data request means cannot specify the SNS post data associated with the image data from the SNS post data of the SNS account by the SNS post data specifying means based on the account information. The information processing system according to any one of claims 1 to 3, wherein an SNS posting data of an account of another person's SNS is requested.
前記オンラインストレージサーバは、
前記SNS投稿データに含まれる文字列であって、当該SNS投稿データが投稿された位置情報を含む文字列を解析する位置情報解析手段と、
前記位置情報解析手段で前記文字列を解析することによって、当該SNS投稿データが投稿された位置情報を特定する位置情報特定手段とを更に備え、
前記SNS投稿データ特定手段は、前記位置情報特定手段で特定した前記位置情報と、前記画像データに含まれる位置情報とに基づいて、当該画像データに紐づくSNS投稿データを特定することを特徴とする請求項1乃至4のいずれか1項に記載の情報処理システム。
The online storage server
A position information analyzing means for analyzing a character string included in the SNS post data and including the position information where the SNS post data is posted;
A position information specifying means for specifying the position information where the SNS post data is posted by analyzing the character string by the position information analyzing means;
The SNS post data specifying means specifies SNS post data associated with the image data based on the position information specified by the position information specifying means and the position information included in the image data. The information processing system according to any one of claims 1 to 4.
前記SNS投稿データ特定手段で特定されたSNS投稿データが、複数の前記画像データに紐づいているか否かを判定する判定手段と、
前記画面生成手段は、前記判定手段で前記SNS投稿データが複数の前記画像データに紐づいていると判定された場合に、前記SNS投稿データが複数の画像データに紐づいていることをユーザに通知する画面を生成することを特徴とする請求項1乃至5のいずれか1項に記載の情報処理システム。
Determining means for determining whether or not the SNS post data specified by the SNS post data specifying means is associated with a plurality of the image data;
When the determination unit determines that the SNS post data is associated with a plurality of image data, the screen generation unit notifies the user that the SNS post data is associated with a plurality of image data. The information processing system according to claim 1, wherein a notification screen is generated.
前記画面生成手段は、前記画像データに紐づくSNS投稿データを特定できなかった場合に、前記画像データに紐づくSNS投稿データが無いことを通知する画面を生成することを特徴とする請求項1乃至6のいずれか1項に記載の情報処理システム。   The screen generation means generates a screen for notifying that there is no SNS post data associated with the image data when the SNS post data associated with the image data cannot be specified. 7. The information processing system according to any one of items 1 to 6. 前記オンラインストレージサーバは、
前記画面表示手段で表示した画面でユーザからの編集を受け付けた結果であるコメントを前記クライアント端末から取得し、当該取得したコメントと前記画像データとを紐づけて登録するコメント登録手段を更に備えることを特徴とする請求項1乃至6のいずれか1項に記載の情報処理システム。
The online storage server
A comment registration unit configured to acquire a comment that is a result of accepting an edit from a user on the screen displayed by the screen display unit from the client terminal, and to register the acquired comment and the image data in association with each other; The information processing system according to any one of claims 1 to 6.
前記画面生成手段は、前記コメント登録手段で登録したコメントと前記画像データとを併せて表示する画面を生成することを特徴とする請求項8に記載の情報処理システム。   The information processing system according to claim 8, wherein the screen generation unit generates a screen that displays the comment registered by the comment registration unit and the image data together. 前記画面生成手段は、前記コメント登録手段で登録したコメントと、前記画像データとを併せて表示するとともに、当該画像データに紐づくSNSサーバのSNS投稿データへのリンクが付された画面を生成することを特徴とする請求項9に記載の情報処理システム。   The screen generation unit displays the comment registered by the comment registration unit and the image data together, and generates a screen with a link to the SNS post data of the SNS server associated with the image data. The information processing system according to claim 9. 少なくとも撮影された位置情報または日時情報のいずれか一方を含む画像データがアップロードされるオンラインストレージサーバと、
少なくとも位置情報または日時情報のいずれか一方を含む、ユーザからSNSへ投稿された情報を示すSNS投稿データを複数格納し、前記オンラインストレージサーバにSNS投稿データを複数送信するSNS投稿データ送信手段を備えるSNSサーバと、
クライアント端末とを含む情報処理システムの制御方法であって、
前記オンラインストレージサーバのSNS投稿データ要求手段が、複数の前記SNS投稿データを前記SNSサーバに要求するSNS投稿データ要求ステップと、
前記オンラインストレージサーバのSNS投稿データ受信手段が、前記SNSサーバから送信される複数の前記SNS投稿データを受信するSNS投稿データ受信ステップと、
前記オンラインストレージサーバのEXIF情報取得手段が、前記画像データに含まれる、前記位置情報または前記日時情報を取得するEXIF情報取得ステップと、
前記オンラインストレージサーバのSNS投稿データ特定手段が、前記SNS投稿データ受信ステップで受信した複数の前記SNS投稿データから、前記EXIF情報取得ステップで取得した前記画像データの前記位置情報または日時情報に基づいて、アップロードされる当該画像データに紐づく前記SNS投稿データを特定するSNS投稿データ特定ステップと、
前記オンラインストレージサーバの画面生成手段が、前記SNS投稿データ特定ステップで特定した前記SNS投稿データとアップロードされる前記画像データとを併せて表示させる画面を生成する画面生成ステップと、
前記オンラインストレージサーバの画面送信手段が、前記画面生成ステップで生成した画面を前記クライアント端末に送信する画面送信ステップとを備え、
前記クライアント端末の画面受信手段が、前記オンラインストレージサーバから送信される画面を受信する画面受信ステップと、
前記クライアント端末の画面表示手段が、前記画面受信ステップで受信した画面を表示する画面表示ステップとを備えることを特徴とする情報処理システム。
An online storage server to which image data including at least one of location information and date / time information taken is uploaded;
SNS post data transmission means for storing a plurality of SNS post data indicating information posted to the SNS from the user, including at least one of position information and date / time information, and transmitting a plurality of SNS post data to the online storage server. An SNS server;
A method for controlling an information processing system including a client terminal,
An SNS post data requesting unit for requesting a plurality of the SNS post data from the SNS server, the SNS post data requesting means of the online storage server;
The SNS post data receiving means of the online storage server receives a plurality of the SNS post data transmitted from the SNS server,
EXIF information acquisition means of the online storage server for acquiring the position information or the date / time information included in the image data;
Based on the position information or date / time information of the image data acquired in the EXIF information acquisition step from the plurality of SNS post data received in the SNS post data reception step, the SNS post data specifying means of the online storage server. An SNS post data specifying step for specifying the SNS post data associated with the image data to be uploaded;
A screen generating step for generating a screen for displaying the SNS post data specified in the SNS post data specifying step and the uploaded image data, by the screen generation means of the online storage server;
The screen transmission means of the online storage server comprises a screen transmission step of transmitting the screen generated in the screen generation step to the client terminal;
A screen receiving step in which the screen receiving means of the client terminal receives a screen transmitted from the online storage server;
An information processing system comprising: a screen display unit for displaying a screen received in the screen receiving step.
少なくとも撮影された位置情報または日時情報のいずれか一方を含む画像データがアップロードされるオンラインストレージサーバと、
少なくとも位置情報または日時情報のいずれか一方を含む、ユーザからSNSへ投稿された情報を示すSNS投稿データを複数格納し、前記オンラインストレージサーバにSNS投稿データを複数送信するSNS投稿データ送信手段を備えるSNSサーバと、
クライアント端末とを含む情報処理システムの制御方法を実行可能なプログラムであって、
前記オンラインストレージサーバを、
複数の前記SNS投稿データを前記SNSサーバに要求するSNS投稿データ要求手段と、
前記SNSサーバから送信される複数の前記SNS投稿データを受信するSNS投稿データ受信手段と、
前記画像データに含まれる、前記位置情報または前記日時情報を取得するEXIF情報取得手段と、
前記SNS投稿データ受信手段で受信した複数の前記SNS投稿データから、前記EXIF情報取得手段で取得した前記画像データの前記位置情報または日時情報に基づいて、アップロードされる当該画像データに紐づく前記SNS投稿データを特定するSNS投稿データ特定手段と、
前記SNS投稿データ特定手段で特定した前記SNS投稿データとアップロードされる前記画像データとを併せて表示させる画面を生成する画面生成手段と、
前記画面生成手段で生成した画面を前記クライアント端末に送信する画面送信手段として機能させ、
前記クライアント端末を、
前記オンラインストレージサーバから送信される画面を受信する画面受信手段と、
前記画面受信手段で受信した画面を表示する画面表示手段として機能させることを特徴とする情報処理システムの制御方法を実行可能なプログラム。
An online storage server to which image data including at least one of location information and date / time information taken is uploaded;
SNS post data transmission means for storing a plurality of SNS post data indicating information posted to the SNS from the user, including at least one of position information and date / time information, and transmitting a plurality of SNS post data to the online storage server. An SNS server;
A program capable of executing a control method of an information processing system including a client terminal,
The online storage server,
SNS post data request means for requesting a plurality of the SNS post data to the SNS server;
SNS post data receiving means for receiving a plurality of the SNS post data transmitted from the SNS server;
EXIF information acquisition means for acquiring the position information or the date / time information included in the image data;
The SNS associated with the image data to be uploaded based on the position information or date / time information of the image data acquired by the EXIF information acquisition unit from the plurality of SNS post data received by the SNS post data reception unit SNS post data specifying means for specifying post data;
Screen generating means for generating a screen for displaying the SNS post data specified by the SNS post data specifying means and the uploaded image data;
Function as screen transmission means for transmitting the screen generated by the screen generation means to the client terminal;
The client terminal is
Screen receiving means for receiving a screen transmitted from the online storage server;
A program capable of executing a control method of an information processing system, which functions as screen display means for displaying a screen received by the screen receiving means.
少なくとも位置情報または日時情報のいずれか一方を含む、ユーザからSNSへ投稿された情報を示すSNS投稿データを複数格納し、オンラインストレージサーバにSNS投稿データを複数送信するSNS投稿データ送信手段を備えるSNSサーバと、
クライアント端末と通信可能に接続される、
少なくとも撮影された位置情報または日時情報のいずれか一方を含む画像データがアップロードされる前記オンラインストレージサーバであって、
複数の前記SNS投稿データを前記SNSサーバに要求するSNS投稿データ要求手段と、
前記SNSサーバから送信される複数の前記SNS投稿データを受信するSNS投稿データ受信手段と、
前記画像データに含まれる、前記位置情報または前記日時情報を取得するEXIF情報取得手段と、
前記SNS投稿データ受信手段で受信した複数の前記SNS投稿データから、前記EXIF情報取得手段で取得した前記画像データの前記位置情報または日時情報に基づいて、アップロードされる当該画像データに紐づく前記SNS投稿データを特定するSNS投稿データ特定手段と、
前記SNS投稿データ特定手段で特定した前記SNS投稿データとアップロードされる前記画像データとを併せて表示させる画面を生成する画面生成手段と、
前記画面生成手段で生成した画面を前記クライアント端末に送信する画面送信手段とを備えることを特徴とするオンラインストレージサーバ。
SNS provided with SNS post data transmission means for storing a plurality of SNS post data indicating information posted to the SNS from the user, including at least one of position information and date / time information, and transmitting a plurality of SNS post data to the online storage server Server,
It is connected to the client terminal so that it can communicate.
The online storage server to which image data including at least one of location information and date / time information taken is uploaded,
SNS post data request means for requesting a plurality of the SNS post data to the SNS server;
SNS post data receiving means for receiving a plurality of the SNS post data transmitted from the SNS server;
EXIF information acquisition means for acquiring the position information or the date / time information included in the image data;
The SNS associated with the image data to be uploaded based on the position information or date / time information of the image data acquired by the EXIF information acquisition unit from the plurality of SNS post data received by the SNS post data reception unit SNS post data specifying means for specifying post data;
Screen generating means for generating a screen for displaying the SNS post data specified by the SNS post data specifying means and the uploaded image data;
An online storage server comprising screen transmission means for transmitting the screen generated by the screen generation means to the client terminal.
少なくとも位置情報または日時情報のいずれか一方を含む、ユーザからSNSへ投稿された情報を示すSNS投稿データを複数格納し、オンラインストレージサーバにSNS投稿データを複数送信するSNS投稿データ送信手段を備えるSNSサーバと、
クライアント端末と通信可能に接続される、
少なくとも撮影された位置情報または日時情報のいずれか一方を含む画像データがアップロードされる前記オンラインストレージサーバの制御方法であって、
前記オンラインストレージサーバのSNS投稿データ要求手段が、複数の前記SNS投稿データを前記SNSサーバに要求するSNS投稿データ要求ステップと、
前記オンラインストレージサーバのSNS投稿データ受信手段が、前記SNSサーバから送信される複数の前記SNS投稿データを受信するSNS投稿データ受信ステップと、
前記オンラインストレージサーバのEXIF情報取得手段が、前記画像データに含まれる、前記位置情報または前記日時情報を取得するEXIF情報取得ステップと、
前記オンラインストレージサーバのSNS投稿データ特定手段が、前記SNS投稿データ受信ステップで受信した複数の前記SNS投稿データから、前記EXIF情報取得ステップで取得した前記画像データの前記位置情報または日時情報に基づいて、アップロードされる当該画像データに紐づく前記SNS投稿データを特定するSNS投稿データ特定ステップと、
前記オンラインストレージサーバの画面生成手段が、前記SNS投稿データ特定ステップで特定した前記SNS投稿データとアップロードされる前記画像データとを併せて表示させる画面を生成する画面生成ステップと、
前記オンラインストレージサーバの画面送信手段が、前記画面生成ステップで生成した画面を前記クライアント端末に送信する画面送信ステップとを備えることを特徴とするオンラインストレージサーバ。
SNS provided with SNS post data transmission means for storing a plurality of SNS post data indicating information posted to the SNS from the user, including at least one of position information and date / time information, and transmitting a plurality of SNS post data to the online storage server Server,
It is connected to the client terminal so that it can communicate.
A method of controlling the online storage server in which image data including at least one of location information and date / time information taken is uploaded,
An SNS post data requesting unit for requesting a plurality of the SNS post data from the SNS server, the SNS post data requesting means of the online storage server;
The SNS post data receiving means of the online storage server receives a plurality of the SNS post data transmitted from the SNS server,
EXIF information acquisition means of the online storage server for acquiring the position information or the date / time information included in the image data;
Based on the position information or date / time information of the image data acquired in the EXIF information acquisition step from the plurality of SNS post data received in the SNS post data reception step, the SNS post data specifying means of the online storage server. An SNS post data specifying step for specifying the SNS post data associated with the image data to be uploaded;
A screen generating step for generating a screen for displaying the SNS post data specified in the SNS post data specifying step and the uploaded image data, by the screen generation means of the online storage server;
The online storage server, wherein the screen transmission means of the online storage server includes a screen transmission step of transmitting the screen generated in the screen generation step to the client terminal.
少なくとも位置情報または日時情報のいずれか一方を含む、ユーザからSNSへ投稿された情報を示すSNS投稿データを複数格納し、オンラインストレージサーバにSNS投稿データを複数送信するSNS投稿データ送信手段を備えるSNSサーバと、
クライアント端末と通信可能に接続される、
少なくとも撮影された位置情報または日時情報のいずれか一方を含む画像データがアップロードされる前記オンラインストレージサーバの制御方法を実行可能なプログラムであって、
前記オンラインストレージサーバを、
複数の前記SNS投稿データを前記SNSサーバに要求するSNS投稿データ要求手段と、
前記SNSサーバから送信される複数の前記SNS投稿データを受信するSNS投稿データ受信手段と、
前記画像データに含まれる、前記位置情報または前記日時情報を取得するEXIF情報取得手段と、
前記SNS投稿データ受信手段で受信した複数の前記SNS投稿データから、前記EXIF情報取得手段で取得した前記画像データの前記位置情報または日時情報に基づいて、アップロードされる当該画像データに紐づく前記SNS投稿データを特定するSNS投稿データ特定手段と、
前記SNS投稿データ特定手段で特定した前記SNS投稿データとアップロードされる前記画像データとを併せて表示させる画面を生成する画面生成手段と、
前記画面生成手段で生成した画面を前記クライアント端末に送信する画面送信手段として機能させることを特徴とするオンラインストレージサーバの制御方法を実行可能なプログラム。

SNS provided with SNS post data transmission means for storing a plurality of SNS post data indicating information posted to the SNS from the user, including at least one of position information and date / time information, and transmitting a plurality of SNS post data to the online storage server Server,
It is connected to the client terminal so that it can communicate.
A program capable of executing the control method of the online storage server in which image data including at least one of location information and date / time information taken is uploaded,
The online storage server,
SNS post data request means for requesting a plurality of the SNS post data to the SNS server;
SNS post data receiving means for receiving a plurality of the SNS post data transmitted from the SNS server;
EXIF information acquisition means for acquiring the position information or the date / time information included in the image data;
The SNS associated with the image data to be uploaded based on the position information or date / time information of the image data acquired by the EXIF information acquisition unit from the plurality of SNS post data received by the SNS post data reception unit SNS post data specifying means for specifying post data;
Screen generating means for generating a screen for displaying the SNS post data specified by the SNS post data specifying means and the uploaded image data;
A program capable of executing an on-line storage server control method, which causes a screen generated by the screen generating means to function as a screen transmitting means for transmitting to the client terminal.

JP2017240166A 2017-12-15 2017-12-15 Information processing apparatus, control method and program thereof, and information processing system, control method and program thereof Active JP6485529B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017240166A JP6485529B2 (en) 2017-12-15 2017-12-15 Information processing apparatus, control method and program thereof, and information processing system, control method and program thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017240166A JP6485529B2 (en) 2017-12-15 2017-12-15 Information processing apparatus, control method and program thereof, and information processing system, control method and program thereof

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2013272756A Division JP6264038B2 (en) 2013-12-27 2013-12-27 Information processing system, information processing system control method, and program

Publications (3)

Publication Number Publication Date
JP2018049666A true JP2018049666A (en) 2018-03-29
JP2018049666A5 JP2018049666A5 (en) 2018-05-17
JP6485529B2 JP6485529B2 (en) 2019-03-20

Family

ID=61767751

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017240166A Active JP6485529B2 (en) 2017-12-15 2017-12-15 Information processing apparatus, control method and program thereof, and information processing system, control method and program thereof

Country Status (1)

Country Link
JP (1) JP6485529B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190123667A (en) * 2018-04-11 2019-11-01 주식회사 에이에스디코리아 Method for managing contents and cloud server for executing the same
US11138189B2 (en) 2018-04-11 2021-10-05 Asd Korea Method for managing contents and cloud server for executing the same
JP2021174083A (en) * 2020-04-21 2021-11-01 ヤフー株式会社 Service providing method, and service providing device

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022063606A (en) 2020-10-12 2022-04-22 Tesnology株式会社 Program, browser and image file

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008129841A (en) * 2006-11-21 2008-06-05 Olympus Imaging Corp Device for disclosing text with image, camera, and method of disclosing text with image
JP2012137882A (en) * 2010-12-24 2012-07-19 Nec Corp Information processing unit and program

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008129841A (en) * 2006-11-21 2008-06-05 Olympus Imaging Corp Device for disclosing text with image, camera, and method of disclosing text with image
JP2012137882A (en) * 2010-12-24 2012-07-19 Nec Corp Information processing unit and program

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
西本 龍弘, FIT2011 第10回情報科学技術フォーラム 講演論文集 第4分冊 査読付き論文・一般論文 ネット, JPN6018037378, 22 August 2011 (2011-08-22), JP, pages 第507頁-第510頁 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190123667A (en) * 2018-04-11 2019-11-01 주식회사 에이에스디코리아 Method for managing contents and cloud server for executing the same
KR102130017B1 (en) 2018-04-11 2020-07-03 주식회사 클라우다이크 Method for managing contents and cloud server for executing the same
US11138189B2 (en) 2018-04-11 2021-10-05 Asd Korea Method for managing contents and cloud server for executing the same
JP2021174083A (en) * 2020-04-21 2021-11-01 ヤフー株式会社 Service providing method, and service providing device
JP7231581B2 (en) 2020-04-21 2023-03-01 ヤフー株式会社 Service providing method and service providing device

Also Published As

Publication number Publication date
JP6485529B2 (en) 2019-03-20

Similar Documents

Publication Publication Date Title
JP6485529B2 (en) Information processing apparatus, control method and program thereof, and information processing system, control method and program thereof
JP5385598B2 (en) Image processing apparatus, image management server apparatus, control method thereof, and program
US8356033B2 (en) Album system, photographing device, and server
US20120062766A1 (en) Apparatus and method for managing image data
KR20110020746A (en) Method for providing object information and image pickup device applying the same
US9973649B2 (en) Photographing apparatus, photographing system, photographing method, and recording medium recording photographing control program
JP2016048911A (en) Information processing device, control method thereof, and control program
JP6264038B2 (en) Information processing system, information processing system control method, and program
CN102782663B (en) The method of converting digital data
US11812122B2 (en) Information processing system to obtain and manage images of a property
JP2005184610A (en) Camera, camera photographing support system, and camera with photographing aid function
JP2014115388A (en) Information processor, information processing system, control method, and program
US20140317529A1 (en) Display control apparatus and control method thereof
JP7279416B2 (en) Intermediary terminal, communication system, input system, intermediary control method, and program
CN109314794A (en) Information processing equipment, imaging device and system
JP6508376B2 (en) Image pickup apparatus, image pickup system, control method thereof and program
JP2010154267A (en) Photographing apparatus and photographing system, image data management method, and program
JP6380493B2 (en) Information processing apparatus, control method and program thereof, and information processing system, control method and program thereof
JP6337451B2 (en) Information processing apparatus, information processing apparatus control method, and program
JP6089515B2 (en) Image processing apparatus, image processing method, and program
JP5464679B2 (en) Image capturing apparatus, control method therefor, and program for image capturing apparatus
US8934738B2 (en) Image processing apparatus and method for controlling the same
WO2022019171A1 (en) Information processing device, information processing method, and program
JP2015115741A (en) Image management device, image management method, and program
JP2015053572A (en) Image management system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20171222

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180313

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20180703

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180914

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20181002

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20181031

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181130

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20190115

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190122

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190204

R151 Written notification of patent or utility model registration

Ref document number: 6485529

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250