JP6708077B2 - 表示情報生成装置、情報管理システム、表示情報生成方法、及び、プログラム - Google Patents

表示情報生成装置、情報管理システム、表示情報生成方法、及び、プログラム Download PDF

Info

Publication number
JP6708077B2
JP6708077B2 JP2016181380A JP2016181380A JP6708077B2 JP 6708077 B2 JP6708077 B2 JP 6708077B2 JP 2016181380 A JP2016181380 A JP 2016181380A JP 2016181380 A JP2016181380 A JP 2016181380A JP 6708077 B2 JP6708077 B2 JP 6708077B2
Authority
JP
Japan
Prior art keywords
information
image
display
unit
image data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016181380A
Other languages
English (en)
Other versions
JP2018045557A (ja
Inventor
聡 東別府
聡 東別府
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Priority to JP2016181380A priority Critical patent/JP6708077B2/ja
Priority to US15/699,934 priority patent/US10387486B2/en
Priority to CN201710831438.8A priority patent/CN108710619B/zh
Priority to KR1020170118403A priority patent/KR102387054B1/ko
Publication of JP2018045557A publication Critical patent/JP2018045557A/ja
Application granted granted Critical
Publication of JP6708077B2 publication Critical patent/JP6708077B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/5866—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, manually generated location and time information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/51—Indexing; Data structures therefor; Storage structures
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34—Indicating arrangements 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614—Multiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27—Server based end-user applications
    • H04N21/274—Storing end-user multimedia data in response to end-user request, e.g. network recorder
    • H04N21/2743—Video hosting of uploaded data from client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4314—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for fitting data in a restricted space on the screen, e.g. EPG data in a rectangular grid
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348—Demultiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Library & Information Science (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Information Transfer Between Computers (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Description

本発明は、表示情報生成装置、情報管理システム、表示情報生成方法、及び、プログラムに関する。
従来より、撮影画像を管理するための様々な技術が用いられている。例えば、撮影画像の撮影日時、撮影位置、スケジュール情報、撮影画像を顔検出した結果に基づくイベント参加者を特定し、これらの情報に応じて撮影画像を分類管理し、電子アルバムを生成する技術がある（例えば、特許文献１参照）。
特開２０１５−１３０１１２号公報
しかしながら上述した従来の技術では、スケジュール単位で撮影画像を格納するものの、その撮影画像を表示させても、時間経過に沿って追体験することは困難であった。
本願発明はこのような問題点に鑑みてなされたもので、時間経過に沿った追体験を可能とした表示情報生成装置、情報管理システム、表示情報生成方法、及び、プログラムを提供することを目的とする。
上記目的を達成するために、本発明に係る表示情報生成装置は、外部から送信された画像データを取得するデータ取得手段と、前記データ取得手段によって取得された前記画像データの生成日時に関する情報を取得する情報取得手段と、前記データ取得手段によって取得された前記画像データの送信元を特定する送信元特定手段と、前記送信元特定手段によって特定された送信元が予め設定されたグループに属しているか否かを判断する第１の判断手段と、前記第１の判断手段によって前記送信元が前記グループに属していると判断された場合に、前記グループを識別するための識別情報と、前記データ取得手段によって取得された前記画像データとを対応付けるように制御する制御手段と、前記制御手段によって前記識別情報に前記データ取得手段によって取得された前記画像データが複数対応付けされている場合に、画像を前記画像データの生成日時順に配列した表示情報を生成する生成手段と、を備え、前記生成手段は、前記生成日時が所定の単位期間に含まれる画像データの数に基づいて当該単位期間に対応させて画面に表示させる画像の最大数を制限設定するとともに、前記画像データが撮影画像であって撮影時における撮影者の生体情報が当該画像データに付加されていた場合には、前記撮影画像が前記生体情報に対応した表示サイズとなるように画像を配列する、ことを特徴とする。
また、本発明に係る情報管理システムは、表示情報生成装置と表示装置とを含む情報管理システムであって、前記表示情報生成装置は、外部から送信された画像データを取得するデータ取得手段と、前記データ取得手段によって取得された前記画像データの生成日時に関する情報を取得する情報取得手段と、前記データ取得手段によって取得された前記画像データの送信元を特定する送信元特定手段と、前記送信元特定手段によって特定された送信元が予め設定されたグループに属しているか否かを判断する第１の判断手段と、前記第１の判断手段によって前記送信元が前記グループに属していると判断された場合に、前記グループを識別するための識別情報と、前記データ取得手段によって取得された前記画像データとを対応付けるように制御する制御手段と、前記制御手段によって前記識別情報に前記データ取得手段によって取得された前記画像データが複数対応付けされている場合に、画像を前記画像データの生成日時順に配列した表示情報を生成する生成手段と、前記表示装置からの要求に応じて前記表示情報を前記表示装置に送信する送信手段と、を備え、前記生成手段は、前記生成日時が所定の単位期間に含まれる画像データの数に基づいて当該単位期間に対応させて画面に表示させる画像の最大数を制限設定するとともに、前記画像データが撮影画像であって撮影時における撮影者の生体情報が当該画像データに付加されていた場合には、前記撮影画像が前記生体情報に対応した表示サイズとなるように画像を配列する、ことを特徴とする。
また、本発明に係る表示情報生成方法は、表示情報生成装置が実行する表示情報生成方法であって、外部から送信された画像データを取得するデータ取得ステップと、前記データ取得ステップで取得された前記画像データの生成日時に関する情報を取得する情報取得ステップと、前記データ取得ステップで取得された前記画像データの送信元を特定する送信元特定ステップと、前記送信元特定ステップで特定された送信元が予め設定されたグループに属しているか否かを判断する第１の判断ステップと、前記第１の判断ステップで前記送信元が前記グループに属していると判断された場合に、前記グループを識別するための識別情報と、前記データ取得ステップで取得された前記画像データとを対応付けるように制御する制御ステップと、前記制御ステップで前記識別情報に前記データ取得ステップで取得された前記画像データが複数対応付けされている場合に、画像を前記画像データの生成日時順に配列した表示情報を生成する生成ステップと、を有し、前記生成ステップは、前記生成日時が所定の単位期間に含まれる画像データの数に基づいて当該単位期間に対応させて画面に表示させる画像の最大数を制限設定するとともに、前記画像データが撮影画像であって撮影時における撮影者の生体情報が当該画像データに付加されていた場合には、前記撮影画像が前記生体情報に対応した表示サイズとなるように画像を配列する、ことを特徴とする。
また、本発明に係るプログラムは、コンピュータを、外部から送信された画像データを取得するデータ取得手段、前記データ取得手段によって取得された前記画像データの生成日時に関する情報を取得する情報取得手段、前記データ取得手段によって取得された前記画像データの送信元を特定する送信元特定手段、前記送信元特定手段によって特定された送信元が予め設定されたグループに属しているか否かを判断する第１の判断手段、前記第１の判断手段によって前記送信元が前記グループに属していると判断された場合に、前記グループを識別するための識別情報と、前記データ取得手段によって取得された前記画像データとを対応付けるように制御する制御手段、前記制御手段によって前記識別情報に前記データ取得手段によって取得された前記画像データが複数対応付けされている場合に、画像を前記画像データの生成日時順に配列した表示情報を生成する生成手段、として機能させ、前記生成手段は、前記生成日時が所定の単位期間に含まれる画像データの数に基づいて当該単位期間に対応させて画面に表示させる画像の最大数を制限設定するとともに、前記画像データが撮影画像であって撮影時における撮影者の生体情報が当該画像データに付加されていた場合には、前記撮影画像が前記生体情報に対応した表示サイズとなるように画像を配列する、ことを特徴とする。
本発明によれば、時間経過に沿った追体験が可能となる。
本発明の実施形態に係る情報管理システムの構成を示す図である。 図１に示すサーバの構成を示す図である。 図１に示す第１通信装置及び第２通信装置の構成を示す図である。 第１通信装置におけるストーリーボード新規作成の動作を示すフローチャートである。 初期画面の一例を示す図である。 新規作成画面の一例を示す図である。 招待ユーザ選択画面の一例を示す図である。 ストーリーボード情報の一例を示す図である。 ストーリーボード画面の一例を示す図である。 第２通信装置におけるストーリーボード参加設定の動作を示すフローチャートである。 第１通信装置における一覧からの画像情報のアップロードの動作を示すフローチャートである。 画像一覧画面の一例を示す図である。 第１通信装置におけるデジタルカメラからの画像情報のアップロードの動作を示すフローチャートである。 サーバにおける画像受信時のストーリーボードのレイアウト更新の動作を示すフローチャートである。 画像登録情報の一例を示す図である。 レイアウト情報の一例を示す図である。 レイアウト画面の第１の例を示す図である。 レイアウト画面の第２の例を示す図である。 レイアウト画面の第３の例を示す図である。 レイアウト画面の第４の例を示す図である。 レイアウト画面の第５の例を示す図である。 レイアウト画面の第６の例を示す図である。 レイアウト画面の第７の例を示す図である。 第２通信装置における画像評価の動作を示すフローチャートである。 詳細情報画面の一例を示す図である。 サーバにおける評価情報受信時のストーリーボードのレイアウト更新の動作を示すフローチャートである。 サーバにおけるコメント情報受信時のストーリーボードのレイアウト更新の動作を示すフローチャートである。 第２通信装置における合成コメント設定の動作を示すフローチャートである。 合成コメント追加画面の一例を示す図である。 サーバにおける合成コメントが追加された画像情報受信時の合成処理の動作を示すフローチャートである。 第１通信装置及び第２通信装置における終了処理の動作を示すフローチャートである。 サーバにおける終了情報受信時の終了処理の動作を示すフローチャートである。 本発明の実施形態の変形例に係る情報管理システムの構成を示す図である。 本発明の実施形態の変形例に係る画像登録情報の一例を示す図である。 本発明の実施形態の他の変形例に係る情報管理システムの構成を示す図である。 本発明の実施形態の他の変形例に係る画像登録情報の一例を示す図である。
以下、本発明の実施の形態に係る情報管理システムについて説明する。本発明の実施形態に係る情報管理システム１は、図１に示すように、サーバ１００、第１通信装置２００、デジタルカメラ２５０、３５０、第２通信装置３００、インターネット４００及び基地局５００を含んで構成されている。
情報管理システム１では、サーバ１００と第１通信装置２００及び第２通信装置３００とは、インターネット４００及び基地局５００を介して通信を行うことができる。
表示情報生成装置としてのサーバ１００は、第１通信装置２００及び第２通信装置３００から送信される画像情報から、イベント毎に、それら画像情報に含まれる画像を時系列に沿って表示するための表示情報（以下、ストーリーボードという）を生成する。また、サーバ１００は、ストーリーボードへ画像を追加する場合等に、当該ストーリーボードのレイアウトを更新する。更に、サーバ１００は、第１通信装置２００及び第２通信装置３００からの要求に応じてストーリーボードを送信する。
表示装置としての第１通信装置２００及び第２通信装置３００は、例えばスマートフォンやタブレット型の携帯可能な電子機器である。第１通信装置２００及び第２通信装置３００は、ユーザの操作に応じて、撮影、ストーリーボードの表示、ストーリーボードの新規作成、ストーリーボードへの参加設定、ストーリーボードへ画像を登録するため、画像情報のアップロード等を行う。
次に、サーバ１００について説明する。サーバ１００は、図２に示すように、制御部１０２、メモリ１０４、通信部１１４を含んで構成される。
制御部１０２は、ＣＰＵ（Central Processing Unit）を備え、メモリ１０４に格納されているプログラムに従ってソフトウェア処理を実行し、サーバ１００が具備する各種機能を実現する。
メモリ１０４は、例えばワークエリアとなるＲＡＭ（Random Access Memory）、基本動作プログラムを記憶するＲＯＭ（Read Only Memory）である。メモリ１０４は、サーバ１００における制御等に用いられる各種情報（プログラム等）を記憶する。
通信部１１４は、インターネット４００及び基地局５００を介して、第１通信装置２００及び第２通信装置３００との間で通信を行う。
制御部１０２内のデータ取得部１２０は、第１通信装置２００及び第２通信装置３００から送信される画像情報、ストーリーボードに表示された画像に対する評価を示す評価情報、コメント情報、合成コメント情報等の各種のデータを通信部１１４から取得する。
画像情報には、静止画像のデータであるＪＰＥＧ（Joint Photographic Experts Group）形式等の画像データ、動画像のデータであるＭＰＥＧ（Moving Picture Experts Group）形式等の画像データ、画像の登録先となるストーリーボードの識別情報であるストーリーボードＩＤ、撮影日時の情報、画像の種別（正規のアスペクト比の画像、全天周（超広角、魚眼）画像、全天球画像、パノラマ画像、タイムラプス動画等の種別）、撮影されたカメラの機種を識別するメーカーコード（第１通信装置２００、第２通信装置３００の撮影部２１４で撮影されたものなら第１通信装置２００、第２通信装置３００のメーカーコード）、撮影された場所（緯度、経度、高度）を示す撮影場所情報等が含まれる。
制御部１０２内の情報取得部１２２は、画像情報に含まれる撮影日時の情報を取得する。制御部１０２内のグループ判断部１２４は、画像情報が送信された際にログインされているユーザＩＤに基づいて、画像情報の送信元であるユーザが予め定められたストーリーボードの参加者であるか否かを判断する。
制御部１０２内の対応付け処理部１２６は、画像情報の送信元であるユーザが予め定められたストーリーボードの参加者である場合、ストーリーボードの識別情報であるストーリーボードＩＤと画像情報とを対応付ける処理を行う。
制御部１０２内の期間判断部１２８は、画像情報に含まれる撮影日時の情報に基づいて、撮影日時が予め定められたストーリーボードに対応するイベントの開始日時から終了日時までの期間内であるか否かを判断する。
制御部１０２内のデータ整理部１３０は、ストーリーボードの開始日時から終了日時までの期間を所定の単位時間毎（例えば１時間毎）に分割する。更に、データ整理部１３０は、分割された各単位時間毎に、画像情報に含まれる撮影日時の情報に基づいて、撮影日時が当該単位時間内に撮影されたものであるか否かを判断する。
制御部１０２内の表示情報生成部１３２は、単位時間毎に、当該単位時間に撮影日時が含まれる画像を時系列に沿って配置したストーリーボードを生成する。
制御部１０２内の顔画像検出部１３４は、画像情報に含まれる画像データを既存の手法によって顔認識の解析を行い、顔画像が検出されたか否かを判断する。
表示情報生成部１３２は、顔画像が検出された画像や、評価情報及びコメント情報によって示される評価が高いとみなされる画像がストーリーボード内で目立つように、ストーリーボードのレイアウトを更新する。
次に、第１通信装置２００及び第２通信装置３００について説明する。第１通信装置２００及び第２通信装置３００は、図３に示すように、制御部２０２、メモリ２０４、操作部２０６、表示部２０７、無線通信部２０８ａ、２０８ｂ、アンテナ２１０ａ、２０１ｂ、撮影部２１４を含んで構成される。
制御部２０２は、ＣＰＵによって構成される。制御部２０２は、メモリ２０４に記憶されたプログラムに従ってソフトウェア処理を実行することにより、第１通信装置２００及び第２通信装置３００が具備する各種機能を実現するために機能する。
メモリ２０４は、例えばＲＡＭやＲＯＭである。メモリ２０４は、第１通信装置２００及び第２通信装置３００における制御等に用いられる各種情報（プログラム等）を記憶する。
操作部２０６は、表示部２０７の表示領域の上面に配置されるタッチパネルであり、ユーザの操作内容（表示部２０７の特定の位置へのタップ、ダブルタップ、スクロール、及び、ピンチイン／アウト）を検知し、この検知結果を所定のコマンド、データの入力や選択として認識するために用いられるインタフェースである。表示部２０７は、例えば、ＬＣＤ（Liquid Crystal Display）、ＰＤＰ（Plasma Display Panel）、ＥＬ（Electro Luminescence）ディスプレイ等によって構成され、画像を表示する。
無線通信部２０８ａ、２０８ｂは、例えば無線周波数（ＲＦ：Radio Frequency）回路やベースバンド（ＢＢ：Base Band）回路等を用いて構成される。無線通信部２０８ａは、アンテナ２１０ａを介して、基地局５００との間で無線信号の送信及び受信を行う。無線通信部２０８ｂは、アンテナ２１０ｂを介して、デジタルカメラ２５０（第２通信装置の場合はデジタルカメラ３５０）との間で無線信号の受信を行う。また、無線通信部２０８ａ、２０８ｂは、送信信号の変調と、受信信号の復調とを行う。
撮影部２１４は、筐体において、表示部２０７が設置された面とは反対側の面に配置される。撮影部２１４は、レンズと受光素子により構成される。レンズは、ズームレンズ等により構成され、制御部２０２によるズーム制御及び合焦制御により移動する。撮影部２１４の撮影画角、光学像は、レンズの移動によって制御される。受光素子は、受光面に規則的に二次元配列された複数の受光素子により構成される。受光素子は、例えば、フォトダイオード、ベイヤー配列のカラーフィルターを実装する撮影デバイス、あるいは三板式のＣＣＤ（Charge Coupled Device）、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）等の撮影デバイスである。
次に、サーバ１００、第１通信装置２００及び第２通信装置３００の動作を説明する。以下においては、第１通信装置２００のユーザが所定のイベントの主催者で、且つ、その所定のイベントの進行状況を示すストーリーボードの作成者であり、第２通信装置３００のユーザがこの所定のイベントの参加者であり、上記ストーリーボードに自身が撮影した画像情報をアップロードしたり、評価する場合を例に説明する。
図４は、第１通信装置２００におけるストーリーボードの新規作成の動作を示すフローチャートである。第１通信装置２００内の制御部２０２は、ユーザによる操作部２０６に対する所定の操作に応じて、ストーリーボードのアプリケーションプログラム（アプリ）を起動する（ステップＳ１０１）。ストーリーボードのアプリケーションプログラムとは、ストーリーボードの作成、更新、表示のためのアプリケーションプログラムである。
次に、制御部２０２は、ユーザによる操作部２０６に対する所定の操作に応じて、初期画面を表示部２０７に表示させる制御を行う（ステップＳ１０２）。
図５は、初期画面の一例を示す図である。図５に示すストーリーボード一覧画面６０１は、地図画像６０２と、過去に開催され、ストーリーボードが記録されているイベントの発生位置を示すマーク６０３と、新規作成ボタンアイコン６０４と、表示フィルター設定アイコン６０５と、通知アイコン６０６と、機能設定メニューアイコン６０７と、アクティビティログ６０８と、メニューアイコン群６０９とを含んで構成される。このストーリーボード一覧画面において、地図画像６０２は、この第１通信装置２００が接続しているネットワークサービスから送信されたものであり、この地図画像６０２への選択が検出されることで、ネットワークサービスにおける地図検索サイトに接続される。また、マーク６０３への選択が検出されると、このマーク６０３をイベント開催地の位置情報として登録したストーリーボードの表示へ切り替えられることができる。表示フィルター設定アイコン６０５は、アクティビティログ６０８に表示されるアクティビティ（ストーリーボード（イベント）の種類）を選択させるためのアイコンである。この表示フィルター設定アイコン６０５への選択が検出するとアクティビティの種類が一覧表示される。このアクティビティの種類は、例えば「本人のみ参加イベント」、「旅行」、「ハイキング」、「シュノーケリング」、「スキー」、「キャンプ」等で構成され、これらの何れかの選択が検出されると、その種類のアクティビティが設定されたストーリーボードがアクティビティログ６０８に表示（下方スクロール検出で更に追加表示される）されるようになっている。また、通知アイコン６０６は、ユーザに対して各種の情報、更新があることを通知するためのアイコンであり、通知アイコン６０６への選択が検出されると、これらの情報の一覧表示に切り替えられる。機能設定メニューアイコン６０７は、このアプリケーションプログラムの各種設定メニューを表示させるためのアイコンであり、選択が検出されることで「新規作成」、「ストーリー削除」、「オートアップロード指定」、「共有ストーリー選択」、「アカウント登録」という項目が吹き出しで一覧表示される。なお、「オートアップロード指定」への選択が検出されると、作成済みのストーリーボードの一覧が表示される。そして、これらのストーリーボードの中で、イベント期間中にデジタルカメラ２５０（もしくはデジタルカメラ３５０）にて撮影された画像について、第１通信装置２００（もしくは第２通信装置３００）を介してサーバ１００へ、自動的にアップロード（送信、転送）することを指定（許可）するか否かの設定画面が表示される。また「共有ストーリー選択」への選択が検出されると、作成済み（イベント終了含む）のストーリーボードの一覧が表示される。そして、これらのストーリーボードの中で、第三者の閲覧（共有）を設定（許可）するか否かの設定画面が表示される。
第１通信装置２００のユーザは、図５のストーリーボード一覧画面６０１が表示されている状態において、ストーリーボードを新規作成する場合、操作部２０６を操作して、ストーリーボード一覧画面６０１内の新規作成ボタンアイコン６０４を選択する。制御部２０２は、新規作成ボタンアイコン６０４を選択する操作に応じて、新規作成画面を表示部２０７に表示させる制御を行う（ステップＳ１０３）。
図６は、新規作成画面の一例を示す図である。図６に示す新規作成画面６１０は、作成ボタンアイコン６１１と、ストーリーボードに対応するタイトルを入力するためのタイトル入力欄６１２と、イベントに対応するアクティビティを入力するためのアクティビティ入力欄６１３と、イベントの開始日時を入力するための開始日時入力欄６１４と、イベントの終了日時を入力するための終了日時入力欄６１５と、第２通信装置３００のユーザ等の他のユーザをストーリーボードに招待する際に選択されるフレンド招待ボタンアイコン６１６と、ストーリーボードに対応する位置を地図画像上に設定するためのピンボタンアイコン６１７と、自動アップロード機能の有効／無効の選択欄６１８と、ユーザ間の合言葉を入力するための合言葉入力欄６１９とを含んで構成される。
第１通信装置２００のユーザは、新規作成画面６１０が表示されている状態において、操作部２０６を操作して、タイトル入力欄６１２、アクティビティ入力欄６１３、開始日時入力欄６１４、終了日時入力欄６１５、合言葉入力欄６１９に対する入力を行う。なお、合言葉の設定は任意である。制御部２０２は、これらの入力された情報を取得する。
また、第１通信装置２００のユーザは、操作部２０６を操作してフレンド招待ボタンアイコン６１６を選択する。制御部２０２は、フレンド招待ボタンアイコン６１６を選択する操作に応じて、招待ユーザ選択画面を表示部２０７に表示させる制御を行う。
図７は、招待ユーザ選択画面の一例を示す図である。図７に示す招待ユーザ選択画面６２１は、決定ボタンアイコン６２１ａと、ユーザ表示欄６２２、６２４、６２６、６２８と、ユーザ選択欄６２３、６２５、６２７、６２９とを含んで構成される。ユーザ表示欄６２２等に表示される他のユーザは、例えば、第１通信装置２００における所定の登録処理によって予め登録された他のユーザである。第１通信装置２００のユーザは、操作部２０６を操作して、ストーリーボードに招待したい他のユーザに対応するユーザ選択欄６２３等にチェックのマークを入力し、決定ボタンアイコン６２１ａを選択する。決定ボタンアイコン６２１ａの選択によって他のユーザの選択が完了し、制御部２０２は、選択結果を取得する。
また、第１通信装置２００のユーザは、操作部２０６を操作してピンボタンアイコン６１７を選択する。制御部２０２は、ピンボタンアイコン６１７の選択操作に応じて表示部２０７に地図画像を表示させる制御を行う。更に、第１通信装置２００のユーザは、操作部２０６を操作して、地図画像において、ストーリーボードに対応する位置を選択する。制御部２０２は、この選択操作に応じて、ストーリーボードに対応する位置（経度、緯度）と位置の名称とを取得する。
また、第１通信装置２００のユーザは、デジタルカメラ２５０（第２通信装置３００のユーザの場合は、デジタルカメラ３５０）からの自動アップロード機能の有効を選択する場合、操作部２０６を操作して、選択欄６１８にチェックのマークを入力する。このチェックのマークが入った場合、第１通信装置２００とデジタルカメラ２５０とは事前にＢｌｕｅｔｏｏｔｈ（登録商標）等の近接無線通信技術でリンクが確立され、デジタルカメラ２５０にて撮影処理をすると、撮影処理された画像情報が自動的に第１通信装置２００に転送（アップロード）され、この画像情報がサーバ１００にアップロードされる。
第１通信装置２００のユーザが、操作部２０６を操作して、図６に示す新規作成画面６１０内の作成ボタンアイコン６１１を選択すると、ストーリーボードの新規作成のための操作が完了する。
再び、図４に戻って説明する。制御部２０２は、ストーリーボードの新規作成のための操作が完了すると、タイトル、開始日時、終了日時、位置、位置名称、自動アップロード機能の有効／無効、合言葉、作成ユーザ、招待ユーザを設定したストーリーボード情報を生成する。更に、制御部２０２は、ストーリーボード情報をサーバ１００へ送信する（ステップＳ１０４）。
図８は、ストーリーボード情報の一例を示す図である。図８に示すストーリーボード情報は、ストーリーボードＩＤ、タイトル、開始日時、終了日時、位置、位置名称、自動アップロード機能の有効／無効、合言葉、作成ユーザＩＤ、招待ユーザＩＤを含んで構成される。
ストーリーボードＩＤは、対応するストーリーボードの識別情報である。例えば、制御部２０２は、第１通信装置２００のユーザが、図６に示す新規作成画面６１０内の作成ボタンアイコン６１１を選択し、ストーリーボードの新規作成のための操作が完了したタイミングで、サーバ１００に対して、ストーリーボードＩＤを要求するための情報を送信する。サーバ１００内の制御部１０２は、この要求に応じて、ストーリーボードＩＤを第１通信装置２００に対して送信する。第１通信装置２００内の制御部２０２は、サーバ１００からのストーリーボードＩＤを取得する。作成ユーザＩＤは、例えば、第１通信装置２００がストーリーボードのアプリケーションプログラムをダウンロードし、所定の設定処理を行う際にサーバ１００から付与される。招待ユーザＩＤは、例えば、第１通信装置２００における所定の登録処理によって予め登録された他のユーザであって、且つ、図７の招待ユーザ選択画面において選択された他のユーザのＩＤである。タイトル、開始日時、終了日時、位置、位置名称、自動アップロード機能の有効／無効、合言葉は、上述した第１通信装置２００のユーザによる操作に応じて制御部２０２が取得した情報である。
サーバ１００内の制御部１０２は、第１通信装置２００からのストーリーボード情報をメモリ１０４に記憶させる。
再び、図４に戻って説明する。次に、制御部２０２はストーリーボード画面を表示部２０７に表示させる制御を行う（ステップＳ１０５）。
図９は、ストーリーボード画面の一例を示す図である。図９に示すストーリーボード画面６３１は、ストーリーボードの情報表示欄６３２と、スクロールボタンアイコン６３３と、アップロードボタンアイコン６３４と、アルバム画面への切り替えボタンアイコン６３５と、ストーリーボード一覧画面への切り替えボタンアイコン６３６を含んで構成される。ストーリーボードの情報表示欄６３２には、アクティビティ、開始日時から終了日時までの期間、タイトル、位置名称、招待ユーザの情報が含まれる。スクロールボタンアイコン６３３、アップロードボタンアイコン６３４については後述する。
再び、図４に戻って説明する。第１通信装置２００のユーザは、招待したいユーザが図７に示す招待ユーザ選択画面６２１に含まれていない場合、ストーリーボードに対応するＵＲＬ（Uniform Resource Locator）であるスレッドＵＲＬ、合言葉等を含んだメール（招待メール）を作成する操作を行うことができる。スレッドＵＲＬはストーリーボードＩＤと１対１に対応する。制御部２０２は、作成された招待メールを招待したいユーザに送信する制御を行う（ステップＳ１０６）。なお、第１通信装置２００が招待メールを送る際、直接的に第２通信装置３００に送る方法以外に、サーバ１００に招待処理を依頼することもできる。この場合、依頼を受けたサーバ１００は、招待通知を招待対象のユーザの所有する第２通信装置３００へ送信する。
次に、第２通信装置３００におけるストーリーボード参加設定の動作を説明する。図１０は、第２通信装置３００におけるストーリーボード参加設定の動作を示すフローチャートである。第２通信装置３００内の制御部２０２は、招待メールを受信する（ステップＳ２０１）。詳細には、制御部２０２は、第１通信装置２００がステップＳ１０６で送信した招待メールを受信する。この招待メールは、スレッドＵＲＬ、合言葉等を含む。
次に、制御部２０２は、ユーザによる操作部２０６の操作に応じて、招待メールに含まれるスレッドＵＲＬを選択する制御を行う（ステップＳ２０２）。更に、制御部２０２は、合言葉が存在するか否かを判定する（ステップＳ２０３）。合言葉の設定は任意であるため、招待通知に含まれていない場合がある。合言葉が存在する場合（ステップＳ２０３；ＹＥＳ）、制御部２０２は、ユーザによる操作部２０６の操作で入力される合言葉が設定された合言葉と一致するか否かを判定する（ステップＳ２０４）。例えば、制御部２０２は、入力される合言葉をサーバ１００へ送信する。サーバ１００内の制御部１０２は、合言葉が新規作成時に設定された合言葉と一致するか否かを判定し、判定結果を第２通信装置３００へ送信する。制御部２０２は、判定結果に基づいて、合言葉が一致するか否かを判定することができる。
合言葉が一致しない場合には（ステップＳ２０４；ＮＯ）、一連の動作が終了する。一方、合言葉が一致する場合（ステップＳ２０４；ＹＥＳ）、又は、合言葉が存在しない場合（ステップＳ２０３；ＮＯ）、制御部２０２は、表示部２０７に、スレッドＵＲＬに対応するブラウザ版のストーリーボード画面を表示させる制御を行う（ステップＳ２０５）。ブラウザ版のストーリーボード画面は、ストーリーボードのアプリケーションプログラムがダウンロードされていない状態でも表示可能である。
その後、制御部２０２は、アプリケーションプログラム版のストーリーボード画面表示の指示が検出されたか否かを判断する（ステップＳ２０６）。具体的には、ブラウザ版のストーリーボード画面の一部に「アプリで開く」を項目が表示され、制御部２０２は、これに対する選択を検出したか否かで判断する。そして選択が検出されない場合は（ステップＳ２０６；ＮＯ）、ステップＳ２０５に戻る。一方、選択が検出された場合は（ステップＳ２０６；ＹＥＳ）、制御部２０２は、ストーリーボードのアプリケーションプログラムがダウンロードされているか否かを判断する（ステップＳ２０７）。ストーリーボードのアプリケーションプログラムがダウンロード済みである場合（ステップＳ２０７；ＹＥＳ）、制御部２０２は、ストーリーボードのアプリケーションプログラムを起動し、表示部２０７に、ストーリーボード画面を表示させる制御を行う（ステップＳ２０８）。その後、制御部２０２は、ユーザによる操作部２０６の操作に応じて、招待を受け入れる旨の情報である受諾情報をサーバ１００へ送信する（ステップＳ２０９）。
受諾情報には、第２通信装置３００のユーザのＩＤである招待ユーザＩＤが含まれている。サーバ１００内の制御部１０２は、受諾情報を受信すると、メモリ１０４に記憶されているストーリーボード情報のうち、第２通信装置３００でステップＳ２０２において選択されたスレッドＵＲＬに対応するストーリーボードＩＤを含んだストーリーボード情報を特定する。更に、サーバ１００内の制御部１０２は、特定したストーリーボード情報に含まれる招待ユーザＩＤのうち、受諾情報内のユーザＩＤと一致する招待ユーザＩＤに参加を示す参加フラグ「１」を設定する。これにより、招待ユーザＩＤに対応する第２通信装置３００のユーザがストーリーボードへ参加するために必要な処理が完了する。
一方、ストーリーボードのアプリケーションプログラムがダウンロード済みでない場合（ステップＳ２０７；ＮＯ）、制御部２０２は、ストーリーボードのアプリケーションプログラムのダウンロードサイト（ＵＲＬ）へ切り替えて接続し、ユーザによる操作部２０６の操作に応じて、ストーリーボードのアプリケーションプログラムをダウンロードする制御を行う（ステップＳ２１０）。その後、制御部２０２は、ストーリーボードのアプリケーションプログラムを起動し、表示部２０７に、ストーリーボード画面を表示させる制御を行う（ステップＳ２０８）。
次に、第１通信装置２００における画像情報のアップロードの動作を説明する。図１１は、第１通信装置２００における一覧からの画像情報のアップロードの動作を示すフローチャートである。なお、本フローチャートでは第１通信装置２００におけるアップロード動作を説明するが、第２通信装置３００でも同様の動作が実現可能である。
第１通信装置２００内の制御部２０２は、ユーザによる操作部２０６に対する所定の操作に応じて、ストーリーボードのアプリケーションプログラム（アプリ）を起動する（ステップＳ３０１）。次に、制御部２０２は、ユーザによる操作部２０６に対する所定の操作に応じて、ストーリーボード画面を表示部２０７に表示させる制御を行う（ステップＳ３０２）。
第１通信装置２００のユーザは、図９に示すストーリーボード画面６３１が表示されている状態において、第１通信装置２００に保存されている画像のアップロードを希望する場合、操作部２０６を操作して、アップロードボタンアイコン６３４を選択する。制御部２０２は、この操作に伴いアップロードボタンアイコン６３４が選択されたか否かを判断する（ステップＳ３０３）。アップロードボタンアイコン６３４への選択が検出されない場合（ステップＳ３０３；ＮＯ）、ステップＳ３０３の処理が繰り返される。一方、アップロードボタンアイコン６３４への選択が検出されると（ステップＳ３０３；ＹＥＳ）、制御部２０２は、「ラベルを貼る」、「アルバムから選択」、「写真／動画を撮る」という項目を表示部２０７の最下段にアイコンと共に表示させる制御を行う（ステップＳ３０４）。次いで、制御部２０２は、これらの項目のうち、ユーザの選択指示で何れかが選択されたか否かを判断する（ステップＳ３０５）。ここで「アルバムから選択」が選択されたことが検出されると（ステップＳ３０５で「アルバムから選択」）、制御部２０２は、メモリ２０４に格納されている画像情報を参照し、この画像情報に基づく画像（静止画或いは動画）の一覧画面を表示部２０７に表示させる制御を行う（ステップＳ３０６）。
図１２は、画像一覧画面の一例を示す図である。図１２に示す画像一覧画面６４１は、第１通信装置２００に保存されている各画像の撮影日時毎の表示欄（画像表示欄）６４２、対応する画像情報が静止画であることを示すサムネイルアイコン６４３、対応する画像情報が動画であることを示すサムネイルアイコン６４４を含んで構成される。なお、図１２においては、サムネイルアイコン６４３、６４４を混在させて表示したものだが、画像情報の種別に応じて、区別できるように表示されてもよい。
第１通信装置２００のユーザが、図１２に示す画像一覧画面６４１が表示されている状態において、操作部２０６を操作して、アップロードしたい画像（静止画、動画）を選択し完了すると、制御部２０２は、この画像のデータを含んだ画像情報をメモリ２０４から読み出して、サーバ１００へ送信する（アップロード）（ステップＳ３０７）。画像情報には、画像データの他に、ステップＳ３０２で表示されているストーリーボード画面６３１に対応するストーリーボードＩＤ、第１通信装置２００のユーザのユーザＩＤ、撮影日時、撮影した機種（メーカーコード）、種別（例えば、パノラマ、全天周等の種別）を含んで構成される。
一方、「ラベルを貼る」が選択されたことが検出されると（ステップＳ３０５で「ラベルを貼る」）、制御部２０２は、表示部２０７の一部にキーボードを表示させる制御を行う（ステップＳ３０８）。この時、表示部２０７のテキストコメント入力領域には、ストーリーボード上のラベルとして入力される日時（日付、時間）も表示される。なお、この日時は当該ストーリーボードに対応するイベントの発生・継続期間内に限り任意に変更が可能である。そしてユーザの操作検出による日時やテキストの入力処理が行われる（ステップＳ３０９）。更に、この入力された日時やテキストについて確定及び送信指示が検出されると、制御部２０２は、入力された情報（ラベル）をサーバ１００へ送信する（アップロード）（ステップＳ３１０）。このラベルは、ストーリーボード上では時系列に沿ったテキストコメントとして表示される。つまり、本実施の形態においてストーリーボードとは、特定のイベントに関連するスレッドとして機能し、「ラベルを貼る」ということは、タイムライン上に自身のコメントを追加することを指す。更に、「写真／動画を撮る」が選択されたことが検出されると（ステップＳ３０５で「写真／動画を撮る」）、制御部２０２は、撮影部２１４を起動する（ステップＳ３１１）。撮影部２１４は、ユーザの操作に応じて撮影・記録処理を行い（ステップＳ３１２）、画像データを制御部２０２へ出力する。そして制御部２０２は、撮影部２１４からの画像データを含んだ画像情報をメモリ１０４へ記憶させ、この画像データを含んだ画像情報をサーバ１００へ送信する（アップロード）（ステップＳ３１３）。
図１３は、デジタルカメラ２５０から第１通信装置２００を経由したサーバ１００への画像アップロードの動作を示すフローチャートである。なお、本フローチャートでは第１通信装置２００におけるアップロード動作を説明するが、第２通信装置３００とデジタルカメラ３５０を使用する場合でも同様の動作が実現可能ある。
第１通信装置２００内の制御部２０２は、ユーザによる操作部２０６に対する所定の操作に応じて、第１通信装置２００とデジタルカメラ２５０との間の無線通信を可能とするためのペアリングの準備を行う（ステップＳ４０１）。例えば、制御部２０２は、無線通信部２０８ｂを起動し、第１通信装置２００とデジタルカメラ２５０との間の近接無線通信技術を用いた無線通信を可能とする。
次に、制御部２０２は、ユーザによる操作部２０６に対する所定の操作に応じて、ストーリーボードのアプリケーションプログラム（アプリ）を起動する（ステップＳ４０２）。次に、制御部２０２は、ユーザによる操作部２０６に対する所定の操作に応じて、ストーリーボード画面を表示部２０７に表示させる制御を行う（ステップＳ４０３）。
次に、制御部２０２は、ユーザによる操作部２０６に対する所定の操作に応じて、デジタルカメラ２５０によって撮影された画像の自動アップロード機能を有効化する（ステップＳ４０４）。例えば、制御部２０２は、ストーリーボードの新規作成時に、図６に示す新規作成画面６１０において、ユーザが、デジタルカメラ２５０からの画像の自動アップロード機能を有効化した場合、つまり、操作部２０６を操作して、事前に選択欄６１８にチェックのマークを入力した場合には、その操作に応じてデジタルカメラ２５０によって撮影された画像の自動アップロード機能を有効化する。また、その他の契機においても、ユーザが、操作部２０６を操作して、自動アップロードを選択した場合には、その操作に応じてデジタルカメラ２５０によって撮影された画像の自動アップロード機能を有効化する。なお、ユーザによって、デジタルカメラ２５０によって撮影された画像の自動アップロード機能が無効にされている場合には、ステップＳ４０４の動作は行われず、一連の動作が終了する。
ステップＳ４０４における、デジタルカメラ２５０によって撮影された画像の自動アップロード機能の有効化の選択後、制御部２０２は、第１通信装置２００とデジタルカメラ２５０との間のペアリングを行う（ステップＳ４０５）。ここで、制御部２０２は、デジタルカメラ２５０との間で、画像のアップロードの前に必要となるメーカーコードを含む様々な情報の送信及び受信を行う。
その後、デジタルカメラ２５０は、ユーザの操作に応じて撮影を行い、その撮影画像の画像データを生成して第１通信装置２００へ送信する。第１通信装置２００内の制御部２０２は、デジタルカメラ２５０からの画像データを受信する（ステップＳ４０６）。次に、制御部２０２は、受信した画像データを含んだ画像情報をメモリ１０４へ記憶させる。更に、制御部２０２は、受信した画像データを含んだ画像情報をサーバ１００へ送信する（アップロード）（ステップＳ４０７）。
次に、サーバ１００における画像情報受信時のストーリーボードのレイアウト更新の動作を説明する。図１４は、サーバ１００における画像受信時のストーリーボードのレイアウト更新の動作を示すフローチャートである。
サーバ１００の制御部１０２内のデータ取得部１２０は、通信部１１４を介して、第１通信装置２００からのユーザのログインを受け入れ、更に画像情報を取得する（ステップＳ５０１）。
次に、制御部１０２内のグループ判断部１２４は、ストーリーボードを選択する（ステップＳ５０２）。具体的には、グループ判断部１２４は、このログインしたユーザのユーザＩＤを検索キーとしてメモリ１０４を参照し、このユーザが参加メンバーに含まれているイベントのストーリーボードＩＤを特定する。次に、グループ判断部１２４は、メモリ１０４に記憶されたストーリーボード情報のうち、特定したストーリーボードＩＤと一致するストーリーボードＩＤを含むストーリーボード情報を取得する。次に、グループ判断部１２４は、取得した画像情報に含まれるユーザＩＤを抽出する。更に、グループ判断部１２４は、抽出したユーザＩＤが、ストーリーボード情報内の作成ユーザＩＤと、参加フラグ「１」が設定された招待ユーザＩＤとの何れかと一致するか否かを判定する。一致する場合には、画像情報の送信元である第１通信装置２００のユーザは、ストーリーボードへの参加が可能である正当なユーザである。抽出したユーザＩＤが、ストーリーボード情報内の作成ユーザＩＤと、参加フラグ「１」が設定された招待ユーザＩＤとの何れかと一致する場合、グループ判断部１２４は、抽出したストーリーボードＩＤを含んだストーリーボード情報を選択する。
次に、制御部１０２内の情報取得部１２２、対応付け処理部１２６、期間判断部１２８、データ整理部１３０、表示情報生成部１３２及び顔画像検出部１３４は、新規に取得した画像情報内の情報、顔検出結果を含んだ画像登録情報を追加登録する（ステップＳ５０３）。
具体的には、情報取得部１２２は、新規に取得した画像情報に含まれる撮影日時の情報を取得する。期間判断部１２８は、取得された撮影日時の情報と、ステップＳ５０２において選択されたストーリーボード情報内のイベントの開始日時と終了日時とに基づいて、撮影日時が開始日時から終了日時までの期間内か否かを判断する。撮影日時が開始日時から終了日時までの期間内でない場合には、一連の動作が終了する。一方、撮影日時が開始日時から終了日時までの期間内である場合、顔画像検出部１３２は、画像情報に含まれる画像データについて、既存の顔検出処理を行い、顔の画像が含まれるか否かを判定する。
次に、対応付け処理部１２６は、新規に取得した画像情報内の画像データを識別するための画像ＩＤを設定する。更に、対応付け処理部１２６は、メモリ１０４に記憶されている画像登録情報のうち、ステップＳ５０２において選択されたストーリーボード情報内のストーリーボードＩＤに対応付けられた画像登録情報に、設定した画像ＩＤと、新規に取得した画像情報に含まれる撮影日時、種別と、顔検出結果とを含んだ新たな画像登録情報を追加登録する。
図１５は、画像登録情報の一例を示す図である。画像登録情報は、ストーリーボードＩＤ毎にグループ化されており、ストーリーボードＩＤに各画像データの画像ＩＤが対応付けられている。更に、画像ＩＤ毎に、当該画像ＩＤに対応する画像データと、当該画像データの撮影日時、種別、顔検出結果、評価数、コメント数、コメント文、撮影場所を含んで構成されている。新たな画像登録情報が追加登録された時点では、評価数及びコメント数はゼロであり、コメント文は含まれていない。
再び、図１４に戻って説明する。次に、データ整理部１３０及び表示情報生成部１３２は、画像登録情報内の画像の撮影日時、種別、顔検出結果、評価数、コメント数に応じて、所定期間毎の表示枚数、各画像の表示位置、表示サイズを設定することにより、レイアウト情報を更新する（ステップＳ５０４）。
具体的には、データ整理部１３０は、ステップＳ５０３において登録された画像登録情報が対応付けられているストーリーボードＩＤを特定する。次に、データ整理部１３０は、特定したストーリーボードＩＤを含むストーリーボード情報をメモリ１０４から読み出す。更に、データ整理部１３０は、読み出したストーリーボード情報内の開始日時及び終了日時に基づいて、開始日時から終了日時までの期間を所定期間毎（例えば、１時間毎）に分割する処理を行う。
次に、データ整理部１３０は、ステップＳ５０３において登録された画像登録情報が対応付けられているストーリーボードＩＤと同一のストーリーボードＩＤに対応付けられている全ての画像登録情報をメモリ１０４から読み出す。次に、データ整理部１３０は、読み出した各画像登録情報内の撮影日時が、設定した所定期間のうち、何れかの所定期間に属するかを判断する。これにより、所定期間毎の画像の数が特定される。
次に、表示情報生成部１３２は、読み出された各画像登録情報内の画像の撮影日時、種別、顔検出結果、評価数、コメント数に応じて、データ整理部１３０によって設定された各所定期間毎に、画像の表示枚数、各画像の表示位置、表示サイズを設定する。
ここで、所定期間毎の画像の表示枚数、各画像の表示位置、表示サイズの設定には様々な手法が考えられる。
まず、表示情報生成部１３２は、１の所定期間において表示可能な画像数を設定する。ここで、表示情報生成部１３２は、１の所定期間に撮影日時が属する画像データの数ｎが５以下である場合には、表示枚数をｎに設定する。また、表示情報生成部１３２は、１の所定期間に撮影日時が属する画像データの数ｎが６以上１９以下である場合には、Ｘ＝４／１５×ｎ＋１１／３により算出されるＸ以下の最大の整数を新たな表示枚数ｎに設定する。なお、上記の式は、画像データの数がある一定の数を超えたら、画像データの数に応じて表示枚数が段々と収束する思想を表現したアルゴリズムであり、その式は、同様の思想を表現するものであれば、本実施の形態に限定されない。
また、表示情報生成部１３２は、１の所定期間に撮影日時が属する画像データの数ｎが２０以上である場合には、表示枚数を９（最大値）に設定する。また、表示情報生成部１３２は、１の所定期間に撮影日時が属する画像データについて、対応する種別に基づいて、パノラマ、全天周の画像データであるか否かを判定する。そして、表示情報生成部１３２は、１の所定期間に撮影日時が属する画像データに、パノラマ、全天周の画像データが含まれている場合は、表示するべきパノラマ、全天周の画像データに基づく画像の数の上限を３枚までとし、他の６枚は通常のアクペクト比で撮影された画像を選択する。
次に、表示情報生成部１３２は、所定期間毎に、表示する画像を選択する。ここで、表示情報生成部１３２は、顔画像を含む旨の顔検出結果に対応する画像データや、対応する評価数やコメント数が多い画像データを優先的に選択する。
次に、表示情報生成部１３２は、選択した画像の表示サイズを決定する。ここでいう表示サイズは、実画像である画像データ、もしくはこの画像データが含まれる画像情報に格納されている、簡易再生用のサイズの画像データやサムネイル画像データに適用され、縮小或いは拡大されたサイズをいう。また、この表示サイズでの画像が適用される画像データは静止画だけでなく、動画の一フレーム、パノラマ、全天周も含まれる。本実施形態において、表示サイズは大きい方から順に、順にＬv．１、Ｌv．３、Ｌv．４である。ここで、表示情報生成部１３２は、ランダムに画像データの表示サイズを設定してもよいし、顔画像を含む旨の顔検出結果に対応する画像データや、対応する評価数やコメント数が多い画像データについて優先的に表示サイズが大きくなるように設定してもよい。但し、表示情報生成部１３２は、１の所定期間に属する画像データの表示サイズの比率が、例えば、Ｌv．１：Ｌv．３：Ｌv．４が１：１．５：６．５等の所定の比率となるように設定する。
また、表示情報生成部１３２は、表示サイズを設定する場合、１の所定期間に属する画像データに対応する画像が時系列に沿って表示される際に、Ｌv．１、Ｌv．３、Ｌv．４の各画像データに対応する画像が分散して表示されるように、表示サイズを設定する。ここで、表示情報生成部１３２は、１の所定期間に属する画像データに対応する画像が時系列に沿って表示される際に、Ｌv．３、Ｌv．４の各画像データに対応する画像が連続して表示されないように表示サイズを決定する。
次に、表示情報生成部１３２は、表示サイズが設定された各画像について、対応する所定期間の表示領域における表示位置を設定する。ここで、第１の表示位置設定の手法では、表示情報生成部１３２は、対応する所定期間の表示領域において、時系列に沿って、画像データに対応する画像を配置し、次の画像データに対応する画像をスクロール方向とは直交する方向、本実施の形態では画面の右横に配置する。但し、表示サイズが大きいために、横方向の表示範囲を超えてしまう場合には、表示情報生成部１３２は、次の画像データに対応する画像をスクロール方向に平行する方向、本実施の形態では下に配置する。表示情報生成部１３２は、このような表示位置の設定を繰り返す。また、第２の表示位置設定の手法では、表示情報生成部１３２は、顔画像を含む旨の顔検出結果に対応する画像データや、対応する評価数やコメント数が多い画像データについて、その表示サイズが最大のＬv．１に設定されている場合には、対応する所定期間の表示領域において先頭に１のＬv．１の表示サイズの画像データに対応する画像を、横方向において最大のサイズで配置する。そして、表示情報生成部１３２は、残りの画像については、時系列に沿って、画像データに対応する画像を配置し、次の画像データに対応する画像を右横に配置する。
次に、表示情報生成部１３２は、所定期間毎の表示枚数、各画像の表示サイズ、表示位置の設定に応じて、レイアウト情報を更新する。図１６は、レイアウト情報の一例を示す図である。レイアウト情報は、ストーリーボード毎に生成され、当該ストーリーボードのストーリーボードＩＤに、各所定期間が対応付けられている。更に、各所定期間には、当該所定期間において表示される画像の画像ＩＤ、当該画像の表示位置、表示サイズが対応付けられている。レイアウト情報はメモリ１０４に記憶される。なお、所定期間において表示される画像が存在しない場合（所定期間に撮影日時が含まれる画像が存在しない場合）、当該所定期間には、画像ＩＤ、表示位置、表示サイズは対応付けられない。
再び、図１４に戻って説明する。次に、表示情報生成部１３２は、レイアウト情報に基づいて、所定期間毎に画像を配置したレイアウト画面を更新する（ステップＳ５０５）。レイアウト画面の情報は、画像データ、各画像の表示位置、登録されている画像の画像ＩＤ、撮影日時、地図画面等の情報が含まれている。また、レイアウト画面の情報には、レイアウト画面にパノラマ種別や全天周種別の画像が含まれる場合に、第１通信装置２００及び第２通信装置３００のユーザが、パノラマ種別や全天周種別の画像を選択する操作指示や、パノラマ種別や全天周種別の画像の表示位置に応じて、当該パノラマ種別や全天周種別の画像の一部を表示するための表示制御情報と、当該パノラマ種別や全天周種別の画像の全体をスクロール表示により表示するための表示制御情報とが含まれる。更に、レイアウト画面に含まれる地図画面は、ストーリーボードの新規作成においてピンが付加された地点周辺の地図画面が、画面下方向にスクロールされた場合の最下部に表示される。この地図画面には、図１５に図示した画面登録情報に記録された撮影場所に基づいた位置にピンが新たに付加され、更新された状態で表示される。レイアウト画面の情報は、メモリ１０４に記憶される。なお、レイアウト情報において、画像ＩＤ、表示位置、表示サイズが対応付けられていない所定期間が存在する場合には、表示情報生成部１３２は、当該所定期間に対応する表示が、時間経過を示す情報のみ（例えば、日時の情報のみ）を含むように、レイアウト画面を更新する。
その後、第１通信装置２００及び第２通信装置３００においてストーリーボードのアプリケーションプログラムが起動されると、サーバ１００内の制御部１０２は、起動された旨の起動情報を受信し、メモリ１０４に記憶されたレイアウト画面の情報を起動情報の送信元である第１通信装置２００及び第２通信装置３００へ送信する。
第１通信装置２００及び第２通信装置３００内の制御部２０２は、サーバ１００からのレイアウト画面の情報を取得し、メモリ２０４に記憶させる。その後、第１通信装置２００及び第２通信装置３００のユーザは、図９に示すストーリーボード画面６３１が表示されている状態において、画面の下方に隠れているレイアウト画面を表示させたい場合、操作部２０６を操作して、スクロールボタンアイコン６３３を選択する。スクロールボタンアイコン６３３が選択されると、制御部２０２は、メモリ２０４に記憶されたレイアウト画面の情報を読み出し、ストーリーボード画面を画面の上方に移動させるとともに、これに換えてレイアウト画面を表示部２０７に表示させる制御を行う。なお、予めメモリ２０４にレイアウト画面の情報が記憶されるのではなく、スクロールボタンアイコン６３３が選択されたときに、制御部２０２がサーバ１００と通信を行って、当該サーバ１００からレイアウト画面の情報を取得し、レイアウト画面を表示部２０７に表示させる制御を行うようにしてもよい。
図１７〜図２３は、レイアウト画面の一例を示す図である。図１７〜図２０に示すレイアウト画面は、サーバ１００の制御部１０２内の表示情報生成部１３２が、上述した第１の表示位置設定の手法によりレイアウト情報を更新した場合の例であり、図２１〜図２３は、表示情報生成部１３２が、上述した第２の表示位置設定の手法によりレイアウト情報を更新した場合の例である。
ここでは、スクロール方向に直交する方向である、画面の横方向（以下、単に横方向という）の表示範囲が考慮されることにより、Ｌv．１の画像が表示される場合には、この横方向において他の画像は表示されない。また、Ｌv．３の画像が表示される場合には、その横方向においてＬv．４の画像が１つ、並ぶように表示可能である。また、Ｌv．４の画像は３つ、並ぶように表示可能である。なお、レイアウト画面は、スクロール方向に平行する方向で、スクロール表示に合わせて各画像の縦方向の表示間隔を拡縮するように表示が制御される。このように制御されることで変化に富んだ動きのあるレイアウト画面を演出することができる。
図１７に示すレイアウト画面６５０では、Ｌv．４の画像６５１とＬv．３の画像６５２とが横方向に配置され、Ｌv．４の画像６５１とＬv．３の画像６５２の下、すなわちスクロール方向に平行する方向である、画面の下方向（以下、単に下方向という）にＬv．４の画像６５３が配置される。更に、Ｌv．４の画像６５３の下方向にＬv．１の画像６５４が配置される。
図１８に示すレイアウト画面６６０では、Ｌv．３の画像６６１とＬv．４の画像６６２及びＬv．４の画像６６３とが横方向に配置されるとともに、Ｌv．４の画像６６３がＬv．４の画像６６２の下方向に配置される。また、Ｌv．３の画像６６１とＬv．４の画像６６２及びＬv．４の画像６６３の下方向に、種別がパノラマであるＬv．１の画像６６４が配置され、更にＬv．１の画像６６４の下方向に、Ｌv．３の画像６６５が配置される。
図１９に示すレイアウト画面６７０では、Ｌv．４の画像６７１、６７２、６７３が横方向に配置される。また、Ｌv．４の画像６７１、６７２、６７３の下方向に、Ｌv．４の画像６７４とＬv．３の画像６７５とが横方向に配置される。また、Ｌv．４の画像６７４とＬv．３の画像６７５の下方向に、Ｌv．４の画像６７６が配置される。なお、画像６７２は、その画像データが動画であることを意味している。
図２０に示すレイアウト画面６８０では、Ｌv．１の画像６８１が配置される。また、Ｌv．１の画像６８１の下方向に、Ｌv．４の画像６８２、６８３が横方向に配置される。また、Ｌv．４の画像６８２、６８３の下方向に、Ｌv．３の画像６８４とＬv．４の画像６８５及びＬv．４の画像６８６とが横方向に配置されるとともに、Ｌv．４の画像６８６がＬv．４の画像６８６の下方向に配置される。
図２１に示すレイアウト画面６９０では、Ｌv．１の画像６９１が横方向の最大のサイズで配置される。また、Ｌv．１の画像６９１の下方向に、Ｌv．４の画像６９２、６９３、６９４が横方向に配置される。また、Ｌv．４の画像６９２、６９３、６９４の下方向に、Ｌv．３の画像６９５とＬv．４の画像６９６とが横方向に配置される。
図２２に示すレイアウト画面７００では、Ｌv．１の画像７０１が横方向の最大のサイズで配置される。また、Ｌv．１の画像７０１の下方向に、Ｌv．３の画像７０２が配置される。
図２３に示すレイアウト画面７１０では、種別がパノラマであるＬv．１の画像７１１が横方向の最大のサイズで配置される。また、Ｌv．１の画像７１１の下方向に、Ｌv．３の画像７１２が配置される。また、Ｌv．３の画像７１２の下方向に、種別がパノラマであるＬv．１の画像７１３が配置される。
次に、第２通信装置３００における画像評価の動作を説明する。図２４は、第２通信装置３００における画像評価の動作を示すフローチャートである。
第２通信装置３００内の制御部２０２は、ユーザによる操作部２０６に対する所定の操作に応じて、ストーリーボードのアプリケーションプログラム（アプリ）を起動する（ステップＳ６０１）。次に、制御部２０２は、ユーザによる操作部２０６に対する所定の操作に応じて、ストーリーボード画面を表示部２０７に表示させる制御を行う（ステップＳ６０２）。
第２通信装置３００のユーザは、図９に示すストーリーボード画面６３１が表示されている状態において、レイアウト画面を表示させたい場合、操作部２０６を操作して、スクロールボタンアイコン６３３を選択する。スクロールボタンアイコン６３３が選択されると、制御部２０２は、サーバ１００から受信したレイアウト画面の情報に基づいて、レイアウト画面を表示部２０７に表示させる制御を行う（ステップＳ６０３）。
その後、第２通信装置３００のユーザが、操作部２０６を操作して、レイアウト画面に表示された画像の中から評価したい画像を選択すると、制御部２０２は、画像が選択されたことを認識し（ステップＳ６０４）、その画像の詳細情報画面を表示部２０７に表示させる制御を行う（ステップＳ６０５）。
図２５は、詳細情報画面の一例を示す図である。図２５に示す詳細情報画面７２０は、評価対象の画像７２１、評価ボタンアイコン７２２、コメント入力欄７２３、合成コメントボタンアイコン７２４を含んで構成される。
第２通信装置３００のユーザは、図２５に示す詳細情報画面７２０が表示されている状態において、評価対象の画像７２１に対して良い評価する場合、操作部２０６を操作して、評価ボタンアイコン７２２を選択する。評価ボタンアイコン７２２が選択されると、画像に重畳するようにハート型のシンボルが表示され、評価ボタンアイコン７２２に対する選択操作の時間的な長さ（詳細には評価ボタンアイコン７２２に対するユーザの指の接触時間の長さ）に応じて、三段階の大きさのハート型のシンボルが巡回的に重畳表示される。ハート型のシンボルの大きさは評価値を表し、シンボルが小さい方から順にＬv．１（評価値＝１）、Ｌv．２（評価値＝２）、Ｌv．３（評価値＝３）と評価値がアップする。そして、選択操作を止めた（評価ボタンアイコン７２２に対してユーザが指を離した）タイミングで表示されていたシンボルの大きさが評価値として設定される。また、この他、画像情報に含まれるデジタルカメラ２５０の機種（メーカーコード）に応じて評価値が加算される。制御部２０２は、対応するストーリーボードＩＤ、ユーザＩＤ、評価対象の画像ＩＤ、評価値を含んだ評価情報を生成し、サーバ１００へ送信する（ステップＳ６０６）。
次に、サーバ１００における評価情報受信時のストーリーボードのレイアウト更新の動作を説明する。図２６は、サーバ１００における評価情報受信時のストーリーボードのレイアウト更新の動作を示すフローチャートである。
サーバ１００の制御部１０２内のデータ取得部１２０は、通信部１１４を介して、第２通信装置３００からの評価情報を取得する（ステップＳ７０１）。
次に、表示情報生成部１３２は、画像登録情報に含まれる評価値を更新する（ステップＳ７０２）。具体的には、表示情報生成部１３２は、メモリ１０４に記憶された画像登録情報のうち、画像ＩＤが評価情報内の画像ＩＤと一致する画像登録情報を選択する。更に、表示情報生成部１３２は、選択した画像登録情報内の評価値に今回受信した評価情報の評価値を加算して更新する。
次に、データ整理部１３０及び表示情報生成部１３２は、画像登録情報内の画像の撮影日時、種別、顔検出結果、評価数、コメント数に応じて、所定期間毎の表示枚数、各画像の表示位置、表示サイズを設定することにより、レイアウト情報を更新する（ステップＳ７０３）。具体的な処理は、図１４のステップＳ５０４と同様であるので、その説明は省略する。
次に、表示情報生成部１３２は、レイアウト情報に基づいて、所定期間毎に画像を配置したレイアウト画面を更新する（ステップＳ７０４）。具体的な処理は、図１４のステップＳ５０５と同様であるので、その説明は省略する。
次に、第２通信装置３００におけるコメント設定の動作を説明する。第２通信装置３００におけるコメント設定の動作は図２４のフローチャートと同様のものである。
但し、ステップＳ６０６については、第２通信装置３００では次の処理を行う。すなわち、第２通信装置３００のユーザは、図２５に示す詳細情報画面７２０が表示されている状態において、コメントを設定する場合、操作部２０６を操作して、コメント入力欄７２３を選択し、コメント文の設定（文字の入力）を行う。コメントが設定されると、制御部２０２は、対応するストーリーボードＩＤ、ユーザＩＤ、コメント対象の画像ＩＤ、コメント文等を含んだコメント情報を生成し、サーバ１００へ送信する。
次に、サーバ１００におけるコメント情報受信時のストーリーボードのレイアウト更新の動作を説明する。図２７は、サーバ１００におけるコメント情報受信時のストーリーボードのレイアウト更新の動作を示すフローチャートである。
サーバ１００の制御部１０２内のデータ取得部１２０は、通信部１１４を介して、第２通信装置３００からのコメント情報を取得する（ステップＳ８０１）。
次に、表示情報生成部１３２は、画像登録情報に含まれるコメント数を更新する（ステップＳ８０２）。具体的には、表示情報生成部１３２は、メモリ１０４に記憶された画像登録情報のうち、画像ＩＤが評価情報内の画像ＩＤと一致する画像登録情報を選択する。更に、表示情報生成部１３２は、選択した画像登録情報内のコメント数を１増加させる。また、表示情報生成部１３２は、選択した画像登録情報に、コメント情報内のコメント文を追加する。
次に、データ整理部１３０及び表示情報生成部１３２は、画像登録情報内の画像の撮影日時、種別、顔検出結果、評価数、コメント数に応じて、所定期間毎の表示枚数、各画像の表示位置、表示サイズを設定することにより、レイアウト情報を更新する（ステップＳ８０３）。具体的な処理は、図１４のステップＳ５０４と同様であるので、その説明は省略する。
次に、表示情報生成部１３２は、レイアウト情報に基づいて、所定期間毎に画像を配置したレイアウト画面を更新する（ステップＳ８０４）。具体的な処理は、図１４のステップＳ５０５と同様であるので、その説明は省略する。
次に、第２通信装置３００における合成コメント設定の動作を説明する。図２８は、第２通信装置３００における合成コメント設定の動作を示すフローチャートである。ステップＳ９０１〜ステップＳ９０５の動作は、図２４のステップＳ６０１〜ステップＳ６０５の動作と同様であるので、その説明は省略する。
第２通信装置３００のユーザは、図２５に示す詳細情報画面７２０が表示されている状態において、合成コメントを設定する場合、操作部２０６を操作して、合成コメントボタンアイコン７２４を選択する。合成コメントボタンアイコン７２４が選択されると、制御部２０２は、合成コメント追加画面を表示部２０７に表示させる制御を行う（ステップＳ９０６）。
図２９は、合成コメント追加画面の一例を示す図である。図２９に示す合成コメント追加画面７３０は、合成コメントの追加対象の画像７３１、合成コメント７３２を含んで構成される。
第２通信装置３００のユーザは、図２９に示す合成コメント追加画面７３０が表示されている状態において、操作部２０６を操作して、合成コメントの文を入力する。合成コメント文が選択され、決定が検出されると、制御部２０２は、画像７３１に合成コメント７３２追加された合成結果をキャプチャーし、合成前の画像情報とは別に、この合成結果からなる新たな画像情報を生成する。そして、制御部２０２は、対応するストーリーボードＩＤ、ユーザＩＤ、新たな画像情報、差し替え対象の画像ＩＤを、サーバ１００へ送信する（ステップＳ９０７）。
次に、サーバ１００における合成コメントが追加された画像情報受信時のストーリーボードのレイアウト更新の動作を説明する。図３０は、サーバ１００における合成コメントが追加された画像情報受信時のストーリーボードのレイアウト更新の動作を示すフローチャートである。
サーバ１００の制御部１０２内のデータ取得部１２０は、通信部１１４を介して、第２通信装置３００からの新たな画像情報を取得する（ステップＳ１００１）。
次に、表示情報生成部１３２は、差し替え対象の画像を選択する（ステップＳ１００２）。具体的には、表示情報生成部１３２は、メモリ１０４に記憶された画像登録情報のうち、画像ＩＤが今回受信した画像ＩＤと一致する画像登録情報を選択する。
次に、表示情報生成部１３２は、選択した画像情報を今回受信した画像情報に差し替える処理を行う（ステップＳ１００３）。このようにすることで、合成コメントが合成される前の画像情報も第１通信装置２００、第２通信装置３００に記憶保持されるので、合成のキャンセルが容易に行うことができる。
次に、第１通信装置２００及び第２通信装置３００における終了処理の動作を説明する。図３１は、第１通信装置２００及び第２通信装置３００における終了処理の動作を示すフローチャートである。
第１通信装置２００及び第２通信装置３００内の制御部２０２は、ユーザによる操作部２０６に対する所定の操作に応じて、ストーリーボードのアプリケーションプログラム（アプリ）を起動する（ステップＳ１１０１）。次に、制御部２０２は、ユーザによる操作部２０６に対する所定の操作に応じて、ストーリーボード画面を表示部２０７に表示させる制御を行う（ステップＳ１１０２）。
第２通信装置３００のユーザは、図９に示すストーリーボード画面６３１が表示されている状態において、終了ボタンアイコン６３６を選択することができる。終了ボタンアイコン６３６が選択されると、制御部２０２は、ストーリーボードの終了を選択する（ステップＳ１１０３）。更に、制御部２０２は、対応するストーリーボードＩＤ、ユーザＩＤ、終了を選択する旨の情報（フラグ等）を含んだ終了情報を生成し、サーバ１００へ送信する（ステップＳ１１０４）。
次に、サーバ１００における終了情報受信時の終了処理の動作を説明する。図３２は、サーバ１００における終了情報受信時の終了処理の動作を示すフローチャートである。
サーバ１００の制御部１０２内のデータ取得部１２０は、通信部１１４を介して、第１通信装置２００及び第２通信装置３００からの終了情報を取得する（ステップＳ１２０１）。
次に、グループ判断部１２４は、ストーリーボードに対応するイベントに参加している全てのユーザからの終了情報を取得したか否かを判定する（ステップＳ１２０２）。具体的には、グループ判断部１２４は、ストーリーボード毎に、対応するストーリーボード情報内の作成ユーザＩＤと、参加フラグ「１」が設定された招待ユーザＩＤとを取得する。更に、グループ判断部１２４は、取得した全てのユーザＩＤと、取得した全ての終了情報内のユーザＩＤとを比較する。グループ判断部１２４は、取得した全てのユーザＩＤが、取得した全ての終了情報内のユーザＩＤに含まれる場合には、ストーリーボードに対応するイベントに参加している全てのユーザからの終了情報を取得したと判断する。
ストーリーボードに参加している全てのユーザからの終了情報を取得していない場合には（ステップＳ１２０２；ＮＯ）、一連の動作が終了する。一方、ストーリーボードに参加している全てのユーザからの終了情報を取得した場合には（ステップＳ１２０２；ＹＥＳ）、制御部１０２は、対応するストーリーボードに関する各種の処理を終了する。更に、制御部１０２は、このストーリーボードに対応するイベントが終了した旨を示す情報を作成ユーザＩＤと招待ユーザＩＤで特定される第１通信装置２００、第２通信装置３００へ送信する。また、ストーリーボード画面においては、「お疲れ様」、「参加ありがとう」といったコメントが追加され、本ストーリーボードに対応するイベントが終了したことが分かる表示態様に切り替わる（ステップＳ１２０３）。
以上説明したように、本実施形態に係る情報管理システム１では、サーバ１００は、第１通信装置２００から画像情報が送信されると、当該画像情報に含まれるストーリーボードＩＤ、ユーザＩＤ、撮影日時等を取得する。更に、サーバ１００は、ストーリーボードＩＤ、ユーザＩＤと、ストーリーボード情報内のストーリーボードＩＤ、ユーザＩＤとを比較して、画像情報に対応する画像登録情報の登録先を特定し、登録する。更に、サーバ１００は、画像登録情報とレイアウト情報とに基づいて、画像が時系列で表示されるレイアウト画面を生成する。これにより、後でイベントのスケジュールを時間経過に沿って追体験することが可能となる。
また、サーバ１００は、ストーリーボードに対応するイベントの開始日時から終了日時までの期間を所定期間毎に分割し、レイアウト画面において各所定期間に当該所定期間に撮影日時が含まれる画像を配置する。また、サーバ１００は、所定期間に撮影日時が含まれる画像が存在しない場合には、レイアウト画面において時間経過を示す情報のみが表示されるようにする。これにより、時間経過を把握しやすくすることができる。
また、サーバ１００は、レイアウト画面の情報を第２通信装置３００へ送信し、当該第２通信装置３００から画像の評価に関する評価情報を受信すると、評価数が多い画像の表示サイズを大きくする等、評価数に基づいてレイアウト情報を更新して、新たなレイアウト画面を生成する。これにより、画像の評価に応じた表示が可能となる。
また、サーバ１００は、顔画像が含まれる画像の表示サイズを大きくするようにレイアウト情報を更新して、新たなレイアウト画面を生成する。これにより、顔画像が含まれる画像の注目度を高めることができる。
また、サーバ１００は、レイアウト画面にパノラマ種別や全天周種別の画像が含まれる場合に、レイアウト画面の情報に、第１通信装置２００等のユーザが、パノラマ種別や全天周種別の画像を選択する操作指示や、パノラマ種別や全天周種別の画像の表示位置に応じて、当該パノラマ種別や全天周種別の画像の一部を表示するための表示制御情報を含ませる。これにより、第１通信装置２００等において画像の切替を簡易に行うことが可能となる。
また、本実施の形態では、画像情報に付加される画像データの撮影場所情報の取得方法について詳細に述べていないが、図３３に示すような変形例のような情報管理システム１を用いることで、撮影場所情報を取得させることができる。図３３において、情報管理システム１は小型の無線通信装置２６１、３６１を追加し、人工衛星２６０から送信される測位データ２６２をこの無線通信装置２６１、３６１で受信させ、受信した測位データ２６２に基づく自己位置情報２６４、３６４を夫々第１通信装置２００、第２通信装置３００に送信することで実現させてもよい。この場合、撮影（記録）指示信号２６３、３６３を無線通信装置２６１、３６１からデジタルカメラ２５０、３５０に送信するようにすると、撮影画像の画像データに対応させて自己位置情報を撮影場所として画像情報に対応付けて記憶させることができる。
また、本実施の形態では、メモリ１０４に記憶されている画像登録情報にはその画像をアップロードしたユーザ（イベント参加者）が分からないようになっているが、図３４に示すような変形例のように、画像ＩＤに対応付けて、その画像情報をアップロードしたユーザのユーザＩＤを記憶管理するようにしてもよい。このようにすると、その画像情報をアップロードしたユーザ（イベント参加者）がサーバ１００で特定できる。したがって、図２６のレイアウト画面の更新処理のフローチャートのステップＳ７０３において、評価数に加えてアップロードしたユーザが誰なのかを評価対象に含むことで、レイアウト画面において特定のユーザ（イベント参加者）が撮影した画像の表示比率が高くなる等の不公平感を解消させることが可能になる。また、サーバ１００ではストーリーボード画面やレイアウト画面の送信先の第１通信装置２００、第２通信装置３００のユーザＩＤが特定できるので、同じストーリーボード画面でも、送信先の通信装置のユーザ毎にレイアウト画面を異ならせて表示させたり、レイアウト画面において自身がアップロードした画像を識別可能に表示させることも可能になる。
また、画像情報に付加される情報として、ユーザの生体情報を付加するようにしてもよい。図３５、図３６はこの場合を例示した変形例を示すものであり、図３５は、図１に示した情報管理システム１に、更にユーザの身体に装着可能で、且つ、装着したユーザの生体情報をセンサーデータとして取得することが可能な腕時計型デバイス２７０、３７０を追加したものである。腕時計型デバイス２７０、３７０は、これを装着したユーザの生体情報（心拍数（脈拍）、体温、歩数等の運動量）をセンサーデータとして取得し、このセンサーデータ２７２、３７２を夫々第１通信装置２００、第２通信装置３００に送信する。また、腕時計型デバイス２７０、３７０が、撮影（記録）指示信号２７１、３７１を無線通信装置２６１、３６１からデジタルカメラ２５０、３５０に送信するようにすると、撮影画像の画像データに対応させてセンサーデータを生体情報として画像情報に対応付けて記憶させることができる。第１通信装置２００（第２通信装置３００）が、このようにして取得された画像情報をサーバ１００へ送信すると、図３６に図示するように、画像登録情報に記録される。そして、このように記憶管理されることで、図２６のレイアウト画面の更新処理のフローチャートのステップＳ７０３において、評価数に加えてセンサーデータから解析されるアップロードしたユーザの身体の状態、感情、心理状態を評価対象に含むことで、レイアウト画面において例えば、感動的な、盛り上がったシーンの画像の表示比率を高くすることが可能となる。
なお、本発明は、上記実施形態に限定されず、様々な変形及び応用が可能である。例えば、上述した実施形態では、図４、図１０、図１１、図１３、図２４、図２８の動作は、第１通信装置２００及び第２通信装置３００の何れか一方が行うものとして説明したが、他方が行うようにしてもよい。
また、図５等の画面はあくまでも一例であり、レイアウトが異なる画面でもよいし、一部の画面について適宜省略されていてもよい。
また、表示装置としての第１通信装置２００及び第２通信装置３００はスマートフォンであるとしたが、他の装置でもよい。例えば、パーソナルコンピュータ、ＰＨＳ（Personal Handy-phone System）、ＰＤＡ（Personal Digital Assistant又はPersonal Data Assistance）、タブレットＰＣ（Personal Computer）、ゲーム機器、携帯型音楽再生装置等であってもよい。
また、第１通信装置２００及び第２通信装置３００の機能とサーバ１００の機能とを両方備える装置を用意し、場面に応じて、両機能を使い分けることができるようにしてもよい。
また、上記各実施形態において、実行されるプログラムは、フレキシブルディスク、ＣＤ−ＲＯＭ（Compact Disc - Read Only Memory）、ＤＶＤ（Digital Versatile Disc）、ＭＯ（Magneto - Opticaldisc）等のコンピュータ読み取り可能な記録媒体に格納して配布し、そのプログラムをインストールすることにより、上述の処理を実行するシステムを構成することとしてもよい。
また、プログラムをインターネット等のネットワークＮＷ上の所定のサーバが有するディスク装置等に格納しておき、例えば、搬送波に重畳させて、ダウンロード等するようにしてもよい。
なお、上述の機能を、ＯＳ（Operating System）が分担して実現する場合又はＯＳとアプリケーションとの協働により実現する場合等には、ＯＳ以外の部分のみを媒体に格納して配布してもよく、また、ダウンロード等してもよい。
以上、本発明の好ましい実施形態について説明したが、本発明は係る特定の実施形態に限定されるものではなく、本発明には、特許請求の範囲に記載された発明とその均等の範囲が含まれる。以下に、本願出願の当初の特許請求の範囲に記載された発明を付記する。
（付記１）
外部から送信されたデータを取得するデータ取得手段と、
前記データ取得手段によって取得されたデータの生成日時に関する情報を取得する情報取得手段と、
前記データ取得手段によって取得されたデータの送信元を特定する送信元特定手段と、
前記送信元特定手段によって特定された送信元が予め設定されたグループに属しているか否かを判断する第１の判断手段と、
前記第１の判断手段によって前記送信元が前記グループに属していると判断された場合に、前記グループを識別するための識別情報と、前記データ取得手段によって取得されたデータとを対応付けるように制御する制御手段と、
前記制御手段によって前記識別情報に前記データが複数対応付けされている場合に、前記情報取得手段によって取得された前記データの生成日時に基づいた時系列に沿って、前記データを配置した表示情報を生成する生成手段と、
を備えることを特徴とする表示情報生成装置。
（付記２）
前記グループには送信元を特定する情報と所定の期間とが対応付けられており、
前記データの生成日時が前記所定の期間に含まれているか否かを判断する第２の判断手段を更に備え、
前記生成手段は、前記第２の判断手段によって生成日時が前記所定の期間に含まれていると判断されたデータを前記表示情報に配置することを特徴とする付記１に記載の表示情報生成装置。
（付記３）
前記所定の期間を単位時間毎に複数に分割する分割手段と、
前記分割手段によって分割された各期間に生成日時が含まれるデータが存在するか否かを判断する第３の判断手段と、
を更に備え、
前記生成手段は、前記第３の判断手段によってデータが存在しない期間があると判断された場合に、前記データが存在しない期間を、時間経過を示す表示情報に置き換えて表示情報を生成することを特徴とする付記２に記載の表示情報生成装置。
（付記４）
前記生成手段によって生成された表示情報を前記グループに属する前記送信元が有する表示装置へ送信する送信手段と、
前記表示装置から送信された、前記表示情報における前記データに対する評価情報を受信する受信手段と、
を更に備え、
前記生成手段は、更に、前記評価情報に沿って前記複数のデータを配置した表示情報を生成することを特徴とする付記１乃至３の何れか１つに記載の表示情報生成装置。
（付記５）
前記データは画像であり、
前記生成手段は、前記評価情報に沿って前記複数の画像の表示サイズを夫々変更して配置した表示情報を生成することを特徴とする付記４に記載の表示情報生成装置。
（付記６）
前記データは画像であり、
前記画像に顔画像が含まれているか否かを判断する第４の判断手段と、
前記第４の判断手段によって顔画像が含まれていると判断した画像について評価を上げるよう制御する評価制御手段と、
を更に備え、
前記生成手段は、更に、前記評価制御手段による評価結果に基づいて複数の画像を配置した表示情報を生成することを特徴とする付記４に記載の表示情報生成装置。
（付記７）
前記画像にはその大きさが前記表示装置の表示範囲を超える広範囲画像が含まれ、
前記生成手段によって生成される表示情報には、
前記広範囲画像の一部からなる画像を表示するための第１の表示制御情報と、
前記広範囲画像の全体をスクロール表示するための第２の表示制御情報と、
が含まれることを特徴とする付記５又は６に記載の表示情報生成装置。
（付記８）
前記表示情報には、表示されている時の前記画像に対する指示の検出に応じて、前記第１の表示制御情報による表示と前記第２の表示制御情報による表示とを交互に切り替えるための第３の表示制御情報が含まれることを特徴とする付記７に記載の表示情報生成装置。
（付記９）
前記表示情報には、表示されている時の前記画像の表示位置の検出に応じて、前記第１の表示制御情報による表示と前記第２の表示制御情報による表示とを交互に切り替えるための第４の表示制御情報が含まれることを特徴とする付記７に記載の表示情報生成装置。
（付記１０）
前記画像は、外部の撮影装置により撮影され、所定の無線通信媒体を介して送信されたものであることを特徴とする付記５乃至９の何れか１つに記載の表示情報生成装置。
（付記１１）
表示情報生成装置と表示装置とを含む情報管理システムであって、
前記表示情報生成装置は、
外部から送信されたデータを取得するデータ取得手段と、
前記データ取得手段によって取得されたデータの生成日時に関する情報を取得する情報取得手段と、
前記データ取得手段によって取得されたデータの送信元を特定する送信元特定手段と、
前記送信元特定手段によって特定された送信元が予め設定されたグループに属しているか否かを判断する第１の判断手段と、
前記第１の判断手段によって前記送信元が前記グループに属していると判断された場合に、前記グループを識別するための識別情報と、前記データ取得手段によって取得されたデータとを対応付けるように制御する制御手段と、
前記制御手段によって前記識別情報に前記データが複数対応付けされている場合に、前記情報取得手段によって取得された前記データの生成日時に基づいた時系列に沿って、前記データを配置した表示情報を生成する生成手段と、
を備えることを特徴とする情報管理システム。
（付記１２）
前記グループには送信元を特定する情報と所定の期間とが対応付けられており、
前記表示情報生成装置は、
前記データの生成日時が前記所定の期間に含まれているか否かを判断する第２の判断手段を更に備え、
前記生成手段は、前記第２の判断手段によって生成日時が前記所定の期間に含まれていると判断されたデータを前記表示情報に配置することを特徴とする付記１１に記載の情報管理システム。
（付記１３）
前記表示情報生成装置は、
前記所定の期間を単位時間毎に複数に分割する分割手段と、
前記分割手段によって分割された各期間に生成日時が含まれるデータが存在するか否かを判断する第３の判断手段と、
を更に備え、
前記生成手段は、前記第３の判断手段によってデータが存在しない期間があると判断された場合に、前記データが存在しない期間を、時間経過を示す表示情報に置き換えて表示情報を生成することを特徴とする付記１２に記載の情報管理システム。
（付記１４）
前記表示情報生成装置は、
前記生成手段によって生成された表示情報を前記グループに属する前記表示装置へ送信する送信手段と、
前記表示装置から送信された、前記表示情報における前記データに対する評価情報を受信する受信手段と、
を更に備え、
前記生成手段は、更に、前記評価情報に沿って前記複数のデータを配置した表示情報を生成することを特徴とする付記１１乃至１３の何れか１つに情報管理システム。
（付記１５）
前記データは画像であり、
前記生成手段は、前記評価情報に沿って前記複数の画像の表示サイズを夫々変更して配置した表示情報を生成することを特徴とする付記１４に記載の情報管理システム。
（付記１６）
前記データは画像であり、
前記表示情報生成装置は、
前記画像に顔画像が含まれているか否かを判断する第４の判断手段と、
前記第４の判断手段によって顔画像が含まれていると判断した画像について評価を上げるよう制御する評価制御手段と、
を更に備え、
前記生成手段は、更に、前記評価制御手段による評価結果に基づいて複数の画像を配置した表示情報を生成することを特徴とする付記１４に記載の情報管理システム。
（付記１７）
前記画像にはその大きさが前記表示装置の表示範囲を超える広範囲画像が含まれ、
前記生成手段によって生成される表示情報には、
前記広範囲画像の一部からなる画像を表示するための第１の表示制御情報と、
前記広範囲画像の全体をスクロール表示するための第２の表示制御情報と、
が含まれることを特徴とする付記１５又は１６に記載の情報管理システム。
（付記１８）
前記表示情報には、表示されている時の前記画像に対する指示の検出に応じて、前記第１の表示制御情報による表示と前記第２の表示制御情報による表示とを交互に切り替えるための第３の表示制御情報が含まれることを特徴とする付記１７に記載の情報管理システム。
（付記１９）
前記表示情報には、表示されている時の前記画像の表示位置の検出に応じて、前記第１の表示制御情報による表示と前記第２の表示制御情報による表示とを交互に切り替えるための第４の表示制御情報が含まれることを特徴とする付記１７に記載の情報管理システム。
（付記２０）
前記画像は、外部の撮影装置により撮影され、所定の無線通信媒体を介して送信されたものであることを特徴とする付記１５乃至１９の何れか１つに記載の情報管理システム。
（付記２１）
表示情報生成装置が、外部から送信されたデータを取得するデータ取得ステップと、
前記表示情報生成装置が、前記データ取得ステップにおいて取得されたデータの生成日時に関する情報を取得する情報取得ステップと、
前記表示情報生成装置が、前記データ取得ステップにおいて取得されたデータの送信元を特定する送信元特定ステップと、
前記表示情報生成装置が、前記送信元特定ステップにおいて特定された送信元が予め設定されたグループに属しているか否かを判断する判断ステップと、
前記表示情報生成装置が、前記判断ステップにおいて前記送信元が前記グループに属していると判断された場合に、前記グループを識別するための識別情報と、前記データ取得ステップにおいて取得されたデータとを対応付けるように制御する制御ステップと、
前記表示情報生成装置が、前記制御ステップにおいて前記識別情報に前記データが複数対応付けされている場合に、前記情報取得ステップにおいて取得された前記データの生成日時に基づいた時系列に沿って、前記データを配置した表示情報を生成する生成ステップと、
を含むことを特徴とする表示情報生成方法。
（付記２２）
コンピュータを、
外部から送信されたデータを取得するデータ取得手段、
前記データ取得手段によって取得されたデータの生成日時に関する情報を取得する情報取得手段、
前記データ取得手段によって取得されたデータの送信元を特定する送信元特定手段、
前記送信元特定手段によって特定された送信元が予め設定されたグループに属しているか否かを判断する判断手段、
前記判断手段によって前記送信元が前記グループに属していると判断された場合に、前記グループを識別するための識別情報と、前記データ取得手段によって取得されたデータとを対応付けるように制御する制御手段、
前記制御手段によって前記識別情報に前記データが複数対応付けされている場合に、前記情報取得手段によって取得された前記データの生成日時に基づいた時系列に沿って、前記データを配置した表示情報を生成する生成手段、
として機能させることを特徴とするプログラム。
１…情報管理システム、１００…サーバ、１０２、２０２…制御部、１０４、２０４…メモリ、１１４…通信部、１２０…データ取得部、１２２…情報取得部、１２４…グループ判断部、１２６…対応付け処理部、１２８…期間判断部、１３０…データ整理部、１３２…表示情報生成部、１３４…顔画像検出部、２００…第１通信装置、２０６…操作部、２０７…表示部、２０８ａ、２０８ｂ…無線通信部、２１０ａ、２１０ｂ…アンテナ、２１４…撮影部、２５０、３５０…デジタルカメラ、２６０…人工衛星、２６１、３６１…無線通信装置、２６２…即位データ、２６３、２７１、３６３、３７１…撮影（記録）指示信号、２６４、３６４…自己位置情報、２７０、３７０…腕時計デバイス、２７２、３７２…センサーデータ、３００…第２通信装置、４００…インターネット、５００…基地局、６０１…ストーリーボード一覧画面、６０２…地図画像、６０３…マーク、６０４…新規作成ボタンアイコン、６０５…表示フィルター設定アイコン、６０６…通知アイコン、６０７…機能設定メニューアイコン、６０８…アクティビティログ、６０９…メニューアイコン群、６１０…新規作成画面、６１１…作成ボタンアイコン、６１２…タイトル入力欄、６１３…アクティビティ入力欄、６１４…開始日時入力欄、６１５…終了日時入力欄、６１６…フレンド招待ボタンアイコン、６１７…ピンボタンアイコン、６１８…選択欄、６１９…合言葉入力欄、６２１…招待ユーザ選択画面、６２１ａ…決定ボタンアイコン、６２２、６２４、６２６、６２８…ユーザ表示欄、６２３、６２５、６２７、６２９…ユーザ選択欄、６３１…ストーリーボード画面、６３２…情報表示欄、６３３…スクロールボタンアイコン、６３４…アップロードボタンアイコン、６３５、６３６…切り替えボタンアイコン、６４１…画像一覧画面、６４２…画像表示欄、６４３、６４４…サムネイルアイコン、６５０、６６０、６７０、６８０、６９０、７００、７１０…レイアウト画面、６５１、６５２、６５３、６５４、６６１、６６２、６６３、６６４、６６５、６７１、６７２、６７３、６７４、６７５、６７６、６８１、６８２、６８３、６８４、６８５、６８６、６９１、６９２、６９３、６９４、６９５、６９６、７０１、７０２、７１１、７１２、７１３、７２１、７３１…画像、７２０…詳細情報画面、７２２…詳細ボタンアイコン、７２３…コメント入力欄、７２４…合成コメントボタンアイコン、７３０…合成コメント追加画面、７３２…合成コメント

Claims (9)

  1. 外部から送信された画像データを取得するデータ取得手段と、
    前記データ取得手段によって取得された前記画像データの生成日時に関する情報を取得する情報取得手段と、
    前記データ取得手段によって取得された前記画像データの送信元を特定する送信元特定手段と、
    前記送信元特定手段によって特定された送信元が予め設定されたグループに属しているか否かを判断する第１の判断手段と、
    前記第１の判断手段によって前記送信元が前記グループに属していると判断された場合に、前記グループを識別するための識別情報と、前記データ取得手段によって取得された前記画像データとを対応付けるように制御する制御手段と、
    前記制御手段によって前記識別情報に前記データ取得手段によって取得された前記画像データが複数対応付けされている場合に、画像を前記画像データの生成日時順に配列した表示情報を生成する生成手段と、
    を備え、
    前記生成手段は、
    前記生成日時が所定の単位期間に含まれる画像データの数に基づいて当該単位期間に対応させて画面に表示させる画像の最大数を制限設定するとともに、
    前記画像データが撮影画像であって撮影時における撮影者の生体情報が当該画像データに付加されていた場合には、前記撮影画像が前記生体情報に対応した表示サイズとなるように画像を配列する、
    ことを特徴とする表示情報生成装置。
  2. 前記グループには送信元を特定する情報と所定の期間とが対応付けられており、
    前記画像データの生成日時が前記所定の期間に含まれているか否かを判断する第２の判断手段を更に備え、
    前記生成手段は、前記第２の判断手段によって前記画像データの生成日時が前記所定の期間に含まれていると判断された画像を前記所定の期間に対応した位置に配置した前記表示情報を生成する、
    ことを特徴とする請求項１に記載の表示情報生成装置。
  3. 前記所定の期間を単位時間毎に複数に分割する分割手段と、
    前記分割手段によって分割された期間毎に、当該期間に前記画像データの生成日時が含まれる画像が存在するか否かを判断する第３の判断手段と、
    を更に備え、
    前記生成手段は、前記第３の判断手段によって画像が存在しない期間があると判断された場合には、画像が存在しない期間に対応した配置位置に、時間経過を示す所定の情報を配置した前記表示情報を生成する、
    ことを特徴とする請求項２に記載の表示情報生成装置。
  4. 前記生成手段によって生成された表示情報を前記グループに属する前記送信元が有する表示装置へ送信する送信手段と、
    前記表示装置から送信された、前記表示情報における前記画像に対する評価情報を受信する受信手段と、
    を更に備え、
    前記生成手段は、前記画像が前記評価情報に対応した表示サイズとなるように画像を配列した前記表示情報を生成する、
    ことを特徴とする請求項１乃至３の何れか１項に記載の表示情報生成装置。
  5. 前記画像に顔画像が含まれているか否かを判断する第４の判断手段と、
    前記第４の判断手段によって顔画像が含まれていると判断した画像について評価を上げるよう制御する評価制御手段と、
    を更に備え、
    前記生成手段は、前記評価制御手段による評価結果に基づいて画像の表示サイズが調整された前記表示情報を生成する、
    ことを特徴とする請求項１乃至４の何れか１項に記載の表示情報生成装置。
  6. 前記生体情報は、心拍数情報または体温情報である、
    ことを特徴とする請求項１乃至５の何れか１項に記載の表示情報生成装置。
  7. 表示情報生成装置と表示装置とを含む情報管理システムであって、
    前記表示情報生成装置は、
    外部から送信された画像データを取得するデータ取得手段と、
    前記データ取得手段によって取得された前記画像データの生成日時に関する情報を取得する情報取得手段と、
    前記データ取得手段によって取得された前記画像データの送信元を特定する送信元特定手段と、
    前記送信元特定手段によって特定された送信元が予め設定されたグループに属しているか否かを判断する第１の判断手段と、
    前記第１の判断手段によって前記送信元が前記グループに属していると判断された場合に、前記グループを識別するための識別情報と、前記データ取得手段によって取得された前記画像データとを対応付けるように制御する制御手段と、
    前記制御手段によって前記識別情報に前記データ取得手段によって取得された前記画像データが複数対応付けされている場合に、画像を前記画像データの生成日時順に配列した表示情報を生成する生成手段と、
    前記表示装置からの要求に応じて前記表示情報を前記表示装置に送信する送信手段と、
    を備え、
    前記生成手段は、
    前記生成日時が所定の単位期間に含まれる画像データの数に基づいて当該単位期間に対応させて画面に表示させる画像の最大数を制限設定するとともに、
    前記画像データが撮影画像であって撮影時における撮影者の生体情報が当該画像データに付加されていた場合には、前記撮影画像が前記生体情報に対応した表示サイズとなるように画像を配列する、
    ことを特徴とする情報管理システム。
  8. 表示情報生成装置が実行する表示情報生成方法であって、
    外部から送信された画像データを取得するデータ取得ステップと、
    前記データ取得ステップで取得された前記画像データの生成日時に関する情報を取得する情報取得ステップと、
    前記データ取得ステップで取得された前記画像データの送信元を特定する送信元特定ステップと、
    前記送信元特定ステップで特定された送信元が予め設定されたグループに属しているか否かを判断する第１の判断ステップと、
    前記第１の判断ステップで前記送信元が前記グループに属していると判断された場合に、前記グループを識別するための識別情報と、前記データ取得ステップで取得された前記画像データとを対応付けるように制御する制御ステップと、
    前記制御ステップで前記識別情報に前記データ取得ステップで取得された前記画像データが複数対応付けされている場合に、画像を前記画像データの生成日時順に配列した表示情報を生成する生成ステップと、
    を有し、
    前記生成ステップは、
    前記生成日時が所定の単位期間に含まれる画像データの数に基づいて当該単位期間に対応させて画面に表示させる画像の最大数を制限設定するとともに、
    前記画像データが撮影画像であって撮影時における撮影者の生体情報が当該画像データに付加されていた場合には、前記撮影画像が前記生体情報に対応した表示サイズとなるように画像を配列する、
    ことを特徴とする表示情報生成方法。
  9. コンピュータを、
    外部から送信された画像データを取得するデータ取得手段、
    前記データ取得手段によって取得された前記画像データの生成日時に関する情報を取得する情報取得手段、
    前記データ取得手段によって取得された前記画像データの送信元を特定する送信元特定手段、
    前記送信元特定手段によって特定された送信元が予め設定されたグループに属しているか否かを判断する第１の判断手段、
    前記第１の判断手段によって前記送信元が前記グループに属していると判断された場合に、前記グループを識別するための識別情報と、前記データ取得手段によって取得された前記画像データとを対応付けるように制御する制御手段、
    前記制御手段によって前記識別情報に前記データ取得手段によって取得された前記画像データが複数対応付けされている場合に、画像を前記画像データの生成日時順に配列した表示情報を生成する生成手段、
    として機能させ、
    前記生成手段は、
    前記生成日時が所定の単位期間に含まれる画像データの数に基づいて当該単位期間に対応させて画面に表示させる画像の最大数を制限設定するとともに、
    前記画像データが撮影画像であって撮影時における撮影者の生体情報が当該画像データに付加されていた場合には、前記撮影画像が前記生体情報に対応した表示サイズとなるように画像を配列する、
    ことを特徴とするプログラム。
JP2016181380A 2016-09-16 2016-09-16 表示情報生成装置、情報管理システム、表示情報生成方法、及び、プログラム Active JP6708077B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2016181380A JP6708077B2 (ja) 2016-09-16 2016-09-16 表示情報生成装置、情報管理システム、表示情報生成方法、及び、プログラム
US15/699,934 US10387486B2 (en) 2016-09-16 2017-09-08 Display information generating device, information management system, display information generating method, and recording medium
CN201710831438.8A CN108710619B (zh) 2016-09-16 2017-09-14 显示信息生成装置及方法、信息管理系统以及记录介质
KR1020170118403A KR102387054B1 (ko) 2016-09-16 2017-09-15 표시 정보 생성 장치, 정보 관리 시스템, 표시 정보 생성 방법 및, 프로그램

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016181380A JP6708077B2 (ja) 2016-09-16 2016-09-16 表示情報生成装置、情報管理システム、表示情報生成方法、及び、プログラム

Publications (2)

Publication Number Publication Date
JP2018045557A JP2018045557A (ja) 2018-03-22
JP6708077B2 true JP6708077B2 (ja) 2020-06-10

Family

ID=61620563

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016181380A Active JP6708077B2 (ja) 2016-09-16 2016-09-16 表示情報生成装置、情報管理システム、表示情報生成方法、及び、プログラム

Country Status (4)

Country Link
US (1) US10387486B2 (ja)
JP (1) JP6708077B2 (ja)
KR (1) KR102387054B1 (ja)
CN (1) CN108710619B (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11061523B2 (en) * 2017-10-10 2021-07-13 Rakuten, Inc. Content sharing system, content sharing method, and program
JP7321712B2 (ja) * 2019-01-30 2023-08-07 キヤノン株式会社 通信装置、通信装置の制御方法およびプログラム
CN111970563B (zh) * 2020-08-28 2022-03-04 维沃移动通信有限公司 视频处理方法、装置和电子设备

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6166735A (en) * 1997-12-03 2000-12-26 International Business Machines Corporation Video story board user interface for selective downloading and displaying of desired portions of remote-stored video data objects
JP4401740B2 (ja) * 2003-10-28 2010-01-20 キヤノン株式会社 編集装置
US7613383B2 (en) * 2004-12-02 2009-11-03 Hitachi, Ltd. Editing method and recording and reproducing device
JP4352264B2 (ja) * 2005-03-29 2009-10-28 セイコーエプソン株式会社 画像処理装置、画像処理方法および画像処理プログラム
FR2893470B1 (fr) * 2005-11-16 2008-02-15 Canon Res Ct France Soc Par Ac Procede et dispositif de creation d'une sequence video representative d'une sequence video numerique et procedes et dispositifs de transmission et reception de donnees video associes
US8037046B2 (en) * 2007-06-29 2011-10-11 Microsoft Corporation Collecting and presenting temporal-based action information
KR101382501B1 (ko) * 2007-12-04 2014-04-10 삼성전자주식회사 동영상 촬영 편집 장치 및 방법
JP2011065278A (ja) 2009-09-15 2011-03-31 Toshiba Corp 電子機器、画像検索方法およびコンテンツ再生プログラム
US8438484B2 (en) * 2009-11-06 2013-05-07 Sony Corporation Video preview module to enhance online video experience
JP2011193275A (ja) * 2010-03-15 2011-09-29 Nikon Corp 表示装置
JP2012053855A (ja) * 2010-09-03 2012-03-15 Ricoh Co Ltd コンテンツ閲覧装置、コンテンツ表示方法及びコンテンツ表示プログラム
JP5736933B2 (ja) * 2011-04-21 2015-06-17 ソニー株式会社 電子機器およびその制御方法、並びにプログラム
US9946430B2 (en) 2011-09-21 2018-04-17 Facebook, Inc. Displaying social networking system user information via a timeline interface
CN103631819B (zh) * 2012-08-27 2017-04-05 华为技术有限公司 一种图片命名的方法及系统
EP2911046A4 (en) * 2012-10-22 2016-05-11 Nec Corp INFORMATION PROCESSING DEVICE AND METHOD AND PROGRAM FOR MANAGING CHRONOLOGICAL INFORMATION
US9460123B1 (en) 2012-12-12 2016-10-04 Amazon Technologies, Inc. Systems and methods for generating an arrangement of images based on image analysis
KR102104438B1 (ko) * 2013-01-31 2020-04-24 엘지전자 주식회사 영상표시장치, 및 그 동작방법
JP2015130112A (ja) 2014-01-08 2015-07-16 株式会社日立製作所 計算機システム、コンテンツ管理方法及びプログラム
WO2016017987A1 (en) * 2014-07-31 2016-02-04 Samsung Electronics Co., Ltd. Method and device for providing image
CN105072337B (zh) * 2015-07-31 2019-03-26 小米科技有限责任公司 图片处理方法及装置

Also Published As

Publication number Publication date
KR102387054B1 (ko) 2022-04-14
JP2018045557A (ja) 2018-03-22
CN108710619A (zh) 2018-10-26
US20180081909A1 (en) 2018-03-22
US10387486B2 (en) 2019-08-20
CN108710619B (zh) 2021-11-23
KR20180030765A (ko) 2018-03-26

Similar Documents

Publication Publication Date Title
CN103842936B (zh) 将多个实况视频剪辑和静态照片记录、编辑和合并为成品组合作品
CN102763404B (zh) 摄影装置、信息取得系统及程序
US9143601B2 (en) Event-based media grouping, playback, and sharing
US9280545B2 (en) Generating and updating event-based playback experiences
JP2013162487A (ja) 画像表示装置及び撮像装置
KR101796400B1 (ko) 정보 수집 방법, 장치, 프로그램 및 기록매체
JP2014131215A (ja) 画像管理システム、画像管理方法、及びプログラム
JP6708077B2 (ja) 表示情報生成装置、情報管理システム、表示情報生成方法、及び、プログラム
JP6375039B1 (ja) プログラム、撮影方法及び端末
CN109618192B (zh) 播放视频的方法、装置、系统和存储介质
JP2016189518A (ja) カメラ制御方法及びカメラ制御システム
JP6396798B2 (ja) 推薦装置、方法、およびプログラム
JP2011155584A (ja) 撮像システム、撮像方法、及び撮像プログラム
WO2017193343A1 (zh) 媒体文件分享方法、媒体文件分享设备及终端
WO2012169636A1 (ja) 情報端末、情報端末の制御方法、制御プログラムおよび記録媒体
CN106777044A (zh) 图片推送方法及装置
TWI522725B (zh) 可與行動裝置連接之相機，及其操作方法
JP2014212439A (ja) 表示制御装置、制御方法およびプログラム
JP2017151632A (ja) サーバ装置、検索方法およびプログラム
WO2023021759A1 (ja) 情報処理装置、情報処理方法
JP2013003602A (ja) 情報端末、情報端末の制御方法、制御プログラムおよび記録媒体
JP2012080237A (ja) 撮影装置及び撮影方法
JP2021144296A (ja) 撮像装置、通信システム、コンテンツ送信方法
CN115357832A (zh) 素材上传方法、装置、电子设备以及存储介质
CN116828294A (zh) 景区拍摄路线确定方法及装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180516

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190409

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190604

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190613

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20191105

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191128

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200421

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200504

R150 Certificate of patent or registration of utility model

Ref document number: 6708077

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150