JP5917635B2 - コンテンツ管理システム、管理コンテンツ生成方法、管理コンテンツ再生方法、プログラムおよび記録媒体 - Google Patents
コンテンツ管理システム、管理コンテンツ生成方法、管理コンテンツ再生方法、プログラムおよび記録媒体 Download PDFInfo
- Publication number
- JP5917635B2 JP5917635B2 JP2014186374A JP2014186374A JP5917635B2 JP 5917635 B2 JP5917635 B2 JP 5917635B2 JP 2014186374 A JP2014186374 A JP 2014186374A JP 2014186374 A JP2014186374 A JP 2014186374A JP 5917635 B2 JP5917635 B2 JP 5917635B2
- Authority
- JP
- Japan
- Prior art keywords
- image data
- management
- unit
- image
- still image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 89
- 238000007726 management method Methods 0.000 claims description 612
- 239000003550 marker Substances 0.000 claims description 174
- 238000011156 evaluation Methods 0.000 claims description 55
- 238000003384 imaging method Methods 0.000 claims description 38
- 238000012545 processing Methods 0.000 claims description 26
- 238000009966 trimming Methods 0.000 claims description 23
- 230000008569 process Effects 0.000 claims description 20
- 238000005516 engineering process Methods 0.000 claims description 14
- 239000000284 extract Substances 0.000 claims description 13
- 230000008859 change Effects 0.000 claims description 11
- 238000004519 manufacturing process Methods 0.000 claims 1
- 230000033001 locomotion Effects 0.000 description 65
- 238000001514 detection method Methods 0.000 description 36
- 230000005540 biological transmission Effects 0.000 description 29
- 238000010586 diagram Methods 0.000 description 26
- 230000033458 reproduction Effects 0.000 description 25
- 239000000203 mixture Substances 0.000 description 23
- 238000013500 data storage Methods 0.000 description 22
- 230000009471 action Effects 0.000 description 20
- 238000000605 extraction Methods 0.000 description 19
- 238000004458 analytical method Methods 0.000 description 16
- 230000006854 communication Effects 0.000 description 15
- 238000004891 communication Methods 0.000 description 15
- 238000013075 data extraction Methods 0.000 description 10
- 238000012937 correction Methods 0.000 description 8
- 238000013441 quality evaluation Methods 0.000 description 6
- 230000004044 response Effects 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 4
- 238000003702 image correction Methods 0.000 description 4
- 230000009467 reduction Effects 0.000 description 4
- 230000000386 athletic effect Effects 0.000 description 3
- 241000238370 Sepia Species 0.000 description 2
- 230000008921 facial expression Effects 0.000 description 2
- 238000010191 image analysis Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000007639 printing Methods 0.000 description 2
- 206010011469 Crying Diseases 0.000 description 1
- 241000255925 Diptera Species 0.000 description 1
- 241001465754 Metazoa Species 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000007175 bidirectional communication Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000013523 data management Methods 0.000 description 1
- 238000011549 displacement method Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000001737 promoting effect Effects 0.000 description 1
- 238000011895 specific detection Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
- G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/73—Querying
- G06F16/732—Query formulation
- G06F16/7335—Graphical querying, e.g. query-by-region, query-by-sketch, query-by-trajectory, GUIs for designating a person/face/object as a query predicate
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
- G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
- G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
- G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/11—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information not detectable on the record carrier
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/34—Indicating arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
- H04N1/00132—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture in a digital photofinishing system, i.e. a system where digital photographic images undergo typical photofinishing processing, e.g. printing ordering
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/0035—User-machine interface; Control console
- H04N1/00405—Output means
- H04N1/00408—Display of information to the user, e.g. menus
- H04N1/0044—Display of information to the user, e.g. menus for image preview or review, e.g. to help the user position a sheet
- H04N1/00442—Simultaneous viewing of a plurality of images, e.g. using a mosaic display arrangement of thumbnails
- H04N1/00453—Simultaneous viewing of a plurality of images, e.g. using a mosaic display arrangement of thumbnails arranged in a two dimensional array
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/0035—User-machine interface; Control console
- H04N1/00405—Output means
- H04N1/00408—Display of information to the user, e.g. menus
- H04N1/0044—Display of information to the user, e.g. menus for image preview or review, e.g. to help the user position a sheet
- H04N1/00461—Display of information to the user, e.g. menus for image preview or review, e.g. to help the user position a sheet marking or otherwise tagging one or more displayed image, e.g. for selective reproduction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/0035—User-machine interface; Control console
- H04N1/00405—Output means
- H04N1/00408—Display of information to the user, e.g. menus
- H04N1/00466—Display of information to the user, e.g. menus displaying finishing information, e.g. position of punch holes or staple or orientation references
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/0035—User-machine interface; Control console
- H04N1/00405—Output means
- H04N1/00474—Output means outputting a plurality of functional options, e.g. scan, copy or print
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/0035—User-machine interface; Control console
- H04N1/00405—Output means
- H04N1/00482—Output means outputting a plurality of job set-up options, e.g. number of copies, paper size or resolution
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computational Linguistics (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- Television Signal Processing For Recording (AREA)
- Processing Or Creating Images (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
特許文献2には、動画像データの中から静止画データを抽出する静止画抽出システムが開示されており、特許文献3には、動画像データからデータ量の小さい標準画像データを生成する画像処理装置が開示されている。
動画像データに基づいて少なくとも2つの静止画像データを生成する静止画像生成部と、
静止画像生成部において生成された少なくとも2つの静止画像データのうち、2以上の静止画像データを出力静止画像データとしてユーザに選択させる静止画像選択部と、
2以上の出力静止画像データの各々について、出力静止画像データに対応する出力静止画像を含む、動画像データに対応する動画像のシーンを判別するシーン判別部と、
2以上の出力静止画像データの各々、もしくは、2以上の出力静止画像データに対応する2枚以上の出力静止画像の各々の画像特徴量を、管理マーカとして、2枚以上の出力静止画像の各々に対応する動画像のシーンの動画像データと紐付けて登録する管理マーカ登録部と、
動画像データを格納する格納部と、
格納部に格納された動画像データへアクセスするためのアクセスキーを発行するアクセスキー発行部と、
少なくとも2つの出力静止画像データとアクセスキーとを含む管理画像データを生成する管理画像生成部とを備えることを特徴とするコンテンツ管理システムを提供する。
撮像画像データに対応する撮像画像から管理マーカを読み取る管理マーカ読取部と、
ユーザから入力された管理画像のプリントに記載されたアクセスキーを受け取る操作入力部と、
管理マーカと操作入力部を介して入力されたアクセスキーとに基づいて格納部に格納された動画像データを検索する画像データ検索部と、
動画像を再生する表示部と、
表示部における動画像の再生を制御する表示制御部とを備え、
撮像部により、管理画像のプリントに含まれた出力静止画像の中から1枚の出力静止画像が撮像された場合に、表示制御部は、画像データ検索部により検索された動画像データの中から、管理マーカ読取部により、撮像された1枚の出力静止画像から読み取られた管理マーカに紐付けられた動画像データに対応する動画像のシーンを表示部に再生するように制御するものであることが好ましい。
表示制御部は、重要シーン判定部により、重要度が閾値未満であると判定された動画像のシーンが再生される出力静止画像の表示部分において、広告、もしくは、重要シーン判定部により、重要度が閾値以上であると判定された任意の動画像のシーンを再生するように制御するものであることが好ましい。
プリント制御部は、管理画像データに含まれた出力静止画像データの数が多くなるほど、管理画像が印刷されるプリントのサイズが、より大きくなるように制御するものであることが好ましい。
管理マーカ登録部は、複数の動画像データの各々に対応する出力静止画像データの中から出力静止画像データを少なくとも1つずつ選択して得られた複数の第1出力静止画像データの各々、もしくは、複数の第1出力静止画像データに対応する複数枚の第1出力静止画像の各々の画像特徴量を、第1管理マーカとして、複数枚の第1出力静止画像の各々に対応する動画像のシーンの動画像データと紐付けて登録し、かつ、複数の動画像データの各々について、出力静止画像データを第2出力静止画像データとして、1つの第2出力静止画像データないし2以上の第2出力静止画像データの各々、もしくは、1つの第2出力静止画像データないし2以上の第2出力静止画像データの各々に対応する第2出力静止画像の画像特徴量を、第2管理マーカとして、1枚の第2出力静止画像ないし2枚以上の第2出力静止画像の各々に対応する動画像のシーンの動画像データと紐付けて登録するものであり、
管理画像生成部は、少なくとも2つの第1出力静止画像データとアクセスキーとを含む第1管理画像データ、および、複数の動画像データの各々について、少なくとも1つの第2出力静止画像データを含む第2管理画像データを生成するものであることが好ましい。
撮像画像データに対応する撮像画像から第1管理マーカを読み取る管理マーカ読取部と、
ユーザから入力された管理画像のプリントに記載されたアクセスキーを受け取る操作入力部と、
管理マーカと操作入力部を介して入力されたアクセスキーとに基づいて格納部に格納された動画像データを検索する画像データ検索部と、
動画像を再生する表示部と、
表示部における動画像の再生を制御する表示制御部とを備え、
撮像部により、第1管理画像のプリントに含まれた第1出力静止画像の中から1枚の第1出力静止画像が撮像された場合に、表示制御部は、画像データ検索部により検索された動画像データの中から、管理マーカ読取部により、撮像された1枚の第1出力静止画像から読み取られた第1管理マーカに紐付けられた動画像データに対応する第2管理画像を表示部に表示するように制御するものであり、
操作入力部を介して入力された指示により、表示部に表示された第2管理画像に含まれた第2出力静止画像の中から1枚の第2出力静止画像が選択された場合に、表示制御部は、画像データ検索部により検索された動画像データの中から、管理マーカ読取部により、選択された1枚の第2出力静止画像から読み取られた第2管理マーカに紐付けられた動画像データに対応する動画像のシーンを表示部に再生するように制御するものであることが好ましい。
管理マーカ登録部は、複数の動画像データの各々に対応する出力静止画像データの中から、画像評価部により算出された評価値が最も高い出力静止画像を1つずつ選択して、複数の第1出力静止画像データを得るものであることが好ましい。
静止画像生成部が、動画像データに基づいて少なくとも2つの静止画像データを生成するステップと、
静止画像選択部が、静止画像生成部において生成された少なくとも2つの静止画像データのうち、2以上の静止画像データを出力静止画像データとしてユーザに選択させるステップと、
シーン判別部が、2以上の出力静止画像データの各々について、出力静止画像データに対応する出力静止画像を含む、動画像データに対応する動画像のシーンを判別するステップと、
管理マーカ登録部が、2以上の出力静止画像データの各々、もしくは、2以上の出力静止画像データに対応する2枚以上の出力静止画像の各々の画像特徴量を、管理マーカとして、2枚以上の出力静止画像の各々に対応する動画像のシーンの動画像データと紐付けて登録するステップと、
アクセスキー発行部が、格納部に格納された動画像データへアクセスするためのアクセスキーを発行するステップと、
管理画像生成部が、少なくとも2つの出力静止画像データとアクセスキーとを含む管理画像データを生成するステップとを含むことを特徴とする管理コンテンツ生成方法を提供する。
撮像部が、管理画像データに対応する管理画像のプリントを撮像して撮像画像データを生成するステップと、
管理マーカ読取部が、撮像画像データに対応する撮像画像から管理マーカを読み取るステップと、
操作入力部が、ユーザから入力された管理画像のプリントに記載されたアクセスキーを受け取るステップと、
画像データ検索部が、管理マーカと操作入力部を介して入力されたアクセスキーとに基づいて格納部に格納された動画像データを検索するステップと、
撮像部により、管理画像のプリントに含まれた出力静止画像の中から1枚の出力静止画像が撮像された場合に、表示制御部が、画像データ検索部により検索された動画像データの中から、管理マーカ読取部により、撮像された1枚の出力静止画像から読み取られた管理マーカに紐付けられた動画像データに対応する動画像のシーンを表示部に再生するように制御するステップとを含むことを特徴とする管理コンテンツ再生方法を提供する。
静止画像生成部が、動画像データに基づいて少なくとも2つの静止画像データを生成するステップと、
静止画像選択部が、静止画像生成部において生成された少なくとも2つの静止画像データのうち、1つの静止画像データないし2以上の静止画像データを出力静止画像データとしてユーザに選択させるステップと、
シーン判別部が、1つの出力静止画像データないし2以上の出力静止画像データの各々について、出力静止画像データに対応する出力静止画像を含む動画像のシーンを判別するステップと、
静止画像生成部、静止画像選択部、および、シーン判別部が、複数の動画像データの各々について処理を繰り返し行うステップと、
管理マーカ登録部が、複数の動画像データの各々に対応する出力静止画像データの中から出力静止画像データを少なくとも1つずつ選択して得られた複数の第1出力静止画像データの各々、もしくは、複数の第1出力静止画像データに対応する複数枚の第1出力静止画像の各々の画像特徴量を、第1管理マーカとして、複数枚の第1出力静止画像の各々に対応する動画像のシーンの動画像データと紐付けて登録し、かつ、複数の動画像データの各々について、出力静止画像データを第2出力静止画像データとして、1つの第2出力静止画像データないし2以上の第2出力静止画像データの各々、もしくは、1つの第2出力静止画像データないし2以上の第2出力静止画像データの各々に対応する第2出力静止画像の画像特徴量を、第2管理マーカとして、1枚の第2出力静止画像ないし2枚以上の第2出力静止画像の各々に対応する動画像のシーンの動画像データと紐付けて登録するステップと、
アクセスキー発行部が、格納部に格納された動画像データへアクセスするためのアクセスキーを発行するステップと、
管理画像生成部が、少なくとも2つの第1出力静止画像データとアクセスキーとを含む第1管理画像データ、および、複数の動画像データの各々について、少なくとも1つの第2出力静止画像データを含む第2管理画像データを生成するステップとを含むことを特徴とする管理コンテンツ生成方法を提供する。
撮像部が、第1管理画像データに対応する第1管理画像のプリントを撮像して撮像画像データを生成するステップと、
管理マーカ読取部が、撮像画像データに対応する撮像画像から第1管理マーカを読み取るステップと、
操作入力部が、ユーザから入力された管理画像のプリントに記載されたアクセスキーを受け取るステップと、
画像データ検索部が、管理マーカと操作入力部を介して入力されたアクセスキーとに基づいて格納部に格納された動画像データを検索するステップと、
撮像部により、第1管理画像のプリントに含まれた第1出力静止画像の中から1枚の第1出力静止画像が撮像された場合に、表示制御部が、画像データ検索部により検索された動画像データの中から、管理マーカ読取部により、撮像された1枚の第1出力静止画像から読み取られた第1管理マーカに紐付けられた動画像データに対応する第2管理画像を表示部に表示するように制御するステップと、
表示部に表示された第2管理画像に含まれた第2出力静止画像の中から1枚の第2出力静止画像を選択する指示を、操作入力部を介して入力するステップと、
操作入力部を介して入力された指示により、表示部に表示された第2管理画像に含まれた第2出力静止画像の中から1枚の第2出力静止画像が選択された場合に、表示制御部が、画像データ検索部により検索された動画像データの中から、管理マーカ読取部により、選択された1枚の第2出力静止画像から読み取られた第2管理マーカに紐付けられた動画像データに対応する動画像のシーンを表示部に再生するように制御するステップとを含むことを特徴とする管理コンテンツ再生方法を提供する。
本発明の一実施形態に係るコンテンツ管理システムは、管理画像と前記管理画像に紐付られた動画像データとからなる管理コンテンツを管理するものであり、図1に示したように、少なくとも1つの情報端末1と、画像サーバ2と、情報端末1と画像サーバ2とを相互に接続する通信回線3と、通信回線3に接続されたプリンタ4と、プリンタ4によって出力された管理プリントPとを備える。
また、画像サーバ2は、例えば、通信回線3に接続されたネットワークサーバであり、情報端末1からの指示に基づいて種々のデータ処理を行うものである。
通信回線3は、例えば、インターネット回線であり、情報端末1と画像サーバ2との間を相互に接続し、双方向の通信を可能とするものである。
管理プリントPは、コンテンツ管理マーカ(以下、管理マーカという)として登録された静止画像と、アクセスキーとを有するコンテンツ管理画像(以下、管理画像という)を画像商材として所定の媒体に印刷したものである。ここで画像商材とは、フォトブック、デジカメプリント、ポストカードまたはコラージュ等であり、有償と無償とを問わない。
図2に示すように、情報端末1は、撮像部11と、撮像部11から順次接続される管理マーカ読取部12と端末データ送受信部13とを有する。また、情報端末1は、撮像部11と管理マーカ読取部12とが接続する表示制御部14を有し、表示制御部14が接続する表示部15を有する。また、情報端末1は、撮像部11、管理マーカ読取部12、端末データ送受信部13、および表示制御部14のそれぞれに接続する端末制御部16を有し、端末制御部16には、操作入力部17が接続する。また、情報端末1では、表示部15と操作入力部17とがタッチパネル18として一体として形成されてもよい。
ここで、表示制御部14は、動画像を表示部15に再生させる場合、AR技術を使用して再生(AR再生)させてもよいし、AR技術を使用せず再生(通常再生)させてもよい。表示制御部14は、動画像をAR再生させる場合、撮像(キャプチャ)された管理プリントPを表示部15に表示し、表示部15に表示された管理プリントPの静止画像Iの表示部分において動画像を再生するように制御する。また、表示制御部14は、動画像を通常再生させる場合、表示部15の全面ないし任意のサイズのウィンドウ内において動画像を再生するように制御する。
表示部15は、例えば、液晶ディスプレイまたは有機ELディスプレイ等によって構成され、表示制御部14からの指示により静止画像データに基づく静止画像、動画像データに基づく動画像、および所定の操作入力に用いられる画像等を表示する。
操作入力部17は、例えば、ボタン、キーボード、マウス等によって構成され、ユーザによる入力を入力信号として端末制御部16へ出力するものである。なお、上述の表示部15と操作入力部17とは、タッチパネルによって一体として構成されてもよく、本実施形態では、表示部15と操作入力部17とがタッチパネル18により構成される。この場合、操作入力部17は、液晶ディスプレイ等に表示された操作画像と、表示部15の上側に設置されたタッチセンサとによって構成される。
図3に示すように、画像サーバ2は、サーバデータ送受信部21と、サーバデータ送受信部21から順次接続される静止画像生成部22、静止画像選択部23、静止画像編集部24、管理マーカ登録部25、およびデータ格納部26を有し、サーバデータ送受信部21と静止画像選択部23とが相互に接続され、サーバデータ送受信部21がデータ格納部26に接続する。また、画像サーバ2は、データ格納部26に接続するアクセスキー発行部27と、静止画像編集部24とアクセスキー発行部27とに接続され、データ格納部26に接続する管理画像生成部28と、管理画像生成部28に接続され、サーバデータ送受信部に接続する管理画像トリミング部29と、サーバデータ送受信部21とデータ格納部26とに相互に接続する画像データ検索部30とを有する。また、画像サーバ2は、サーバデータ送受信部21、静止画像選択部23、静止画像編集部24、管理マーカ登録部25、アクセスキー発行部27、管理画像生成部28、管理画像トリミング部29および画像データ検索部30のそれぞれに接続するサーバ制御部31を有する。
また、アクセスキー発行部27は、例えば、上述の所定の文字列の情報を有するバーコードや二次元コード等の画像データをアクセスキーとして出力してもよい。管理画像の出力指示としては、ユーザからの管理画像の印刷された管理プリントの注文等が挙げられる。
管理画像トリミング部29は、管理画像の出力指示を受け、その出力媒体に応じて管理画像の自動トリミングを行ってトリミング済み管理画像を生成し、トリミング済み管理画像データを出力するものである。なお、出力媒体としては、例えば、L、2L、DSC、KGなどのサイズの写真プリントや、所定のフレームサイズを有するフォトブック等が挙げられる。
サーバ制御部31は、情報端末1からのユーザの指示または図示しないメモリに記録された所定のプログラム等に基づいて、画像サーバ2の各部を制御するものである。
また、静止画像Iは、上述のとおりユーザによって選択され、ユーザによって編集処理された編集済み静止画像であり、アクセスキーKは、上述のとおり静止画像Iに紐付けられた動画像データへアクセスするための情報であり、ここでは10桁の文字列によって構成される。
まず、ステップS11として、情報端末1から画像サーバ2へ動画像データをアップロード(送信)する。ユーザは、情報端末1の表示部15に表示された図6(A)に示す操作画面を確認し、タッチパネル18を操作して、情報端末1の図示しないメモリに記憶された動画像データの送信を指示する。端末制御部16は、ユーザからの動画像データの送信指示を受けて端末データ送受信部13を制御し、図示しないメモリに記憶された動画像データを端末データ送受信部13から通信回線3を介して画像サーバ2へ送信する。
ステップS12として、静止画像生成部22は、取得した動画像データに基づいて少なくとも1つの静止画像データを生成し、少なくとも1つの静止画像データを静止画像選択部23へ出力する。ここでは、動画像の代表画像として、例えば、山の画像、自動車の画像、船の画像、親子の画像等が静止画像として生成され、静止画像データとして出力される。
ここでは、上述の親子の画像が選択され、親子の画像の静止画像データが選択静止画像データとして出力される。
ステップS14として、ユーザは、タッチパネル18を操作して、タッチパネル18に表示された選択静止画像を編集し、編集画像データを生成する。ユーザによって行われる編集処理としては、例えば、図6(C)に示すように、選択静止画像の背景となる背景フレームの選択や、図6(D)に示すように、選択静止画像に対する画像補正、トリミング、拡大・縮小、回転等の処理が挙げられる。選択静止画像に対する編集処理の情報は、端末制御部16を介して端末データ送受信部13から画像サーバ2へ送信される。画像サーバ2のサーバデータ送受信部21は、編集処理の情報を受信し、編集処理の情報を静止画像編集部24へ出力する。また、静止画像編集部24は、編集処理の情報に基づいて選択静止画像を編集し、編集処理のなされた選択静止画像の画像データを編集静止画像データとして管理マーカ登録部25および管理画像生成部28へそれぞれ出力する。
出力指示がされると、端末データ送受信部13は、画像サーバ2に対して管理プリントPの出力指示を送信し、画像サーバ2のサーバデータ送受信部21は、情報端末1から管理プリントPの出力指示を受信し、サーバ制御部31へ出力指示を出力する。
なお、表1に示すように、プリント画像のサイズとアスペクト比との関係は、1:1.34〜1:1.50の範囲となっている。
例えば、DSCサイズの媒体に管理画像PIを印刷する場合には、図7(B)に示すように、管理画像トリミング部29は、DSCサイズのアスペクト比を持つフレームF−DSCによって管理画像PIをトリミングし、また、例えば、KGサイズの媒体に管理画像PIを印刷する場合には、図7(C)に示すように、管理画像トリミング部29は、KGサイズのアスペクト比を持つフレームF−KGによって管理画像PIをトリミングする。管理画像トリミング部29によってトリミングされたトリミング済み管理画像は、トリミング済み管理画像データとして、サーバデータ送受信部21へ出力される。
以上より、ユーザは、動画像データをアップロードし、動画像データに基づいて自動生成された少なくとも1つの静止画像を選択し、静止画像の出力指示を行うだけで(ここでは、静止画像の印刷された画像商材の注文を行うだけで)、短時間で簡単に動画像と静止画像とに基づく管理コンテンツを生成することができる。
ステップS21として、ユーザは、管理プリントPに印刷されたアクセスキーKを確認し、情報端末1のタッチパネル18からアクセスキーKを入力する。
管理プリントPの静止画像部分が撮像されると、情報端末1の管理マーカ読取部12は、ステップS23として、撮像部11から出力された撮像画像データに基づく撮像画像を所定のアルゴリズムに基づいて画像解析し、撮像画像に映る静止画像Iから管理マーカを読み取る。
最後に、ステップS25として、情報端末1は、タッチパネル18に表示された管理プリントPの静止画像Iの表示部分において、動画像データに基づいて動画像を再生する。
具体的には、図9に示すように、選択された静止画像Sにおいて、点線Tで囲まれた部分のトリミングを行って、管理プリントPを作成した場合、静止画像選択部23は、選択された静止画像に対応する動画像のフレームのタイムコードを記録しておき、情報端末1によって対応する動画像を再生する際、表示制御部14は、上述のタイムコードに基づいて、選択された静止画像と同じフレームから動画像の再生を行ってもよい。
また、静止画像編集部24は、更にトリミングを行った点線Tの情報を記録しておき、情報端末1によって対応する動画像を再生する際、表示制御部14は、上述のタイムコードと、上述のトリミングの情報とに基づいて、選択された静止画像と同じフレームで、かつ、トリミングされた点線Tの範囲を拡大して動画像の再生を行ってもよい。
また、上述の管理マーカに関連して、上述の実施形態では管理マーカを格納部等に格納しているが、管理マーカそのものを格納しておくのではなく、例えば、ユーザが選択した静止画像が動画像のいずれのフレームから抽出されたものであるか、いずれのサイズで抽出されたものであるか、または、管理マーカがどのように生成されたものであるか、もしくはどのように特定されたものであるか等の管理マーカの生成、抽出に関連する情報を格納しておいてもよい。管理マーカ自体は、これらの管理マーカの生成、抽出に関連する情報に基づいて適宜生成することができるためである。
ユーザは、動画像データの格納先等を何ら意識することなく、管理画像を有する管理プリントから、対応する動画像データに迅速にアクセスすることができる。さらに、上述のとおり、管理画像と動画像データのタイムコードとが関連付けられていれば、ユーザは、動画像を操作することなく、管理プリントに映る管理画像に対応するシーンを瞬時に呼び出すことができる。
本実施形態のコンテンツ管理システムの構成は、画像サーバ2を除いて、図1〜3に示すコンテンツ管理システムと同じであるから、以下、本実施形態の画像サーバについて説明する。
同図に示す例では、動画像から抽出された複数枚の静止画像が、左から右へ、かつ、上から下へ向かうに従って、撮影日時が古いものから順次新しいものとなる順序で並べられ、分割された各々の動画像のシーンが、異なる枠で囲んで示されている。
そして、分割された動画像の複数のシーンの中から、静止画像抽出部33により抽出された1つの静止画像データないし2以上の静止画像データの各々に対応する静止画像を含む動画像のシーンを判別する。
また、注目人物登録部38に登録された各々の登録人物の顔画像に基づいて、各々の画像群に対応する人物を特定することができる。
また、同一の静止画像に撮影された主人公の顔画像と主人公以外の人物の顔画像の間の距離を算出し、顔画像の間の距離が近い人物を重要人物と判定してもよい。
主人公が撮影された静止画像の撮影日時情報と主人公以外の人物が撮影された静止画像の撮影日時情報との差分、および主人公が撮影された静止画像の撮影位置情報と主人公以外の人物が撮影された静止画像の撮影位置情報との差分の一方もしくは両方に基づいて重要人物を判定してもよい。
例えば、図14に枠で囲んで示す関心領域のボケブレの判定が行われて、ボケブレの程度が大きいほど、画質の評価値が低くなるように算出される。
また、撮像部11により、管理画像のプリントに含まれた5枚の出力静止画像の中から別の1枚の出力静止画像が撮像された場合の動作も同様である。
例えば、1分程度の動画像の場合、動画像中のシーンは1〜数シーンであり、数枚の出力静止画像を含む管理画像のプリントを印刷できれば目的は果たせる。そのため、大サイズでのプリントは不要であり、例えば、Lサイズのプリント等でよい。
また、撮像部11により、管理画像のプリントに含まれた5枚の出力静止画像の中から3枚以上の出力静止画像が同時に撮像された場合の動作も同様である。
なお、広告の画像データ(動画像ないし静止画像)は、データ格納部26に格納しておくことができる。
また、シーン判別部35により、複数の動画像データの各々に対応する1つの出力静止画像データないし2以上の出力静止画像データの各々について、出力静止画像データに対応する出力静止画像を含む動画像のシーンが判別される。
また、撮像部11により、第1管理画像のプリントに含まれた5枚の第1出力静止画像の中から別の1枚の第1出力静止画像が撮像された場合の動作も同様である。
また、操作入力部17を介して入力された指示により、第2管理画像に含まれた6枚の第2出力静止画像の中から別の1枚の第2出力静止画像が選択された場合の動作も同様である。
これにより、ユーザは、第1管理画像のプリントに含まれた複数の第1出力静止画像の撮影順序、つまり、複数の動画像の撮影順序を知ることができる。
この場合、管理マーカ登録部25は、複数の動画像データの各々に対応する出力静止画像データの中から、画像評価部34による評価値が最も高い出力静止画像を1つずつ選択して、複数の第1出力静止画像データを得ることができる。
これにより、ユーザは、第1管理画像に含まれた第1出力静止画像を見ることにより、第1出力静止画像に紐付けられた動画像を容易に思い出すことができる。
これにより、ユーザは、第2管理画像に含まれた第2出力静止画像の表示色を見ることにより、再生回数の多い動画像のシーン、つまり、ユーザが好きな動画像のシーンを知ることができる。
また、上記各実施形態では、アクセスキーを含む管理画像データを生成することは必須ではないが、これに限定されず、少なくとも1つの出力静止画像データ、および、アクセスキーを含む管理画像データを生成し、出力静止画像に紐付けられた動画像のシーンを検索する時に利用してもよい。
本発明の方法は、例えば、その各々のステップをコンピュータに実行させるためのプログラムにより実施することができる。また、このプログラムが記録されたコンピュータ読み取り可能な記録媒体を提供することもできる。
Claims (46)
- 動画像データに基づいて少なくとも1つの静止画像データを生成する静止画像生成部と、
前記静止画像生成部において生成された前記少なくとも1つの静止画像データのうち、1つの静止画像データをユーザに選択させる静止画像選択部と、
前記静止画像選択部において選択された前記静止画像データまたは前記静止画像データに基づく情報を、管理マーカとして前記動画像データと紐付けて登録する管理マーカ登録部と、
前記動画像データを格納する格納部と、
前記格納部に格納された前記動画像データへアクセスするためのアクセスキーを発行するアクセスキー発行部と、
前記静止画像データと前記アクセスキーとを有する管理画像データを生成する管理画像生成部とを備えることを特徴とするコンテンツ管理システム。 - 前記管理画像データに基づく管理画像を画像商材として表示する表示装置または前記管理画像データに基づく管理画像を画像商材として印刷するプリンタを更に備えることを特徴とする請求項1に記載のコンテンツ管理システム。
- ユーザに画像商材を選択させる画像商材選択部と、
選択された前記画像商材に応じたアスペクト比で前記管理画像データに基づく管理画像をトリミングし、トリミング済み管理画像データを生成する管理画像トリミング部と、
前記トリミング済み管理画像データに基づくトリミング済み管理画像を前記画像商材として表示する表示装置または前記トリミング済み管理画像データに基づくトリミング済み管理画像を前記画像商材として印刷するプリンタとを更に備えることを特徴とする請求項1に記載のコンテンツ管理システム。 - 前記静止画像選択部において選択された前記静止画像データに基づく静止画像に編集処理を施して、編集静止画像データを生成する静止画像編集部を更に備え、
前記管理マーカ登録部は、前記編集静止画像データまたは前記編集静止画像データに基づく情報を、管理マーカとして前記動画像データと紐付けて登録することを特徴とする請求項2または3に記載のコンテンツ管理システム。 - 前記画像商材の有する前記管理画像を撮像し、撮像画像データを生成する撮像部と、
前記撮像画像データに基づく撮像画像から前記管理マーカを読み取る管理マーカ読取部と、
前記画像商材の有する前記管理画像に記載された前記アクセスキーを入力する入力部と、
前記管理マーカと前記アクセスキーとに基づいて前記格納部に格納された前記動画像データを検索する画像データ検索部と、
前記画像データ検索部において検索された前記動画像データに基づく動画像を再生する表示部とを備えることを特徴とする請求項2または3に記載のコンテンツ管理システム。 - 前記表示部における前記動画像の再生を制御する表示制御部を更に備え、
前記静止画像生成部は、少なくとも1つの前記静止画像データとともに、前記静止画像データに対応する前記動画像のタイムコードを抽出し、
前記表示制御部は、前記選択された静止画像データに対応する前記動画像データのタイムコードに基づいて前記動画像を再生することを特徴とする請求項5に記載のコンテンツ管理システム。 - 前記画像商材の有する前記管理画像を撮像し、撮像画像データを生成する撮像部と、
前記撮像画像データに基づく撮像画像から前記管理マーカを読み取る管理マーカ読取部と、
前記画像商材の有する前記管理画像に記載された前記アクセスキーを入力する入力部と、
前記管理マーカと前記アクセスキーとに基づいて前記格納部に格納された前記動画像データを検索する画像データ検索部と、
前記画像データ検索部において検索された前記動画像データに基づく動画像を再生する表示部とを備えることを特徴とする請求項4に記載のコンテンツ管理システム。 - 前記表示部における前記動画像の再生を制御する表示制御部を更に備え、
前記静止画像生成部は、少なくとも1つの前記静止画像データとともに、前記静止画像データに対応する前記動画像のタイムコードを抽出し、
前記表示制御部は、前記選択された静止画像データに対応する前記動画像データのタイムコードに基づいて前記動画像を再生することを特徴とする請求項7に記載のコンテンツ管理システム。 - 前記表示制御部は、前記静止画像編集部における前記編集処理の内容に基づいて前記動画像を再生することを特徴とする請求項8に記載のコンテンツ管理システム。
- 前記表示部における前記動画像の再生を制御する表示制御部を更に備え、
前記表示制御部は、AR技術を使用して、前記撮像された管理画像を前記表示部に表示し、前記表示部に表示された管理画像の、前記静止画像データに基づく静止画像の表示部分において前記動画像を再生する請求項5または7に記載のコンテンツ管理システム。 - 前記表示部における前記動画像の再生を制御する表示制御部を更に備え、
前記表示制御部は、前記表示部の全面ないし任意のサイズのウィンドウ内において前記動画像のシーンを再生する請求項5または7に記載のコンテンツ管理システム。 - 前記表示制御部は、AR技術を使用して、前記撮像された管理画像を前記表示部に表示し、前記表示部に表示された管理画像の、前記静止画像データに基づく静止画像の表示部分において前記動画像を再生する請求項6、8および9のいずれか1項に記載のコンテンツ管理システム。
- 前記表示制御部は、前記表示部の全面ないし任意のサイズのウィンドウ内において前記動画像のシーンを再生する請求項6、8および9のいずれか1項に記載のコンテンツ管理システム。
- 管理画像と前記管理画像に紐付られた動画像データとからなる管理コンテンツを管理するコンテンツ管理システムであって、
動画像データに基づいて少なくとも2つの静止画像データを生成する静止画像生成部と、
前記静止画像生成部において生成された前記少なくとも2つの静止画像データのうち、2以上の静止画像データを出力静止画像データとしてユーザに選択させる静止画像選択部と、
2以上の前記出力静止画像データの各々について、前記出力静止画像データに対応する出力静止画像を含む、前記動画像データに対応する動画像のシーンを判別するシーン判別部と、
前記2以上の出力静止画像データの各々、もしくは、前記2以上の出力静止画像データに対応する2枚以上の前記出力静止画像の各々の画像特徴量を、管理マーカとして、前記2枚以上の出力静止画像の各々に対応する動画像のシーンの動画像データと紐付けて登録する管理マーカ登録部と、
前記動画像データを格納する格納部と、
前記格納部に格納された前記動画像データへアクセスするためのアクセスキーを発行するアクセスキー発行部と、
少なくとも2つの前記出力静止画像データと前記アクセスキーとを含む管理画像データを生成する管理画像生成部とを備えることを特徴とするコンテンツ管理システム。 - 前記シーン判別部は、前記動画像における撮影日時の順で隣り合う2枚の出力静止画像の間の色の変化量が閾値を超えた場合に、前記色の変化量が閾値を超えた、前記隣り合う2枚の出力静止画像の間で前記動画像のシーンを分割し、前記分割された動画像のシーンの中から前記出力静止画像を含む動画像のシーンを判別するものである請求項14に記載のコンテンツ管理システム。
- さらに、前記管理画像データに対応する管理画像のプリントを撮像して撮像画像データを生成する撮像部と、
前記撮像画像データに対応する撮像画像から前記管理マーカを読み取る管理マーカ読取部と、
ユーザから入力された前記管理画像のプリントに記載されたアクセスキーを受け取る操作入力部と、
前記管理マーカと前記操作入力部を介して入力されたアクセスキーとに基づいて前記格納部に格納された前記動画像データを検索する画像データ検索部と、
前記動画像を再生する表示部と、
前記表示部における前記動画像の再生を制御する表示制御部とを備え、
前記撮像部により、前記管理画像のプリントに含まれた出力静止画像の中から1枚の出力静止画像が撮像された場合に、前記表示制御部は、前記画像データ検索部により検索された動画像データの中から、前記管理マーカ読取部により、前記撮像された1枚の出力静止画像から読み取られた管理マーカに紐付けられた動画像データに対応する動画像のシーンを前記表示部に再生するように制御するものである請求項14または15に記載のコンテンツ管理システム。 - 前記撮像部により、前記管理画像のプリントに含まれた出力静止画像の中から2枚以上の出力静止画像が同時に撮像された場合に、前記表示制御部は、前記同時に撮像された2枚以上の出力静止画像の各々に対応する動画像のシーンを前記表示部に同時に再生するように制御するものである請求項16に記載のコンテンツ管理システム。
- 前記表示制御部は、AR技術を使用して、前記撮像された管理画像のプリントを前記表示部に表示し、前記表示部に表示された管理画像のプリントの出力静止画像の表示部分において前記動画像のシーンを再生する場合、前記動画像のシーンの再生が終了した出力静止画像の表示部分において何も表示しないように制御するものである請求項17に記載のコンテンツ管理システム。
- 前記表示制御部は、前記表示部の全面ないし任意のサイズのウィンドウ内において前記動画像のシーンを再生する場合、前記動画像のシーンの再生が終了した出力静止画像の表示部分を非表示にし、前記動画像のシーンの再生が終了していない出力静止画像の表示部分を、前記非表示にされた出力静止画像の表示部分にまで拡大して再生するように制御するものである請求項17に記載のコンテンツ管理システム。
- 前記表示制御部は、前記動画像のシーンの再生が終了した出力静止画像の表示部分において、前記再生が終了した動画像のシーンに関連のある広告を表示するように制御するものである請求項17に記載のコンテンツ管理システム。
- さらに、前記動画像のシーンの重要度を判定する重要シーン判定部を備え、
前記表示制御部は、前記重要シーン判定部により、前記重要度が閾値未満であると判定された動画像のシーンが再生される出力静止画像の表示部分において、広告、もしくは、前記重要シーン判定部により、前記重要度が閾値以上であると判定された任意の動画像のシーンを再生するように制御するものである請求項17に記載のコンテンツ管理システム。 - さらに、前記管理画像データに含まれた静止画像データの数に応じて、前記管理画像データに対応する管理画像が印刷されるプリントのサイズを制御するプリント制御部を備え、
前記プリント制御部は、前記管理画像データに含まれた出力静止画像データの数が多くなるほど、前記管理画像が印刷されるプリントのサイズが、より大きくなるように制御するものである請求項14〜21のいずれか1項に記載のコンテンツ管理システム。 - 前記管理画像データに対応する管理画像が、一定のサイズのプリントに印刷されると仮定した場合に、前記管理画像のプリントに含まれる出力静止画像のサイズが閾値未満となる場合、前記管理画像生成部は、前記出力静止画像データの中から、前記一定のサイズの管理画像のプリントに含まれる出力静止画像のサイズが閾値以上となる数の出力静止画像データを選択し、前記選択された数の出力静止画像データを含む管理画像データを生成するものである請求項14〜21のいずれか1項に記載のコンテンツ管理システム。
- 前記静止画像生成部、前記静止画像選択部、および、前記シーン判別部は、複数の前記動画像データの各々について処理を繰り返し行うものであり、
前記管理マーカ登録部は、前記複数の動画像データの各々に対応する出力静止画像データの中から前記出力静止画像データを少なくとも1つずつ選択して得られた複数の第1出力静止画像データの各々、もしくは、複数の前記第1出力静止画像データに対応する複数枚の第1出力静止画像の各々の画像特徴量を、第1管理マーカとして、前記複数枚の第1出力静止画像の各々に対応する動画像のシーンの動画像データと紐付けて登録し、かつ、前記複数の動画像データの各々について、前記出力静止画像データを第2出力静止画像データとして、1つの前記第2出力静止画像データないし2以上の前記第2出力静止画像データの各々、もしくは、前記1つの第2出力静止画像データないし前記2以上の第2出力静止画像データの各々に対応する第2出力静止画像の画像特徴量を、第2管理マーカとして、1枚の前記第2出力静止画像ないし2枚以上の前記第2出力静止画像の各々に対応する動画像のシーンの動画像データと紐付けて登録するものであり、
前記管理画像生成部は、少なくとも2つの前記第1出力静止画像データと前記アクセスキーとを含む第1管理画像データ、および、前記複数の動画像データの各々について、少なくとも1つの前記第2出力静止画像データを含む第2管理画像データを生成するものである請求項14に記載のコンテンツ管理システム。 - さらに、前記第1管理画像データに対応する第1管理画像のプリントを撮像して撮像画像データを生成する撮像部と、
前記撮像画像データに対応する撮像画像から前記第1管理マーカを読み取る管理マーカ読取部と、
ユーザから入力された前記管理画像のプリントに記載されたアクセスキーを受け取る操作入力部と、
前記管理マーカと前記操作入力部を介して入力されたアクセスキーとに基づいて前記格納部に格納された前記動画像データを検索する画像データ検索部と、
前記動画像を再生する表示部と、
前記表示部における前記動画像の再生を制御する表示制御部とを備え、
前記撮像部により、前記第1管理画像のプリントに含まれた第1出力静止画像の中から1枚の第1出力静止画像が撮像された場合に、前記表示制御部は、前記画像データ検索部により検索された動画像データの中から、前記管理マーカ読取部により、前記撮像された1枚の第1出力静止画像から読み取られた第1管理マーカに紐付けられた動画像データに対応する第2管理画像を前記表示部に表示するように制御するものであり、
前記操作入力部を介して入力された指示により、前記表示部に表示された第2管理画像に含まれた第2出力静止画像の中から1枚の第2出力静止画像が選択された場合に、前記表示制御部は、前記画像データ検索部により検索された動画像データの中から、前記管理マーカ読取部により、前記選択された1枚の第2出力静止画像から読み取られた第2管理マーカに紐付けられた動画像データに対応する動画像のシーンを前記表示部に再生するように制御するものである請求項24に記載のコンテンツ管理システム。 - 前記表示制御部は、前記表示部に表示された第2管理画像に含まれた第2出力静止画像に対応する動画像のシーンの再生回数に応じて、前記第2出力静止画像の表示色を変えるように制御するものである請求項25に記載のコンテンツ管理システム。
- 前記管理画像生成部は、前記第1管理画像データに含まれた第1出力静止画像データに対応する第1出力静止画像の撮影日時に応じて、前記第1出力静止画像の表示色を変えるものである請求項24〜26のいずれか1項に記載のコンテンツ管理システム。
- さらに、前記出力静止画像に含まれた人物の顔、前記出力静止画像のボケ、ブレ、色、明るさのうちの少なくとも1つに基づいて、前記1枚の出力静止画像ないし2枚以上の出力静止画像の各々を評価して評価値を算出する画像評価部を備え、
前記管理マーカ登録部は、前記複数の動画像データの各々に対応する出力静止画像データの中から、前記画像評価部により算出された評価値が最も高い出力静止画像を1つずつ選択して、前記複数の第1出力静止画像データを得るものである請求項24〜27のいずれか1項に記載のコンテンツ管理システム。 - 前記表示制御部は、AR技術を使用して、前記撮像された管理画像のプリントを前記表示部に表示し、前記表示部に表示された管理画像のプリントの出力静止画像の表示部分において前記動画像のシーンを再生するように制御するものである請求項16、17および25のいずれか1項に記載のコンテンツ管理システム。
- 前記表示制御部は、前記表示部の全面ないし任意のサイズのウィンドウ内において前記動画像のシーンを再生するように制御するものである請求項16、17および25のいずれか1項に記載のコンテンツ管理システム。
- 管理画像と前記管理画像に紐付られた動画像データとからなる管理コンテンツの生成方法であって、
前記動画像データに基づいて少なくとも1つの静止画像データを生成し、
生成された前記少なくとも1つの静止画像データのうち、1つの静止画像データをユーザに選択させ、
選択された前記静止画像データまたは選択された前記静止画像データに基づく情報を管理マーカとして前記動画像データと関連付けて登録し、
ユーザからの指示に基づいて、前記動画像データへのアクセスを可能とするアクセスキーを発行し、
前記静止画像データと前記アクセスキーとを有する前記管理画像を生成することを特徴とする管理コンテンツ生成方法。 - 選択された前記静止画像データに基づく静止画像に編集処理を施して、編集静止画像データを更に生成し、
前記編集静止画像データまたは前記編集静止画像データに基づく情報を、管理マーカとして前記動画像データと紐付けて登録することを特徴とする請求項31に記載の管理コンテンツ生成方法。 - 請求項31に記載の管理コンテンツ生成方法によって生成された管理コンテンツを再生する管理コンテンツ再生方法であって、
前記管理画像を撮像して撮像画像データを生成し、
前記撮像画像データに基づく撮像画像から前記管理マーカを読み取り、
前記管理画像に記載された前記アクセスキーを入力し、
前記アクセスキーと前記管理マーカとによって前記管理画像に対応する前記動画像データを検索し、
検索された前記動画像データに基づいて動画像を再生する管理コンテンツ再生方法。 - 前記動画像データに基づく少なくとも1つの静止画像データの生成に際して、前記静止画像データに対応する前記動画像のタイムコードを更に抽出し、
抽出された前記タイムコードに基づいて前記動画像を再生することを特徴とする請求項33に記載の管理コンテンツ再生方法。 - 請求項32に記載の管理コンテンツ生成方法によって生成された管理コンテンツを再生する管理コンテンツ再生方法であって、
前記管理画像を撮像して撮像画像データを生成し、
前記撮像画像データに基づく撮像画像から前記管理マーカを読み取り、
前記管理画像に記載された前記アクセスキーを入力し、
前記アクセスキーと前記管理マーカとによって前記管理画像に対応する前記動画像データを検索し、
検索された前記動画像データに基づいて動画像を再生する管理コンテンツ再生方法。 - 前記動画像データに基づく少なくとも1つの静止画像データの生成に際して、前記静止画像データに対応する前記動画像のタイムコードを更に抽出し、
抽出された前記タイムコードに基づいて前記動画像を再生することを特徴とする請求項35に記載の管理コンテンツ再生方法。 - 前記編集静止画像データの生成の際の前記編集処理の内容に基づいて前記動画像を再生することを特徴とする請求項36に記載の管理コンテンツ再生方法。
- 管理画像と前記管理画像に紐付られた動画像データとからなる管理コンテンツの生成方法であって、
静止画像生成部が、動画像データに基づいて少なくとも2つの静止画像データを生成するステップと、
静止画像選択部が、前記静止画像生成部において生成された前記少なくとも2つの静止画像データのうち、2以上の静止画像データを出力静止画像データとしてユーザに選択させるステップと、
シーン判別部が、2以上の前記出力静止画像データの各々について、前記出力静止画像データに対応する出力静止画像を含む、前記動画像データに対応する動画像のシーンを判別するステップと、
管理マーカ登録部が、前記2以上の出力静止画像データの各々、もしくは、前記2以上の出力静止画像データに対応する2枚以上の前記出力静止画像の各々の画像特徴量を、管理マーカとして、前記2枚以上の出力静止画像の各々に対応する動画像のシーンの動画像データと紐付けて登録するステップと、
アクセスキー発行部が、格納部に格納された前記動画像データへアクセスするためのアクセスキーを発行するステップと、
管理画像生成部が、少なくとも2つの前記出力静止画像データと前記アクセスキーとを含む管理画像データを生成するステップとを含むことを特徴とする管理コンテンツ生成方法。 - 請求項38に記載の管理コンテンツ生成方法によって生成された管理コンテンツを再生する管理コンテンツ再生方法であって、
撮像部が、前記管理画像データに対応する管理画像のプリントを撮像して撮像画像データを生成するステップと、
管理マーカ読取部が、前記撮像画像データに対応する撮像画像から前記管理マーカを読み取るステップと、
操作入力部が、ユーザから入力された前記管理画像のプリントに記載されたアクセスキーを受け取るステップと、
画像データ検索部が、前記管理マーカと前記操作入力部を介して入力されたアクセスキーとに基づいて前記格納部に格納された前記動画像データを検索するステップと、
前記撮像部により、前記管理画像のプリントに含まれた出力静止画像の中から1枚の出力静止画像が撮像された場合に、表示制御部が、前記画像データ検索部により検索された動画像データの中から、前記管理マーカ読取部により、前記撮像された1枚の出力静止画像から読み取られた管理マーカに紐付けられた動画像データに対応する動画像のシーンを表示部に再生するように制御するステップとを含むことを特徴とする管理コンテンツ再生方法。 - 前記撮像部により、前記管理画像のプリントに含まれた出力静止画像の中から2枚以上の出力静止画像が同時に撮像された場合に、前記表示制御部が、前記同時に撮像された2枚以上の出力静止画像の各々に対応する動画像のシーンを前記表示部に同時に再生するように制御するステップを含む請求項39に記載の管理コンテンツ再生方法。
- 管理画像と前記管理画像に紐付られた動画像データとからなる管理コンテンツの生成方法であって、
静止画像生成部が、動画像データに基づいて少なくとも2つの静止画像データを生成するステップと、
静止画像選択部が、前記静止画像生成部において生成された前記少なくとも2つの静止画像データのうち、1つの静止画像データないし2以上の静止画像データを出力静止画像データとしてユーザに選択させるステップと、
シーン判別部が、前記1つの出力静止画像データないし前記2以上の出力静止画像データの各々について、前記出力静止画像データに対応する出力静止画像を含む前記動画像のシーンを判別するステップと、
前記静止画像生成部、前記静止画像選択部、および、前記シーン判別部が、複数の前記動画像データの各々について処理を繰り返し行うステップと、
管理マーカ登録部が、前記複数の動画像データの各々に対応する出力静止画像データの中から前記出力静止画像データを少なくとも1つずつ選択して得られた複数の第1出力静止画像データの各々、もしくは、複数の前記第1出力静止画像データに対応する複数枚の第1出力静止画像の各々の画像特徴量を、第1管理マーカとして、前記複数枚の第1出力静止画像の各々に対応する動画像のシーンの動画像データと紐付けて登録し、かつ、前記複数の動画像データの各々について、前記出力静止画像データを第2出力静止画像データとして、1つの前記第2出力静止画像データないし2以上の前記第2出力静止画像データの各々、もしくは、前記1つの第2出力静止画像データないし前記2以上の第2出力静止画像データの各々に対応する第2出力静止画像の画像特徴量を、第2管理マーカとして、1枚の前記第2出力静止画像ないし2枚以上の前記第2出力静止画像の各々に対応する動画像のシーンの動画像データと紐付けて登録するステップと、
アクセスキー発行部が、格納部に格納された前記動画像データへアクセスするためのアクセスキーを発行するステップと、
管理画像生成部が、少なくとも2つの前記第1出力静止画像データと前記アクセスキーとを含む第1管理画像データ、および、前記複数の動画像データの各々について、少なくとも1つの前記第2出力静止画像データを含む第2管理画像データを生成するステップとを含むことを特徴とする管理コンテンツ生成方法。 - 請求項41に記載の管理コンテンツ生成方法によって生成された管理コンテンツを再生する管理コンテンツ再生方法であって、
撮像部が、前記第1管理画像データに対応する第1管理画像のプリントを撮像して撮像画像データを生成するステップと、
管理マーカ読取部が、前記撮像画像データに対応する撮像画像から前記第1管理マーカを読み取るステップと、
操作入力部が、ユーザから入力された前記管理画像のプリントに記載されたアクセスキーを受け取るステップと、
画像データ検索部が、前記管理マーカと前記操作入力部を介して入力されたアクセスキーとに基づいて前記格納部に格納された前記動画像データを検索するステップと、
前記撮像部により、前記第1管理画像のプリントに含まれた第1出力静止画像の中から1枚の第1出力静止画像が撮像された場合に、表示制御部が、前記画像データ検索部により検索された動画像データの中から、前記管理マーカ読取部により、前記撮像された1枚の第1出力静止画像から読み取られた第1管理マーカに紐付けられた動画像データに対応する第2管理画像を表示部に表示するように制御するステップと、
前記表示部に表示された第2管理画像に含まれた第2出力静止画像の中から1枚の第2出力静止画像を選択する指示を、操作入力部を介して入力するステップと、
前記操作入力部を介して入力された指示により、前記表示部に表示された第2管理画像に含まれた第2出力静止画像の中から1枚の第2出力静止画像が選択された場合に、前記表示制御部が、前記画像データ検索部により検索された動画像データの中から、前記管理マーカ読取部により、前記選択された1枚の第2出力静止画像から読み取られた第2管理マーカに紐付けられた動画像データに対応する動画像のシーンを前記表示部に再生するように制御するステップとを含むことを特徴とする管理コンテンツ再生方法。 - 請求項31、32、38および41のいずれか1項に記載の管理コンテンツ生成方法の各々のステップをコンピュータに実行させるためのプログラム。
- 請求項31、32、38および41のいずれか1項に記載の管理コンテンツ生成方法の各々のステップをコンピュータに実行させるためのプログラムが記録されたコンピュータ読み取り可能な記録媒体。
- 請求項33〜37、39、40および42のいずれか1項に記載の管理コンテンツ再生方法の各々のステップをコンピュータに実行させるためのプログラム。
- 請求項33〜37、39、40および42のいずれか1項に記載の管理コンテンツ再生方法の各々のステップをコンピュータに実行させるためのプログラムが記録されたコンピュータ読み取り可能な記録媒体。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014186374A JP5917635B2 (ja) | 2014-02-05 | 2014-09-12 | コンテンツ管理システム、管理コンテンツ生成方法、管理コンテンツ再生方法、プログラムおよび記録媒体 |
US14/608,212 US9721613B2 (en) | 2014-02-05 | 2015-01-29 | Content management system, management content generation method, management content reproduction method, program and recording medium |
CN201510050189.XA CN104821001B (zh) | 2014-02-05 | 2015-01-30 | 内容管理系统、管理内容生成方法以及管理内容再生方法 |
EP15153314.8A EP2905782A1 (en) | 2014-02-05 | 2015-01-30 | Content management system, management content generation method, management content reproduction method, program and recording medium |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014020812 | 2014-02-05 | ||
JP2014020812 | 2014-02-05 | ||
JP2014186374A JP5917635B2 (ja) | 2014-02-05 | 2014-09-12 | コンテンツ管理システム、管理コンテンツ生成方法、管理コンテンツ再生方法、プログラムおよび記録媒体 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015165379A JP2015165379A (ja) | 2015-09-17 |
JP5917635B2 true JP5917635B2 (ja) | 2016-05-18 |
Family
ID=52462149
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014186374A Active JP5917635B2 (ja) | 2014-02-05 | 2014-09-12 | コンテンツ管理システム、管理コンテンツ生成方法、管理コンテンツ再生方法、プログラムおよび記録媒体 |
Country Status (4)
Country | Link |
---|---|
US (1) | US9721613B2 (ja) |
EP (1) | EP2905782A1 (ja) |
JP (1) | JP5917635B2 (ja) |
CN (1) | CN104821001B (ja) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10169659B1 (en) * | 2015-09-24 | 2019-01-01 | Amazon Technologies, Inc. | Video summarization using selected characteristics |
JP6644560B2 (ja) * | 2016-01-25 | 2020-02-12 | 株式会社フォトクリエイト | 動画像提供サーバ、動画像提供方法、及びプログラム |
KR20180042589A (ko) * | 2016-10-18 | 2018-04-26 | 디에스글로벌 (주) | 사용자 편집 이미지를 이용한 증강현실 콘텐츠 제공 방법 및 시스템 |
US11169661B2 (en) * | 2017-05-31 | 2021-11-09 | International Business Machines Corporation | Thumbnail generation for digital images |
US10916220B2 (en) | 2018-08-07 | 2021-02-09 | Apple Inc. | Detection and display of mixed 2D/3D content |
JP7183674B2 (ja) * | 2018-10-03 | 2022-12-06 | 大日本印刷株式会社 | フォトブック作製システム |
JP7281951B2 (ja) | 2019-04-22 | 2023-05-26 | シャープ株式会社 | 電子機器、制御装置、制御プログラムおよび制御方法 |
JP7358845B2 (ja) * | 2019-08-27 | 2023-10-11 | 大日本印刷株式会社 | 画像編集装置、印画物作製システム及び画像編集プログラム |
US20220076489A1 (en) * | 2020-09-08 | 2022-03-10 | Rovi Guides, Inc. | Systems and methods for generating supplemental content in an extended reality environment |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4174083B2 (ja) | 1995-05-01 | 2008-10-29 | キヤノン株式会社 | 画像処理方法及びその装置 |
US7224892B2 (en) * | 2001-06-26 | 2007-05-29 | Canon Kabushiki Kaisha | Moving image recording apparatus and method, moving image reproducing apparatus, moving image recording and reproducing method, and programs and storage media |
JP4194272B2 (ja) * | 2001-12-28 | 2008-12-10 | キヤノン株式会社 | 動画像管理装置及び方法 |
US7454421B2 (en) * | 2003-07-11 | 2008-11-18 | Nippon Telegraph And Telephone Corporation | Database access control method, database access controller, agent processing server, database access control program, and medium recording the program |
US7685428B2 (en) | 2003-08-14 | 2010-03-23 | Ricoh Company, Ltd. | Transmission of event markers to data stream recorder |
GB2417117A (en) | 2004-08-13 | 2006-02-15 | Hewlett Packard Development Co | Index print with associated memory tags for storing image data |
US8009961B2 (en) * | 2005-10-25 | 2011-08-30 | Sony Corporation | Electronic apparatus, playback management method, display control apparatus, and display control method |
JP2007124047A (ja) * | 2005-10-25 | 2007-05-17 | Sony Corp | 表示制御装置、及び、表示制御方法 |
US7840898B2 (en) | 2005-11-01 | 2010-11-23 | Microsoft Corporation | Video booklet |
JP4508112B2 (ja) | 2006-01-11 | 2010-07-21 | ノーリツ鋼機株式会社 | 静止画抽出システム |
JP4887800B2 (ja) | 2006-01-24 | 2012-02-29 | 富士ゼロックス株式会社 | 文書処理システム |
-
2014
- 2014-09-12 JP JP2014186374A patent/JP5917635B2/ja active Active
-
2015
- 2015-01-29 US US14/608,212 patent/US9721613B2/en active Active
- 2015-01-30 EP EP15153314.8A patent/EP2905782A1/en not_active Ceased
- 2015-01-30 CN CN201510050189.XA patent/CN104821001B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
US9721613B2 (en) | 2017-08-01 |
CN104821001A (zh) | 2015-08-05 |
EP2905782A1 (en) | 2015-08-12 |
CN104821001B (zh) | 2018-07-27 |
US20150221343A1 (en) | 2015-08-06 |
JP2015165379A (ja) | 2015-09-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6074395B2 (ja) | コンテンツ管理システム、管理コンテンツ生成方法、管理コンテンツ再生方法、プログラムおよび記録媒体 | |
JP5917635B2 (ja) | コンテンツ管理システム、管理コンテンツ生成方法、管理コンテンツ再生方法、プログラムおよび記録媒体 | |
US10529381B2 (en) | Method, system and computer program product for interactively identifying same individuals or objects present in video recordings | |
US8548249B2 (en) | Information processing apparatus, information processing method, and program | |
US8345118B2 (en) | Image capturing apparatus, image capturing method, album creating apparatus, album creating method, album creating system and computer readable medium | |
TWI388212B (zh) | An image processing apparatus, an image reproduction apparatus, an image processing method, and a memory medium | |
US7636450B1 (en) | Displaying detected objects to indicate grouping | |
US7813557B1 (en) | Tagging detected objects | |
US8421871B2 (en) | Method and apparatus for image pickup and image processing | |
CN107430780B (zh) | 用于基于视频内容特性的输出创建的方法 | |
US8259995B1 (en) | Designating a tag icon | |
US7694885B1 (en) | Indicating a tag with visual data | |
US7813526B1 (en) | Normalizing detected objects | |
JP2010518673A (ja) | ビデオの索引付けとビデオシノプシスのための、方法およびシステム | |
CN109791556B (zh) | 一种用于从移动视频自动创建拼贴的方法 | |
JP2006314010A (ja) | 画像処理装置及び画像処理方法 | |
JP2006079457A (ja) | 電子アルバム表示システム、電子アルバム表示方法、電子アルバム表示プログラム、画像分類装置、画像分類方法、及び画像分類プログラム | |
US9779306B2 (en) | Content playback system, server, mobile terminal, content playback method, and recording medium | |
JP6410427B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP7470279B2 (ja) | 情報処理装置、画像出力プログラム、及び画像出力方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160108 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160315 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160406 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5917635 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |