WO2010084602A1 - 画像表示システム、方法、及びプログラム - Google Patents

画像表示システム、方法、及びプログラム Download PDF

Info

Publication number
WO2010084602A1
WO2010084602A1 PCT/JP2009/051054 JP2009051054W WO2010084602A1 WO 2010084602 A1 WO2010084602 A1 WO 2010084602A1 JP 2009051054 W JP2009051054 W JP 2009051054W WO 2010084602 A1 WO2010084602 A1 WO 2010084602A1
Authority
WO
WIPO (PCT)
Prior art keywords
images
image
information
image display
input
Prior art date
Application number
PCT/JP2009/051054
Other languages
English (en)
French (fr)
Inventor
有人 望月
Original Assignee
株式会社日立製作所
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社日立製作所 filed Critical 株式会社日立製作所
Priority to PCT/JP2009/051054 priority Critical patent/WO2010084602A1/ja
Publication of WO2010084602A1 publication Critical patent/WO2010084602A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons

Definitions

  • the present invention relates to a system and method for reproducing content information such as images and videos, and a program, and in particular, information that enables a user to browse content or introduce it to others interactively based on attributes attached to the content.
  • the present invention relates to a reproduction system and method, and a program.
  • Non-Patent Document 1 There is also software that displays a grouped picture by year, month, day, and hour based on the image shooting time (Non-Patent Documents 1 and 2). In addition, sharing of photos using various image sharing services on the web has come to be performed. JP 2008-59152 A Bederson, B.
  • Photos taken and stored in such a shooting style are dynamically grouped according to the degree of interest of the user while explicitly presenting the interval of attributes such as the shooting time between photos, By making it easy to recall the shooting timing, it is possible to efficiently browse a large number of images and present them to others.
  • the conventional software displays a large number of images grouped in predetermined intervals, or arranges them on a grid although they are grouped dynamically, and the shooting time between photos There is nothing that explicitly presents the interval of attributes such as browsing a large number of images and presenting them to others.
  • An object of the present invention is to solve such a problem, explicitly present an interval of attributes such as shooting times of a large number of images, and dynamically group and display according to the degree of interest of the user. It is to provide an information reproducing apparatus and method, and a program that can be used.
  • the image display system of the present invention includes a display device that displays a plurality of images in groups on a guide line, and a storage unit that stores image identification information of the plurality of images and image information having attribute data attached to the images.
  • the storage means has data of one or more of the number of groups, the number of images, and the overlap amount displayed on the display device, and the information processing means includes a plurality of images so as to be within the range of the data. It is characterized in that the grouping and the arrangement on the guide line are calculated. Further, the information processing means determines the center position of the group and arranges the center position on the guide line.
  • the information processing means selects an image with the oldest date and time data from among the plurality of images, and a predetermined number before or / and after the selected image.
  • the average of the imaging intervals is calculated, and when the imaging interval between the selected image and the immediately preceding image is larger than the average value plus a threshold value, the groups are determined as different groups.
  • the image display method of the present invention includes a step of acquiring attribute data attached to an image for a plurality of images to be displayed on the screen, a step of acquiring input information to the screen operated by the input unit, and an information processing unit. And a step of performing grouping based on relative distance information between the input information and the attribute data, calculating an arrangement of the plurality of images on a guide line, and displaying on the screen. Further, the information processing means performs grouping by changing a distance threshold for grouping based on the relative distance according to the input information, calculates an arrangement on a guide line, and displays it on the screen. To do.
  • the image display program of the present invention for a plurality of images to be displayed on the screen, obtaining from the database attribute data attached to the image, obtaining input information to the screen operated by the input means, A step of performing grouping based on relative distance information between the input information and the attribute data, calculating an arrangement of the plurality of images on a guide line, and displaying the plurality of images on a screen. Further, according to the input information, the grouping is performed by changing the distance threshold for grouping based on the relative distance, and the arrangement on the guide line is calculated and displayed on the screen.
  • users can browse and present digital content such as photos that they have taken and stored efficiently without browsing and sorting in advance and according to their degree of interest. It becomes possible to do. Also, by mixing photos taken by yourself and photos taken by others, you can grasp the places and events that many have noticed, and understand the differences between places and events that you and others have noticed. Can do.
  • FIG. 3 is a diagram illustrating a display example when the user reduces the guide curve using the input device 102.
  • FIG. FIG. 3 is a diagram illustrating a display example when the user reduces the guide curve using the input device 102.
  • FIG. 3 is a diagram showing a display example when the user enlarges the guide curve using the input device 102.
  • FIG. FIG. 10 is a diagram illustrating a flow when a user reduces or enlarges a guide curve using the input device 102. It is a figure which shows the example of a display when the photograph files 107 and 112 read with the photograph display system by this invention are the things by several photographers. It is a figure which shows the example of the attribute information of the photo files 107 and 112.
  • FIG. 6 is a diagram illustrating an example when a user performs an operation of enlarging a guide curve using the input device 102.
  • FIG. 10 is a diagram illustrating an example when a user performs a reduction operation of a guide curve using the input device 102.
  • FIG. 10 is a diagram illustrating an example when a user performs a horizontal movement operation of a guide curve using the input device 102.
  • 100 photo display system 101 information display device, 102 input device, 103 information processing device, 104 memory (information storage device 1), 105 hard disk (information storage device 2), 106 reproduction program, 107 photo file, 108 bus line, 109 communication unit, 110 network, 111 remote storage, 112 photo file, 201 guide curve, 202 photo icon, 203 guide curve for photographer ⁇ , 204 guide curve for photographer ⁇ , 205 guide curve for photographer ⁇
  • FIG. 1 is a diagram showing a hardware configuration of a photo display system according to an embodiment of the present invention.
  • the photograph display system 100 is a system including an information display device 101, an input device 102, an information processing device 103, a memory 104, a hard disk 105, and a bus line 108. Further, the communication unit 109 may be provided.
  • the hard disk 105 stores a reproduction program 106 and a plurality of photo files 107.
  • the information processing apparatus 103 reads the reproduction program 106 into the memory 104 and executes it, the photo file 107 group is read into the memory 104. Display is performed on the information display device 101 based on the means of the present invention.
  • the communication unit 109 is used to read a plurality of photo files 112 stored in the remote storage 111 connected to the end of the network 110 into the memory 104 and replace the photo file 107 or simultaneously with the photo file 107. It may be used for display.
  • FIG. 2 is a diagram showing an example of displaying a group of photo files 107 and 112 in the photo display system shown as an example of the present invention.
  • a photograph is described as an example, but in the present invention, an image to be displayed includes, in addition to a photograph, an icon or the like that symbolically represents the contents and functions of a video, a program, and the like.
  • the photo icons 202 corresponding to the photo files 107 and 112 are arranged and displayed in time series from the oldest shooting time to the newest.
  • it is arranged on the guide curve 201.
  • a known spline curve can be used as the guide curve.
  • Other known sine wave functions or user-specified free curves may be used.
  • the photo icons 202 are displayed in groups so that the number of groups displayed on the information display device 101 falls within a predetermined range.
  • the distance between the groups of the photo icons 202 reflects the difference in the shooting times of the corresponding photo files 107 and 112.
  • the difference in shooting time may be used as it is, or may be used after being appropriately corrected using a logarithmic function.
  • attributes used for the arrangement of the photo icon 202 in addition to attributes such as the shooting date and time, similarity, color distribution, associated keywords, and degree of match with a search keyword when using a known image search system are used. May be.
  • the user can use the input device 102 to instruct the displayed photo files 107 and 112 to slide in the horizontal direction or the like, and to instruct to enlarge or reduce the guide curve 201.
  • FIG. 3 is a diagram showing steps after the reproduction program 106 is executed.
  • the reproduction program 106 When the reproduction program 106 is activated, the photo file 107 group is read from the designated location on the hard disk 105 (S301).
  • the location where the photo file 107 group is read may be designated in advance, or may be designated by the user during execution of the reproduction program 106. Instead of the photo file 107 group to be read, or in addition to these, the previous photo file 107 group via the network 110 may be read.
  • the photo files 107 and 112 are rearranged according to attributes used for grouping, for example, the shooting time (S302).
  • the attribute used for grouping is based on similarity, color distribution, associated keywords, and the degree of match with a search keyword when using a known image search system, in addition to the attribute of shooting time. Also good. These attributes may be selected by the user using the input device.
  • FIG. 11 shows an example of the attribute information database of the photo files 107 and 112.
  • the arrangement position of the photo icon 202 is determined by the flow shown in FIG. 4 (S303). Thereafter, when the number of groups of the photo icons 202 displayed on the information display device 101 is larger than a predetermined number (S304), the parameters used for grouping are slightly changed so that the number of groups decreases (S305). Then, grouping is performed according to the flow shown in FIG. 5 (S306). After grouping, the arrangement position of the photo icon 202 is determined again in the flow shown in FIG. 4 (S303).
  • the steps S303 to S306 are repeated until the number of groups of the photo icons 202 displayed on the information display device 101 is smaller than a predetermined number.
  • the number of photo icons 202 displayed on the information display device 101 is a predetermined number. More than the number, or the photographing interval of the left end and the right end of the photo icons 202 displayed on the information display device 101 is larger than a predetermined interval, or the area of the photo icon 202 displayed on the information display device 101 A condition such as whether the ratio of the information display device 101 to the area of the information display device 101 is larger than a predetermined value may be used. These conditions may be stored in the storage device in advance, or can be selected by the user based on the stored data.
  • FIG. 4 is a diagram showing a flow for determining the position of the photo icon 202.
  • the guide curve 201 for arrangement is calculated (S401).
  • a known spline curve can be used as the guide curve.
  • Other known sine wave functions or user-specified free curves may be used.
  • initial values are used when the program is started, and when there is a user operation via the input device 102 thereafter, the parameters changed accordingly are used.
  • the center position on the guide curve is determined for each group of photo icons 202 (S402).
  • the distance between the groups is determined by using an imaging interval between groups, multiplying by an appropriate coefficient, and performing scaling.
  • the photographing interval is very dense or sparse, and in this embodiment, it is preferable to perform scaling after using a known logarithmic function. Therefore, the center position of each group is determined at an interval reflecting the imaging interval on the guide curve having the oldest group and the newest group as end points.
  • the position of the photo icon 202 belonging to the group is determined (S403 to S405).
  • the photo icons 202 are arranged on a grid so as to form a square centered on the center position of the group.
  • the scale of the photo icon 202 is corrected so that the area where the groups overlap is smaller than a predetermined value (S406).
  • the arrangement may be corrected instead of the scale using an arrangement algorithm.
  • FIG. 5 is a diagram showing a flow of grouping the photo files 107 and 112 according to the shooting time.
  • the photo files 107 and 112 grouped in order of shooting time are selected in order from the top of the group (S501), the average of the shooting intervals with a predetermined number of photo files 107 and 112 before and after is calculated (S502), and the selected photo
  • the shooting interval of the photo selected immediately before (in the case of the first photo, the shooting interval is set to 0 because there is no photo selected immediately before) is added to the average of the shooting intervals calculated in S502. If it is larger, it is determined that the selected photo belongs to a group different from the previously selected photo (S504), and if it is smaller, the selected photo is selected. Is determined to belong to the same group as the previously selected photo (S505), and the step of repeating is repeated until the latest one of the photo files 107 and 112 is reached.
  • the grouping method is selected in descending order of the shooting interval, and it is determined that the photos before and after the shooting interval belong to another group until the predetermined number of groups is reached. There is also a way to do it.
  • FIG. 6 is a conceptual diagram of grouping according to the flow of FIG. In this embodiment, the case where the attribute data is the imaging date / time information is described. However, the same calculation method is applied to other attribute data based on the relative distance attached to the image. Is possible.
  • FIG. 7 and FIG. 8 are diagrams showing changes in the display example of FIG. 2 when the user reduces or enlarges the guide curve using the input device 102.
  • grouping is performed so that the number of groups of photo icons 202 displayed on the information display device 101 is equal to or less than a predetermined number.
  • grouping is performed such that the number of groups of the photo icons 202 displayed on the information display device 101 is equal to or greater than a predetermined number.
  • FIG. 9 is a diagram showing a flow when the user reduces or enlarges the guide curve in the horizontal direction using the input device 102.
  • the horizontal movement amount of the mouse is set as the slide position of the guide curve in the horizontal direction (FIG. 14), and the rotation direction and amount of the mouse wheel are set as the guide curve.
  • a keyboard can also be used.
  • the left cursor key and the right cursor key can be assigned to the slide amount of the guide curve in the horizontal direction
  • the upper cursor key and the lower cursor key can be assigned to the enlargement / reduction operation of the guide curve.
  • the guide curve is enlarged or reduced in the horizontal direction, and at the same time, the position of the photo icon 202 changes accordingly.
  • the position of the photo icon 202 is updated (S902), and it is determined whether the number of groups displayed on the information display device 101 is less than a predetermined number (S903).
  • the division parameters predetermined threshold value and predetermined number for averaging the preceding and following photographing intervals
  • S905 grouping is performed. Steps S902 to S905 are repeated until the number of groups displayed on the information display apparatus 101 in S903 exceeds a predetermined number.
  • the operation is not an enlargement operation as shown in FIG. 13, that is, if it is a reduction operation, the position of the photo icon 202 is updated (S906), and it is determined whether the number of groups displayed on the information display device 101 is greater than a predetermined number. Then, the division parameter (predetermined threshold value and predetermined number taking an average of preceding and following photographing intervals) is slightly changed so that the number of groups decreases (S908), and grouping is performed (S909). Steps S906 to S909 are repeated until the number of groups displayed on the information display apparatus 101 in S907 is less than the predetermined number. As a result, the user can efficiently browse a large number of photos or present them to others according to the degree of interest.
  • the division parameter predetermined threshold value and predetermined number taking an average of preceding and following photographing intervals
  • FIG. 10 is a diagram showing a display example when the photo files 107 and 112 read by the photo display system according to the present invention are from a plurality of photographers.
  • a single guide curve 201 may be used to display photographs from a plurality of photographers, or as shown in the lower right of FIG. , 204, 205 may be used for display.
  • the user can grasp the places and events that many people have noticed regarding the experiences shared by a plurality of people, such as travel, and can understand the differences between the places and events that are noticed by themselves and others.
  • the present invention can be used as a photo / video content playback apparatus using information equipment such as a television, a PC, an HDD recorder, a digital camera, a digital video camera, an in-vehicle information terminal, and a portable information terminal.
  • information equipment such as a television, a PC, an HDD recorder, a digital camera, a digital video camera, an in-vehicle information terminal, and a portable information terminal.

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

　多数の画像同士の撮影時刻などの属性の間隔を明示的に提示し、利用者の興味の度合に応じて動的にグループ分けをして表示することのできる情報再生装置及び方法、並びにプログラムを提供する。情報表示装置に表示する情報を取得する手段と、情報に付帯する属性を取得する手段と、該属性間の距離を取得する手段と、外部からの指示を取得する手段と、該属性間の距離と該指示及び情報表示装置に表示されているグループ数に基づきグループ分けを行う手段と、該指示と該グループ数に基づきガイド曲線を生成する手段と、該グループ分けと該ガイド曲線に基づき情報をアイコンとして情報表示装置に該属性間の距離に基づき表示する手段と、を含むことを特徴とする。

Description

画像表示システム、方法、及びプログラム
　本発明は、画像や映像等のコンテンツ情報の再生システムおよび方法、並びにプログラムに関し、特にコンテンツに付帯する属性を元にインタラクティブに利用者がコンテンツを閲覧したり他者に紹介できるようにしたりする情報再生システム及び方法、並びにプログラムに関する。
　デジタルカメラや撮影機能付き携帯電話の普及と、ＳＤカード等の小型記憶装置の大容量化に伴い、様々な場所で気軽に写真を撮影し、それを大量に保存しておくことが可能になってきた。近年、デジタルカメラなどで撮影した画像を一括で管理し、自動的にスライドショーを作成する機能を備えるソフトウェアが存在する（特許文献１）。また、画像の撮影時刻を元に撮影年、月、日、時毎にグルーピングして写真を表示するソフトウェアも存在する（非特許文献１, ２）。また、ｗｅｂ上での様々な画像共有サービスを利用した写真の共有も行われるようになってきた。
特開2008-59152号公報 Bederson, B. (May 2001) Quantum Treemaps and Bubblemaps for a Zoomable Image Browser ACM Conference on User Interface and Software Technology (UIST 2001) as PhotoMesa: A Zoomable Image Browser using Quantum Treemaps and Bubblemaps, pp. 71-80 Bederson, B., Shneiderman, B., Wattenberg, M. (July 2001) Ordered and Quantum Treemaps: Making Effective Use of 2D Space to Display Hierarchies ACM Transactions on Graphics (TOG), 21, (4), October 2002, 833-854.
　従来、写真は、観光中の所々にある名所での記念撮影のように散発的に撮影されることが多かったが、少しでも気にかかったものが気軽に撮影されたり、重要なシーンでは保険のような意味合いも込めて同じようなアングルで複数枚撮影されたりするなど、写真の撮影スタイルも変化してきている。
　このような撮影スタイルで撮り貯められた写真は、写真同士の撮影時刻などの属性の間隔を明示的に提示しつつ、ユーザの興味の度合に応じて動的にグループ分けを行うことで、写真の撮影タイミングを想起しやすくすることで、多数の画像を効率的に閲覧させ、かつ他者に提示させることができる。この点、従来のソフトウェアは、多数の画像をあらかじめ定められた区間でグループ分けして表示したり、動的にグルーピングは行うものの格子上に配置したりするものであって、写真同士の撮影時刻などの属性の間隔を明示的に提示して多数の画像を閲覧させ、他者に提示させるものは存在しなかった。
　本発明の目的は、かかる問題を解消し、多数の画像同士の撮影時刻などの属性の間隔を明示的に提示し、利用者の興味の度合に応じて動的にグループ分けをして表示することのできる情報再生装置及び方法、並びにプログラムを提供することにある。
　本発明の画像表示システムは、ガイド線上に複数の画像をグループに分けて表示する表示装置と、複数の画像の画像識別情報と当該画像に付帯する属性データを有する画像情報を格納した記憶手段と、表示装置の表示への操作入力をさせる入力手段と、当該入力手段の入力に従って、表示装置の表示を制御する情報処理手段とを有し、情報処理手段は、当該属性データ間の相対距離に基づいてグループ分けを行い、ガイド線上への配置を算出し、表示装置に表示させることを特徴とする。さらに、情報処理手段は、入力手段からの表示操作入力を受付け、当該相対距離によるグループ分けの距離閾値を変化させることにより、当該複数の画像のグループ分けを行い、ガイド線上の配置を算出して、表示装置に表示させることを特徴とする。
　また、記憶手段は、表示装置に表示されるグループ数、画像数、重なり量のいずれかひとつ以上のデータを有しており、情報処理手段は、当該データの範囲内に収まるよう、複数の画像のグループ分け及びガイド線上の配置を算出することを特徴とする。さらに、情報処理手段は、当該グループの中心位置を決定して、中心位置を前記ガイド線上に配置することを特徴とする。
　また、属性データが画像の撮像された日時である場合に、情報処理手段は、複数の画像のうち、日時データが最も古い画像を選択し、選択された画像の前又は／及び後の所定数の撮像間隔の平均を算出し、選択された画像とその直前の画像との撮像間隔が、平均値に閾値を足し合わせたものよりも大きい場合に、異なるグループとして判定することを特徴とする。
　本発明の画像表示方法は、画面に表示させる複数の画像について、画像に付帯する属性データを取得する工程と、入力手段によって操作された画面への入力情報を取得する工程と、情報処理手段が、当該入力情報と当該属性データ間の相対距離情報に基づいてグループ分けを行い、ガイド線上への前記複数の画像の配置を算出し、前記画面に表示させる工程とを有することを特徴とする。さらに、情報処理手段は、当該入力情報に従って、当該相対距離によるグループ分けの距離閾値を変化させることにより、グループ分けを行い、ガイド線上の配置を算出して、前記画面に表示させることを特徴とする。
　本発明の画像表示プログラムは、画面に表示させる複数の画像について、当該画像に付帯する属性データをデータベースから取得する工程と、入力手段によって操作された前記画面への入力情報を取得する工程と、当該入力情報と当該属性データ間の相対距離情報に基づいてグループ分けを行い、ガイド線上への前記複数の画像の配置を算出し、画面に表示させる工程とを有することを特徴とする。さらに、当該入力情報に従って、当該相対距離によるグループ分けの距離閾値を変化させることにより、当該グループ分けを行い、ガイド線上の配置を算出して画面に表示させることを特徴とする。
　本発明により、ユーザは自分が撮り貯めた写真などのデジタルコンテンツを、事前の整理・選別を行うことなく、また興味の度合に応じて効率的に多量の写真を閲覧したり、他者に提示したりすることが可能になる。また、自分が撮影した写真と、他者が撮影した写真を混ぜることで、大勢が注目した場所やイベントを把握したり、自分と他者が着目した場所やイベントの違いを把握したりすることができる。
本発明の一実施形態である写真表示システムのハードウェア構成を示す図である。 本発明による写真表示システムで、写真ファイル１０７、１１２群を表示する際の例を示す図である。 再生用プログラム１０６が実行されてからのステップを示す図である。 写真アイコン２０２の位置決定フローを示す図である。 撮影時刻による写真ファイル１０７、１１２のグループ分けのフローを示す図である。 図５のフローによるグループ分けの概念図である。 ユーザが入力装置１０２を用いてガイド曲線を縮小させた場合の表示例図２の変化の様子を示す図である。 ユーザが入力装置１０２を用いてガイド曲線を拡大させた場合の表示例図２の変化の様子を示す図である。 ユーザが入力装置１０２を用いてガイド曲線を縮小、もしくは拡大させた場合のフローを示す図である。 本発明による写真表示システムで読み込む写真ファイル１０７、１１２が複数の撮影者によるものであった場合の表示例を示す図である。 写真ファイル１０７、１１２の属性情報の例を示す図である。 ユーザが入力装置１０２を用いてガイド曲線の拡大操作をする場合の例を示す図である。 ユーザが入力装置１０２を用いてガイド曲線の縮小操作をする場合の例を示す図である。 ユーザが入力装置１０２を用いてガイド曲線の水平移動操作をする場合の例を示す図である。
符号の説明
　１００　写真表示システム、１０１　情報表示装置、１０２　入力装置、１０３　情報処理装置、１０４　メモリ（情報記憶装置一）、１０５　ハードディスク（情報記憶装置二）、　１０６　再生用プログラム、１０７　写真ファイル、１０８　バス線、１０９　通信部、　１１０　ネットワーク、１１１　リモートストレージ、１１２　写真ファイル、２０１　ガイド曲線、２０２　写真アイコン、２０３　撮影者α用のガイド曲線、２０４　撮影者β用のガイド曲線、２０５　撮影者γ用のガイド曲線
　以下、本発明の実施形態を図面を用いて説明する。
（実施の形態１）
　図１は、本発明の一実施形態である写真表示システムのハードウェア構成を示す図である。同図に示すように、写真表示システム１００は、情報表示装置１０１と、入力装置１０２と、情報処理装置１０３と、メモリ１０４と、ハードディスク１０５と、バス線１０８と、を含むシステムである。また、通信部１０９を備えていてもよい。
　ハードディスク１０５には、再生用プログラム１０６と、複数の写真ファイル１０７が格納されており、情報処理装置１０３が再生用プログラム１０６をメモリ１０４に読み込み、実行すると、写真ファイル１０７群をメモリ１０４に読み込み、本発明の手段に基づき情報表示装置１０１に表示を行う。この際に、通信部１０９を利用して、ネットワーク１１０の先に接続されたリモートストレージ１１１に格納された複数の写真ファイル１１２をメモリ１０４に読み込み、写真ファイル１０７の代替としてもしくは写真ファイル１０７と同時に表示に利用してもよい。
　図２は、本発明の一例として示した写真表示システムで、写真ファイル１０７、１１２群を表示する際の例を示す図である。ここでは、写真を例として記載するが、本発明では表示する画像として、写真以外にも、映像やプログラム等の内容や機能を画像で象徴的に表したアイコン等も含まれる。
　同図において、情報表示装置１０１の左から右に向かって、写真ファイル１０７、１１２群に対応する写真アイコン２０２が、撮影時刻の古いものから新しいものへ時系列的に配置されて表示される。配置される際には、ガイド曲線２０１上に配置される。ガイド曲線には、例えば、公知のスプライン曲線が利用できる。他の、公知の正弦波関数やユーザ指定による自由曲線を利用してもよい。
　ここで、写真アイコン２０２は、情報表示装置１０１に表示されるグループ数が所定の範囲内に収まるようにグループ分けされて表示される。写真アイコン２０２のグループ間の距離は、ここでは対応する写真ファイル１０７、１１２の撮影時刻の差を反映している。撮影時刻の差をそのまま利用してもよいし、対数関数を利用して適切に補正して利用してもよい。
　写真アイコン２０２の配置に利用する属性は、撮影日や時刻という属性の他に、類似度や色分布、関連付けられたキーワード、公知の画像検索システムを利用した際の検索キーワードへの合致度を利用してもよい。
　ユーザは、入力装置１０２によって、表示されている写真ファイル１０７、１１２群の水平方向等のスライド指示、ガイド曲線２０１の拡大縮小指示を行うことができる。
　図３は、再生用プログラム１０６が実行されてからのステップを示す図である。再生用プログラム１０６が起動されると、ハードディスク１０５の指定された場所から写真ファイル１０７群を読み込む（Ｓ３０１）。写真ファイル１０７群を読み込む場所はあらかじめ指定しておいてもよいし、再生用プログラム１０６の実行中にユーザに指定させてもよい。読み込む写真ファイル１０７群の代替もしくはこれらに加えて、ネットワーク１１０を介した先にある写真ファイル１０７群を読み込んでもよい。
　写真ファイル１０７、１１２群の読み込みが完了後、グループ分けに用いる属性、例えば撮影時刻で写真ファイル１０７、１１２群を並び替える（Ｓ３０２）。グループ分けに用いる属性には前記の通り、撮影時刻という属性の他に、類似度や色分布、関連付けられたキーワード、公知の画像検索システムを利用した際の検索キーワードへの合致度を利用してもよい。これらの属性はユーザが入力装置によって選択できるようにしてもよい。図１１に写真ファイル１０７、１１２の属性情報データベースの一例を示す。
　並び替えが終わった後は、図４に示すフローで写真アイコン２０２の配置位置を決定する（Ｓ３０３）。その後、情報表示装置１０１に表示される写真アイコン２０２のグループ数が所定の数より多い場合（Ｓ３０４）、グループ数が減少するようにグループ分けに用いるパラメータを微小変化させる（Ｓ３０５）。そして、図５に示すフローでグループ分けを行う（Ｓ３０６）。グループ分けを行った後に、再度図４に示すフローで写真アイコン２０２の配置位置を決定する（Ｓ３０３）。
　情報表示装置１０１に表示される写真アイコン２０２のグループ数が所定の数より小さくなるまで、Ｓ３０３～Ｓ３０６を繰り返す。
　Ｓ３０４での判定には、情報表示装置１０１に表示される写真アイコン２０２のグループ数が所定の数より多いかという条件の他に、情報表示装置１０１に表示される写真アイコン２０２の数が所定の数より多い、もしくは、情報表示装置１０１に表示されている写真アイコン２０２のうち左端と右端のものの撮影間隔が所定の間隔より大きい、もしくは、情報表示装置１０１に表示されている写真アイコン２０２の面積の情報表示装置１０１の面積に対する割合が所定の値より大きいか、などの条件を用いてもよい。これらの条件は、予め記憶装置に格納しておいてもよいし、記憶したデータに基づいてユーザに選択させるようにすることができる。
　図４は、写真アイコン２０２の位置決定フローを示す図である。まず、配置用のガイド曲線２０１を算出する（Ｓ４０１）。ガイド曲線には、例えば、公知のスプライン曲線が利用できる。他の、公知の正弦波関数やユーザ指定による自由曲線を利用してもよい。曲線算出用のパラメータはプログラムの起動時には初期値を利用し、その後入力装置１０２を介したユーザ操作があった場合は、それに応じて変化させたパラメータを用いる。
　次に、各写真アイコン２０２のグループ毎に、ガイド曲線上での中心位置を決定する（Ｓ４０２）。各グループ間の距離は、この実施例ではグループ間の撮影間隔を用い、適切な係数を乗算しスケーリングを行って決定する。撮影間隔は一般に、非常に密もしくは疎であるため、本実施例では公知の対数関数を利用したのち、スケーリングを行うとよい。したがって、撮影時刻の一番古いグループと、一番新しいグループを端点とするガイド曲線上に、撮影間隔を反映する間隔で、各グループの中心位置が決定されることになる。グループの中心位置が決定したら、そのグループに属する写真アイコン２０２の位置を決定する（Ｓ４０３～Ｓ４０５）。本実施例では、写真アイコン２０２は、グループの中心位置を中心とする正方形を構成するように格子上に配置する。
　その後、グループ同士が重なる面積が所定の値より小さくなるように写真アイコン２０２のスケールを修正する（Ｓ４０６）。ここで、配置アルゴリズムを用いてスケールではなく配置を修正してもよい。
　図５は、撮影時刻による写真ファイル１０７、１１２のグループ分けのフローを示す図である。撮影時刻順に並び替えられた写真ファイル１０７、１１２群の先頭から順に選択し（Ｓ５０１）、前後の所定数の写真ファイル１０７、１１２との撮影間隔の平均を算出し（Ｓ５０２）、選択された写真と直前に選択された写真の撮影間隔（先頭の写真の場合は直前に選択された写真が存在しないため撮影間隔は０とする）が、Ｓ５０２で算出した撮影間隔の平均に所定の閾値を加算したものより大きいかどうかを判定し（Ｓ５０３）、大きかった場合は選択された写真が直前に選択された写真とは別のグループに属すると判定し（Ｓ５０４）、小さかった場合は選択された写真が直前に選択された写真と同じグループに属すると判定し（Ｓ５０５）、というステップを写真ファイル１０７、１１２群の中で最新のものに至るまで繰り返す。
　尚、グループ分けの方法としては、この方法の他に、撮影間隔の大きいものから順に選択していき、所定のグループ数に至るまで、その撮影間隔の前後の写真を別のグループに属すると判定する方法もある。
　図６は、図５のフローによるグループ分けの概念図である。尚、この実施例では、属性データが撮像日時情報である場合を説明しているが、他の属性データにおいても、画像に付帯する相対的な距離に基づいて、同様な算出方法を適用することが可能である。
　図７、図８はユーザが入力装置１０２を用いてガイド曲線を縮小、もしくは拡大させた場合の表示例図２の変化の様子を示す図である。ガイド曲線を縮小させると、情報表示装置１０１に表示される写真アイコン２０２のグループ数が所定の数以下になるようにグループ分けが行われる。逆に、ガイド曲線を拡大させると、情報表示装置１０１に表示される写真アイコン２０２のグループ数が所定の数以上になるようにグループ分けが行われる。上記の処理は図９のフローに沿って行われる。
　図９は、ユーザが入力装置１０２を用いてガイド曲線を水平方向に縮小、もしくは拡大させた場合のフローを示す図である。ここで、入力装置１０２として例えばマウスを用いる場合、マウスの水平方向の移動量をガイド曲線の水平方向でのスライド位置として（図１４）、また、マウスのホイールの回転方向・量をガイド曲線の拡大縮小操作に割り当てることができる。また、キーボードを用いることも可能で、例えば、左カーソルキーと右カーソルキーをガイド曲線の水平方向のスライド量に、上カーソルキーと下カーソルキーをガイド曲線の拡大縮小操作に割り当てることができる。ユーザ入力によって、ガイド曲線が水平方向に拡大・縮小されると同時に写真アイコン２０２の位置もそれに伴い変化する。ここで、入力装置１０２による操作が拡大操作であるかどうかを判定し（Ｓ９０１）、拡大操作であるかそうでないかによってフローが２分される。
　図１２の操作のように拡大操作である場合、写真アイコン２０２の位置を更新し（Ｓ９０２）、情報表示装置１０１に表示されるグループ数が所定の数より少ないかどうかを判定し（Ｓ９０３）、グループの数が増加するように分割パラメータ（所定の閾値と、前後の撮影間隔の平均を取る所定の数）を微小変化させ（Ｓ９０４）、グループ分けを行う（Ｓ９０５）。Ｓ９０３で情報表示装置１０１に表示されるグループ数が所定の数より多くなるまでＳ９０２～Ｓ９０５を繰り返す。
　図１３のように操作が拡大操作でない場合、つまり縮小操作の場合、写真アイコン２０２の位置を更新し（Ｓ９０６）、情報表示装置１０１に表示されるグループ数が所定の数より多いかどうかを判定し（Ｓ９０７）、グループの数が減少するように分割パラメータ（所定の閾値と、前後の撮影間隔の平均を取る所定の数）を微小変化させ（Ｓ９０８）、グループ分けを行う（Ｓ９０９）。Ｓ９０７で情報表示装置１０１に表示されるグループ数が所定の数より少なくなるまでＳ９０６～Ｓ９０９を繰り返す。このことにより、ユーザは、興味の度合に応じて効率的に多量の写真を閲覧したり、他者に提示したりすることが可能になる。
　図１０は、本発明による写真表示システムで読み込む写真ファイル１０７、１１２が複数の撮影者によるものであった場合の表示例を示す図である。図１０の左上のように、単一のガイド曲線２０１を用いて複数の撮影者による写真をまとめて表示してもよいし、図１０の右下のように、撮影者それぞれに異なるガイド曲線２０３、２０４、２０５を利用して表示してもよい。これにより、ユーザは旅行などの複数人で共有する体験に関して、大勢が注目した場所やイベントを把握したり、自分と他者が着目した場所やイベントの違いを把握したりすることができる。
　本発明は、テレビやＰＣ、ＨＤＤレコーダー、デジタルカメラ、デジタルビデオカメラ、車載情報端末、携帯用情報端末等の情報機器を利用した写真・映像コンテンツの再生装置として利用できる。

Claims (14)

  1. 　ガイド線上に複数の画像をグループに分けて表示する表示装置と、
    　前記複数の画像の、画像識別情報と当該画像に付帯する属性データを有する画像情報を格納した記憶手段と、
    　前記表示装置の表示への操作入力をさせる入力手段と、
    　前記入力手段の入力に従って、前記表示装置の表示を制御する情報処理手段とを有し、
    　前記情報処理手段は、前記属性データ間の相対距離に基づいてグループ分けを行い、前記ガイド線上への配置を算出し、前記表示装置に表示させることを特徴とする画像表示システム。
  2. 　請求項１に記載の画像表示システムであって、前記情報処理手段は、前記入力手段からの表示操作入力を受付け、前記相対距離によるグループ分けの距離閾値を変化させることにより、前記表示装置に表示された前記複数の画像のグループ分けを行い、前記ガイド線上の配置を算出して、前記表示装置に表示させることを特徴とする画像表示システム。
  3. 　請求項１に記載の画像表示システムであって、前記属性データは、前記画像の撮像された日時であることを特徴とする画像表示システム。
  4. 　請求項１に記載の画像表示システムであって、前記属性データは、前記画像の色彩データであることを特徴とする画像表示システム。
  5. 　請求項１に記載の画像表示システムであって、前記記憶手段は、前記表示装置に表示されるグループ数、画像数、重なり量のいずれかひとつ以上のデータを有しており、当該データの範囲内に収まるよう、前記情報処理手段は、前記複数の画像のグループ分け及び前記ガイド線上の配置を算出することを特徴とする画像表示システム。
  6. 　請求項１に記載の画像表示システムであって、前記ガイド線は曲線であって、前記入力手段の操作入力に従って、前記曲線の曲率が変化することを特徴とする画像表示システム。
  7. 　請求項１に記載の画像表示システムであって、前記相対距離は、対数距離であることを特徴とする画像表示システム。
  8. 　請求項１に記載の画像表示システムであって、前記画像情報は、前記複数の画像の撮像者データを有し、前記撮像者が複数である場合に、撮像者毎に前記複数の画像を分け、異なるガイド線を用いて表示することを特徴とする画像表示システム。
  9. 　請求項１に記載の画像表示システムであって、前記情報処理手段は、前記グループの中心位置を決定して、前記中心位置を前記ガイド線上に配置することを特徴とする画像表示システム。
  10. 　請求項３に記載の画像表示システムであって、前記情報処理手段は、前記複数の画像のうち、前記日時データが最も古い画像を選択し、選択された画像の前又は／及び後の所定数の撮像間隔の平均を算出し、選択された画像とその直前の画像との撮像間隔が、前記平均値に閾値を足し合わせたものよりも大きい場合に、異なるグループとして判定することを特徴とする画像表示システム。
  11. 　画面に表示させる複数の画像について、当該画像に付帯する属性データを取得する工程と、
    　入力手段によって操作された前記画面への入力情報を取得する工程と、
    　情報処理手段が、前記入力情報と前記属性データ間の相対距離情報に基づいてグループ分けを行い、ガイド線上への前記複数の画像の配置を算出し、前記画面に表示させる工程とを有することを特徴とする画像表示方法。
  12. 　請求項１１に記載の画像表示方法において、前記情報処理手段は、前記入力手段からの前記入力情報に従って、前記相対距離によるグループ分けの距離閾値を変化させることにより、前記グループ分けを行い、前記ガイド線上の配置を算出して、前記画面に表示させることを特徴とする画像表示方法。　　
  13. 　画面に表示させる複数の画像について、当該画像に付帯する属性データをデータベースから取得する工程と、
    　入力手段によって操作された前記画面への入力情報を取得する工程と、
    　前記入力情報と前記属性データ間の相対距離情報に基づいてグループ分けを行い、ガイド線上への前記複数の画像の配置を算出し、前記画面に表示させる工程とを有することを特徴とする画像表示プログラム。
  14. 　請求項１３に記載の画像表示プログラムにおいて、前記入力手段からの前記入力情報に従って、前記相対距離によるグループ分けの距離閾値を変化させることにより、前記グループ分けを行い、前記ガイド線上の配置を算出して、前記画面に表示させることを特徴とする画像表示プログラム。　　
PCT/JP2009/051054 2009-01-23 2009-01-23 画像表示システム、方法、及びプログラム WO2010084602A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PCT/JP2009/051054 WO2010084602A1 (ja) 2009-01-23 2009-01-23 画像表示システム、方法、及びプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2009/051054 WO2010084602A1 (ja) 2009-01-23 2009-01-23 画像表示システム、方法、及びプログラム

Publications (1)

Publication Number Publication Date
WO2010084602A1 true WO2010084602A1 (ja) 2010-07-29

Family

ID=42355676

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2009/051054 WO2010084602A1 (ja) 2009-01-23 2009-01-23 画像表示システム、方法、及びプログラム

Country Status (1)

Country Link
WO (1) WO2010084602A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120072870A1 (en) * 2010-09-21 2012-03-22 Nintendo Co., Ltd. Computer-readable storage medium, display control apparatus, display control system, and display control method
WO2012172508A3 (en) * 2011-06-16 2013-02-07 Nokia Corporation Method and apparatus for controlling a spatial relationship between at least two groups of content during movement of the content
JP2019024249A (ja) * 2013-09-10 2019-02-14 オープンティーヴィー, インク.Opentv, Inc. コンテンツ表示システム及び方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1185450A (ja) * 1997-09-10 1999-03-30 Canon Inc 情報処理方法及び装置
JP2001351127A (ja) * 2000-06-07 2001-12-21 Sharp Corp データ表示システム
JP2002074322A (ja) * 2000-08-31 2002-03-15 Sony Corp 情報処理装置及び情報処理方法並びにデータ記録媒体

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1185450A (ja) * 1997-09-10 1999-03-30 Canon Inc 情報処理方法及び装置
JP2001351127A (ja) * 2000-06-07 2001-12-21 Sharp Corp データ表示システム
JP2002074322A (ja) * 2000-08-31 2002-03-15 Sony Corp 情報処理装置及び情報処理方法並びにデータ記録媒体

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120072870A1 (en) * 2010-09-21 2012-03-22 Nintendo Co., Ltd. Computer-readable storage medium, display control apparatus, display control system, and display control method
JP2012068730A (ja) * 2010-09-21 2012-04-05 Nintendo Co Ltd 表示制御プログラム、表示制御装置、表示制御システム、および表示制御方法
WO2012172508A3 (en) * 2011-06-16 2013-02-07 Nokia Corporation Method and apparatus for controlling a spatial relationship between at least two groups of content during movement of the content
US9600176B2 (en) 2011-06-16 2017-03-21 Nokia Technologies Oy Method and apparatus for controlling a spatial relationship between at least two groups of content during movement of the content
JP2019024249A (ja) * 2013-09-10 2019-02-14 オープンティーヴィー, インク.Opentv, Inc. コンテンツ表示システム及び方法
US10595094B2 (en) 2013-09-10 2020-03-17 Opentv, Inc. Systems and methods of displaying content
US10992995B2 (en) 2013-09-10 2021-04-27 Opentv, Inc. Systems and methods of displaying content
US11363342B2 (en) 2013-09-10 2022-06-14 Opentv, Inc. Systems and methods of displaying content
US11825171B2 (en) 2013-09-10 2023-11-21 Opentv, Inc. Systems and methods of displaying content

Similar Documents

Publication Publication Date Title
US11340754B2 (en) Hierarchical, zoomable presentations of media sets
US7725837B2 (en) Digital image browser
US7705858B2 (en) Techniques for displaying digital images on a display
US7992104B2 (en) Viewing data
JP6170972B2 (ja) コンテンツ表示のためのギャラリアプリケーションに関する方法及びコンピュータ読み取り可能記録媒体
US9971485B2 (en) Interactive image thumbnails
US9798744B2 (en) Interactive image thumbnails
EP2315111B1 (en) Method and apparatus for browsing media content and executing functions related to media content
US10430456B2 (en) Automatic grouping based handling of similar photos
US8775953B2 (en) Collage display of image projects
US20080229248A1 (en) Associating geographic location information to digital objects for editing
USRE48715E1 (en) Organizing media items based on metadata similarities
US20160117085A1 (en) Method and Device for Creating and Editing Object-Inserted Images
WO2010084602A1 (ja) 画像表示システム、方法、及びプログラム
JP2009284070A (ja) 画像閲覧装置およびプログラム
JP2009282606A (ja) 画像閲覧装置およびプログラム
KR101017935B1 (ko) 단위타일을 이용한 웹상에서의 고해상도 이미지 딥줌 제공시스템
JP6381208B2 (ja) 画像再生装置、画像再生方法、およびプログラム
JP2009282607A (ja) 画像閲覧装置およびプログラム
AU2006252198B2 (en) Animated sub-images for browsing

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 09838793

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 09838793

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP