JP6413625B2 - Image selection support system, image selection support device, image selection support method, and image selection support program - Google Patents
Image selection support system, image selection support device, image selection support method, and image selection support program Download PDFInfo
- Publication number
- JP6413625B2 JP6413625B2 JP2014217453A JP2014217453A JP6413625B2 JP 6413625 B2 JP6413625 B2 JP 6413625B2 JP 2014217453 A JP2014217453 A JP 2014217453A JP 2014217453 A JP2014217453 A JP 2014217453A JP 6413625 B2 JP6413625 B2 JP 6413625B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- information
- event
- images
- date
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 21
- 238000000605 extraction Methods 0.000 claims description 30
- 230000010365 information processing Effects 0.000 claims description 14
- 239000000284 extract Substances 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 15
- 238000010191 image analysis Methods 0.000 description 15
- 230000008569 process Effects 0.000 description 15
- 230000006870 function Effects 0.000 description 12
- 238000003384 imaging method Methods 0.000 description 5
- 230000008859 change Effects 0.000 description 3
- 238000012790 confirmation Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000012015 optical character recognition Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000001454 recorded image Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Landscapes
- Television Signal Processing For Recording (AREA)
- Studio Devices (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Description
本発明は、画像選択支援システム、画像選択支援装置、画像選択支援方法及び画像選択支援プログラムに関する。 The present invention relates to an image selection support system, an image selection support device, an image selection support method, and an image selection support program.
スポーツ競技や音楽のコンサート等の興行を鑑賞する観客に対するサービスとして、携帯端末を介した情報の提供方法が各種提案されている(例えば、特許文献1参照)。特許文献1に開示された技術においては、イベント会場において撮影された画像を、限定したエリアに対して配信が可能な小型アンテナを介して配することにより、観客に対する映像の配信が可能となる。 Various methods of providing information via mobile terminals have been proposed as services for spectators who appreciate entertainment such as sports competitions and music concerts (see, for example, Patent Document 1). In the technique disclosed in Patent Document 1, an image taken at an event venue is distributed via a small antenna that can be distributed to a limited area, thereby enabling video distribution to the audience.
他方、上述したスポーツ競技やコンサート等の会場においては、契約したカメラマンにより多くの画像が撮影される。そのように撮影された画像は、イベントの報道に用いられる他、スポーツチームのグッズや、音楽アーティストのグッズとして販売の対象となることもある。 On the other hand, in the above-mentioned venues for sports competitions and concerts, many images are taken by contracted photographers. In addition to being used for event reporting, images taken in this way may be sold as sports team goods or music artist goods.
スポーツ競技やコンサートの会場において撮影された画像によって構成された写真集を作成し、協議やコンサートの終了後に当日販売することが出来れば、イベントを楽しむ観客にとって有意義なサービスとなることが考えられる。しかしながら、多数のカメラマンによって大量の画像が撮影されることが多く、そのような大量の画像の中から収録するべき画像を抽出した上で、当日販売することは時間的な制約があり困難である。 If a photo book composed of images taken at the venue of sports competitions and concerts can be created and sold on the day after the discussion or concert ends, it can be a meaningful service for the audience enjoying the event. However, a large number of images are often taken by a large number of photographers, and it is difficult to sell on the day after extracting images to be recorded from such a large amount of images due to time constraints. .
本発明は、このような課題を解決するためになされたものであり、興行において撮影された画像によって構成された写真集を迅速に作成するために、撮影された画像の選択を支援することを目的とする。 The present invention has been made to solve such a problem, and supports the selection of captured images in order to quickly create a photo book composed of images captured at a box office. Objective.
上記課題を解決するために、本発明の一態様は、観客のために行われる興行において撮影された画像によって構成される画像集に収録される画像の選択を支援する画像選択支援システムであって、撮影された日時と撮影された画像とが関連付けられた撮影情報及び興行において発生したイベントが日時と関連付けて記録されたイベント情報を取得する情報取得部と、前記撮影情報に含まれる日時と、前記イベント情報に含まれる日時とに基づき、前記画像と前記イベントとを関連付ける関連付け部と、複数の画像夫々に関連付けられた前記イベントに基づき、複数の前記画像から所定数の画像を選択する画像選択部と、前記画像の選択結果を出力する選択結果出力部とを含むことを特徴とする。 In order to solve the above-described problem, one aspect of the present invention is an image selection support system that supports selection of an image recorded in an image collection composed of images taken at a performance for a spectator. Shooting information in which the date and time of the shooting and the shot image are associated with each other, an information acquisition unit for acquiring event information in which events occurring in the performance are recorded in association with the date and time, and the date and time included in the shooting information; Based on the date and time included in the event information, an association unit that associates the image with the event, and an image selection that selects a predetermined number of images from the plurality of images based on the event associated with each of a plurality of images And a selection result output unit for outputting the selection result of the image.
本発明によれば、興行において撮影された画像によって構成された写真集を迅速に作成するために、撮影された画像の選択を支援することができる。 ADVANTAGE OF THE INVENTION According to this invention, in order to create quickly the photograph collection comprised by the image image | photographed in the box office, selection of the image | photographed image can be supported.
以下、図面を参照して、本発明の実施形態について説明する。本実施形態においては、観客のために行われる興行の例として野球の試合を例として説明する。そして、野球の試合を試合会場で観戦する観客に対して、試合の様子を撮影した画像をまとめた画像集である写真集を試合当日に提供するためのシステムについて説明する。そのようなシステムにおいて、大量に撮影された画像から写真集に収録するべき画像を選択するための機能が本実施形態に係る要旨の1つである。即ち、本実施形態に係るシステムは、大量に撮影された画像から画像集に収録される画像の選択を支援する画像選択支援システムである。 Embodiments of the present invention will be described below with reference to the drawings. In the present embodiment, a baseball game will be described as an example of an entertainment performed for the audience. A system for providing, on the day of the game, a photo book, which is a collection of images of the images of the game, to the audience watching the baseball game at the game venue. In such a system, a function for selecting an image to be recorded in a photo album from a large number of images is one of the gist according to the present embodiment. That is, the system according to the present embodiment is an image selection support system that supports the selection of images recorded in an image collection from a large number of captured images.
図1は、本実施形態に係る画像選択支援システムの運用形態を示す図である。図1に示すように、本実施形態に係るシステムは、記録者端末1、デジタルカメラ2、マイク3、編集者端末4、ユーザ端末5及び画像形成装置6が、インターネットのような公衆回線を介して接続されて構成されている。 FIG. 1 is a diagram illustrating an operation mode of the image selection support system according to the present embodiment. As shown in FIG. 1, the system according to the present embodiment includes a recorder terminal 1, a digital camera 2, a microphone 3, an editor terminal 4, a user terminal 5, and an image forming apparatus 6 via a public line such as the Internet. Connected and configured.
記録者端末1は、試合会場にいる記録者が、試合会場において試合の進行状況に応じた情報を入力するための情報処理装置である。デジタルカメラ2は、試合会場において撮影を行うカメラマンが撮影を行うための撮影装置である。尚、本実施形態においてはデジタルカメラ2が直接ネットワークに接続されている場合を例としているが、ノートパソコンなどの情報処理装置を介してネットワークに接続されていても良い。 The recorder terminal 1 is an information processing device for a recorder at the game venue to input information corresponding to the progress of the game at the game venue. The digital camera 2 is a photographing device for photographing by a photographer who performs photographing at a game hall. In this embodiment, the digital camera 2 is directly connected to the network. However, the digital camera 2 may be connected to the network via an information processing apparatus such as a notebook computer.
マイク3は、試合会場において音声を集音して音声情報を記録するための録音装置である。マイク3を介して録音される音声には、試合の実況中継や解説の音声の他、客席の歓声などの音声も含まれる。図1において破線で区切って示すように、記録者端末1、デジタルカメラ2及びマイク3が試合会場に設置される。 The microphone 3 is a recording device for collecting voice and recording voice information at the game venue. Voices recorded through the microphone 3 include voices such as cheers from the audience seats, as well as live game commentary and commentary voices. As shown in FIG. 1 separated by a broken line, the recorder terminal 1, the digital camera 2, and the microphone 3 are installed in the game hall.
編集者端末4は、デジタルカメラ2によって撮影されて生成された画像情報を受信し、観客に提供する写真集に収録するための画像を取捨選択して写真集のレイアウトを生成する情報処理装置である。即ち、編集者端末4が画像選択支援装置として機能すると共に、そのような機能を実現するためのプログラムが画像選択支援プログラムとして用いられる。編集者端末4の機能が、本実施形態に係る要旨の1つである。ユーザ端末5は、試合会場で試合を観戦するユーザが、事前に写真集の購入を申し込む際に使用する情報処理装置である。 The editor terminal 4 is an information processing apparatus that receives image information generated by being photographed by the digital camera 2 and selects an image to be recorded in a photo book provided to the audience to generate a photo book layout. is there. That is, the editor terminal 4 functions as an image selection support device, and a program for realizing such a function is used as the image selection support program. The function of the editor terminal 4 is one of the gist according to the present embodiment. The user terminal 5 is an information processing apparatus that is used when a user who watches a game at a game site applies for the purchase of a photo album in advance.
画像形成装置6は、編集者端末4によって生成されたレイアウト情報に基づいて画像形成出力を実行し、更に製本処理を行って写真集を生成する装置である。画像形成装置6は試合会場に設置される必要はないが、会場で試合を観戦した観客が当日に写真集を受け取るため、試合会場の近隣に設置される。 The image forming apparatus 6 is an apparatus that executes image formation output based on the layout information generated by the editor terminal 4 and performs bookbinding processing to generate a photo book. The image forming apparatus 6 does not need to be installed in the game hall, but is installed in the vicinity of the game hall in order for the audience who watched the game at the hall to receive the photo album on that day.
次に、本実施形態に係る記録者端末1、編集者端末4、ユーザ端末5及び画像形成装置6等の情報処理装置のハードウェア構成について図2を参照して説明する。尚、画像形成装置6は、図2に示すハードウェア構成に加えて、スキャナ、プリンタ等を実現するためのエンジンを備える。 Next, a hardware configuration of an information processing apparatus such as the recorder terminal 1, the editor terminal 4, the user terminal 5, and the image forming apparatus 6 according to the present embodiment will be described with reference to FIG. The image forming apparatus 6 includes an engine for realizing a scanner, a printer, and the like in addition to the hardware configuration shown in FIG.
図2に示すように、本実施形態に係る情報処理装置は、一般的なサーバやPC(Personal Computer)等と同様の構成を含む。即ち、本実施形態に係る情報処理装置は、CPU(Central Processing Unit)10、RAM(Random Access Memory)20、ROM(Read Only Memory)30、HDD(Hard Disk Drive)40及びI/F50がバス80を介して接続されている。また、I/F50にはLCD(Liquid Crystal Display)60及び操作部70が接続されている。 As shown in FIG. 2, the information processing apparatus according to the present embodiment includes the same configuration as a general server, a PC (Personal Computer), or the like. That is, the information processing apparatus according to the present embodiment includes a CPU (Central Processing Unit) 10, a RAM (Random Access Memory) 20, a ROM (Read Only Memory) 30, a HDD (Hard Disk Drive) 40, and an I / F 50. Connected through. Further, an LCD (Liquid Crystal Display) 60 and an operation unit 70 are connected to the I / F 50.
CPU10は演算手段であり、情報処理装置全体の動作を制御する。RAM20は、情報の高速な読み書きが可能な揮発性の記憶媒体であり、CPU10が情報を処理する際の作業領域として用いられる。ROM30は、読み出し専用の不揮発性記憶媒体であり、ファームウェア等のプログラムが格納されている。HDD40は、情報の読み書きが可能な不揮発性の記憶媒体であり、OS(Operating System)や各種の制御プログラム、アプリケーション・プログラム等が格納される。 The CPU 10 is a calculation means and controls the operation of the entire information processing apparatus. The RAM 20 is a volatile storage medium capable of reading and writing information at high speed, and is used as a work area when the CPU 10 processes information. The ROM 30 is a read-only nonvolatile storage medium and stores a program such as firmware. The HDD 40 is a non-volatile storage medium that can read and write information, and stores an OS (Operating System), various control programs, application programs, and the like.
I/F50は、バス80と各種のハードウェアやネットワーク等を接続し制御する。LCD60は、ユーザが情報処理装置の状態を確認するための視覚的ユーザインタフェースである。操作部70は、キーボードやマウス等、ユーザが情報処理装置に情報を入力するためのユーザインタフェースである。 The I / F 50 connects and controls the bus 80 and various hardware and networks. The LCD 60 is a visual user interface for the user to check the state of the information processing apparatus. The operation unit 70 is a user interface such as a keyboard and a mouse for a user to input information to the information processing apparatus.
このようなハードウェア構成において、ROM30に格納されたプログラムや、HDD40若しくは図示しない光学ディスク等の記憶媒体からRAM20にロードされたプログラムに従ってCPU10が演算を行うことにより、ソフトウェア制御部が構成される。このようにして構成されたソフトウェア制御部と、ハードウェアとの組み合わせによって、本実施形態に係る記録者端末1、編集者端末4、ユーザ端末5及び画像形成装置6の機能を実現する機能ブロックが構成される。 In such a hardware configuration, the software control unit is configured by the CPU 10 performing calculations according to a program stored in the ROM 30 or a program loaded into the RAM 20 from a storage medium such as the HDD 40 or an optical disk (not shown). Functional blocks for realizing the functions of the recorder terminal 1, the editor terminal 4, the user terminal 5, and the image forming apparatus 6 according to the present embodiment by combining the software control unit configured as described above and hardware. Composed.
次に、記録者端末1によって記録される情報(以降、「記録情報」とする)について説明する。図3は、本実施形態に係る記録情報の例を示す図である。図3に示すように、本実施形態に係る記録情報には、イベント情報及び場面情報が含まれる。図4は、イベント情報の内容を示す図である。イベント情報は、試合中に発生した出来事、即ちイベントの詳細を示す情報であり、図4に示すように“イベントID”、“イベント名”、“タイムスタンプ”、“主体チーム”及び“主体選手”の情報を含む。 Next, information recorded by the recorder terminal 1 (hereinafter referred to as “recording information”) will be described. FIG. 3 is a diagram illustrating an example of recorded information according to the present embodiment. As shown in FIG. 3, the record information according to the present embodiment includes event information and scene information. FIG. 4 is a diagram showing the contents of the event information. The event information is information indicating the details of the event that occurred during the game, that is, “event ID”, “event name”, “time stamp”, “subject team”, and “subject player” as shown in FIG. Information.
“イベントID”は、イベントを一意に識別する識別子である。“イベント名”は、図4に示すように「ホームラン」等のイベントの内容を示す情報である。“タイムスタンプ”は、そのイベントが発生した時間を示す情報である。“主体チーム”は、そのイベントの主体となるチームを示す情報であり、「ホームラン」であれば、ホームランを打った選手のチームを示す。“主体選手”は、そのイベントの主体となる選手を示す情報であり、「ホームラン」であれば、ホームランを打った選手を示す。 “Event ID” is an identifier for uniquely identifying an event. “Event name” is information indicating the content of an event such as “home run” as shown in FIG. “Time stamp” is information indicating the time when the event occurred. “Subject team” is information indicating the team that is the subject of the event, and “Home Run” indicates the team of the player who hit the home run. The “main player” is information indicating the player who is the subject of the event, and “home run” indicates the player who hit the home run.
このように、本実施形態に係るイベント情報は、興行において発生したイベントが日時と関連付けて記憶された情報である。また、イベント情報は、“主体チーム”、“主体選手”など、イベントの主体となった者、即ち、興行の参加者を示す情報を含む。 As described above, the event information according to the present embodiment is information in which an event that occurred in the performance is stored in association with the date and time. Further, the event information includes information indicating a person who has become the subject of the event, such as a “subject team”, “subject player”, that is, a participant in the performance.
図5は、場面情報の内容を示す図である。場面情報は、試合の進行状況を時刻と関連付けて示す情報であり、図5に示すように、“1回表”、“1番打席”、“2番打席”といった試合の進行状況が“〜時〜分”といったタイムスタンプと関連付けて記録されている。また、「投手:XXXXXX」、「打者:XXXXXX」、「攻撃チーム:XXXX」のように、夫々の場面における選手やチームの情報が記録される。尚、図5においては、場面情報としての例を示しているが、場面情報としては、例えばスコアラーによって記録されるスコア情報を用いることも可能である。 FIG. 5 is a diagram showing the contents of the scene information. The scene information is information indicating the progress of the game in association with the time. As shown in FIG. 5, the progress of the game such as “first table”, “first bat”, “second bat” is “˜ It is recorded in association with a time stamp such as “hour to minute”. In addition, information on players and teams in each scene is recorded, such as “Pitcher: XXXXXX”, “Batter: XXXXXX”, and “Attack team: XXXXXX”. In addition, although the example as scene information is shown in FIG. 5, score information recorded by a scorer, for example, can be used as the scene information.
図4、5に示す情報が、本実施形態において画像を選別するために参照される情報である。記録者端末1を操作する記録者は、試合の進行状況を確認しながら図4、図5に示す情報を随時端末に入力する。これにより、イベント情報及び場面情報が記録者端末1において生成され、編集者端末4に送信される。 The information shown in FIGS. 4 and 5 is information that is referred to in order to select an image in this embodiment. The recorder who operates the recorder terminal 1 inputs the information shown in FIGS. 4 and 5 to the terminal as needed while confirming the progress of the game. Thereby, event information and scene information are generated in the recorder terminal 1 and transmitted to the editor terminal 4.
次に、デジタルカメラ2から編集者端末4に送信される情報について図5を参照して説明する。図6は、デジタルカメラ2から編集者端末4に送信される情報(以降、「撮影情報」とする)の内容を示す図である。図6に示すように、撮影情報には、撮影によって生成された画像の情報である“画像データ”、撮影の日時を示す“タイムスタンプ”に加えて、撮影したカメラマンを識別する“撮影者情報”が含まれる。即ち、撮影情報は、撮影された画像と撮影された日時とが関連付けられた情報であり、更には画像を撮影した撮影者を示す情報を含む。 Next, information transmitted from the digital camera 2 to the editor terminal 4 will be described with reference to FIG. FIG. 6 is a diagram showing the contents of information (hereinafter referred to as “photographing information”) transmitted from the digital camera 2 to the editor terminal 4. As shown in FIG. 6, the shooting information includes “image data” that is information of an image generated by shooting, “time stamp” that indicates the date and time of shooting, and “photographer information that identifies the photographer who has shot the image. "Is included. That is, the shooting information is information in which the shot image is associated with the shooting date and time, and further includes information indicating the photographer who has shot the image.
図6に示す“タイムスタンプ”と図4に示す“タイムスタンプ”とに基づいて“画像データ”が“イベント情報”に関連付けられる。更に、図5に示す場面情報に基づいて試合進行の場面に応じた画像の整理が実行される。これにより、試合の進行状況に応じた画像の選別を可能とすることが本実施形態に係る要旨の1つである。このような処理は、編集者端末4において実行される。 “Image data” is associated with “event information” based on the “time stamp” shown in FIG. 6 and the “time stamp” shown in FIG. Furthermore, the image arrangement according to the scene of the game progress is executed based on the scene information shown in FIG. Thus, one of the gist according to the present embodiment is to enable image selection according to the progress of the game. Such processing is executed in the editor terminal 4.
次に、本実施形態に係る編集者端末4の機能構成について図7を参照して説明する。図7に示すように、本実施形態に係る編集者端末4は、図2において説明したLCD60、操作部70に加えて、コントローラ100及びネットワークI/F110を含む。 Next, the functional configuration of the editor terminal 4 according to the present embodiment will be described with reference to FIG. As shown in FIG. 7, the editor terminal 4 according to the present embodiment includes a controller 100 and a network I / F 110 in addition to the LCD 60 and the operation unit 70 described in FIG.
ネットワークI/F110は、編集者端末4がネットワークを介して他の機器と通信するためのインタフェースであり、Ethernet(登録商標)やUSB(Universal Serial Bus)インタフェースが用いられる。コントローラ100は、ソフトウェアとハードウェアとの組み合わせによって構成され、編集者端末4全体を制御する制御部として機能する。 The network I / F 110 is an interface for the editor terminal 4 to communicate with other devices via the network, and uses an Ethernet (registered trademark) or a USB (Universal Serial Bus) interface. The controller 100 is configured by a combination of software and hardware, and functions as a control unit that controls the editor terminal 4 as a whole.
図7に示すように、コントローラ100は、情報取得部101、関連付け部102、画像解析部103、候補抽出部104、イベント一覧情報105、候補提示部106及び編集処理部107を含む。情報取得部101は、ネットワークI/F110を介して図3〜図6において説明した夫々の情報や、マイク3によって録音された音声情報を取得する。 As illustrated in FIG. 7, the controller 100 includes an information acquisition unit 101, an association unit 102, an image analysis unit 103, a candidate extraction unit 104, event list information 105, a candidate presentation unit 106, and an editing processing unit 107. The information acquisition unit 101 acquires the information described in FIGS. 3 to 6 and the audio information recorded by the microphone 3 via the network I / F 110.
関連付け部102は、情報取得部101が取得した情報について、上述したように“タイムスタンプ”の情報に基づいてイベント情報と画像データとの関連付けを行う。関連付けの結果は候補抽出部104に入力される。画像解析部103は、情報取得部101が取得した撮影情報に含まれる画像データを解析し、画像から得られる情報を抽出して撮影情報に付加する。図8は、画像解析部103による画像解析の態様を示す図である。 The association unit 102 associates the event information and the image data with respect to the information acquired by the information acquisition unit 101 based on the “time stamp” information as described above. The result of the association is input to the candidate extraction unit 104. The image analysis unit 103 analyzes image data included in the shooting information acquired by the information acquisition unit 101, extracts information obtained from the image, and adds the information to the shooting information. FIG. 8 is a diagram illustrating an aspect of image analysis performed by the image analysis unit 103.
図8に示すように、画像解析部103は、画像に写っている選手の背番号や名前をOCR(Optical Character Recognition)によって認識し、認識した文字情報を撮影情報に付加する。即ち、画像解析部103が、文字情報抽出部として機能する。図10は、画像解析部103による画像解析によって認識された背番号や選手名等の情報(以降、「認識情報」とする)が付加された撮影情報の例を示す図である。図9に示すような情報は、候補抽出部104に入力される。 As shown in FIG. 8, the image analysis unit 103 recognizes the player's back number and name in the image by OCR (Optical Character Recognition), and adds the recognized character information to the shooting information. That is, the image analysis unit 103 functions as a character information extraction unit. FIG. 10 is a diagram illustrating an example of shooting information to which information (hereinafter referred to as “recognition information”) such as a back number and a player name recognized by image analysis by the image analysis unit 103 is added. Information as illustrated in FIG. 9 is input to the candidate extraction unit 104.
候補抽出部104は、関連付け部102によって生成された関連付け情報及び画像解析部103によって認識情報が付加された撮影情報に基づき、夫々の画像データに重要度を割り振り、その重要度に基づいて収録するべき画像を収録候補として抽出する。即ち、候補抽出部104が画像選択部として機能する。そのため、候補抽出部104は、イベント一覧情報105を参照する。 The candidate extraction unit 104 assigns importance to each image data based on the association information generated by the association unit 102 and the shooting information to which the recognition information is added by the image analysis unit 103, and records based on the importance. A power image is extracted as a recording candidate. That is, the candidate extraction unit 104 functions as an image selection unit. Therefore, the candidate extraction unit 104 refers to the event list information 105.
図10は、イベントの種類に応じた重要度を示す情報であるイベント一覧情報の内容を示す図である。図10に示すように、イベント一覧情報は、イベントの種類を一意に識別する“イベントID”、イベントの種類の名称を示し、図4の“イベント名”に対応する“イベント名”、夫々のイベント種類の重要性を示す値である“重要度”が関連付けられた情報である。この“重要度”とは、換言すると、写真集に収録するべき画像としての優先度を示す値である。 FIG. 10 is a diagram illustrating the contents of event list information, which is information indicating importance according to the type of event. As shown in FIG. 10, the event list information indicates an “event ID” that uniquely identifies an event type, an event type name, and an “event name” corresponding to the “event name” in FIG. This is information associated with “importance”, which is a value indicating the importance of the event type. In other words, the “importance” is a value indicating the priority as an image to be recorded in the photo album.
候補抽出部104は、図10に示すような情報に基づき、夫々の画像データに重要度を割り振り、その重要度の値が大きい順に写真集に収録するべき候補となる画像データを抽出する。候補抽出部104は、そのようにして抽出した候補の画像データや割り振った重要度の値を候補提示部106に入力する。 The candidate extraction unit 104 assigns importance to each image data based on information as shown in FIG. 10, and extracts image data as candidates to be recorded in the photo album in descending order of importance values. The candidate extraction unit 104 inputs the candidate image data extracted as described above and the assigned importance value to the candidate presentation unit 106.
候補提示部106は、抽出された候補の画像データをレイアウトした画面をGUI(Graphical User Interface)上に提示する。即ち、候補提示部106が選択結果出力部として機能する。これにより、編集者端末4を操作する編集者が、写真集のレイアウトを確認すると共に、収録する画像の変更や、レイアウトの調整を行うことが可能となる。このように、本実施形態に係るシステムにおいては、試合において発生したイベントに応じて優先的に収録するべき画像データが抽出されて写真集のレイアウト案が提示される。そのため、編集者の負担を大幅に軽減することが可能となる。 The candidate presenting unit 106 presents a screen on which the extracted candidate image data is laid out on a GUI (Graphical User Interface). That is, the candidate presentation unit 106 functions as a selection result output unit. As a result, the editor who operates the editor terminal 4 can check the layout of the photo album, change the recorded image, and adjust the layout. As described above, in the system according to the present embodiment, image data to be preferentially recorded is extracted according to an event that has occurred in a game, and a photo album layout plan is presented. Therefore, the burden on the editor can be greatly reduced.
編集処理部107は、操作部70を介して入力された編集者の操作に基づき、GUI上に提示されたレイアウト案を修正する。その後、編集者によってレイアウト確定の操作が行われると、確定されたレイアウトの情報や収録されるものとして選択された画像データがネットワークI/F110を介して画像形成装置6に送信される。これにより、画像形成装置6において画像形成出力及び製本処理が実行され、写真集が生成される。 The edit processing unit 107 corrects the layout plan presented on the GUI based on the editor's operation input via the operation unit 70. After that, when an operation for confirming the layout is performed by the editor, the confirmed layout information and the image data selected to be recorded are transmitted to the image forming apparatus 6 via the network I / F 110. As a result, image formation output and bookbinding processing are executed in the image forming apparatus 6 to generate a photo book.
次に、ユーザ端末5において表示される購入申し込み画面のGUIについて説明する。図11は、本実施形態に係る購入申し込み画面の例を示す図である。図11に示すようなGUIは、例えばユーザがユーザ端末5を介して写真集を販売するサービス提供者のウェブサイトにアクセスすることにより表示される。図11に示すように、本実施形態に係る購入申し込み画面においては、“重要イベント選択”、“重要チーム選択”、“重要選手選択”、“デザインパターン選択”等の選択肢が表示される。 Next, the GUI of the purchase application screen displayed on the user terminal 5 will be described. FIG. 11 is a diagram illustrating an example of a purchase application screen according to the present embodiment. The GUI as shown in FIG. 11 is displayed, for example, when the user accesses the website of a service provider who sells a photo album via the user terminal 5. As shown in FIG. 11, on the purchase application screen according to the present embodiment, options such as “important event selection”, “important team selection”, “important player selection”, and “design pattern selection” are displayed.
“重要イベント選択”、“重要チーム選択”、“重要選手選択”の選択肢は、写真集に収録する画像の選択に際して、優先的に選択される写真の内容を指定する選択肢である。図10において説明したように、夫々のイベント種類には重要度が設定されている。しかしながら、これは一般的な観点に基づいて予め設定された値である。 The choices of “important event selection”, “important team selection”, and “important player selection” are options for designating the content of a photograph that is preferentially selected when selecting an image to be recorded in the photo album. As described in FIG. 10, importance is set for each event type. However, this is a preset value based on a general viewpoint.
例えば、一般的には「ホームラン」、「ヒット」を比べると、「ホームラン」の方が観客による注目度は高いことが予測されるため、「ヒット」よりも「ホームラン」に高い重要度の値が設定される。これに対して、ユーザによっては「ホームラン」の写真よりも「ヒット」の写真をより多く収録することを希望する場合がある。図11に示すような選択肢により、そのような個別のユーザの希望に沿った画像データの抽出を行うことが可能となる。 For example, in general, when comparing “home run” and “hit”, “home run” is predicted to have a higher level of attention by the audience, so the value of importance is higher for “home run” than “hit” Is set. On the other hand, some users may wish to record more “hit” photos than “home run” photos. With the choices as shown in FIG. 11, it is possible to extract image data in accordance with the desires of such individual users.
“デザインパターン選択”は、写真集の表紙や、各ページの背景等、製本された状態でのデザインを指定する選択肢である。尚、購入希望申し込み画面においては、図11に示すような選択肢のほか、氏名や住所などの購入希望者の情報を入力する項目が表示される。 “Design pattern selection” is an option for designating a bound design such as the cover of a photo book or the background of each page. In addition, on the purchase request application screen, in addition to the options shown in FIG. 11, items for inputting information of the applicant who wants to purchase such as name and address are displayed.
図12は、図11に示すGUIによって入力された情報により生成される情報(以降、「購入申請情報」とする)の例を示す図である。図12に示すように、購入申請情報には、“重要イベント”、“重要チーム”、“重要選手”、“デザインパターン”といった各選択肢において選択された情報の他、“購入者情報”が含まれる。 FIG. 12 is a diagram illustrating an example of information (hereinafter referred to as “purchase application information”) generated from information input by the GUI illustrated in FIG. 11. As shown in FIG. 12, the purchase application information includes “buyer information” in addition to the information selected in each option such as “important event”, “important team”, “important player”, and “design pattern”. It is.
図12に示す情報は、編集者端末4に送信され、候補抽出部104による重要度の割り振り処理において用いられる。特に、“重要チーム”、“重要選手”の情報は、写真集に収録する画像を選択する際に優先して選択するべき興行の参加者の情報として用いられる。 The information shown in FIG. 12 is transmitted to the editor terminal 4 and used in the importance degree assignment process by the candidate extraction unit 104. In particular, the information on “important team” and “important player” is used as information on the participants of the performance that should be preferentially selected when selecting an image to be recorded in the photo album.
次に、本実施形態に係るシステム全体の動作について、図13を参照して説明する。図13に示すように、まずはユーザ端末5がユーザの操作に応じて購入申請を行う。これにより、図12に示す情報が編集者端末4に送信される(S1301)。尚、図13においては、ユーザ端末5から編集者端末4に対して購入申請が行われるように示されているが、上述したように、サービス提供者のウェブサーバを介して行われても良い。 Next, the operation of the entire system according to the present embodiment will be described with reference to FIG. As shown in FIG. 13, first, the user terminal 5 makes a purchase application in response to a user operation. Thereby, the information shown in FIG. 12 is transmitted to the editor terminal 4 (S1301). Although FIG. 13 shows that a purchase application is made from the user terminal 5 to the editor terminal 4, as described above, it may be made via the service provider's web server. .
購入申請が完了すると、ユーザ端末5は、ユーザの操作に応じて購入申請を示すチケットの発券を行う(S1302)。S1302のチケットの発券処理は、電子メール等の情報処理によって行われても良いし、プリントアウト等による紙の出力によって行われても良い。ここまでが、試合開始前に実行される処理である。 When the purchase application is completed, the user terminal 5 issues a ticket indicating the purchase application according to the user's operation (S1302). The ticket issuing process in S1302 may be performed by information processing such as e-mail, or may be performed by outputting paper by printout or the like. This is the process executed before the game starts.
試合が開始されると、デジタルカメラ2は撮影によって生成された撮影情報を編集者端末4に送信する(S1303)。ここで、デジタルカメラ2から編集者端末4への撮影情報の送信は、直接行われても良いし、ノートパソコン等の他の情報処理装置を介して行われても良い。また、撮影の都度行われても良いし、数分おきや、1回表、1回裏、等のように場面の切り替わりに応じて行われても良い。 When the game is started, the digital camera 2 transmits shooting information generated by shooting to the editor terminal 4 (S1303). Here, the transmission of the shooting information from the digital camera 2 to the editor terminal 4 may be performed directly or via another information processing apparatus such as a notebook computer. Further, it may be performed every time shooting is performed, or may be performed in response to switching of scenes, such as every few minutes, once table, once, or the like.
また、記録者端末1は、記録者によって入力されたイベント情報、場面情報を編集者端末4に送信する(S1304)。記録者端末による情報送信も、撮影情報と同様に記録情報が入力される都度行われても良いし、所定の時間や場面の区切り毎にまとめて行われても良い。 Further, the recorder terminal 1 transmits the event information and scene information input by the recorder to the editor terminal 4 (S1304). Information transmission by the recorder terminal may be performed every time recording information is input as in the case of shooting information, or may be performed collectively at predetermined time intervals or scene breaks.
編集者端末4においては、デジタルカメラ2から取得した撮影情報及び記録者端末1から取得した記録者情報に基づいて関連付け部102、画像解析部103及び候補抽出部104が動作し、収録するべき画像の選択を行う(S1305)。画像の選択が完了すると、候補提示部106によってレイアウト案が提示される(S1306)。 In the editor terminal 4, the associating unit 102, the image analyzing unit 103, and the candidate extracting unit 104 operate based on the shooting information acquired from the digital camera 2 and the recorder information acquired from the recorder terminal 1. Is selected (S1305). When the selection of the image is completed, a layout plan is presented by the candidate presenting unit 106 (S1306).
レイアウト案が提示されると、編集者による操作に応じて編集処理部107がレイアウト編集を行う(S1307)。レイアウト編集の完了操作が行われると、編集処理部107が画像形成装置6に対してレイアウト情報及び画像データを送信する(S1308)。これにより、画像形成装置6において印刷出力及び製本が実行される(S1309)。 When the layout plan is presented, the editing processing unit 107 performs layout editing in accordance with an operation by the editor (S1307). When the layout editing completion operation is performed, the editing processing unit 107 transmits layout information and image data to the image forming apparatus 6 (S1308). As a result, print output and bookbinding are executed in the image forming apparatus 6 (S1309).
このようにして画像形成装置6において写真集が生成されると、ユーザはS1302において発券したチケットを用いて写真集を受け取る。これにより、ユーザは試合当日に写真集を受け取ることが可能となる。 When the photo book is generated in the image forming apparatus 6 in this way, the user receives the photo book using the ticket issued in S1302. Thereby, the user can receive a photo album on the day of the game.
次に、本実施形態に係る編集者端末4の動作について更に詳細に説明する。図14は、本実施形態に係る編集者端末4の動作を示すフローチャートである。図14に示すように、編集者端末4の情報取得部101が、試合の進行に応じて画像情報を取得すると共に(S1401)、イベント情報、場面情報を取得する(S1402)。S1401、S1402の処理は、図13において説明したように試合の進行に応じて随時実行される。 Next, the operation of the editor terminal 4 according to the present embodiment will be described in further detail. FIG. 14 is a flowchart showing the operation of the editor terminal 4 according to this embodiment. As shown in FIG. 14, the information acquisition unit 101 of the editor terminal 4 acquires image information according to the progress of the game (S1401), and acquires event information and scene information (S1402). The processes of S1401 and S1402 are executed as needed according to the progress of the game as described in FIG.
情報を取得すると、画像解析部103が、取得された撮影情報に含まれる画像データの画像解析を行う(S1403)。S1403の処理は、図8において説明した処理である。これにより、図9において説明したように撮影情報に認識情報が付加されて候補抽出部104に付加される。 When the information is acquired, the image analysis unit 103 performs image analysis of the image data included in the acquired shooting information (S1403). The process of S1403 is the process described in FIG. As a result, the recognition information is added to the photographing information and added to the candidate extraction unit 104 as described in FIG.
画像解析部103による画像解析とは別に、関連付け部102による画像データとイベント情報との関連付け処理が実行される(S1404)。ここで、図15を参照して関連付け処理の詳細について説明する。図15に示すように、関連付け部102は、まず受信されているイベント情報から1つを選択する(S1501)。次に、関連付け部102は、受信されている撮影情報の画像データを1つ選択し(S1502)、夫々のタイムスタンプを比較して時間差を算出する(S1503)。 In addition to the image analysis by the image analysis unit 103, an association process between the image data and the event information by the association unit 102 is executed (S1404). Here, the details of the association processing will be described with reference to FIG. As shown in FIG. 15, the associating unit 102 first selects one of the received event information (S1501). Next, the associating unit 102 selects one piece of image data of the received shooting information (S1502), compares each time stamp, and calculates a time difference (S1503).
関連付け部102は、時間差を算出すると、その時間差が所定の閾値以内であるか否かを判断する(S1504)。S1504における閾値は、画像とイベントが関連しているか否かを判断するための閾値であり、その値は例えば±30秒である。S1504の判断の結果、時間差が閾値以内であれば、関連付け部102は、選択中のイベントと選択中の画像とを関連付ける(S1505)。 After calculating the time difference, the associating unit 102 determines whether the time difference is within a predetermined threshold (S1504). The threshold value in S1504 is a threshold value for determining whether or not an image and an event are related, and the value is, for example, ± 30 seconds. If the time difference is within the threshold as a result of the determination in S1504, the associating unit 102 associates the selected event with the selected image (S1505).
他方、時間差が閾値を超えている場合、若しくは、S1505の処理が完了した場合、関連付け部102は、受信されている全ての撮影情報についてS1502からの処理を完了するまで処理を繰り返す(S1506/NO)。そして、受信されている全ての撮影情報についてS1502からの処理を完了すると(S1506/YES)、次に関連付け部102は、受信されている全てのイベント情報について処理が完了するまで、S1501からの処理を繰り返す(S1507/NO)。 On the other hand, when the time difference exceeds the threshold value or when the processing of S1505 is completed, the associating unit 102 repeats the processing until the processing from S1502 is completed for all received photographing information (S1506 / NO). ). Then, when the processing from S1502 is completed for all received imaging information (S1506 / YES), the associating unit 102 next performs the processing from S1501 until the processing is completed for all received event information. Is repeated (S1507 / NO).
そして、受信されている全てのイベントについてS1501からの処理を完了すると(s1507/YES)、関連付け部102は、関連付け処理を終了する。即ち、関連付け部102は、受信されている全てのイベントと全ての撮影情報について、タイムスタンプによる関連付けの判断を行う。このような処理により、図16に示すように、撮影情報を示す“画像ファイル名”が“イベントID”に関連付けられた関連付け情報が生成される。 When the process from S1501 is completed for all received events (s1507 / YES), the associating unit 102 ends the associating process. In other words, the associating unit 102 determines the association of all received events and all shooting information based on time stamps. By such processing, as shown in FIG. 16, association information in which “image file name” indicating shooting information is associated with “event ID” is generated.
図14のS1404における関連付け処理が完了すると、次に候補抽出部104が画像データの中から写真集に収録するべき画像データの抽出処理を開始する。抽出処理に際して、候補抽出部104はまず画像データの重み付け処理を行う(S1405)。図17を参照して、画像データの重み付け処理の詳細について説明する。 When the association processing in S1404 in FIG. 14 is completed, the candidate extraction unit 104 starts extraction processing of image data to be recorded in the photo album from the image data. In the extraction process, the candidate extraction unit 104 first performs a weighting process on the image data (S1405). Details of the weighting process of the image data will be described with reference to FIG.
図17に示すように、候補抽出部104は、受信されている画像データの1つを選択し(S1701)、イベントの重要度を反映する(S1702)。S1702において、候補抽出部104は、図16に示すように生成された関連付け情報を参照し、夫々の画像ファイルに対して関連付けられているイベントの“重要度”を、イベント一覧情報105から取得して、画像ファイルに関連付ける。 As shown in FIG. 17, the candidate extraction unit 104 selects one of the received image data (S1701), and reflects the importance of the event (S1702). In S <b> 1702, the candidate extraction unit 104 refers to the association information generated as illustrated in FIG. 16, and acquires the “importance” of the event associated with each image file from the event list information 105. And associate it with the image file.
次に、候補抽出部104は、画像ファイルに関連付けた重要度に対して、重み係数を反映する(S1703)。重み係数とは、図12に示すように選択された“重要イベント”、“重要チーム”、“重要選手”に応じて加算される重要度である。選択された項目に応じて図18に示すように係数が設定され、候補抽出部104がその係数を乗ずることによってユーザに選択された項目に対応する画像データの重要度が高く算出される。これにより、ユーザの趣向に合致する画像の重要度を高く算出することが可能となる。 Next, the candidate extraction unit 104 reflects the weighting coefficient on the importance associated with the image file (S1703). The weighting coefficient is the importance added in accordance with the “important event”, “important team”, and “important player” selected as shown in FIG. A coefficient is set according to the selected item as shown in FIG. 18, and the candidate extraction unit 104 multiplies the coefficient to calculate the importance of the image data corresponding to the item selected by the user. As a result, it is possible to calculate the importance of an image that matches the user's preference high.
尚、図16に示す関連付け情報により、夫々の画像データが対応しているイベント、チーム、選手は判断可能であるため、“重要イベント”、“重要チーム”、“重要選手”の係数を乗ずるか否かは関連付け情報に基づいて判断可能である。他方、図9に示す認識情報を参照することにより、夫々の画像データがどの選手に対応しているかを判断することが可能であり、“重要選手”の係数の判断を行うことが出来る。また、図5に示す場面情報を参照すれば、時刻毎に投手、打者、攻撃チームを判断することが可能となるため、上述した判断の補助とすることが可能である。 In addition, since the event, team, and player corresponding to each image data can be determined from the association information shown in FIG. 16, the coefficients of “important event”, “important team”, and “important player” are multiplied. Whether or not can be determined based on the association information. On the other hand, by referring to the recognition information shown in FIG. 9, it is possible to determine which player each image data corresponds to, and the coefficient of “important player” can be determined. In addition, referring to the scene information shown in FIG. 5, it is possible to determine the pitcher, batter, and attack team at each time, so that the above-described determination can be assisted.
次に、候補抽出部104は、音声レベルによる重要度を反映する(S1704)。図19は、マイク3によって録音された音声情報における音量レベルを時系列に示す図である。試合の進行に応じて、試合が盛り上がった時にはより大きな音が録音されることが考えられる。即ち、音量レベルが高い時刻における写真はそれだけ重要度が高いことが考えられる。 Next, the candidate extraction unit 104 reflects the importance level based on the voice level (S1704). FIG. 19 is a diagram showing the sound volume levels in the sound information recorded by the microphone 3 in time series. As the game progresses, it is possible that a louder sound is recorded when the game is excited. That is, it can be considered that a photograph at a time when the volume level is high is so important.
従って、候補抽出部104は、音量レベルがある閾値を上回った時刻前後の画像データの重要度を加算する。これにより、その試合において盛り上がった場面の写真の重要度を高くして、写真集に収録されやすくすることが出来る。尚、音量レベルがある閾値を上回った時刻から所定の期間内の画像データの判断に際しては、図15のS1503、S1504のように、時間差が閾値以内であるか否かによって判断することが可能である。また、音量レベルが閾値を上回った画像データに対する重要度の加算は、図18に示すように係数によって行っても良いし、所定の値を加算することによって行っても良い。 Therefore, the candidate extraction unit 104 adds the importance of the image data before and after the time when the volume level exceeds a certain threshold. As a result, the importance of the photos of the exciting scene in the game can be increased, and the photos can be easily recorded. Note that when determining the image data within a predetermined period from the time when the volume level exceeds a certain threshold, it is possible to determine whether or not the time difference is within the threshold, as in S1503 and S1504 in FIG. is there. Further, the addition of the importance to the image data whose volume level exceeds the threshold value may be performed by a coefficient as shown in FIG. 18, or may be performed by adding a predetermined value.
候補抽出部104は、図16に示すように関連付けデータが生成されている全ての画像データについて処理が完了するまでS1701からの処理を繰り返し(S1705/NO)、全ての画像データについて処理が完了したら(S1705/YES)、処理を終了する。これにより、図20に示すように、それぞれの画像データを示す“画像ファイル名”に“重み値”が関連付けられた重み付け情報が生成される。 The candidate extraction unit 104 repeats the processing from S1701 until the processing is completed for all the image data for which association data is generated as shown in FIG. 16 (S1705 / NO). (S1705 / YES), the process ends. As a result, as shown in FIG. 20, weighting information in which “weight value” is associated with “image file name” indicating each image data is generated.
図20に示すように重み付け情報を生成すると、候補抽出部104は、「1回表」、「1回裏」等の場面ごとに規定された数の画像データを重要度の値の大きい順に抽出する(S1406)。S1406においては、図5に示す場面情報を参照し、「1回表」、「1回裏」等の各場面に相当する時刻に対応する画像データを抽出する。これにより、図21に示すように、「1回表」等の場面ごとに規定数の画像データが抽出される。 When the weighting information is generated as shown in FIG. 20, the candidate extraction unit 104 extracts the number of image data defined for each scene such as “one-time table” and “one-time back” in descending order of importance value. (S1406). In S1406, the scene information shown in FIG. 5 is referred to, and image data corresponding to the time corresponding to each scene such as “1 time front” and “1 time back” is extracted. As a result, as shown in FIG. 21, a prescribed number of image data is extracted for each scene such as “1 time table”.
候補抽出部104は、試合の最後の場面についての画像の抽出が完了するまで、S1401からの処理を繰り返す(S1407/NO)。そして、試合の最後の場面についてS1406までの処理が完了すると(S1407/YES)、候補提示部106は、場面ごとに抽出された画像データに基づいてレイアウト案をGUIに表示して提示する(S1408)。 The candidate extraction unit 104 repeats the processing from S1401 until the image extraction for the last scene of the game is completed (S1407 / NO). When the process up to S1406 is completed for the last scene of the game (S1407 / YES), the candidate presentation unit 106 displays the layout plan on the GUI based on the image data extracted for each scene and presents it (S1408). ).
図22は、本実施形態に係るレイアウト確認画面のGUIの例を示す図である。S1408nioite,候補提示部106は、図12に示す購入申請情報のうち、“デザインパターンA”のように選択されたデザインパターンに従ってレイアウトを生成する。図22に示すように、本実施形態に係るレイアウト確認画面においては、抽出された画像データがレイアウトされた「レイアウト」のスペースに加えて、抽出されなかった画像データが、算出された重要度と共に表示される「その他候補画像」スペースが表示される。 FIG. 22 is a diagram showing an example of the GUI of the layout confirmation screen according to the present embodiment. S1408 neoite, the candidate presenting unit 106 generates a layout according to the design pattern selected as “design pattern A” in the purchase application information shown in FIG. As shown in FIG. 22, in the layout confirmation screen according to the present embodiment, in addition to the “layout” space in which the extracted image data is laid out, the image data that has not been extracted is displayed along with the calculated importance. The displayed “other candidate image” space is displayed.
また、「レイアウト」スペースには、「1番 X田 一塁打」等のように、夫々の画像に関連付けられたイベント情報から得られる情報が文字情報として表示される。更に、イベントの重要度に応じて画像の大きさが調整され、図22に示すように「ホームラン」のイベントに関連する画像が大きく表示されるようにレイアウトされている。 In the “layout” space, information obtained from event information associated with each image is displayed as character information, such as “No. Furthermore, the size of the image is adjusted according to the importance of the event, and as shown in FIG. 22, the image related to the “home run” event is displayed in a large size.
加えて、重要度の高いイベントについては、「音声」ボタンが表示されており、そのイベントのタイムスタンプ前後の音声が再生されるようになっている。これは、実際に出力された写真集においては、電子ペーパーによって実現される。 In addition, an “audio” button is displayed for a highly important event, and audio before and after the time stamp of the event is reproduced. This is realized by electronic paper in the actually output photo book.
図22に示すGUIは、候補提示部106によって表示情報が生成されてLCD60に表示される。編集者は図22に示す画面を確認することにより、自動的に抽出された画像やレイアウトを確認することが可能となる。また、抽出されなかった画像を同時に表示させることにより、画像データの入れ替えを容易に判断することが可能となる。 In the GUI shown in FIG. 22, display information is generated by the candidate presentation unit 106 and displayed on the LCD 60. The editor can check the automatically extracted image and layout by checking the screen shown in FIG. Further, by simultaneously displaying the images that have not been extracted, it is possible to easily determine whether the image data is to be replaced.
図22に示すような画面において編集者が出力指示のための操作を行うと(S1409/YES)、編集処理部107は、表示中のレイアウトの情報及び含まれる画像データの情報をネットワークI/F110を介して画像形成装置6に送信する(S1410)。これにより、画像形成装置6においてレイアウトに従った画像形成出力及び製本処理が実行され、写真集が生成される。 When the editor performs an operation for output instruction on the screen as shown in FIG. 22 (S1409 / YES), the editing processing unit 107 displays the information of the displayed layout and the information of the included image data on the network I / F 110. Then, it is transmitted to the image forming apparatus 6 (S1410). As a result, image forming output and bookbinding processing according to the layout are executed in the image forming apparatus 6, and a photo book is generated.
他方、出力指示の操作ではなく(S1408/NO)、画像の変更やレイアウトの調整などの編集指示の操作であった場合(S1411/YES)、編集処理部107は、受け付けた操作に従って表示中のレイアウトを編集し(S1412)、出力指示を待つ。このような処理により、本実施形態に係る編集者端末4の動作が完了する。このような処理が、図12に示すような購入申請情報毎に実行されることにより、購入申請者であるユーザの趣向に応じた写真集が生成される。 On the other hand, when the operation is not an output instruction operation (S1408 / NO) but an editing instruction operation such as an image change or layout adjustment (S1411 / YES), the editing processing unit 107 is currently displaying according to the received operation. The layout is edited (S1412), and an output instruction is awaited. By such processing, the operation of the editor terminal 4 according to the present embodiment is completed. By executing such processing for each purchase application information as shown in FIG. 12, a photo book according to the user's preference as a purchase applicant is generated.
このように、本実施形態に係るシステムにおいては、大量に撮影された画像を、まずはタイムスタンプに応じてイベント情報に関連付ける。これにより、試合中に発生した特筆するべきイベントとは無関係な画像は写真集への掲載対象から除外され、試合中に発生した何らかの出来事に関連した画像のみを候補とすることが出来る。 As described above, in the system according to the present embodiment, a large number of captured images are first associated with event information according to a time stamp. As a result, images that are irrelevant to the event that should be noted during the game are excluded from inclusion in the photo book, and only images related to some event that occurred during the game can be used as candidates.
また、図10に示すように、イベント毎に設定された重要度に基づく判断により、観客の注目を引く出来事に関連する画像を優先的に選択して候補とすることが出来る。更に、図11に示すように、購入申請に際して重要なイベント、チーム、選手の選択を受け付けることにより、よりユーザの趣向に合致した写真を選択して候補とすることが出来る。 Also, as shown in FIG. 10, an image related to an event that attracts the attention of the audience can be preferentially selected as a candidate based on the determination based on the importance set for each event. Furthermore, as shown in FIG. 11, by accepting selection of important events, teams, and players at the time of purchase application, it is possible to select a photo that more matches the user's taste as a candidate.
このような機能により、本実施形態に係るシステムにおいては、興行において撮影された画像によって構成された写真集を迅速に作成するために、撮影された画像の選択を支援することが可能となる。 With such a function, in the system according to the present embodiment, it is possible to support the selection of captured images in order to quickly create a photo book composed of images captured at the box office.
尚、上記実施形態においては、図22に示すようなGUIによりレイアウト案を提示した上で、最終的な調整を編集者によって行う場合を例として説明した。しかしながらこれは一例であり、候補抽出部104によって抽出され、候補提示部106によって生成されたレイアウトをそのまま画像形成装置6に送信しても良い。 In the above-described embodiment, an example has been described in which final adjustment is performed by an editor after a layout plan is presented using a GUI as illustrated in FIG. However, this is merely an example, and the layout extracted by the candidate extraction unit 104 and generated by the candidate presentation unit 106 may be transmitted to the image forming apparatus 6 as it is.
編集者の操作により最終的な操作を行う場合のメリットとしては、イベントの種類としては普通の内容であるが、個別に特別な意味を持つイベントに関連する画像をピックアップする場合等が考えられる。例えば、「ヒット」というイベントを考えると、一般的には「ホームラン」よりも重要度が低いが、ある選手の通算1000本目のヒット等である場合には、「ホームラン」よりも重要度が高くなる。 As a merit when the final operation is performed by the editor's operation, there may be a case where an image related to an event having a special meaning is individually picked up, although the type of event is normal. For example, when considering an event “hit”, the importance is generally lower than “home run”, but in the case of the 1000th hit or the like of a certain player, the importance is higher than “home run”. Become.
このような場合に、図22に示す画面で編集者による調整のチャンスを残すことにより、特別なシーンを逃すことなく収録することが可能となる。他方、特別なシーンを特別なイベントとして設定することにより、同様の機能を実現することも可能である。 In such a case, it is possible to record without missing a special scene by leaving an opportunity for adjustment by the editor on the screen shown in FIG. On the other hand, a similar function can be realized by setting a special scene as a special event.
例えば、通常は「ヒット」というイベントとして処理されるところ、図23に示すように、「1000本安打」というイベントとしてイベント情報を生成する。そして、図24に示すように、そのような特別なイベントに対応する重要度が設定された項目をイベント一覧情報105に追加しておくことにより、通常の「ヒット」とは異なったイベントとして優先的に処理することが可能となる。 For example, the event information is generated as an event of “1000 hits” as shown in FIG. Then, as shown in FIG. 24, by adding an item in which the degree of importance corresponding to such a special event is set to the event list information 105, it is given priority as an event different from a normal “hit”. Can be processed automatically.
また、上記実施形態においては、野球の試合を例として説明したが、野球以外のスポーツの試合についても適用可能なことは言うまでもない。また、スポーツの試合に限らず、音楽のコンサートや、パレード等、現場で鑑賞する興行であれば同様に本件発明を適用して、上述した効果を得ることが可能である。 Moreover, in the said embodiment, although the baseball game was demonstrated as an example, it cannot be overemphasized that it is applicable also to sports games other than baseball. In addition, the present invention can be applied in the same way as long as it is a performance to be appreciated in the field, such as a music concert or a parade, without being limited to sports matches, and the above-described effects can be obtained.
また、興行の会場で画像を撮影するカメラマンが、予め撮影対象のチームによって振り分けられている場合がある。図25は、そのようなカメラマン毎の撮影対象チームの振り分けを示すテーブルである。このような場合、候補抽出部104は、図17の動作において、図6に示すように撮影情報に含まれている“撮影者情報”に基づき、画像データに写っている選手のチームを判断することが可能である。 In addition, there are cases where photographers who take images at the performance venue are distributed in advance by the team to be photographed. FIG. 25 is a table showing the sort of the shooting target team for each cameraman. In such a case, the candidate extraction unit 104 determines a team of players in the image data based on “photographer information” included in the shooting information as shown in FIG. 6 in the operation of FIG. It is possible.
そのようにして夫々の画像データに写っている選手のチームを判断することが出来れば、図18に示す“重要チーム”の係数を反映する際の判断の補助とすることが出来る。また、図26に示すように各カメラマンが“攻撃チーム”、“守備チーム”として割り当てられている場合、図5に示す場面情報に基づき、夫々の画像データに写っている選手のチームを判断することも可能である。 If it is possible to determine the teams of the players shown in the respective image data in this way, it is possible to assist in the determination when the “important team” coefficient shown in FIG. 18 is reflected. Also, as shown in FIG. 26, when each photographer is assigned as an “attack team” or “defensive team”, the team of players in each image data is determined based on the scene information shown in FIG. It is also possible.
また、上記実施形態においては、図11、図12において説明したように、重要チームや重要選手はユーザによって選択される場合を例として説明した。しかしながらこれは一例であり、システムの管理者によって予め重要チームや重要選手が設定されていても良い。これにより、一般的に人気のあるチームや人気の選手の写真が優先的に選択されるようにすることが出来る。 Moreover, in the said embodiment, as demonstrated in FIG. 11, FIG. 12, the case where an important team and an important player were selected by the user was demonstrated as an example. However, this is an example, and an important team or an important player may be set in advance by a system administrator. As a result, it is possible to preferentially select photos of generally popular teams and popular players.
1 記録者端末
2 デジタルカメラ
3 マイク
4 編集者端末
5 ユーザ端末
6 画像形成装置
10 CPU
20 RAM
30 ROM
40 HDD
50 I/F
60 LCD
70 操作部
80 バス
100 コントローラ
101 情報取得部
102 関連付け部
103 画像解析部
104 候補抽出部
105 イベント一覧情報
106 候補提示部
107 編集処理部
DESCRIPTION OF SYMBOLS 1 Recorder terminal 2 Digital camera 3 Microphone 4 Editor terminal 5 User terminal 6 Image forming apparatus 10 CPU
20 RAM
30 ROM
40 HDD
50 I / F
60 LCD
70 Operation Unit 80 Bus 100 Controller 101 Information Acquisition Unit 102 Association Unit 103 Image Analysis Unit 104 Candidate Extraction Unit 105 Event List Information 106 Candidate Presentation Unit 107 Edit Processing Unit
Claims (12)
撮影された日時と撮影された画像とが関連付けられた撮影情報及び興行において発生したイベントが日時と関連付けて記録されたイベント情報を取得する情報取得部と、
前記撮影情報に含まれる日時と、前記イベント情報に含まれる日時とに基づき、前記画像と前記イベントとを関連付ける関連付け部と、
複数の画像夫々に関連付けられた前記イベントに基づき、複数の前記画像から所定数の画像を選択する画像選択部と、
前記画像の選択結果を出力する選択結果出力部とを含むことを特徴とする画像選択支援システム。 An image selection support system for supporting selection of images recorded in an image collection composed of images taken at a performance for a spectator,
Information acquisition unit for acquiring shooting information in which shooting date and time and a shot image are associated and event information recorded in association with the date and time of an event occurring in the box office,
An association unit for associating the image with the event based on the date and time included in the shooting information and the date and time included in the event information;
An image selection unit that selects a predetermined number of images from the plurality of images based on the event associated with each of a plurality of images;
And a selection result output unit that outputs the selection result of the image.
前記画像選択部は、前記興行の参加者のうち前記画像の選択において優先するべき参加者の情報に基づき、前記優先するべき参加者を含む前記イベント情報のイベントの重要度を調整することを特徴とする請求項2に記載の画像選択支援システム。 The event information includes information indicating a participant of the performance that is the subject of the event,
The image selection unit adjusts the importance of the event of the event information including the participant to be prioritized based on information on the participant to be prioritized in the selection of the image among the participants of the performance. The image selection support system according to claim 2.
前記画像選択部は、前記興行の参加者のうち前記画像の選択において優先するべき参加者の情報に基づき、前記優先するべき参加者に関連する文字情報が抽出された画像の重要度を調整することを特徴とする請求項2に記載の画像選択支援システム。 Including a character information extraction unit that extracts character information displayed in the image;
The image selection unit adjusts the importance of an image from which character information related to the participant to be prioritized is extracted based on information on the participant to be prioritized in the image selection among the participants of the entertainment The image selection support system according to claim 2.
前記画像選択部は、
撮影者毎に撮影対象の前記興行の参加者が関連付けられた情報に基づいて複数の画像夫々に写っている前記興行の参加者を認識し、
前記興行の参加者のうち前記画像の選択において優先するべき参加者の情報に基づき、前記優先するべき参加者が写っている画像の重要度を調整することを特徴とする請求項2に記載の画像選択支援システム。 The shooting information includes information indicating a photographer who has shot the image,
The image selection unit
Recognizing the participant of the entertainment shown in each of a plurality of images based on information associated with the participant of the entertainment to be photographed for each photographer,
3. The importance of an image in which the participant to be prioritized is selected based on information on the participant to be prioritized in the selection of the image among the participants of the performance, according to claim 2, Image selection support system.
前記画像選択部は、夫々の場面毎に所定数の画像を選択することを特徴とする請求項
1乃至7いずれか1項に記載の画像選択支援システム。 The information acquisition unit acquires information indicating a scene according to the progress of the performance,
The image selection support system according to claim 1, wherein the image selection unit selects a predetermined number of images for each scene.
撮影された日時と撮影された画像とが関連付けられた撮影情報、及び、前記所定の時間内に発生したイベントが日時と関連付けて記録されたイベント情報を取得する情報取得部と、
前記撮影情報に含まれる日時と、前記イベント情報に含まれる日時とに基づき、前記画像と前記イベントとを関連付ける関連付け部と、
前記画像に関連付けられた前記イベントに基づき、複数の前記収集された1以上の画像から所定数の画像を選択する画像選択部と、
前記画像選択部により選択された画像の選択結果を出力する選択結果出力部とを含むことを特徴とする画像選択支援システム。 An image selection support system for collecting images photographed by a photographer within a predetermined time and supporting selection of images recorded in the image collection from one or more collected images,
Shooting information in which a date and time of shooting and a shot image are associated, and an information acquisition unit that acquires event information in which events that occurred within the predetermined time are recorded in association with the date and time;
An association unit for associating the image with the event based on the date and time included in the shooting information and the date and time included in the event information;
An image selection unit that selects a predetermined number of images from the collected one or more images based on the event associated with the image;
And a selection result output unit for outputting a selection result of the image selected by the image selection unit.
撮影された日時と撮影された画像とが関連付けられた撮影情報及び興行において発生したイベントが日時と関連付けて記録されたイベント情報を取得する情報取得部と、
前記撮影情報に含まれる日時と、前記イベント情報に含まれる日時とに基づき、前記画像と前記イベントとを関連付ける関連付け部と、
複数の画像夫々に関連付けられた前記イベントに基づき、複数の前記画像から所定数の画像を選択する画像選択部と、
前記画像の選択結果を出力する選択結果出力部とを含むことを特徴とする画像選択支援装置。 An image selection support device for supporting selection of images recorded in an image collection composed of images taken at a performance for a spectator,
Information acquisition unit for acquiring shooting information in which shooting date and time and a shot image are associated and event information recorded in association with the date and time of an event occurring in the box office,
An association unit for associating the image with the event based on the date and time included in the shooting information and the date and time included in the event information;
An image selection unit that selects a predetermined number of images from the plurality of images based on the event associated with each of a plurality of images;
And a selection result output unit that outputs the selection result of the image.
撮影された日時と撮影された画像とが関連付けられた撮影情報及び興行において発生したイベントが日時と関連付けて記録されたイベント情報を取得し、
前記撮影情報に含まれる日時と、前記イベント情報に含まれる日時とに基づき、前記画像と前記イベントとを関連付け、
複数の画像夫々に関連付けられた前記イベントに基づき、複数の前記画像から所定数の画像を選択し、
前記画像の選択結果を出力することを特徴とする画像選択支援方法。 An image selection support method for supporting selection of an image recorded in an image collection composed of images taken at a performance for a spectator,
Obtaining shooting information associated with the date and time when the image was taken and the image and the event information recorded in association with the date and time when the event occurred during the performance,
Based on the date and time included in the shooting information and the date and time included in the event information, the image and the event are associated,
Based on the event associated with each of a plurality of images, a predetermined number of images are selected from the plurality of images,
An image selection support method, comprising outputting the image selection result.
撮影された日時と撮影された画像とが関連付けられた撮影情報及び興行において発生したイベントが日時と関連付けて記録されたイベント情報を取得するステップと、
前記撮影情報に含まれる日時と、前記イベント情報に含まれる日時とに基づき、前記画像と前記イベントとを関連付けるステップと、
複数の画像夫々に関連付けられた前記イベントに基づき、複数の前記画像から所定数の画像を選択するステップと、
前記画像の選択結果を出力するステップとを情報処理装置に実行させることを特徴とする画像選択支援プログラム。 An image selection support program for supporting selection of an image recorded in an image collection composed of images taken at a performance for a spectator,
Capturing the shooting information associated with the date and time of shooting and the captured image and the event information recorded in association with the date and time of the event that occurred in the performance; and
Associating the image with the event based on the date and time included in the shooting information and the date and time included in the event information;
Selecting a predetermined number of images from the plurality of images based on the event associated with each of a plurality of images;
An image selection support program causing an information processing apparatus to execute the step of outputting the image selection result.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014217453A JP6413625B2 (en) | 2014-10-24 | 2014-10-24 | Image selection support system, image selection support device, image selection support method, and image selection support program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014217453A JP6413625B2 (en) | 2014-10-24 | 2014-10-24 | Image selection support system, image selection support device, image selection support method, and image selection support program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016086279A JP2016086279A (en) | 2016-05-19 |
JP6413625B2 true JP6413625B2 (en) | 2018-10-31 |
Family
ID=55972604
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014217453A Expired - Fee Related JP6413625B2 (en) | 2014-10-24 | 2014-10-24 | Image selection support system, image selection support device, image selection support method, and image selection support program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6413625B2 (en) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018083871A1 (en) * | 2016-11-07 | 2018-05-11 | ソニー株式会社 | Request processing device and request acceptance device |
JP7180117B2 (en) * | 2018-05-24 | 2022-11-30 | 大日本印刷株式会社 | Print sales system |
JP6462974B1 (en) * | 2018-08-20 | 2019-01-30 | 富士フイルムイメージングシステムズ株式会社 | Image management system, image management method, program, and image management apparatus |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0962734A (en) * | 1995-08-23 | 1997-03-07 | Mitsubishi Denki Bill Techno Service Kk | Reservation sale system for exhibition photograph |
JP2003333486A (en) * | 2002-05-13 | 2003-11-21 | Fuji Photo Film Co Ltd | Method, device and program for image management |
JP2006185248A (en) * | 2004-12-28 | 2006-07-13 | Canon Marketing Japan Inc | Photographed image sales system, site server, program, and recording medium |
JP2011109288A (en) * | 2009-11-16 | 2011-06-02 | Panasonic Corp | Image capturing apparatus and image display device |
JP2011188171A (en) * | 2010-03-08 | 2011-09-22 | Panasonic Corp | Digital photograph data processing apparatus, digital photograph data server, digital photograph data processing system and digital photograph data processing method |
-
2014
- 2014-10-24 JP JP2014217453A patent/JP6413625B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2016086279A (en) | 2016-05-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11527027B2 (en) | Photo and video collaboration platform | |
JP5936658B2 (en) | Image processing apparatus, image processing method, program, and recording medium | |
US20130322707A1 (en) | Producing personalized team photo books | |
US10537798B2 (en) | Server apparatus, dynamic-image delivery system, and control method and computer readable storage medium used therein | |
US20130117671A1 (en) | Methods and systems for editing video clips on mobile devices | |
JP5289151B2 (en) | Data management apparatus, control method thereof, and program | |
JP6154044B2 (en) | Image processing apparatus, image processing method, program, and recording medium | |
JP2017503394A (en) | VIDEO PROCESSING METHOD, VIDEO PROCESSING DEVICE, AND DISPLAY DEVICE | |
JP6307964B2 (en) | Management server, photo sticker creating apparatus, image management method, control program, and recording medium | |
JP6413625B2 (en) | Image selection support system, image selection support device, image selection support method, and image selection support program | |
JP2018011850A (en) | Moving image recording device, moving image distribution method, and program | |
JP2006140559A (en) | Image reproducing apparatus and image reproducing method | |
JP2019049960A (en) | Image providing system, image providing program and video providing system | |
JP6043753B2 (en) | Content reproduction system, server, portable terminal, content reproduction method, program, and recording medium | |
JP2014182650A (en) | Image sharing device, method for controlling image sharing device and program | |
JP2023054039A (en) | Information processing system | |
WO2021199524A1 (en) | Image processing device, method for operating image processing device, and program for operating image processing device | |
JP6331540B2 (en) | Photo sticker creating apparatus, photo sticker creating apparatus control method and management apparatus | |
JP6390935B1 (en) | GAME SYSTEM AND COMPUTER PROGRAM USED FOR THE SAME | |
JP2016039548A (en) | Information processing apparatus, information processing method, and information processing program | |
JP2019200642A (en) | Image collection generation program, information processor, and image collection generation method | |
JP7513141B2 (en) | Game device and program | |
WO2022209648A1 (en) | Information processing device, information processing method, and non-transitory computer-readable medium | |
JP7358845B2 (en) | Image editing device, print production system and image editing program | |
JP7344711B2 (en) | System, system control method, program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20171024 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180713 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180904 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180917 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6413625 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |