JP2019053580A - 考査処理装置及び印画物作製システム - Google Patents

Abstract

【課題】ユーザ画像の考査の作業負荷を低減する考査処理装置及び印画物作製システムを提供する。【解決手段】考査処理装置は、ユーザ端末７からユーザ画像を受信する受信部１１と、前記ユーザ画像を用いた印画物の注文を受け付ける注文処理部１３と、前記ユーザ画像のシーン解析を行い、解析結果に基づいて、前記ユーザ画像が、印画物の作製に使用してよい画像か、又は考査者による考査が必要な画像かを判定する考査処理部１４と、を備える。【選択図】図１

Description

本発明は、考査処理装置及び印画物作製システムに関する。

従来、デジタルカメラやスマートフォン等で撮影した画像を、ネットワーク上にアップロードして保存することが行われている。また、アップロードした画像をプリントして、フォトブックやポスター等を作製するサービスが知られている（例えば特許文献１参照）。

フォトブックを作製するにあたり、サービス提供者は、顧客からアップロードされた画像がフォトブックに適した画像であるか否か等を判定する、いわゆる考査を行っている。例えば、考査では、画像が著作権や肖像権を侵害していないか、公序良俗に反していないか、不正転売の目的がないかなどを判断する。

従来、考査は人手による目視で行っていた。そのため、フォトブックの注文数の増加に伴い、人的コストの増加や、考査業務の遅延に伴うフォトブックの納品遅延等の問題が発生するおそれがあった。

特開２００５−３３９２１４号公報

本発明は、ユーザ画像の考査の作業負荷を低減する考査処理装置及び印画物作製システムを提供することを課題とする。

本発明による考査処理装置は、ユーザ端末からユーザ画像を受信する受信部と、前記ユーザ画像を用いた印画物の注文を受け付ける注文処理部と、前記ユーザ画像のシーン解析を行い、解析結果に基づいて、前記ユーザ画像が、印画物の作製に使用してよい画像か、又は考査者による考査が必要な画像かを判定する考査処理部と、を備えるものである。

本発明の一態様では、複数の要注意キーワードと、各要注意キーワードに対応するスコアとを記憶するキーワード情報記憶部をさらに備え、前記考査処理部は、前記ユーザ画像内のシーンの構成要素をキーワードとして抽出し、抽出したキーワードと、前記要注意キーワードとを比較し、一致した要注意キーワードのスコアを加算し、合計スコアが所定値以上である場合、前記ユーザ画像は考査者による考査が必要な画像であると判定する。

本発明の一態様では、著名人の顔画像及び前記著名人に対応するスコアを記憶する著名人画像記憶領域をさらに備え、前記考査処理部は、前記ユーザ画像から顔画像を検出し、検出した顔画像と類似する著名人の顔画像を検索し、前記ユーザ画像に著名人顔画像が含まれている場合、この著名人に対応するスコアを加算する。

本発明の一態様では、前記著名人画像記憶領域は、前記著名人に関連する関連キーワード、及び前記関連キーワードに対応するスコアをさらに記憶しており、前記考査処理部は、前記ユーザ画像に著名人顔画像が含まれている場合、この著名人に関連する関連キーワードと、前記ユーザ画像から抽出したキーワードとを比較し、一致した関連キーワードのスコアを加算する。

本発明による印画物作製システムは、上記考査処理装置と、前記考査処理部により印画物作製可と判定されたユーザ画像を含むプリント用画像を物品に印画して印画物を作製するプリンタと、を備えるものである。

本発明によれば、ユーザ画像の考査の作業負荷を低減できる。

本発明の実施形態に係る印画物作製システムの概略図である。 同実施形態に係るサーバ装置の構成及び機能ブロックを示す図である。 キーワード情報の例を示す図である。 （ａ）（ｂ）は画像から抽出されるキーワード及びスコアの例を示す図である。 同実施形態に係る考査処理を説明するフローチャートである。 著名人画像情報の例を示す図である。

以下、本発明の実施の形態を図面に基づいて説明する。

図１に示すように、本発明の実施形態に係る印画物作製システムは、サーバ装置１及び考査者端末３を備える。サーバ装置１は、インターネット等の通信ネットワークを介して、考査者端末３及びユーザ端末７と通信可能となっている。サーバ装置１は、ユーザ端末７からアップロードされたユーザ画像を保存する。

ユーザ端末７は、ＰＣ、スマートフォン、タブレット端末等である。ユーザ画像は、例えば、ユーザがデジタルカメラやスマートフォン等で撮影した画像である。

ユーザは、自身がアップロードしたユーザ画像を、好みのフレームやスタンプ等の編集アイテムと合成する編集操作を行う。ユーザは、編集操作により作成した合成画像（プリント用画像）を印画する物品や個数を選択し、料金の支払い方法を選択し、プリント注文を完了する。

サーバ装置１は、ユーザ（ユーザ端末７）からプリント注文を受け付けると、考査処理を行い、プリント用画像に含まれるユーザ画像が、印画物の作製に使用してよい画像であるか否かを判定する。印画物の作製に使用できない画像は、例えば、公序良俗に反する画像や、著作権を侵害する画像である。

考査で否認になる画像は、音楽イベント、スポーツイベント、モデル撮影会などで撮影された画像が多数を占める。これらのイベントの画像の要素はある程度決まっており、想定されるＮＧシーンを予めサーバ装置１に学習させておく。例えば、音楽イベントでは、ステージ上に楽器を持った数名の人物が立っていたり、ステージ下に大勢の人物が立っていたりする。スポーツイベントでは、芝生の上に同じ服装の人物が数名立っていたり、芝生の外に大勢の人物が存在していたりする。モデル撮影会では、画像中央の人物がポーズをとっていたり、中央の人物のみ明度が高かったりする。

サーバ装置１は、画像解析を行い、ユーザ画像に上述のようなＮＧシーンが含まれるか否かを判定し、ＮＧシーンを含む画像にはスコア（要注意スコア）を加点する。サーバ装置１は、合計スコアが所定値未満である場合、考査者による目視確認（２次考査）が不要な、印画物作製可能なユーザ画像であると判定し、プリント注文内容を含むプリントデータを工場５へ送信する。

一方、合計スコアが所定値以上の場合、サーバ装置１は、考査者による目視確認（２次考査）が必要な画像と判定し、判定結果を考査者端末３へ通知する。考査者は、考査者端末３を操作して、サーバ装置１が印画物作製可と判定しなかったユーザ画像を目視確認し、考査を行う。

工場５に設置されたプリンタ（図示略）は、受信したプリントデータに基づいて印画処理を行い、指定された物品にプリント用画像を印画して印画物６を作製する。作製される印画物６は、写真、ポスター、カレンダー、フォトブック、バッチ、マグカップなどである。工場５で作製された印画物６は、ユーザへ配送される。

このように、本実施形態によれば、サーバ装置１が、ユーザがアップロードしたユーザ画像のシーン解析を含む考査（１次考査）を行い、考査者は、要注意スコアの合計点の高いユーザ画像だけを確認すればよい。そのため、人手（目視）で行う考査対象の画像数を削減し、考査のための人的コストの増加を抑えると共に、印画物６を早期にユーザに納品することができる。

次に、サーバ装置１の構成について説明する。なお、以下の実施形態では、印画物６としてフォトブックを作製する例について説明する。サーバ装置１は、ユーザ端末７からユーザ画像を受信し、画像編集画面を生成してユーザ端末７へ送信し、画像編集操作及びフォトブックのプリント注文を受け付け、シーン解析によるユーザ画像の考査処理を行い、編集操作により生成されたプリント用画像データを含むプリントデータを工場５へ送信するものである。

図２に示すように、サーバ装置１は、制御部１０、記憶部２０、及び通信部３０を備える。制御部１０は、サーバ装置１の全体を制御する中央処理装置（ＣＰＵ）である。制御部１０は、記憶部２０に記憶されているオペレーティングシステム（ＯＳ）やアプリケーションプログラムを読み出して実行することにより、各種機能を実現する。

記憶部２０は、制御部１０が各種の処理を実行するために必要なプログラムやデータ等を記憶するための記憶領域であり、ハードディスクや半導体メモリ等が用いられる。記憶部２０は、テンプレートＤＢ（データベース）２１、ユーザ画像ＤＢ２２、プリントデータＤＢ２３、注文情報ＤＢ２４、著名人画像ＤＢ２５、画像判定結果ＤＢ２６、及びキーワード情報ＤＢ２７を有する。

テンプレートＤＢ２１は、テンプレートを記憶する記憶領域である。テンプレートは、ユーザ画像と合成される画像であり、ユーザ画像の配置位置を指定するボックスや、スタンプ、背景画像等の編集アイテムを含む。

キーワード情報ＤＢ２７は、画像に含まれるＮＧシーンの構成要素となる要注意キーワードと、各キーワードのスコア（要注意スコア）とを対応付けたキーワード情報を記憶する記憶領域である。図３はキーワード情報の一例を示す。例えば、「パフォーマンス」「エンターテイメント」「ステージ」「ダンサー」「コンサート」等は、音楽イベントの構成要素となる要注意キーワードである。

制御部１０は、受信部１１、編集処理部１２、注文処理部１３、及び考査処理部１４を備える。受信部１１は、通信部３０を用いて、ユーザ端末７からユーザ画像のデータを受信し、ユーザ画像データをユーザ画像ＤＢ２２に格納する。制御部１０は、受信部１１が受信したユーザ画像の解像度やデータサイズから、印画に適した画像か否かを判定し、判定結果をユーザ端末７に通知してもよい。

編集処理部１２は、テンプレートやユーザ画像を選択する処理、選択されたユーザ画像をフレーム内に配置する処理、選択したスタンプを配置する処理等の画像編集が可能な編集画面を生成し、通信部３０を用いてユーザ端末７へ送信する。編集処理部１２は、ユーザがユーザ端末７を用いて編集画面で行った編集操作を受け付け、テンプレートやユーザ画像等が組み合わされた合成画像（プリント用画像）を生成する。生成されたプリント用画像のデータを含む、フォトブック作製用のプリントデータが、プリントデータＤＢ２３に格納される。

注文処理部１３は、ユーザ端末７から、プリント用画像を印画する物品の選択や、作製する印画物６の数などの注文を受け付ける。この例では、注文処理部１３は、プリント注文として、フォトブックのプリント冊数を受け付ける。必要に応じて、決済部（図示略）が決済処理を行い、プリント注文が完了する。

プリント注文が完了すると、注文処理部１３は、プリント注文の注文番号と、プリント注文されたフォトブックに含まれる各画像の画像識別番号とを組み合わせた情報を、注文情報ＤＢ２４に格納する。注文処理部１３は、プリント注文を行ったユーザの連絡先等を含む注文者情報を生成し、注文情報ＤＢ２４に格納してもよい。

考査処理部１４は、プリント注文されたフォトブックに含まれる各画像についてシーン解析による考査を行い、画像内のシーンの構成要素をキーワード（テキストタグ）として抽出する。考査処理部１４は、抽出したキーワードと、キーワード情報ＤＢ２７に登録されている要注意キーワードとを比較し、一致したキーワードのスコアを加算して、各画像の合計スコアを算出する。

考査処理部１４は、合計スコアが所定値未満である場合、フォトブックの作製に使用してよい画像であると判定する。一方、合計スコアが所定値以上である場合、考査対象の画像は、ＮＧシーンを含み、著作権を侵害する可能性が高く、考査者による目視確認（２次考査）が必要なものであると判定する。

例えば、考査処理部１４は、図４（ａ）に示す画像から、「ステージ」、「ミュージシャン」、「コンサート」及び「観衆」というキーワードを抽出する。これらのキーワードは、キーワード情報ＤＢ２７に要注意キーワードとして登録されており、各キーワードのスコアの合計点は５０となる。例えば、２次考査要否のスコアの閾値が３０点である場合、図４（ａ）に示す画像は、２次考査“要”と判定される。

また、例えば、考査処理部１４は、図４（ｂ）に示す画像から、「グループ」、「家族」、「子供」及び「笑顔」というキーワードを抽出する。これらのキーワードは、キーワード情報ＤＢ２７に要注意キーワードとして登録されておらず、スコアの合計点は０となる。図４（ｂ）に示す画像は、２次考査“不要”と判定される。

図５に示すフローチャートを用いて、プリント注文に対する考査処理について説明する。

考査処理部１４は、注文情報ＤＢ２４を参照し、考査対象のプリント注文の注文番号が紐付けられた画像のうち、未だ考査を行っていない画像を選択し、選択した画像の画像識別番号に対応する画像データをユーザ画像ＤＢ２２から取り出す（ステップＳ１）。

考査処理部１４は、考査対象の画像のシーン解析を行い、構成要素をキーワード（テキストタグ）として抽出する（ステップＳ２）。

考査処理部１４は、ステップＳ２で抽出したキーワードと、キーワード情報ＤＢ２７に登録されている要注意キーワードとを比較し、一致したキーワードに対応付けられているスコアを加算して、各画像の合計スコアを算出する（ステップＳ３）。

合計スコアが所定値以上の場合（ステップＳ４＿Ｙｅｓ）、ＮＧシーンを含み、肖像権等を侵害した画像の可能性が高いため、考査者による二次考査が必要な画像であると判定する（ステップＳ５）。

合計スコアが所定値未満の場合（ステップＳ４＿Ｎｏ）、肖像権等を侵害している可能性が低く、考査者による二次考査は不要であり、フォトブックの作製に使用してよい画像であると判定する（ステップＳ６）。

考査対象のプリント注文に含まれる全てのユーザ画像について考査を行うまで、ステップＳ１〜Ｓ６を繰り返す（ステップＳ７）。考査処理部１４は、各画像についての判定結果を画像判定結果ＤＢ２６に登録する。

考査対象のプリント注文に含まれる全てのユーザ画像について、考査処理部１４が、フォトブックの作製に使用してよい画像であると判定した場合（ステップＳ８＿Ｙｅｓ）、考査処理が終了する。制御部１０は、通信部３０を用いて、考査を終えたプリント注文のプリントデータを工場５へ送信する。

考査対象のプリント注文に、考査者による二次考査が必要と判定された画像が含まれている場合（ステップＳ８＿Ｎｏ）、制御部１０は、通信部３０を用いて、二次考査が必要な画像があることを考査者端末３に通知する（ステップＳ９）。

考査者は、考査者端末３を用いて、目視による二次考査を行う（ステップＳ１０）。例えば、制御部１０は、二次考査が必要と判定した画像をリスト化した要注意画像リストを考査者端末３に送信する。考査者は、このリストから二次考査“要”の画像を特定し、この画像をディスプレイに表示して、問題がないか確認する。考査者は、必要に応じて、画像の入手経路、フォトブックの用途、著名人との関係等をユーザに問い合わせる。考査者による二次考査により問題が無いことが確認されると、サーバ装置１は、プリントデータを工場５へ送信する。

工場５では、プリント用画像を印画紙にプリントし、製本して、フォトブックを作製する。

このように、本実施形態によれば、考査処理装置としての機能を有するサーバ装置１が、ユーザがアップロードしたユーザ画像の考査（１次考査）を行い、ＮＧシーンが含まれているか否かを判定する。考査者は、サーバ装置１により、ＮＧシーンを含み、二次考査が必要と判定された画像だけを確認すればよい。そのため、人手（目視）で行う考査対象の画像数を削減し、考査の作業負荷を低減できる。多数のプリント注文があった場合でも、考査のための人的コストの増加を抑えると共に、フォトブックを早期に作製して、ユーザに納品することができる。

上記実施形態において、考査処理部１４は、画像から抽出し、キーワード情報ＤＢ２７に登録されている要注意キーワードと一致したキーワードから、画像のジャンルを決定してもよい。制御部１０は、二次考査が必要な画像があることと共に、この画像のジャンルを考査者端末３に通知してもよい。複数の考査者がいる場合、各考査者が自分の得意なジャンルの画像の二次考査を行うことで、考査の効率を向上させることができる。

上記実施形態では、シーン解析により画像から抽出したキーワードと、要注意キーワードとを比較して、一致したキーワードのスコアを合計していたが、さらに、顔検出処理を行い、画像に著名人が写っているか判定し、著名人が写っていた場合にスコアを加点するようにしてもよい。

図２に示す著名人画像ＤＢ２５は、スポーツ選手、俳優、タレント等の著名人の顔画像、著名人に対応するスコア、著名人に関連するキーワード、及び関連キーワードに対応する加算スコアを含む著名人顔画像情報を記憶する記憶領域である。図６に著名人顔画像情報の一例を示す。

考査処理部１４は、顔検出処理を行い、考査対象の画像から顔を検出する。顔検出には、例えば、画像から目や口元などの明暗差の違いを一旦粗く分析して顔らしい部分を検出し、その後、顔らしい部分について詳細に分析する公知の技術を用いることができる。

考査処理部１４は、著名人画像ＤＢ２５内の著名人の顔画像の中から、考査対象の画像から検出した顔画像と類似した画像を検索する。例えば、公知の方法で顔画像の類似度を算出し、類似度が所定値以上となる著名人画像を検索する。

類似度が所定値以上となる著名人画像がある場合、考査処理部１４は、著名人に対応するスコアを加算する。また、考査処理部１４は、画像から抽出したキーワードと、この著名人に関連するキーワードとを比較し、一致したキーワードについては対応するスコアをさらに加算する。

例えば、考査対象の画像から検出した顔画像が、有名野球選手である鈴木一郎に類似している場合、この画像に４０点を加算する。また、この画像から抽出されたキーワードに「スタジアム」が含まれている場合、この画像に４０点をさらに加算する。

画像に著名人が写っている場合、スコアが高くなり、考査者による二次考査が必要であると判定されやすくなる。

上記実施形態において、サーバ装置１はウェブサーバ、ファイルサーバ、データベースサーバ、画像解析サーバ等の複数のサーバで構成されていてもよい。

なお、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。

１ サーバ装置
３ 考査者端末
５ 工場
６ 印画物
７ ユーザ端末
１０ 制御部
１１ 受信部
１２ 編集処理部
１３ 注文処理部
１４ 考査処理部
２０ 記憶部
３０ 通信部

Claims (5)

1. ユーザ端末からユーザ画像を受信する受信部と、
   前記ユーザ画像を用いた印画物の注文を受け付ける注文処理部と、
   前記ユーザ画像のシーン解析を行い、解析結果に基づいて、前記ユーザ画像が、印画物の作製に使用してよい画像か、又は考査者による考査が必要な画像かを判定する考査処理部と、
   を備える考査処理装置。
2. 複数の要注意キーワードと、各要注意キーワードに対応するスコアとを記憶するキーワード情報記憶部をさらに備え、
   前記考査処理部は、前記ユーザ画像内のシーンの構成要素をキーワードとして抽出し、抽出したキーワードと、前記要注意キーワードとを比較し、一致した要注意キーワードのスコアを加算し、合計スコアが所定値以上である場合、前記ユーザ画像は考査者による考査が必要な画像であると判定することを特徴とする請求項１に記載の考査処理装置。
3. 著名人の顔画像及び前記著名人に対応するスコアを記憶する著名人画像記憶領域をさらに備え、
   前記考査処理部は、前記ユーザ画像から顔画像を検出し、検出した顔画像と類似する著名人の顔画像を検索し、前記ユーザ画像に著名人顔画像が含まれている場合、この著名人に対応するスコアを加算することを特徴とする請求項２に記載の考査処理装置。
4. 前記著名人画像記憶領域は、前記著名人に関連する関連キーワード、及び前記関連キーワードに対応するスコアをさらに記憶しており、
   前記考査処理部は、前記ユーザ画像に著名人顔画像が含まれている場合、この著名人に関連する関連キーワードと、前記ユーザ画像から抽出したキーワードとを比較し、一致した関連キーワードのスコアを加算することを特徴とする請求項３に記載の考査処理装置。
5. 請求項１乃至４のいずれかに記載の考査処理装置と、
   前記考査処理部により印画物作製可と判定されたユーザ画像を含むプリント用画像を物品に印画して印画物を作製するプリンタと、
   を備える印画物作製システム。
   

Images