JP2023173273A - 輪郭線生成方法及び輪郭線生成装置 - Google Patents

Abstract

【課題】物体の輪郭線を修正する際の手間を軽減する。【解決手段】物体を撮像した画像において、前記物体の輪郭線の抽出と、前記物体の輪郭上の複数の輪郭点の設定を行い、前記輪郭線の一部を含む領域の指定を受け付け、前記領域に含まれる輪郭点を削除し、前記輪郭線を修正する、処理をコンピュータが実行する輪郭線生成方法である。【選択図】図８

Description

本発明は、輪郭線生成方法及び輪郭線生成装置に関する。

ＥＣ（Electronic Commerce）サイトなどを利用した電子商取引においては、掲載する商品の統一感や視認性を高めるために、販売者や出品者に、商品の画像として、商品以外の背景部分を白抜きにした画像を準備させることがある。

このため、販売者や出品者は、画像編集ソフトや画像編集サービスなどを利用して、商品を撮影した画像を白抜き加工する必要がある。最近では、商品（被写体）と背景との境界線（商品の輪郭）を自動的に検出する技術も出現してきているが、撮影環境や撮影の仕方、商品の色などによっては輪郭を正確に検出できないケースもある（例えば特許文献１等参照）。輪郭を誤検出した場合には、ユーザがマウス操作等により輪郭上の点の位置を１つ１つ修正する必要があり、多大な労力と時間を費やしている。

特許第６８９５６６３号

本発明の第１の態様に従えば、物体を撮像した画像において、前記物体の輪郭線の抽出と、前記物体の輪郭上の複数の輪郭点の設定を行い、前記輪郭線の一部を含む領域の指定を受け付け、前記領域に含まれる輪郭点を削除し、前記輪郭線を修正する、処理をコンピュータが実行する輪郭線生成方法が提供される。

本発明の第２の態様に従えば、物体を撮像した画像において、前記物体の輪郭線の抽出と、前記物体の輪郭上の複数の輪郭点の設定を行う設定部と、前記輪郭線の一部を含む領域の指定を受け付ける受付部と、前記領域に含まれる輪郭点を削除し、前記輪郭線を修正する修正部と、を備える輪郭線生成装置が提供される。

一実施形態に係る画像加工システムの構成を概略的に示す図である。 図２（ａ）は、撮像装置の機能ブロック図の一例であり、図２（ｂ）は、画像加工装置のハードウェア構成の一例を示す図である。 画像加工装置の機能ブロック図の一例である。 図４（ａ）、図４（ｂ）は、輪郭点の移動操作があった場合の処理を説明するための図である。 図５（ａ）、図５（ｂ）は、輪郭点削除領域の指定操作があった場合の処理を説明するための図である。 図６（ａ）～図６（ｃ）は、新たな輪郭点の追加操作があった場合の処理を説明するための図である。 画像加工装置の処理の一例を示すフローチャートである。 輪郭編集画面の一例を示す図である。 図９（ａ）は、輪郭点削除領域の指定操作を示す図であり、図９（ｂ）は、輪郭線の修正後の状態を示す図である。 図１０（ａ）、図１０（ｂ）は、新たな輪郭点の追加処理を示す図であり、図１０（ｃ）は、輪郭点の移動後の状態を示す図である。 図１１（ａ）～図１１（ｅ）は、吊り下げ部材に対応する輪郭を削除する処理について説明するための図である。 図１２（ａ）～図１２（ｃ）は、輪郭編集画面において「ハンガー削除」ボタンが押されたときの修正部の処理を説明するための図である。 図１３（ａ）、図１３（ｂ）は、変形例について説明するための図である。

以下、一実施形態について図１～図１２（ｃ）に基づいて説明する。

図１は、画像加工システム１の概略構成を示す図である。図１に示すように、画像加工システム１は、撮像装置１０と、物品支持部（衣類支持部）２０と、画像加工装置３０と、を備える。画像加工システム１は、例えば、衣類Ｗを販売する販売者が利用するシステムであり、撮像装置１０で撮像した衣類（物品）の画像の背景を、画像加工装置３０において白抜き加工する。

撮像装置１０は、例えば、手動又は自動で視野を変更可能なカメラである。ただし、これに限らず、撮像装置１０は、携帯可能な情報端末（例、スマートフォン、タブレット、カメラ付き携帯電話）であってもよい。撮像装置１０は、後述する物品支持部２０の物品支持面（表面）２２に対向して配置される。図１においては、撮像装置１０は、三脚１９により支持されているが、机、テーブル等の支持具上で支持されてもよい。また、撮像装置１０は、作業者が手持ちで保持してもよい。

図２（ａ）には、撮像装置１０の機能ブロック図の一例が示されている。図２（ａ）に示すように、撮像装置１０は、例えば、撮像部１１と、操作入力部１２と、制御部１３と、データ記憶部１４と、画像データ出力部１５と、本体部１６（図１参照）と、を備える。

撮像部１１は、不図示の結像光学系や撮像素子を備える。結像光学系は、視野内の像を形成するものであり、例えば鏡筒内に保持され、鏡筒とともに本体部１６に取り付けられる。結像光学系及び鏡筒は、例えば交換レンズであり、本体部１６から取り外し可能である。なお、結像光学系及び鏡筒は、内蔵レンズでもよく、例えば鏡筒は、本体部１６の一部でもよいし、本体部１６から取り外し不能でもよい。なお、結像光学系の光軸は、撮像部１１の撮像光軸ＡＸである。図１において、撮像光軸ＡＸは、水平方向に向けて設定されているが、水平方向以外であってもよい。また、本実施形態では、撮像光軸ＡＸが物品支持部２０の物品支持面２２に対して垂直な方向の線と平行であるものとするが、これに限らず、撮像光軸ＡＸが、物品支持面２２に垂直な方向に対して傾斜していてもよい。

撮像素子は、例えば、複数の画素が二次元的に配列されたＣＭＯＳイメージセンサ、あるいはＣＣＤイメージセンサである。撮像素子は、例えば本体部１６に収容される。撮像素子は、結像光学系が形成した像を撮像する。撮像素子の撮像結果は、例えば、各画素の色ごとの階調値の情報（例、ＲＧＢデータ）又は輝度情報（例、グレースケール）を含む。撮像素子は、例えば、撮像結果である撮像画像のデータを出力する。

操作入力部１２は、作業者又は外部装置から、撮像装置１０を操作するための入力を受け付ける。操作入力部１２は、例えば、シャッターボタン、リモートコントローラ等から操作信号を受け付ける。

制御部１３は、例えば、作業者又は外部装置から操作入力部１２への入力に基づいて、撮像装置１０の各部を制御する。制御部１３は、例えば、撮像部１１に撮像処理を実行させる。制御部１３は、例えば、撮像部１１の撮像素子から出力される撮像画像のデータを、データ記憶部１４に記憶させる。また、制御部１３は、例えば、データ記憶部１４に記憶された撮像画像のデータを、画像データ出力部１５から外部に出力させる。

データ記憶部１４は、制御部１３内に含まれる形態であってもよいし、制御部１３外に配置される形態であってもよい。データ記憶部１４は、例えば、ＵＳＢ（ユニバーサルシリアルバス）メモリ、メモリカードなどの不揮発性メモリであってもよい。また、データ記憶部１４は、撮像装置１０に内蔵される記憶デバイスを含んでいてもよいし、撮像装置１０からリリース可能な記憶デバイスを接続可能なポートを含んでいてもよい。データ記憶部１４は、例えば、撮像部１１の撮像結果である撮像画像のデータ、各種設定情報、及び処理を実行させるプログラム等を記憶する。

画像データ出力部１５は、データ記憶部１４に記憶された撮像画像のデータを、外部の画像加工装置３０に出力する。画像データ出力部１５は、例えば、ＵＳＢポート、ＬＡＮ（ローカルエリアネットワーク）ポートなどのＩ／Ｏ（入出力）ポート、電波又は赤外線による無線通信を行う通信器のうち少なくとも一つを含む。画像データ出力部１５は、制御部１３に制御され、データ記憶部１４に記憶されている情報を読み出し、読み出した情報を画像加工装置３０に出力する。画像データ出力部１５は、データ記憶部１４に記憶されている情報を読み出し、読み出した情報を、ＵＳＢメモリ、メモリカードなどの不揮発性メモリに書き込む機能を有した、いわゆるメモリスロットであってもよい。

図１に戻り、物品支持部２０は、支持部本体２１と、物品支持面２２と、を備える。支持部本体２１は、床、机等の設置面Ｆ上に設置される。支持部本体２１は、物品支持面２２を支持する。物品支持面２２には、撮像装置１０の撮像対象の物品である衣類Ｗが沿わせて配置される。衣類Ｗは、ハンガー等の吊り下げ部材１０１に吊り下げて支持される。物品支持面２２には、吊り下げ部材１０１を掛ける掛け具２３が設けられている。

画像加工装置３０は、作業者のパーソナルコンピュータや、携帯可能な情報端末（例、スマートフォン、タブレット、カメラ付き携帯電話）、あるいは専用のワークステーションやサーバ等の処理装置等からなる。図２（ｂ）は、画像加工装置３０のハードウェア構成の一例を示す図である。図２（ｂ）に示すように、画像加工装置３０は、ＣＰＵ（Central Processing Unit）９０、ＲＯＭ（Read Only Memory）９２、ＲＡＭ（Random Access Memory）９４、記憶部（ここではＳＳＤ（Solid State Drive）やＨＤＤ（Hard Disk Drive））９６、ネットワークインタフェース９７、表示部９３、入力部９５、及び可搬型記憶媒体用ドライブ９９等を備えている。これら画像加工装置３０の構成各部は、バス９８に接続されている。表示部９３は液晶ディスプレイや有機ＥＬディスプレイ等を含み、入力部９５は、キーボードやマウス、タッチパネル等を含む。画像加工装置３０では、ＲＯＭ９２あるいは記憶部９６に格納されているプログラム、或いは可搬型記憶媒体用ドライブ９９が可搬型記憶媒体９１から読み取ったプログラムをＣＰＵ９０が実行することにより、図３に示す各部の機能が実現される。なお、図３の各部の機能は、例えば、ＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field Programmable Gate Array）等の集積回路により実現されてもよい。

図３には、画像加工装置３０の機能ブロック図の一例が示されている。図３に示すように、画像加工装置３０は、ＣＰＵ９０がプログラムを実行することにより、入力受付部５０、輪郭生成部５２、修正部５４、更新部５６、背景変更部５８として機能する。

入力受付部５０は、撮像装置１０で撮像された衣類Ｗを含む撮像画像のデータを取得したり、作業者が入力部９５を介して入力した操作情報を取得する。入力受付部５０は、撮像画像のデータを取得するため、例えば、ＵＳＢポート、ＬＡＮポートなどのＩ／Ｏポート、電波又は赤外線の無線通信を行う通信器のうち少なくとも一つを含む。なお、入力受付部５０は、ＵＳＢメモリ、メモリカードなどの不揮発性メモリからデータを読み取る機能を有した、いわゆるメモリスロット（メモリリーダ）を含んでいてもよい。この場合、入力受付部５０は、不揮発性メモリから、撮像装置１０で撮像された衣類Ｗを含む撮像画像のデータを読み込んで、取得する。

また、入力受付部５０は、作業者が入力部９５を介して入力した操作情報として、例えば、衣類Ｗを含む撮像画像のデータにおいて衣類Ｗの輪郭線を抽出する操作や、輪郭線を確定する操作、輪郭線の一部を修正する操作などの情報を取得する。

輪郭生成部５２は、衣類Ｗを含む撮像画像のデータにおいて衣類Ｗの輪郭線を抽出し、輪郭線上に所定間隔で輪郭点を設定する処理を実行する。

修正部５４は、作業者の操作に応じて、輪郭線を修正する処理を実行する。作業者は、図４（ａ）に示すように輪郭線と輪郭点がある場合に、輪郭点の１つを移動する操作を行う場合がある。この場合、修正部５４は、操作に従って、図４（ｂ）に示すように輪郭点を移動させるとともに、輪郭点の移動に合わせて輪郭線を修正する。

また、作業者は、図５（ａ）に示すように輪郭点を１つ以上含む領域（図５（ａ）の破線矩形で示す「輪郭点削除領域」参照）を指定して、輪郭点削除領域内の輪郭点を削除する操作を行う場合がある。この場合、修正部５４は、操作に従って、図５（ｂ）に示すように輪郭点削除領域内の輪郭点を削除するとともに、輪郭点の移動に合わせて輪郭線を修正する。より具体的には、修正部５４は、輪郭線を修正する際に、輪郭点削除領域内の輪郭線に代えて、輪郭点削除領域に近接する２つの輪郭点を結ぶ新たな輪郭線（例えば直線）を生成する。

更新部５６は、作業者が、図５（ｂ）のように修正部５４が生成した新たな輪郭線上への新たな輪郭点の追加操作を行った場合に、輪郭点を追加する処理を実行する。また、更新部５６は、追加された新たな輪郭点の移動操作があった場合に、新たな輪郭線を更新する処理を実行する。例えば、図６（ａ）に示すように新たな輪郭線（太線部分）が生成された場合において、作業者が破線円で示す位置をクリックするなどして新たな輪郭点を追加する操作を行ったとする。この場合、更新部５６は、図６（ｂ）に示すように、新たな輪郭点を追加する。そして、作業者が、図６（ｂ）において破線円で示すように新たな輪郭点を移動する操作を行った場合には、更新部５６は、図６（ｃ）に示すように新たな輪郭点を移動させるとともに、新たな輪郭点の移動に合わせて新たな輪郭線を更新する。

背景変更部５８は、作業者が、衣類Ｗを含む撮像画像のデータにおいて衣類Ｗの輪郭線を確定する旨の操作を行った場合に、輪郭線で囲まれた範囲の外側の領域（衣類Ｗの背景領域）を白抜き加工する。

（画像加工装置３０の処理について）
次に、画像加工装置３０の処理の一例について、図７のフローチャートに沿って、その他図面を適宜参照しつつ詳細に説明する。なお、図７の処理の前提として、入力受付部５０は、衣類Ｗを含む撮像画像のデータを取得済みであるものとする。

図７の処理が開始されると、まずステップＳ１０において、入力受付部５０が、輪郭抽出指示が入力されるまで待機する。作業者が衣類Ｗを含む撮像画像のデータを指定して、輪郭抽出指示を入力すると、入力受付部５０は、その旨を輪郭生成部５２に通知し、ステップＳ１２に移行する。

ステップＳ１２に移行すると、輪郭生成部５２は、輪郭線を抽出する処理を実行する。輪郭生成部５２は、例えば、予め作成された輪郭線抽出モデルに基づいて、輪郭線を抽出する。輪郭線抽出モデルは、例えば、衣類Ｗを含む撮像画像のデータにおける適切な輪郭線を教師データとして学習することにより作成する。

次いで、ステップＳ１４において、輪郭生成部５２は、輪郭線上に輪郭点を設定する。例えば、輪郭生成部５２は、輪郭線上に予め定められた間隔で多数の輪郭点を設定する。なお、輪郭点の間隔は、作業者が適宜変更可能であってもよいし、固定値であってもよい。なお、上記においては、輪郭生成部５２は、輪郭線を抽出（Ｓ１２）してから、輪郭点を設定（Ｓ１４）しているが、これに限らず、輪郭生成部５２は、先に輪郭点を設定してから、輪郭点を結ぶ線（輪郭線）を設定することとしてもよい。また、輪郭線の抽出と輪郭点の設定を同時に行うこととしてもよい。輪郭生成部５２は、輪郭線の抽出と輪郭点を設定した後に、図８に示すような輪郭編集画面を表示部９３上に表示する。図８の輪郭編集画面には、輪郭線と輪郭点を表示した衣類Ｗを含む撮像画像の表示領域と、「確定」ボタンと、「輪郭点調整」ボタンと、「輪郭点削除」ボタンと、が設けられている。作業者は、輪郭線が適切であり、修正の必要がなければ「確定」ボタンを押す。また、作業者は、輪郭点を追加したり、輪郭点の位置を調整したい場合に「輪郭点調整」ボタンを押す。更に、作業者は、輪郭点を削除したい場合に「輪郭点削除」ボタンを押す。

次いで、ステップＳ１６に移行すると、入力受付部５０は、輪郭線の確定入力があったか否か、すなわち、作業者が図８の輪郭編集画面において「確定」ボタンを押したか否かを判断する。このステップＳ１６の判断が否定された場合には、ステップＳ１８に移行する。

ステップＳ１８に移行すると、入力受付部５０は、輪郭点の位置修正があったか否かを判断する。すなわち、入力受付部５０は、作業者が「輪郭点調整」ボタンを押して、いずれかの輪郭点を移動させる操作を行ったか否かを判断する。輪郭点を移動させる操作は、例えば、マウスを利用する場合には、輪郭点をドラッグする操作などである。また、例えば、タッチパネルを利用する場合（画像加工装置３０がスマートフォン等のタッチパネルデバイスである場合）には、輪郭点をタップしてドラッグする操作などである。このステップＳ１８の判断が否定された場合には、ステップＳ２２に移行するが、肯定された場合には、ステップＳ２０に移行する。

ステップＳ２０に移行した場合、修正部５４は、輪郭点の移動に合わせて輪郭線を修正する。具体的には、作業者が図４（ａ）に示すように輪郭点の１つを移動する操作を行った場合に、修正部５４は、操作に従って、図４（ｂ）に示すように輪郭点を移動させるとともに、輪郭線を修正する。ステップＳ２０の処理が行われた後はステップＳ２２に移行する。

ステップＳ２２に移行すると、入力受付部５０は、輪郭点削除領域の指定があったか否かを判断する。この場合、入力受付部５０は、作業者が「輪郭点削除」ボタンを押して、輪郭点削除領域を指定する操作を行ったか否かを判断する。輪郭点削除領域を指定する操作は、例えば、マウスを利用する場合には、輪郭点削除領域の１つの頂点の位置から対角に位置する頂点の位置までドラッグする操作などである。また、例えば、タッチパネルを利用する場合には、輪郭点削除領域の１つの頂点の位置から対角に位置する頂点の位置まで指をピンチアウトする操作などである。このステップＳ２２の判断が否定された場合には、ステップＳ２６に移行する。

一方、作業者が、例えば図９（ａ）に示すように輪郭点削除領域を指定した場合には、ステップＳ２２の判断が肯定され、ステップＳ２４に移行する。ステップＳ２４に移行すると、修正部５４は、輪郭点削除領域内の輪郭点を削除し、輪郭点削除領域外において当該領域に隣接する２点を結ぶ新たな輪郭線を生成する。これにより、図９（ａ）の輪郭線は、図９（ｂ）に示すように修正される。

ステップＳ２４の後、又はステップＳ２２の判断が否定された後、ステップＳ２６に移行すると、入力受付部５０は、輪郭点の追加入力があったか否かを判断する。すなわち、入力受付部５０は、作業者が「輪郭点調整」ボタンを押して、輪郭線（例えばステップＳ２４で生成された新たな輪郭線）上をマウスでクリック（又はタッチパネルをタップ）するなどして、新たな輪郭点を追加する操作を行ったか否かを判断する。このステップＳ２６の判断が否定された場合には、ステップＳ１６に戻る。

一方、作業者が、「輪郭点調整」ボタンを押した後、例えば図１０（ａ）に示すように輪郭線上にマウスポインタを位置決めしてクリック（又はタッチパネルを用いて輪郭線上をタップ）した場合には、ステップＳ２８に移行する。ステップＳ２８に移行すると、更新部５６は、図１０（ｂ）に示すように輪郭線上に新たな輪郭点を追加する。その後は、ステップＳ１６に戻る。なお、作業者が、図１０（ｂ）の新たな輪郭点を移動させる操作を行った場合、ステップＳ１８の判断が肯定されるので、ステップＳ２０において、更新部５６が、図１０（ｃ）に示すように輪郭点の移動に合わせて輪郭線を修正（更新）する。

ステップＳ１６に戻った後は、ステップＳ１６～Ｓ２８の処理・判断が繰り返し実行される。そして、ステップＳ１６の判断が肯定された段階、すなわち、作業者が、図８の輪郭編集画面において「確定」ボタンを押した段階で、ステップＳ３０に移行する。

ステップＳ３０に移行すると、背景変更部５８は、現在の輪郭線で確定し、輪郭線の外側（背景）を白抜き加工する。これにより、衣類Ｗ以外の背景部分を白く加工することができるため、ＥＣサイト等で利用可能な画像（統一感があり、視認性の高い画像）を作成することができる。以上により、図７の全処理が終了する。

ここで、本実施形態では、ハンガー等の吊り下げ部材１０１に衣類Ｗを吊下げた状態で衣類Ｗを撮像することとしている。この場合、衣類Ｗと吊り下げ部材１０１が連続することから、図１１（ａ）に示すように、衣類Ｗの輪郭線の一部として、吊り下げ部材１０１に対応する輪郭線が生成（抽出）される場合がある。作業者がこのまま「確定」ボタンを押し、背景変更部５８が背景を白抜き加工すると、図１１（ｂ）に示すように吊り下げ部材１０１が表示されてしまう。このとき、本実施形態では、作業者は、「輪郭点削除」ボタンを押し、図１１（ａ）に示すように吊り下げ部材１０１に対応する輪郭線全体を輪郭点削除領域で囲む。この操作により、輪郭線は、図１１（ｃ）に示すように修正される（吊り下げ部材１０１に対応する輪郭線の代わりに新たな輪郭線が追加される）。また、作業者は、図１１（ｃ）の状態から、「輪郭点調整」ボタンを押し、新たな輪郭点を追加する操作を行うとともに、追加した輪郭点を移動する操作を行うことができる。これにより、輪郭線は、図１１（ｄ）に示すように修正される。この状態で、作業者が「確定」ボタンを押せば、図１１（ｅ）に示すように衣類Ｗのみが表示され、その他の部分が白抜き加工された画像を得ることができる。

ただし、本実施形態においては、上記図１１（ａ）～図１１（ｅ）の処理が自動的に行われるようにしてもよい。例えば、図８の輪郭編集画面に「ハンガー削除」ボタンを設けておき、作業者によって当該ボタンが押された場合に、修正部５４が、吊り下げ部材１０１に対応する輪郭線を削除して、衣類Ｗの新たな輪郭線を抽出するようにしてもよい。より詳細には、例えば、修正部５４は、作業者によって「ハンガー削除」ボタンが押された場合に、吊り下げ部材１０１の形状を示すテンプレート等を用いて、吊り下げ部材１０１に対応する輪郭線部分を特定する（図１２（ａ）参照）。そして、修正部５４は、図１２（ｂ）に示すように、特定した輪郭線部分を削除し、削除した輪郭線部分よりも内側の領域において、新たな輪郭線を抽出する（図１２（ｃ）参照）。これにより、作業者は「ハンガー削除」ボタンを押すだけで、図１２（ｃ）に示すように吊り下げ部材１０１に対応する輪郭線を削除し、衣類Ｗのみの輪郭線に修正することができる。なお、修正部５４が吊り下げ部材１０１に対応する輪郭線部分を特定する方法としては、上記のようにテンプレートを用いる方法以外にも様々な方法がある。例えば、修正部５４は、各画素の色に基づいて、吊り下げ部材１０１に対応する輪郭線部分を特定してもよい。また、修正部５４は、作業者が指定した範囲に含まれる輪郭線部分を吊り下げ部材１０１に対応する輪郭線部分として特定してもよい。

なお、図８の輪郭編集画面には、「やり直し」ボタンや、「キャンセル」ボタンを設けてもよい。作業者が「やり直し」ボタンを押した場合、画像加工装置３０は、直前の操作による輪郭線や輪郭点の変更を元に戻す。また、作業者が「キャンセル」ボタンを押した場合、画像加工装置３０は、図７のフローチャートの処理を強制的に終了するようにする。また、図８の輪郭編集画面には、「輪郭点再設定」ボタンを設けてもよい。作業者が「輪郭点再設定」ボタンを押した場合、画像加工装置３０（輪郭生成部５２）は、輪郭点をすべて削除し、その時点における輪郭線に対して輪郭点を再設定する。

なお、入力受付部５０は、図８の各ボタンや、上記「ハンガー削除」、「やり直し」、「キャンセル」、「輪郭点再設定」ボタンなどを用いたボタン操作による入力のほか、キーボードをはじめとした入力デバイスのキー操作（上記ボタン操作の機能を割り当てたショートカットキーの操作）による入力を受け付けてもよい。

以上詳細に説明したように、本実施形態によると、輪郭生成部５２は、衣類Ｗの撮像画像において、衣類Ｗの輪郭線の抽出（Ｓ１２）と、衣類Ｗの輪郭上の複数の輪郭点の設定（Ｓ１４）を行う。また、入力受付部５０が、輪郭線の一部を含む輪郭点削除領域の指定を受け付けると（Ｓ２２：肯定）、修正部５４は、輪郭点削除領域に含まれる輪郭点を削除し、輪郭線を修正する（Ｓ２４）。これにより、作業者は、輪郭点を１つ１つ移動したり削除したりしなくても、輪郭線の広い範囲を含む輪郭点削除領域を指定するだけで、指定した範囲内の輪郭線を修正することができる。したがって、作業者による輪郭線の修正作業を簡素化することができ、作業者による輪郭線修正時の手間を軽減することができる。

また、本実施形態では、修正部５４は、輪郭点削除領域内の輪郭線に代えて、輪郭点削除領域に近接する２つの輪郭点を結ぶ新たな輪郭線（直線）を生成する（Ｓ２４）。これにより、直線的な部分の多い衣類Ｗの輪郭線を適切に修正することができる。

また、本実施形態では、入力受付部５０は、新たな輪郭線上への新たな輪郭点の追加操作を受け付けると、更新部５６は、新たな輪郭点を追加し（Ｓ２８）、追加された新たな輪郭点の移動に応じて新たな輪郭線を更新する（Ｓ２０）。これにより、修正部５４が、輪郭点削除領域に近接する２つの輪郭点を結ぶ新たな輪郭線を生成した場合に、その新たな輪郭線が実際の衣類Ｗの輪郭からずれていたとしても、作業者は簡易に修正を行うことが可能である。

また、本実施形態では、衣類Ｗの撮像画像において、衣類Ｗと連続する他の物体（吊り下げ部材１０１等）が撮像されており、輪郭生成部５２の処理により他の物体に対応する輪郭が抽出されたような場合であっても、簡易な操作により、他の物体に対応する輪郭を衣類Ｗの輪郭に修正することができる。

なお、上記実施形態では、ステップＳ２４において、修正部５４は、輪郭点削除領域内の輪郭点を削除し、輪郭点削除領域外において当該領域に隣接する２点を結ぶ新たな輪郭線として、直線の輪郭線を生成する場合について説明した（図５（ｂ）参照）。しかしながら、これに限らず、修正部５４は、輪郭点削除領域外において当該領域に隣接する２点を結ぶ新たな輪郭線として、直線又は曲線の輪郭線を生成することとしてもよい。例えば、図１３（ａ）に示すように輪郭点削除領域外において当該領域に隣接する２点を直線（新たな輪郭線）で結んだ場合に、輪郭点削除領域外の輪郭線と新たな輪郭線とが滑らかにつながらない場合がある。このような場合、修正部５４は、輪郭点削除領域外の輪郭線と新たな輪郭線とが滑らかにつながるように、図１３（ｂ）に示すように新たな輪郭線を曲線としてもよい。なお、修正部５４は、作業者が新たな輪郭線（曲線）の一部をマウスでドラッグ・アンド・ドロップした場合（又はタッチパネルで新たな輪郭線（曲線）の一部をタップしてドラッグした場合）に、ドラッグ・アンド・ドロップの際のマウスポインタの移動量（又は指の移動量）に応じて曲線の曲率を変更してもよい。

なお、上記実施形態では、背景変更部５８は、衣類Ｗの撮像画像において、輪郭線で囲まれた範囲以外（背景）を白抜き加工する場合について説明したが、これに限られるものではない。背景を白以外の所定の色彩に加工してもよいし、背景を所定の模様に変更してもよい。

なお、上記実施形態では、図１の撮像装置１０の撮像光軸ＡＸが物品支持部２０の物品支持面２２に対して垂直な方向の線と平行でない場合、図７の処理を行う前に、撮像画像の傾斜補正を行うことが好ましい。傾斜補正は、例えば、図１の物品支持面２２に所定形状のマークを設けておき、撮像画像におけるマークの像が適切な形状になるように撮像画像を補正するなどすればよい。

なお、上記実施形態では、撮像装置１０が撮像する物体が衣類Ｗである場合について説明したが、これに限らず、物体は衣類以外のＥＣサイトで扱う商品等であってもよい。

なお、上記実施形態では、撮像装置１０と画像加工装置３０とが別々の装置である場合について説明したが、これに限らず、撮像装置１０と画像加工装置３０とが同一の装置（例えばカメラ機能付きのスマートフォンやタブレット端末など）であってもよい。

なお、上記の処理機能は、コンピュータによって実現することができる。その場合、処理装置が有すべき機能の処理内容を記述したプログラムが提供される。そのプログラムをコンピュータで実行することにより、上記処理機能がコンピュータ上で実現される。処理内容を記述したプログラムは、コンピュータで読み取り可能な記録媒体（ただし、搬送波は除く）に記録しておくことができる。

プログラムを流通させる場合には、例えば、そのプログラムが記録されたＤＶＤ（Digital Versatile Disc）、ＣＤ－ＲＯＭ（Compact Disc Read Only Memory）などの可搬型記録媒体の形態で販売される。また、プログラムをサーバコンピュータの記憶装置に格納しておき、ネットワークを介して、サーバコンピュータから他のコンピュータにそのプログラムを転送することもできる。

プログラムを実行するコンピュータは、例えば、可搬型記録媒体に記録されたプログラムもしくはサーバコンピュータから転送されたプログラムを、自己の記憶装置に格納する。そして、コンピュータは、自己の記憶装置からプログラムを読み取り、プログラムに従った処理を実行する。なお、コンピュータは、可搬型記録媒体から直接プログラムを読み取り、そのプログラムに従った処理を実行することもできる。また、コンピュータは、サーバコンピュータからプログラムが転送されるごとに、逐次、受け取ったプログラムに従った処理を実行することもできる。

上述した実施形態は本発明の好適な実施の例である。但し、これに限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変形実施可能である。

１ 画像加工システム
１０ 撮像装置
３０ 画像加工装置
５０ 入力受付部
５２ 輪郭生成部
５４ 修正部
５６ 更新部
５８ 背景変更部
１０１ 吊り下げ部材

Claims (12)

1. 物体を撮像した画像において、前記物体の輪郭線の抽出と、前記物体の輪郭上の複数の輪郭点の設定を行い、
   前記輪郭線の一部を含む領域の指定を受け付け、
   前記領域に含まれる輪郭点を削除し、前記輪郭線を修正する、
   処理をコンピュータが実行する輪郭線生成方法。
2. 前記修正する処理において、前記領域内の輪郭線に代えて、前記領域に近接する２つの輪郭点を結ぶ新たな輪郭線を生成する、請求項１に記載の輪郭線生成方法。
3. 前記新たな輪郭線は、前記輪郭線のうち前記領域に近接する部分の形状に基づいて生成された直線又は曲線である、請求項２に記載の輪郭線生成方法。
4. 前記新たな輪郭線上への新たな輪郭点の追加指示を受け付け、
   追加された前記新たな輪郭点の移動に応じて前記新たな輪郭線を更新する、
   処理を前記コンピュータが実行する請求項２に記載の輪郭線生成方法。
5. 前記新たな輪郭線上に新たな輪郭点を設定する、処理を前記コンピュータが実行する請求項２に記載の輪郭線生成方法。
6. 前記画像において、前記物体の輪郭線と、前記物体に連続する他の物体に対応する輪郭線を抽出した場合に、
   前記他の物体に対応する輪郭線を削除する指示を受け付けると、前記他の物体に対応する輪郭線を特定して削除し、前記物体の輪郭線を繋ぐ新たな輪郭線を抽出する、請求項１に記載の輪郭線生成方法。
7. 前記画像において、前記輪郭線で囲まれた範囲以外を所定の色彩又は模様に変更する処理を前記コンピュータが実行する請求項１～６のいずれか一項に記載の輪郭線生成方法。
8. 物体を撮像した画像において、前記物体の輪郭線の抽出と、前記物体の輪郭上の複数の輪郭点の設定を行う設定部と、
   前記輪郭線の一部を含む領域の指定を受け付ける受付部と、
   前記領域に含まれる輪郭点を削除し、前記輪郭線を修正する修正部と、
   を備える輪郭線生成装置。
9. 前記修正部は、前記領域内の輪郭線に代えて、前記領域に近接する２つの輪郭点を結ぶ新たな輪郭線を生成する、請求項８に記載の輪郭線生成装置。
10. 前記新たな輪郭線上への新たな輪郭点の追加指示を受け付け、追加された前記新たな輪郭点の移動に応じて前記新たな輪郭線を更新する更新部を備える請求項９に記載の輪郭線生成装置。
11. 前記画像において、前記物体の輪郭線と、前記物体に連続する他の物体に対応する輪郭線を抽出した場合に、
    前記受付部が前記他の物体に対応する輪郭線を削除する指示を受け付けると、前記修正部は、前記他の物体に対応する輪郭線を特定して削除し、前記物体の輪郭線を繋ぐ新たな輪郭線を抽出する、請求項８に記載の輪郭線生成装置。
12. 前記画像において、前記輪郭線で囲まれた範囲以外を所定の色彩又は模様に変更する変更部を備える請求項８～１１のいずれか一項に記載の輪郭線生成装置。

Images