JP2019133620A - イメージ内の複数の客体の調和に基づく調和検索方法、コンピュータ装置およびコンピュータプログラム - Google Patents
イメージ内の複数の客体の調和に基づく調和検索方法、コンピュータ装置およびコンピュータプログラム Download PDFInfo
- Publication number
- JP2019133620A JP2019133620A JP2018120577A JP2018120577A JP2019133620A JP 2019133620 A JP2019133620 A JP 2019133620A JP 2018120577 A JP2018120577 A JP 2018120577A JP 2018120577 A JP2018120577 A JP 2018120577A JP 2019133620 A JP2019133620 A JP 2019133620A
- Authority
- JP
- Japan
- Prior art keywords
- image
- harmony
- product
- search
- item
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 78
- 238000004590 computer program Methods 0.000 title claims description 10
- 238000013136 deep learning model Methods 0.000 claims description 40
- 230000014509 gene expression Effects 0.000 claims description 17
- 239000000284 extract Substances 0.000 claims description 16
- 230000006870 function Effects 0.000 claims description 11
- 238000013527 convolutional neural network Methods 0.000 description 30
- 238000004891 communication Methods 0.000 description 12
- 238000010586 diagram Methods 0.000 description 12
- 238000012545 processing Methods 0.000 description 9
- 230000004807 localization Effects 0.000 description 8
- 238000001514 detection method Methods 0.000 description 6
- 238000000605 extraction Methods 0.000 description 6
- 238000012549 training Methods 0.000 description 3
- 238000013135 deep learning Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- 238000013145 classification model Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/54—Browsing; Visualisation therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/5866—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, manually generated location and time information
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/951—Indexing; Web crawling techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/045—Combinations of networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Library & Information Science (AREA)
- General Health & Medical Sciences (AREA)
- Mathematical Physics (AREA)
- Computational Linguistics (AREA)
- Molecular Biology (AREA)
- Computing Systems (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Evolutionary Computation (AREA)
- Software Systems (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Health & Medical Sciences (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
Description
150、160:サーバ
170:ネットワーク
Claims (19)
- 人物に適用可能なアイテムのための複数の客体間の調和を示す抽象的な表現を含む複数の調和キーワードを利用する調和検索方法であって、前記調和検索方法は、イメージ内で人物が表現された程度に応じて予め定義された点数別に分類された調和学習イメージに基づいてディープラーニングモデルが入力されたイメージの点数を算出するように学習しているコンピュータ装置により実行され、前記調和検索方法は、
入力された検索語に対応する検索結果を抽出する段階、
前記入力された検索語が調和キーワードを含む場合、前記抽出された検索結果と連係するイメージのうちで人物に適用可能なアイテムの販売と関連するイメージを識別する段階、
前記学習されたディープラーニングモデルを利用して前記識別されたイメージそれぞれの点数を算出する段階、
前記算出された点数に基づき、前記識別されたイメージのうちから少なくとも1つのイメージを抽出する段階、および
前記抽出された検索結果のうち少なくとも一部の検索結果と前記抽出された少なくとも1つのイメージとを含む検索結果ページを提供する段階
を含むことを特徴とする、調和検索方法。 - 前記検索結果ページを提供する段階は、
商品販売関連の検索結果を表示するための商品関連領域を含むように前記検索結果ページを生成する場合において、前記抽出された検索結果のうちで前記商品関連領域に対応する検索結果の代わりに、前記抽出された少なくとも1つのイメージを前記商品関連領域に表示するように前記検索結果ページを生成することを特徴とする、請求項1に記載の調和検索方法。 - 前記検索結果ページを提供する段階は、
前記入力された検索語が含む調和キーワードと関連する調和検索結果を表示するための別の領域を含み、前記別の領域に前記抽出された少なくとも1つのイメージを表示するように前記検索結果ページを生成することを特徴とする、請求項1または2に記載の調和検索方法。 - 前記検索結果ページから前記抽出された少なくとも1つのイメージが選択される場合、前記選択されたイメージで人物に適用されたアイテムを識別する段階、および
前記選択されたイメージと前記識別されたアイテムに関する情報を含んで構成されたページに対するビューア機能を提供する段階
をさらに含むことを特徴とする、請求項1または3に記載の調和検索方法。 - 調和イメージおよび前記調和イメージに含まれた商品アイテムに関する情報の関連付けを登録する段階
をさらに含み、
前記アイテムを識別する段階は、
前記選択されたイメージと関連付けて登録された商品アイテムに関する情報に基づき、前記選択されたイメージで人物に適用されたアイテムを識別することを特徴とする、請求項4に記載の調和検索方法。 - 前記アイテムを識別する段階は、
前記選択されたイメージおよび前記選択されたイメージを登録した商品提供者の商品アイテムのイメージを分析および比較し、前記選択されたイメージで人物に適用された前記商品提供者の商品アイテムを識別することを特徴とする、請求項4に記載の調和検索方法。 - 前記アイテムを識別する段階は、
前記選択されたイメージおよび前記選択されたイメージを登録した商品提供者ではない他の商品提供者の商品アイテムのイメージを分析および比較し、前記選択されたイメージで人物に適用されたイメージと関連する他の商品提供者の商品アイテムを識別することを特徴とする、請求項4に記載の調和検索方法。 - 商品提供者によって登録される商品アイテムの商品イメージそれぞれにタグを設定および格納する段階
をさらに含み、
前記アイテムの販売と関連するイメージを識別する段階は、
前記入力された検索語が含む調和キーワードとタグとの比較によって前記調和キーワードに対応する商品イメージを抽出することを特徴とする、請求項1〜7のうちのいずれか一項に記載の調和検索方法。 - 前記タグを設定および格納する段階は、
前記定義された複数の調和キーワードに対応するように分類された複数のタグ学習イメージに基づき、第2ディープラーニングモデルが入力されたイメージのタグを出力するように学習させる段階、
前記学習された第2ディープラーニングモデルに基づき、前記登録される商品イメージそれぞれに対するタグを決定する段階、および
前記決定されたタグを対応する商品イメージに対して設定および格納する段階
を含むことを特徴とする、請求項8に記載の調和検索方法。 - 請求項1〜9のうちのいずれか一項に記載の調和検索方法をコンピュータに実行させるコンピュータプログラム。
- コンピュータ装置であって、
コンピュータで読み取り可能な命令を実行するように実現される少なくとも1つのプロセッサ
を含み、
前記少なくとも1つのプロセッサにより、
人物に適用可能なアイテムのための複数の客体間の調和を示す抽象的な表現を含む複数の調和キーワードを定義し、
イメージ内で人物が表現された程度に応じて予め定義された点数別に分類された調和学習イメージに基づいてディープラーニングモデルが入力されたイメージの点数を算出するように学習させ、
入力された検索語に対応する検索結果を抽出し、
前記入力された検索語が調和キーワードを含む場合、前記抽出された検索結果と連係するイメージのうちで人物に適用可能なアイテムの販売と関連するイメージを識別し、
前記学習されたディープラーニングモデルを利用して前記識別されたイメージそれぞれの点数を算出し、
前記算出された点数に基づき、前記識別されたイメージのうちから少なくとも1つのイメージを抽出し、
前記抽出された検索結果のうちの少なくとも一部と前記抽出された少なくとも1つのイメージを含む検索結果ページを提供すること
を特徴とする、コンピュータ装置。 - 前記少なくとも1つのプロセッサにより、
商品販売関連の検索結果を表示するための商品関連領域を含むように前記検索結果ページを生成する場合において、前記抽出された検索結果のうちで前記商品関連領域に対応する検索結果の代わりに、前記抽出された少なくとも1つのイメージを前記商品関連領域に表示するように前記検索結果ページを生成することを特徴とする、請求項11に記載のコンピュータ装置。 - 前記少なくとも1つのプロセッサにより、
前記入力された検索語が含む調和キーワードと関連する調和検索結果を表示するための別の領域を含み、前記別の領域に前記抽出された少なくとも1つのイメージを表示するように前記検索結果ページを生成することを特徴とする、請求項11または12に記載のコンピュータ装置。 - 前記少なくとも1つのプロセッサにより、
前記検索結果ページで前記抽出された少なくとも1つのイメージが選択される場合、前記選択されたイメージで人物に適用されたアイテムを識別し、
前記選択されたイメージと前記識別されたアイテムに関する情報を含んで構成されたページに対するビューア機能を提供すること
を特徴とする、請求項11〜13のうちのいずれか一項に記載のコンピュータ装置。 - 前記少なくとも1つのプロセッサにより、
調和イメージおよび前記調和イメージに含まれた商品アイテムに関する情報の関連付けを登録する段階、
前記選択されたイメージと関連付けて登録された商品アイテムに関する情報に基づき、前記選択されたイメージで人物に適用されたアイテムを識別することを特徴とする、請求項14に記載のコンピュータ装置。 - 前記少なくとも1つのプロセッサにより、
前記選択されたイメージおよび前記選択されたイメージを登録した商品提供者の商品アイテムのイメージを分析および比較し、前記選択されたイメージで人物に適用された前記商品提供者の商品アイテムを識別することを特徴とする、請求項14に記載のコンピュータ装置。 - 前記少なくとも1つのプロセッサにより、
前記選択されたイメージおよび前記選択されたイメージを登録した商品提供者ではない他の商品提供者の商品アイテムのイメージを分析および比較し、前記選択されたイメージで人物に適用されたイメージと関連する他の商品提供者の商品アイテムを識別することを特徴とする、請求項14に記載のコンピュータ装置。 - 前記少なくとも1つのプロセッサにより、
商品提供者によって登録される商品アイテムの商品イメージそれぞれにタグを設定および格納し、
前記入力された検索語が含む調和キーワードとタグとの比較によって前記調和キーワードに対応する商品イメージを抽出することを特徴とする、請求項11〜17のうちのいずれか一項に記載のコンピュータ装置。 - 前記少なくとも1つのプロセッサにより、
前記定義された複数の調和キーワードに対応するように分類された複数のタグ学習イメージに基づいて第2ディープラーニングモデルが入力されたイメージのタグを出力するように学習させ、
前記学習された第2ディープラーニングモデルに基づいて前記登録される商品イメージそれぞれに対するタグを決定し、
前記決定されたタグを対応する商品イメージに対して設定および格納すること
を特徴とする、請求項18に記載のコンピュータ装置。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020180012204A KR102043440B1 (ko) | 2018-01-31 | 2018-01-31 | 이미지 내 복수의 객체들의 조화에 기반한 조화 검색 방법 및 시스템 |
KR10-2018-0012204 | 2018-01-31 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6527275B1 JP6527275B1 (ja) | 2019-06-05 |
JP2019133620A true JP2019133620A (ja) | 2019-08-08 |
Family
ID=66730752
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018120577A Active JP6527275B1 (ja) | 2018-01-31 | 2018-06-26 | イメージ内の複数の客体の調和に基づく調和検索方法、コンピュータ装置およびコンピュータプログラム |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP6527275B1 (ja) |
KR (1) | KR102043440B1 (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022153197A (ja) * | 2021-03-29 | 2022-10-12 | 株式会社Zozo | 情報処理装置、情報処理方法及び情報処理プログラム |
JP2022153195A (ja) * | 2021-03-29 | 2022-10-12 | 株式会社Zozo | 情報表示装置、情報表示方法及び情報表示プログラム |
JP2022153196A (ja) * | 2021-03-29 | 2022-10-12 | 株式会社Zozo | 情報処理装置、情報処理方法及び情報処理プログラム |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114821030B (zh) * | 2022-04-11 | 2023-04-04 | 苏州振旺光电有限公司 | 行星图像处理方法、系统以及装置 |
KR20240084192A (ko) * | 2022-12-06 | 2024-06-13 | 삼성전자주식회사 | 이미지가 표시되는 캘린더 ui를 제공하는 전자 장치 및 그 제어 방법 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2010016281A1 (ja) * | 2008-08-08 | 2010-02-11 | 株式会社ニコン | 検索支援システム、検索支援方法及び検索支援プログラム |
JP2016071610A (ja) * | 2014-09-30 | 2016-05-09 | 富士フイルム株式会社 | コーディネート提案装置及び方法 |
WO2016152277A1 (ja) * | 2015-03-25 | 2016-09-29 | 富士フイルム株式会社 | リコメンド装置、リコメンドシステム、リコメンド方法、及びプログラム |
JP2017220019A (ja) * | 2016-06-07 | 2017-12-14 | 日本電信電話株式会社 | 画像検索装置、方法、及びプログラム |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20070077908A (ko) * | 2006-01-25 | 2007-07-30 | 성희찬 | 인터넷 쇼핑몰의 운영방법 |
KR20110020104A (ko) * | 2009-08-21 | 2011-03-02 | 유앤코드 주식회사 | 코디 검색 시스템 및 서비스 제공 방법 |
KR101818716B1 (ko) * | 2011-09-27 | 2018-01-15 | 네이버 주식회사 | 컨셉 키워드 확장 데이터 셋 생성방법, 장치 및 컴퓨터로 판독 가능한 기록매체 |
KR101768521B1 (ko) * | 2016-05-02 | 2017-08-17 | 네이버 주식회사 | 이미지에 포함된 객체에 대한 정보 데이터를 제공하는 방법 및 시스템 |
-
2018
- 2018-01-31 KR KR1020180012204A patent/KR102043440B1/ko active IP Right Grant
- 2018-06-26 JP JP2018120577A patent/JP6527275B1/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2010016281A1 (ja) * | 2008-08-08 | 2010-02-11 | 株式会社ニコン | 検索支援システム、検索支援方法及び検索支援プログラム |
JP2016071610A (ja) * | 2014-09-30 | 2016-05-09 | 富士フイルム株式会社 | コーディネート提案装置及び方法 |
WO2016152277A1 (ja) * | 2015-03-25 | 2016-09-29 | 富士フイルム株式会社 | リコメンド装置、リコメンドシステム、リコメンド方法、及びプログラム |
JP2017220019A (ja) * | 2016-06-07 | 2017-12-14 | 日本電信電話株式会社 | 画像検索装置、方法、及びプログラム |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022153197A (ja) * | 2021-03-29 | 2022-10-12 | 株式会社Zozo | 情報処理装置、情報処理方法及び情報処理プログラム |
JP2022153195A (ja) * | 2021-03-29 | 2022-10-12 | 株式会社Zozo | 情報表示装置、情報表示方法及び情報表示プログラム |
JP2022153196A (ja) * | 2021-03-29 | 2022-10-12 | 株式会社Zozo | 情報処理装置、情報処理方法及び情報処理プログラム |
Also Published As
Publication number | Publication date |
---|---|
JP6527275B1 (ja) | 2019-06-05 |
KR20190092910A (ko) | 2019-08-08 |
KR102043440B1 (ko) | 2019-11-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11216861B2 (en) | Color based social networking recommendations | |
US10242396B2 (en) | Automatic color palette based recommendations for affiliated colors | |
US10963744B2 (en) | Cognitive automated and interactive personalized fashion designing using cognitive fashion scores and cognitive analysis of fashion trends and data | |
US10043109B1 (en) | Attribute similarity-based search | |
EP3267362B1 (en) | Machine learning image processing | |
US10402917B2 (en) | Color-related social networking recommendations using affiliated colors | |
US10861077B1 (en) | Machine, process, and manufacture for machine learning based cross category item recommendations | |
US10360623B2 (en) | Visually generated consumer product presentation | |
JP6527275B1 (ja) | イメージ内の複数の客体の調和に基づく調和検索方法、コンピュータ装置およびコンピュータプログラム | |
US9607010B1 (en) | Techniques for shape-based search of content | |
US20200342320A1 (en) | Non-binary gender filter | |
US20180181569A1 (en) | Visual category representation with diverse ranking | |
US20160284007A1 (en) | Information processing apparatus, information processing method, and recording medium | |
CN111784455A (zh) | 一种物品推荐方法及推荐设备 | |
KR20210098884A (ko) | 사용자의 체형 및 구매 이력을 이용하여 패션 아이템 추천 서비스를 제공하는 방법 | |
US9830534B1 (en) | Object recognition | |
US11037071B1 (en) | Cross-category item associations using machine learning | |
Zhao et al. | Neo-fashion: A data-driven fashion trend forecasting system using catwalk analysis | |
CN111292168B (zh) | 数据处理方法、装置及设备 | |
US20210110464A1 (en) | Visual search, discovery and attribution system | |
CN111767420A (zh) | 一种生成服饰搭配数据的方法和装置 | |
CN108764232B (zh) | 标签位置获取方法及装置 | |
Chi et al. | UbiShop: Commercial item recommendation using visual part-based object representation | |
KR20200058343A (ko) | 쇼핑 정보를 제공하는 방법, 장치 및 컴퓨터 프로그램 | |
US20230214894A1 (en) | Curated collections from multiple input sources |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180626 |
|
A80 | Written request to apply exceptions to lack of novelty of invention |
Free format text: JAPANESE INTERMEDIATE CODE: A80 Effective date: 20180626 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190416 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190509 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6527275 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |