JP2021012453A - 検索クエリ生成装置、検索クエリ生成方法、プログラム、素材検索システム、および素材検索方法 - Google Patents
検索クエリ生成装置、検索クエリ生成方法、プログラム、素材検索システム、および素材検索方法 Download PDFInfo
- Publication number
- JP2021012453A JP2021012453A JP2019125023A JP2019125023A JP2021012453A JP 2021012453 A JP2021012453 A JP 2021012453A JP 2019125023 A JP2019125023 A JP 2019125023A JP 2019125023 A JP2019125023 A JP 2019125023A JP 2021012453 A JP2021012453 A JP 2021012453A
- Authority
- JP
- Japan
- Prior art keywords
- search
- display
- unit
- information
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 239000000463 material Substances 0.000 title claims description 315
- 238000000034 method Methods 0.000 title claims description 55
- 238000004891 communication Methods 0.000 claims abstract description 16
- 230000010365 information processing Effects 0.000 claims abstract description 14
- 238000000605 extraction Methods 0.000 claims description 30
- 239000000284 extract Substances 0.000 claims description 20
- 238000005520 cutting process Methods 0.000 claims description 6
- 238000010586 diagram Methods 0.000 description 39
- 230000008569 process Effects 0.000 description 30
- 238000012545 processing Methods 0.000 description 23
- 238000007781 pre-processing Methods 0.000 description 15
- 238000013075 data extraction Methods 0.000 description 12
- 238000013507 mapping Methods 0.000 description 12
- 238000012544 monitoring process Methods 0.000 description 12
- 239000011159 matrix material Substances 0.000 description 6
- 230000004044 response Effects 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000003384 imaging method Methods 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000003795 chemical substances by application Substances 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 235000014510 cooky Nutrition 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 239000013077 target material Substances 0.000 description 1
Images
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/30—Computing systems specially adapted for manufacturing
Landscapes
- Processing Or Creating Images (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
Description
図1は、本発明を適用した第1実施形態に係る素材検索システムの一例を示すブロック図である。素材検索システムは、例えば、ユーザ端末装置100と、検索サーバ装置200と、バッチサーバ装置300と、管理用データベース装置410と、ストレージ装置420と、ファイル蓄積装置500とを備える。ユーザ端末装置100および検索サーバ装置200は、ネットワークNWに接続される。ネットワークNWに接続される各装置は、NIC(Network Interface Card)や無線通信モジュールなどの通信インターフェースを備えている。ネットワークNWは、例えば、汎用のインターネット、WAN(Wide Area Network)、LAN(Local Area Network)、セルラー網などを含む。また、検索サーバ装置200、バッチサーバ装置300、管理用データベース装置410、ストレージ装置420、およびファイル蓄積装置500は、例えば、アクセスが制限されたLAN等により相互に通信接続される。なお、実施形態において、検索サーバ装置200とバッチサーバ装置300は別体であるが、一体の検索装置であってよい。
<事前処理>
図2は、実施形態の素材検索システムにおける事前処理の一例を示すフローチャートである。
まず、監視部302は、ファイル蓄積装置500に処理対象のプレゼンテーション文書ファイルを発見する(ステップS100)。次にデータ抽出部304は、プレゼンテーション文書ファイルを展開することで内部データを抽出する(ステップS102)。プレゼンテーション文書ファイルを展開するとは、プレゼンテーション文書ファイルに所定の処理(変換、解析など)を施すことによりプレゼンテーション文書ファイルに固有の情報を抽出することである。プレゼンテーション文書ファイルを展開するとは、例えばパワーポイントファイルにおいて埋め込まれたXML(Extensible Markup Language)データを解析して、特徴抽出に必要な情報を取得することである。また、画像生成部306は、プレゼンテーション文書ファイルに含まれる各スライドを画像化する(ステップS104)。
図3は、実施形態の素材検索システムにおける検索処理の一例を示すフローチャートである。
まず、API部202は、ユーザ端末装置100からプレゼンテーション文書ファイルを受信したか否かを判定する(ステップS200)。API部202は、プレゼンテーション文書ファイルを受信していない場合(ステップS200:NO)、待機し、プレゼンテーション文書ファイルを受信した場合(ステップS200:YES)、ステップS202に処理を進める。
<素材の切り出し処理(ステップS106)>
図4は、プレゼンテーション文書ファイルにおけるスライドの一例を示す図である。スライドには、表示オブジェクトIDが1〜5の5個の表示オブジェクトが含まれているものとする。
図7は、特徴抽出処理の一例を示す図である。なお、以下の説明において、特徴抽出処理は、2つの表示オブジェクトを含む第1の素材を処理対象とするものとする。
バッチサーバ装置300は、第1の素材に含まれる表示オブジェクトごとに、当該表示オブジェクトの形状に基づく特徴を抽出する。バッチサーバ装置300は、内部データ(XMLデータ)から形状(Geometry)の特徴値を抽出する。形状の特徴値は、形状に対応して予め内部データに割り当てられている。例えば、表示オブジェクトの形状が同じ四角形の場合には同じ特徴値となり、表示オブジェクトの形状が円形である場合には四角形の表示オブジェクトとは異なる特徴値になる。
図8は、第2の素材の選択処理の一例を示す図である。ユーザ端末装置100は、図8(A)に示すように、表示オブジェクトID「1〜5」の表示オブジェクトのうち、表示オブジェクトIDが1,2の表示オブジェクトに相当する画像範囲を選択したものとする。ユーザ端末装置100は、表示オブジェクトIDが1,2の表示オブジェクトに相当する画像範囲を示す情報を含む検索クエリを生成し、当該検索クエリを検索サーバ装置200に送信する。
以下、検索処理の具体例について説明する。
図9は、ユーザ端末装置100に表示させる表示画面の一例である。ユーザ端末装置100は、プレゼンテーション文書ファイルの検索サービスを受けるため、検索対象のプレゼンテーション文書ファイルを選択する。ユーザ端末装置100は、ユーザの操作に基づいて、「○○プレゼン資料.pptx」というプレゼンテーション文書ファイルを選択し、アップロードボタンを選択すると、○○プレゼン資料.pptxを検索サーバ装置200に送信する。
また、検索サーバ装置200は、第1の素材毎に、色などを区別して表示してよい。これにより、検索サーバ装置200は、検索サーバ装置200において認識している第1の素材のうち、どの第1の素材が第2の素材と類似しているかをユーザに認識させることができる。なお、図14には第1の素材を含むプレゼンテーション文書ファイル画像を示したが、プレゼンテーション文書ファイル画像を、図9に示したアップロード対象の画像に代えて表示し、表示画面の下部に、検索結果を表示してよい。
以下、上述した素材検索システムにおける処理例を説明する。
図17は、事前処理におけるプレゼンテーション文書ファイルの監視処理の一例を示すシーケンス図である。まず監視部302は、ファイル蓄積装置500に蓄積されているプレゼンテーション文書ファイルの一覧情報を取得する(ステップS1)。次に監視部302は、取得した一覧情報に含まれるプレゼンテーション文書ファイルの情報が管理用データベース装置410に存在するか否かを確認する。監視部302は、プレゼンテーション文書ファイルの情報が管理用データベース装置410に存在する場合、当該プレゼンテーション文書ファイルのタイムスタンプ情報を確認する(ステップS2)。監視部302は、一覧情報に含まれるタイムスタンプ情報が、管理用データベース装置410から取得したタイムスタンプ情報よりも新しい場合、またはプレゼンテーション文書ファイルの情報が管理用データベース装置410に存在しない場合、当該プレゼンテーション文書ファイルをストレージ装置420にコピーする(ステップS3)。次に監視部302は、取得したプレゼンテーション文書ファイルの処理フラグを、「画像化未処理ファイル」、および「抽出未処理ファイル」として管理用データベース装置410に記憶する(ステップS4)。
検索サーバ装置200は、例えば起動時に、ストレージ装置420から行列ファイルおよびマッピングファイルを取得する(ステップS51)。ユーザ端末装置100は、検索サービスを受けるための検索画面にアクセスする要求を検索サーバ装置200に送信する(ステップS52)。検索サーバ装置200は、ユーザ端末装置100からの要求に応じて、ユーザを特定するためのクッキー情報を管理用データベース装置410に払い出す(ステップS53)。次に検索サーバ装置200は、要求に応じて、検索画面を表示するためのコンテンツデータをユーザ端末装置100に提供する(ステップS54)。これにより、ユーザ端末装置100は、ユーザの操作に応じてプレゼンテーション文書ファイルを選択し、プレゼンテーション文書ファイルを検索サーバ装置200にアップロードする(ステップS55)。検索サーバ装置200は、アップロードされたプレゼンテーション文書ファイルをユーザごとに領域に保存し、プレゼンテーション文書ファイルを画像ファイルに変換し、プレゼンテーション文書ファイルの内部データを展開する(ステップS56)。検索サーバ装置200は、スライド毎の画像データ(スライド画像)をユーザ端末装置100に送信する(ステップS57)。これにより、ユーザ端末装置100は、ユーザの操作に応じてスライド画像の範囲を選択させることができる。
Random Access Memory))のように、一定時間プログラムを保持しているものも含むものとする。また、上記プログラムは、このプログラムを記憶装置などに格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。
102 通信部
104 表示部
106 受付部
108 クエリ生成部
200 検索サーバ装置
202 API部
204 検索部
206 結果生成部
300 バッチサーバ装置
302 監視部
304 データ抽出部
306 画像生成部
308 クラスタリング部
310 マッピング部
312 特徴抽出部
410 管理用データベース装置
420 ストレージ装置
500 ファイル蓄積装置
Claims (9)
- 複数の表示オブジェクトを含む第1の表示情報を情報処理装置に送信し、前記情報処理装置から前記第1の表示情報に基づく画像情報を受信する通信部と、
前記画像情報を用いた表示をする表示部と、
前記表示部により表示された画像のうち一部の範囲を選択する操作を受け付ける受付部と、
前記受付部により受け付けられた範囲を示す情報を含む検索クエリを生成するクエリ生成部と、
を備える検索クエリ生成装置。 - 前記検索クエリは、前記受付部により選択された範囲に含まれた複数の表示オブジェクトを含む素材に類似する素材を検索する要求を含む、
請求項1に記載の検索クエリ生成装置。 - 前記第1の表示情報は、各表示オブジェクトを定義した内部データを含み、
前記内部データは、少なくとも表示オブジェクトの形状情報を含み、
前記第1の表示情報からは、前記素材における基準位置から前記表示オブジェクトまでの距離、前記素材における基準位置から見た前記表示オブジェクトの角度、および前記素材のサイズに対する前記表示オブジェクトのサイズの割合、の少なくとも一つの特徴が抽出される、
請求項2に記載の検索クエリ生成装置。 - 前記受付部は、前記受付部により選択された範囲に含まれた複数の表示オブジェクトを含む素材に対する検索結果の許容範囲を示す閾値情報を受け付け、
前記クエリ生成部は、前記閾値情報を含む検索クエリを生成する、
請求項1から3のうち何れか1項に記載の検索クエリ生成装置。 - 前記通信部は、検索結果として、前記受付部により選択された範囲に含まれた表示オブジェクトに類似する表示オブジェクトを含む素材画像と、前記受付部により選択された範囲に含まれた表示オブジェクトに類似することを表す検索結果画像を重畳させたコンテンツを受信する、
請求項1から4のうち何れか1項に記載の検索クエリ生成装置。 - 複数の表示オブジェクトを含む第1の表示情報を情報処理装置に送信し、前記情報処理装置から前記第1の表示情報に基づく画像情報を受信し、
前記画像情報を用いた表示をし、
表示された画像のうち一部の範囲を選択する操作を受け付け、
受け付けられた範囲を示す情報を含む検索クエリを生成する、
検索クエリ生成方法。 - コンピュータに、
複数の表示オブジェクトを含む第1の表示情報を情報処理装置に送信し、前記情報処理装置から前記第1の表示情報に基づく画像情報を受信させ、
前記画像情報を用いた表示をさせ、
表示された画像のうち一部の範囲を選択する操作を受け付けさせ、
受け付けられた範囲を示す情報を含む検索クエリを生成させる、
プログラム。 - 複数の表示オブジェクトを含む第1の表示情報を素材検索装置に送信し、前記素材検索装置から前記第1の表示情報に基づく画像情報を受信する通信部と、前記画像情報を用いた表示をする表示部と、前記表示部により表示された画像のうち一部の範囲を選択する操作を受け付ける受付部と、前記受付部により受け付けられた範囲を示す情報を含む検索クエリを生成するクエリ生成部と、を備える、ユーザ端末装置と、
複数の表示オブジェクトを含む第2の表示情報のうち一部の表示オブジェクトを含む第1の素材を切り出す切り出し部と、前記第1の素材の特徴を抽出する第1の特徴抽出部と、前記検索クエリを受信する受信部と、前記受信部により受信された検索クエリに基づいて、前記受付部により受け付けられた範囲に基づく第2の素材の特徴を抽出する第2の特徴抽出部と、前記切り出し部により切り出された前記第1の素材毎に、前記第1の特徴抽出部により抽出された前記第1の素材の特徴と、前記第2の特徴抽出部により抽出された前記第2の素材の特徴とを比較する比較部と、前記比較部による比較結果に基づいて、複数の第1の素材のうち前記第2の素材に類似する前記第1の素材を検索する検索部と、を備える、素材検索装置と、
を備える、素材検索システム。 - 素材検索装置が、複数の表示オブジェクトを含む第2の表示情報のうち一部の表示オブジェクトを含む第1の素材を切り出すステップと、
前記素材検索装置が、前記第1の素材の特徴を抽出するステップと、
ユーザ端末装置が、複数の表示オブジェクトを含む第1の表示情報を素材検索装置に送信し、前記素材検索装置から前記第1の表示情報に基づく画像情報を受信するステップと、
前記ユーザ端末装置が、前記画像情報を用いた表示をするステップと、
前記ユーザ端末装置が、表示された画像のうち一部の範囲を選択する操作を受け付けるステップと、
前記ユーザ端末装置が、受け付けられた範囲を示す情報を含む検索クエリを生成するステップと、
前記素材検索装置が、前記検索クエリを受信するステップと、
前記素材検索装置が、受信された検索クエリに基づいて、受け付けられた範囲に基づく第2の素材の特徴を抽出するステップと、
前記素材検索装置が、前記第1の素材毎に、前記第1の素材の特徴と、前記第2の素材の特徴とを比較するステップと、
前記素材検索装置が、比較結果に基づいて、複数の第1の素材のうち前記第2の素材に類似する前記第1の素材を検索するステップと、
を含む、素材検索方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019125023A JP7304221B2 (ja) | 2019-07-04 | 2019-07-04 | 検索クエリ生成装置、検索クエリ生成方法、プログラム、素材検索システム、および素材検索方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019125023A JP7304221B2 (ja) | 2019-07-04 | 2019-07-04 | 検索クエリ生成装置、検索クエリ生成方法、プログラム、素材検索システム、および素材検索方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021012453A true JP2021012453A (ja) | 2021-02-04 |
JP7304221B2 JP7304221B2 (ja) | 2023-07-06 |
Family
ID=74227383
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019125023A Active JP7304221B2 (ja) | 2019-07-04 | 2019-07-04 | 検索クエリ生成装置、検索クエリ生成方法、プログラム、素材検索システム、および素材検索方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7304221B2 (ja) |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11316846A (ja) * | 1998-04-22 | 1999-11-16 | Nec Corp | 画像の領域情報とエッジ情報を利用する画像照合の方法および画像照会装置 |
JP2006318219A (ja) * | 2005-05-12 | 2006-11-24 | Fujitsu Ltd | 類似スライド検索プログラム及び検索方法 |
JP2007164648A (ja) * | 2005-12-16 | 2007-06-28 | Ricoh Co Ltd | 類似画像検索装置、類似画像検索方法、プログラム及び情報記録媒体 |
JP2008027131A (ja) * | 2006-07-20 | 2008-02-07 | Canon Inc | 画像検索機能を持つ情報漏えい抑止システム |
JP2010140209A (ja) * | 2008-12-11 | 2010-06-24 | Nec Corp | 検索システム、検索方法、およびプログラム |
JP2011090427A (ja) * | 2009-10-21 | 2011-05-06 | Fujifilm Corp | ドキュメント閲覧システム及びその制御方法 |
JP2011253442A (ja) * | 2010-06-03 | 2011-12-15 | Nec Corp | 画像検索装置、画像検索装置のデータ処理方法、および画像検索システム |
JP2012221148A (ja) * | 2011-04-07 | 2012-11-12 | Hitachi Ltd | 画像処理方法、及び、画像処理システム |
-
2019
- 2019-07-04 JP JP2019125023A patent/JP7304221B2/ja active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11316846A (ja) * | 1998-04-22 | 1999-11-16 | Nec Corp | 画像の領域情報とエッジ情報を利用する画像照合の方法および画像照会装置 |
JP2006318219A (ja) * | 2005-05-12 | 2006-11-24 | Fujitsu Ltd | 類似スライド検索プログラム及び検索方法 |
JP2007164648A (ja) * | 2005-12-16 | 2007-06-28 | Ricoh Co Ltd | 類似画像検索装置、類似画像検索方法、プログラム及び情報記録媒体 |
JP2008027131A (ja) * | 2006-07-20 | 2008-02-07 | Canon Inc | 画像検索機能を持つ情報漏えい抑止システム |
JP2010140209A (ja) * | 2008-12-11 | 2010-06-24 | Nec Corp | 検索システム、検索方法、およびプログラム |
JP2011090427A (ja) * | 2009-10-21 | 2011-05-06 | Fujifilm Corp | ドキュメント閲覧システム及びその制御方法 |
JP2011253442A (ja) * | 2010-06-03 | 2011-12-15 | Nec Corp | 画像検索装置、画像検索装置のデータ処理方法、および画像検索システム |
JP2012221148A (ja) * | 2011-04-07 | 2012-11-12 | Hitachi Ltd | 画像処理方法、及び、画像処理システム |
Also Published As
Publication number | Publication date |
---|---|
JP7304221B2 (ja) | 2023-07-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5241954B2 (ja) | 形状に基づく画像検索 | |
US20220292403A1 (en) | Entity resolution incorporating data from various data sources which uses tokens and normalizes records | |
US8412717B2 (en) | Changing ranking algorithms based on customer settings | |
US20100169326A1 (en) | Method, apparatus and computer program product for providing analysis and visualization of content items association | |
US20150339324A1 (en) | System and Method for Imagery Warehousing and Collaborative Search Processing | |
US20150120760A1 (en) | Image tagging | |
CN108664582B (zh) | 企业关系的查询方法、装置、计算机设备及存储介质 | |
KR20010053788A (ko) | 내용기반 이미지 검색 시스템 및 그 방법 | |
JP2004178605A (ja) | 情報検索装置及びその方法 | |
KR20100068468A (ko) | 그리드 기반 피처 구조를 이용한 비주얼 서치 수행의 방법, 장치 및 컴퓨터 프로그램 제품 | |
KR20100046586A (ko) | 맵 기반의 웹 검색 방법 및 장치 | |
JP4948607B2 (ja) | 画像検索装置、画像分類装置及び方法並びにプログラム | |
JP7304221B2 (ja) | 検索クエリ生成装置、検索クエリ生成方法、プログラム、素材検索システム、および素材検索方法 | |
JP7304220B2 (ja) | 素材検索システム、素材検索方法、素材検索装置、およびプログラム | |
CN117421389A (zh) | 一种基于智能模型的技术趋势确定方法及系统 | |
JP6376124B2 (ja) | 情報処理装置、情報処理方法およびプログラム | |
JP6140835B2 (ja) | 情報検索システムおよび情報検索方法 | |
JP2017072964A (ja) | 情報分析装置及び情報分析方法 | |
US20170255691A1 (en) | Information processing system, information processing method, and program | |
JP2004164331A (ja) | 画像検索方法、画像検索装置、および画像検索プログラム | |
US20210216540A1 (en) | Accessible and efficient search process using clustering | |
CN111190964B (zh) | 数据对接方法、装置、设备及存储介质 | |
US20170180511A1 (en) | Method, system and apparatus for dynamic detection and propagation of data clusters | |
JP2018072873A (ja) | 情報処理装置、情報処理方法、およびプログラム | |
Graupmann et al. | GeoSphereSearch: Context-Aware Geographic Web Search. |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220301 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230215 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230404 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230602 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230620 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230626 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7304221 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |