CN1467659A - 图面搜索支持设备和图面搜索方法 - Google Patents

图面搜索支持设备和图面搜索方法 Download PDF

Info

Publication number
CN1467659A
CN1467659A CNA031197116A CN03119711A CN1467659A CN 1467659 A CN1467659 A CN 1467659A CN A031197116 A CNA031197116 A CN A031197116A CN 03119711 A CN03119711 A CN 03119711A CN 1467659 A CN1467659 A CN 1467659A
Authority
CN
China
Prior art keywords
icon
surface information
information
informations
virtual space
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA031197116A
Other languages
English (en)
Other versions
CN100410928C (zh
Inventor
增本大器
远藤进
����һ
上原祐介
֮
椎谷秀一
马场孝之
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Publication of CN1467659A publication Critical patent/CN1467659A/zh
Application granted granted Critical
Publication of CN100410928C publication Critical patent/CN100410928C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5838—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using colour

Landscapes

  • Engineering & Computer Science (AREA)
  • Library & Information Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一种图面搜索支持设备和图面搜索方法。当用户指定所要搜索的图面信息时，从每个图面信息中提取一个组件图面区域，并生成一个突出显示所提取区域内一个线条图的图标。然后，根据相应图面信息的特征量在虚拟空间中布置一个图标，并显示在屏幕上。

Description

图面搜索支持设备和图面搜索方法
技术领域
本发明涉及一种在大量图面信息中搜索所期望的信息的方法和一种支持该搜索操作的设备。本发明在需要搜索包括图面的文献，例如搜索专利文献、机械制图、电子电路图等的领域中使用。
背景技术
在常规的图面搜索操作中，使用关键词搜索技术将图面信息的属性数据作为搜索目标来搜索与用户所输入的关键词相匹配的信息。以匹配顺序列出通过这种关键词查询操作获得的标题或摘要以提供给用户。在这种技术中，如果输入适当的关键词则仅提供少量信息，因此能很容易地检测到所期望的信息。
如果关键词没有适当地代表用户的搜索意图，或者用户的搜索意图本身就不清楚，将要显示的信息特征列表可能变得很大。因此，所显示信息的顺序并不能始终匹配用户的意图。在一些情况下，检索结果列表还可能遗漏一些信息。另外，如果图面信息中不包含相关的属性数据，则无法搜索到该图面的相关信息。
另外，最近已经在使用一种利用图像查询搜索类似附图的图像搜索技术来搜索图像。在这种方法中，用户指定某一图像作为查询图像，系统搜索与该图像类似的图像，以相似性为顺序显示所检索到的类似图像的结果列表，并将这一列表提供给用户。然而，普通用户并不能轻易地指定一幅合适的查询图像。而且，仅诸如图像颜色和粗略布局信息等图像特征可以用作图像之间类似性匹配的标准。因此，所显示的检索结果列表并不能始终匹配用户的意图。
下面是上述问题的总结。
(1)很难指定合适的关键词来缩减图面信息。
(2)在图面信息中不包含相关属性数据的情况下，无法执行关键词搜索。
(3)很难指定一幅合适的查询图像来缩减图面信息。
发明内容
本发明的一个目的是提供一种在大量图面信息中轻易地搜索所期望的信息的图面搜索支持设备，以及一种执行这一图面搜索的方法。
本发明的第一种图面搜索支持设备包括一个生成设备、一个布置设备、一个显示设备、一个改变设备和一个存储设备。该设备支持在大量图面信息中搜索所期望的图面信息的操作。
生成设备从多个图面信息中每个图面信息的图像数据中提取一个图面区域，并生成一个突出显示所提取图面区域中一个线条图的图标。布置设备根据相应图面信息的特征量确定每个图标在虚拟空间中的布置位置。显示设备同时显示在虚拟空间中布置的多个图面信息的图标。
本发明的第二种图面搜索支持设备包括一个生成设备、一个布置设备和一个发送设备。该设备支持在大量图面信息中搜索所期望的图面信息的操作。
生成设备从多个图面信息中每个图面信息的图像数据中提取一个图面区域，并生成一个突出显示所提取图面区域中一个线条图的图标。布置设备根据相应图面信息的特征量确定每个图标在虚拟空间中的布置位置。发送设备发送显示数据以同时显示在虚拟空间中布置的多个图面信息的图标。
本发明的第三种图面搜索支持设备包括一个存储设备、一个生成设备、一个布置设备和一个显示设备。该设备支持在大量图面信息中搜索所期望的图面信息的操作。
存储设备存储预先为每种图面信息准备的一个预先确定的图标图像。生成设备获得一个与多个图面信息中每个图面信息的类型相对应的图标图像，并使用所获得的图标图像生成一个图标。布置设备根据一个相应图面信息的特征量确定每个图标在虚拟空间中的布置位置。显示设备同时显示在虚拟空间中布置的多个图面信息的图标，并在每个图标附近显示附加信息，它表示每个图面信息的特有内容。
附图说明
图1图示本发明的图面搜索支持设备的结构；
图2图示一个图面显示处理；
图3图示另一种图面搜速支持设备的结构；
图4图示一个图标生成处理的流程图；
图5图示一个具有缩小图像的图标；
图6图示第一图标布置；
图7图示第二图标布置；
图8图示图面信息的显示方法；
图9图示图标的重新布置；
图10图示第一标签图标；
图11图示第二标签图标；
图12图示一个预先确定的图标；
图13图示第三标签图标；
图14图示一个网络系统；
图15图示一个信息处理设备的结构；和
图16图示记录介质。
具体实施方式
下面参考附图详细解释本发明的优选实施例。
图1图示本发明的一个图面搜索支持设备的结构。图1所示的图面搜索支持设备包括生成设备11、布置设备12、显示设备13、改变设备14和存储设备15。这个设备支持从多个图面信息中搜索所期望的图面信息的操作。
生成设备11从多个图面信息中每个图面信息的图像数据中提取一个图面区域，并生成一个突出显示所提取图面区域内一个线条图的图标。布置设备12根据相应图面信息的特征量确定每个图标在虚拟空间中的布置位置。显示设备13同时显示在虚拟空间中布置的多个图面信息的图标。
图面信息的图面区域对应于绘制一个线条图的区域。在机械制图的情况下，例如，在图面区域中绘制一个组件的形状。当根据图面信息的图像数据生成一个图标时，并不简单地缩小图标，而是从图像数据中提取一个图面区域，并通过使图面区域中所包括的线条加粗或着色来突出显示该线条图。因此，可以很容易地识别缩小图像中的线条图，从而提高搜索操作的效率。因此，用户在查看所显示的虚拟空间时，可以轻易地搜索到一个他或她所期望图面信息的图标。
改变设备14改变用户在所显示的虚拟空间中的视点。因为提供了这样一种功能，用户可以在自由移动她或他在虚拟空间中的视点时搜索她或他所期望的信息。
存储设备15(图标数据库)存储预先为每种图面信息准备的一个预先确定的图标图像。生成设备11从存储设备15中获取一个对应于每个图面信息类型的图标图像，并使用所获得的图标图像生成一个图标。显示设备13显示一个虚拟空间，其中布置了使用预先确定的图标图像生成的用于多个图面信息的图标，并且它在每个图标附近显示附加信息(标签)，该信息表示每个图面信息的特有内容。
通过预先准备一个与图面信息的类型对应的图标图像，可以以稳定的图像质量来显示图标。而且，通过在对应图标附近显示附加信息可以向用户提供图面信息的特有内容。然后，用户选择根据图面信息的图像数据生成的图标，或者选择使用预先确定的图标图像生成的图标，使得他或她可以操作该图面搜索支持设备来显示所选择的图标。
图1所示的生成设备11、布置设备12和改变设备14例如对应于随后将要描述的图15所示的CPU(中央处理单元)71和存储器72。图1所示的显示设备13例如对应于图15所示的输出设备74，而存储设备15例如对应于图15所示的外部存储设备75。
在当前的优选实施例中，图面信息被提供给一个尽可能使用一台计算机的用户，因此使用户能够从这些信息中搜索他或她所期望的信息。在将要搜索的图面信息由图面的图像数据和属性数据组成的情况下，通过将图像数据作为很容易浏览的图标列表并显示，用户可以很容易地从所提供的大量图像中检索到她或他所期望的信息。
而且，通过根据从图面信息中提取的特征量非常接近地布置相关图标，或者通过在特定位置布置具有特定特征的图像，可以提高用户的搜索效率。
图2图示由优选实施例的图面搜索支持设备执行的图面显示处理的流程图。这一处理包括下述功能：
<搜索目标指定功能(22)>
用户29指定一个包括图面的图像数据和属性数据的图面信息组21作为搜索目标。有两种指定方法：一种方法是指定用于存储图面信息的目录，另一种方法是指定使用现有信息搜索设备(例如关键字搜索引擎)搜索获得的一组图面信息。
<图标生成(信息可视化)功能(23)>
使用一个信息可视化设备将选作搜索目标的每个图面信息转换成一个可视地表示信息内容的图标。使用一种手工转换方法和一种自动转换方法。自动转换方法提取在用户希望在图面数据中识别出他或她所期望的图面时一个重要的组件(在机械制图的情况下，图面的轮廓或其它组件)，然后该方法将所提取的组件转换成一幅突出该组件的缩略图。
<特征提取功能(24)(用于确定布置)>
从各个图面信息中提取用于确定图标25布置位置的特征量26。为在每个图面信息中包括的每个媒体提取特征量26。
在具有诸如日期等顺序的数值属性数据的情况下，将数值提取为特征量26。在诸如标题或说明性文献的文本属性数据的情况下，将每个文本的特征矢量提取为特征量26。
在tf-idf(检索词频率-逆文献频率)(term frequency-inverse documentfrequency)方法的情况下，通过预先选择被认为有效地表征一个文本的一组词，测量每个词的相对重要程度，并列表所获得的重要程度，从每个文本中提取包括一个词的tf-idf值作为一个元素的特征矢量。在可以将一个文本分割成多个区域的情况下，也可以提取多个特征矢量。
在图像数据的情况下，可以将颜色特征、纹理特征、频率特征(傅立叶特征或DCT(离散余弦变换)特征)和形状特征等等提取为特征量26。在可以将一幅图像分割成多个区域的情况下，可以提取多个图像特征。在这种情况下，可以通过为各个图像特征准备不同的图标或者复制相同的图标来用多个图标表示一块图面信息。
<图标布置功能(27)>
对应于每个图面信息的特征量26通常是一个更高阶空间中的矢量。图标25被布置在计算机内一个三维或低于三维的虚拟空间中，以便为在较高阶对应位置上标出指定为搜索目标的所有图面信息的情况下显示分布状态。虚拟空间的坐标抽对应于特征量26的一部分，因此可以根据相应的特征量26布置图标25。可以使用主要分量分析、多维定标分析等统计方法或者作为一种神经网络的自组织图(SOM)来执行布置决定。
<虚拟空间显示功能(28)>
显示布置了图标25的虚拟空间。同时，用户使用计算机图形技术改变她或他在虚拟空间中的视点，因此用户可以在空间内自由移动，或者可以穿越该空间。这非常有助于用户29搜索图面信息。当用户29使用诸如鼠标等指示设备点击图标25时，显示原始的图面信息。
而且，图面搜索设备可以通过诸如互联网和内部网等通信网络来启动另一设备显示一个虚拟空间。在这种情况下，图标25的数据通过网络被发送到另一个设备。
用户29在显示的虚拟空间中搜索他或她所期望的信息时也可以返回任意功能。具体而言，用户29可以重新指定搜索目标组，可以将对应于相同图面信息的图标25切换成另一图标，或者可以通过将用于布置决定的特征切换到另一特征来改变一个图标的布置。
图3图示支持机械制图搜索的图面搜索支持设备。图3所示的图面搜索支持设备31对应于执行诸如图2所示的一个包括各个功能的程序的一个计算机系统。下面是图面搜索支持设备31所执行的图面显示处理的流程图。
*搜索目标的指定(22)
用户29指定一组多个图面信息作为搜索目标。例如，在用户29输入“螺钉(screw)”作为关键词34的情况下，文本搜索引擎32使用该关键词34检索在图面数据库33内存储的图面信息，并选择匹配的图面信息35作为搜索目标。所选择图面信息35的图像数据37和属性数据38被输入给图面搜索支持设备31。
*图标生成(23)
图面搜索支持设备31将选择作为搜索目标的每个图面信息35转换成图标25。同时，分析属性数据38的内容。如果属性数据的数值在属性数据38中存在，则提取一对数值和属性名称。
而且，如果文本属性数据在属性数据38中存在，则从数据中提取表征图面信息35的词(关键词)。具体而言，参考将要搜索的所有图面信息中的文本属性数据，使用共有信息量方法、X平方值法或者tf-idf法，并根据情况需要使用一个技术术语词典或规则来提取关键词。
在图像数据37上执行一个区域分割处理，并区别一个组件图面区域36(表示一个组件线条图的区域)和其它区域，从而可以提取组件图面区域36。然后，使用从组件图面区域36所提取的数值、关键词和图像等生成图标25。
图4是图示这样一个图标生成处理的例子的流程图。首先，图面搜索支持设备31读取图像数据37和属性数据38作为一个图面图像(41)。在给定图面是纸件图面的情况下，使用扫描仪将该图面转换成一幅数字图像，然后将数字图像二进制化以装载到一个主存储单元中。在给定图面是一幅数字图像的情况下，将这幅图像二进制化以装载到一个主存储单元中。
随后，分析所装载的图面图像，并自动或半自动地从图面图像(42)中提取组件图面区域36。下面解释自动提取方法和半自动提取方法。
(1)自动提取方法
如下面文献的3.5(2)(pp.1089)中所述，可以采用各种方法执行这一处理。
文献1：
Akio Tojo，Takanori Sato，“草图和图面的自动识别与注解(AutomaticRecognition and Interpretation of Sketches and Drawings)”，信息处理，1983年第24卷第9期第1086-1094页。
它们是一种估计黑色游程和白色游程出现频率的方法，一种估计密度函数和游程长度的频率分布和周围分布的特征量的方法和一种使用二维傅立叶变换的方法以及其它方法。
根据文献1的3.7节(PP.1090)所述的方法，通过将图面分割成多个区域，为每个区域提取一个线段或其它类似物并收集所获得的结果，可以提取图面区域36。
而且，根据下述文献第4章(PP.162-165)中所述的方法，通过估计二进制图像中黑色游程和白色游程的出现频率可以提取组件图面区域36。
文献2：
Michihiko Mino和Shunichi Kato，“文件图像处理(Document ImageProcessing)”，O+E单独册1986/11(Mikio Takagi、Junichiro Toriwaki和Hideyuki Tamura，“图像处理算法的最新趋势(Latest Trend of ImageProcessing Algorithm)”)，第158-171页，新技术通信，1986。
(2)半自动提取方法
可以考虑两种方法，一种方法通过用户29描绘组件轮廓将一个组件图面区域直接呈现给系统，另一种方法通过用户使用指示设备点击一个组件图面区域内侧而将一个组件图面区域间接呈现给系统。如下面文献的第2.2章(pp.59-60)中所描述的，后一情况使用一种将区域从用户29指定的点延伸到边界线的方法。
文献3：
Keiichi Abe和Hideo Ogawa，“几何特征处理(2)(processing ofGeometrical Characteristic(2))”，O+E单独册1986/11(Mikio Takagi、Junichiro Toriwaki和Hideyuki Tamura，“图像处理算法的最新趋势(LatestTrend of Image Processing Algorithm)”)，第58-72页，新技术通信，1986。
接着，图面搜索支持设备31缩小一幅图面图像并突出显示其组件图面区域(43)。当缩小一幅图面图像时，在多数情况下，简单地使像素稀疏或者使用周围像素的值内插一个像素。然而，如果以这种方式缩小一幅图面，其组件的轮廓将根据情况变细或断裂。因此，用户29几乎不能通过视觉识别出组件的形状。
因此，通过在图面区域中使组件的线条加粗或着色来突出显示一个组件的形状，然后使用突出显示的线条生成一个图标图像(44)。例如，图5所示的图标图像是从图3所示的“螺钉”的图面信息35中生成的。因此，通过提取组件图面区域36和突出显示该线条，可以轻易地识别出缩小图面图像中组件的形状。
*特征提取(24)
图面搜索支持设备31从图像数据37和属性数据38中提取特征量26。在数值属性数据的情况下，例如，直接将数值用作特征量26，而在文本属性数据的情况下，使用tf-idf方法等来提取一个特征矢量。在图像数据的情况下，提取色彩特征、纹理特征、频率特征和形状特征等。
*图标布置(27)
图面搜索支持设备31根据所提取的特征量26在虚拟空间中布置图标25。在特征量26是数值的情况下，以升序或者降序排列图标25，例如从屏幕的左上角以行优先的方式。在一些情况下，如图6所示，在虚拟空间中从屏幕的后面以数字为顺序排列图标25。在图6中，将图面的准备日期51提取为它的特征量26，因此从屏幕的后面以数字为顺序排列图标25。
在特征量26是文本特征或图像特征的情况下，特征矢量的维数通常很高，所以应当降低很高的维数。为了降低特征矢量的维数，使用KL扩展，它在可以看到许多数据散布的方向上投影数据。通过使用所获得的低维特征矢量使一个图标25可以使用自组织映射在一个二维平面上布置，可以以这种方式布置所有的图标25以便多个类似的图面信息可以如图7所示集中在一齐。
在图7中，将图面的图像特征提取为特征量26，布置这些图标25以使形状类似的多个组件的图面信息集中在一起。当用户29命令扩展区域52的显示时，显示另一个屏幕53。
*虚拟空间显示(28)
图面搜索支持设备31在屏幕上显示一个虚拟空间39，其中根据图标布置信息来布置图标25。用户使用一个指示设备改变她或他在所显示虚拟空间39中的视点，并搜索他或她期望的图标25，从而可以搜索图面信息35。当用户29点击感兴趣的图标25并查看原始图面信息35时，如图8所示显示原始图面信息35。
而且，图面搜索支持设备31可以改变图标25的布置。在图标25的重新布置中，如下面的文献中所描述的，图标25被分类以通过改变分配给虚拟空间39每个坐标轴的特征量来从各种视点布置这些图标。
文献4：
PCT公报WO 01/31503 A1，“多媒体信息分类/布置设备和分类/布置方法(Multimedia Information Sorting/Arranging Device andSorting/Arranging Method)”，2001。
例如，使用文本特征而非图像特征作为布置决定所用的特征量26来重新布置图标25。如图9所示，用户29输入某个关键词，比较所输入的关键词和图面信息35中所包括的文本属性数据，并重新布置对应于图面信息35的图标25以便匹配度较高的图标所显示的位置更靠近用户的视点。
而且，可以将表示图面信息35特有内容的信息添加给图标25。例如，图面搜索支持设备31使用图像识别技术识别图面图像中组件的种类，并在图标25附近显示一个描述该类型的标签。通过将标签添加给图标25，可以轻易地区分轮廓类似的不同组件的图面信息。
图10图示这样一个标签图标的例子。在此，一个诸如“螺钉”的标签54被添加给图5所示的缩小图像的图标25。这个标签54的作用是一个辅助图标，它用于以类似于图标25的方式显示原始图面信息35。
在用标签来区分组件类型的情况下，图标图像的线条并不必需突出显示，可以使用如图11所示的图面图像的简单缩小图像。仅通过缩小原始图面信息35的图像来生成图11所示的图标55，既不执行组件图面区域36的提取，也不执行图面轮廓的突出显示。而是将标签54添加给图标55。
在上述优选实施例的解释中，使用图面信息35的缩小图像生成一个图标。除此之外，还可以在一个图标数据库内存储一组预先确定的图标图像，并使用这组图标图像生成图标。
在这种情况下，在图标数据库中存储为每种组件预先准备的一个预先确定的图标图像。在图3的图标生成处理23中，图面搜索支持设备31使用图像识别技术识别一幅图面图像中一个组件的类型，从图标数据库中获取与所识别类型相对应的图标图像，并将所获取的图标图像分配给对应的图面信息35。
例如，如果识别结果是“螺栓(a bolt)”，则一个已指定给“螺栓”的图标56(象征性地图示一个典型螺栓形状的图像)被分配给图面信息35并如图12所示被绘出。而且，还可以将一个图10和图12所示的标签添加给图标56。图13图示一个将“螺栓”标签57添加给图标56的例子。
在图面搜索支持设备31具有一个生成图5所示的缩小图像和图12所示的预先确定的图标的功能的情况下，用户可以选择和显示任意一个图标。
在图10、11和13中，用户还可以添加一个标签来描述表示图面信息35特有内容的其它信息。例如，如果使用标签来描述一个组件的特定大小(长、宽和直径等)、材料、颜色和有关特征，则可以轻易地区别出同一类型的组件的图面信息35。
图面搜索支持设备31可以通过任意一个通信网络从另一个设备接收一个处理请求。图14图示这样一个网络系统。图14的系统包括图面搜索支持设备31、用户终端62和一个连接它们的通信网络61。
一个用户从终端62指示图面搜索支持设备31执行一个图面显示处理，并指定将要搜索的图面信息。一旦接收到这一指令，图面支持搜索设备31通过为每个图面信息生成和布置图标来生成虚拟空间的显示数据，然后将显示数据发送给终端62。然后，终端62使用所接收的数据在一个屏幕上显示布置有图标的虚拟空间。因此，这一结构使很多用户都可以使用图面搜索支持设备31。
而且，本发明可以应用于任意图面信息，除了上述机械制图之外，还包括诸如电子电路图的线路图、专利文献或者包括附图的文献。
通过使用诸如图15所示的一个信息处理设备(计算机)，构成图3所示的图面搜索支持设备31和图14所示的终端62。图15所示的信息处理设备包括一个CPU(中央处理单元)71、一个存储器72、一个输入设备73、一个输出设备74、一个外部存储设备75、一个介质驱动设备76和一个网络链接设备77。这些设备通过一条总线78相互连接。
存储器72包括例如ROM(只读存储器)和RAM(随机存取存储器)等，它存储将要用于一个处理的程序和数据。CPU 71使用存储器72执行程序来执行所需的处理。
输入设备73例如是键盘、指示设备和触摸板等，它用于从用户输入指令或信息。输出设备74例如是显示设备，它用于显示虚拟空间。
外部存储设备75例如是磁盘设备、光盘设备、磁-光盘设备和磁带设备等。信息处理设备在外部存储设备75中存储程序和数据，并将它们装载到存储器72中以在需要时使用。外部存储设备75还用作图3所示的图面数据库33或者一个用于存储预先确定的图标图像的图标数据库。
介质驱动设备76驱动一个便携式记录介质79以访问所记录的内容。作为便携式记录介质79，可以使用一个任意的计算机可读记录介质，例如存储卡、软盘、CD-ROM(光盘只读存储器)、光盘和磁-光盘、等等。用户在便携式记录介质79中存储程序和数据，并将它们装载到存储器72中以在需要时使用。
网络连接设备77连接到一个任意通信网络，例如LAN(区域网)等，并执行与通信有关的数据转换。信息处理设备通过网络连接设备77从另一设备接收程序和数据，并将它们装入存储器72以在需要时使用。
在图14所示网络系统的情况下，图15所示的信息处理设备对应于图面搜索支持设备31或终端62，它通过网络连接设备77与其它设备通信。
图16图示一个计算机可读记录介质，它用于将一个程序和数据提供给图15所示的信息处理设备。在便携式记录介质79或服务器80的数据库81中存储的程序和数据被装载到存储器72中。同时，服务器80生成一个用于传播程序和数据的传播信号，并通过网络上的任意传输介质将该信号发送给信息处理设备。然后，CPU 71使用该数据执行该程序，并执行所需要的处理。
根据本发明，通过使用一个特定目录或一个关键词来粗略地指定一个图面信息组，并通过浏览布置有便于浏览的图标的虚拟空间，可以有效地搜索所期望的图面信息。

Claims (18)

1.一种图面搜索支持设备，支持在多个图面信息中搜索所期望的图面信息的操作，该设备包括：
生成设备，从多个图面信息中每个图面信息的图像数据中提取一个图面区域，并生成一个突出显示所提取图面区域内一个线条图的图标；
布置设备，根据一个相应图面信息的特征量确定每个图标在一个虚拟空间内的布置位置；和
显示设备，同时显示在虚拟空间中布置的多个图面信息的图标。
2.根据权利要求1的设备，还包括改变设备，用于改变虚拟空间内的视点。
3.根据权利要求1的设备，其中显示设备在每个图标附近显示附加信息，该信息表示每个图面信息的特有内容。
4.根据权利要求1的设备，还包括存储设备，用于存储预先为每种图面信息准备的一个预先确定的图标图像，其中：
生成设备获取与每个图面信息的类型相对应的一个图标图像，并使用所获取的图标图像生成一个图标；和
显示设备显示一个虚拟空间，其中布置有使用预先确定的图标图像生成的多个图面信息的图标，并在每个图标附近显示附加信息，该信息表示每个图面信息的特有内容。
5.一种图面搜索支持设备，支持在多个图面信息中搜索所期望的图面信息的操作，该设备包括：
生成设备，从多个图面信息中每个图面信息的图像数据提取一个图面区域，并生成一个突出显示所提取图面区域内一个线条图的图标；
布置设备，根据一个相应图面信息的特征量确定每个图标在一个虚拟空间内的布置位置；和
发送设备，发送显示数据以同时显示在虚拟空间中布置的多个图面信息的图标。
6.根据权利要求5的设备，还包括改变设备，用于改变虚拟空间内的视点。
7.一种图面搜索支持设备，支持在多个图面信息中搜索所期望的图面信息的操作，该设备包括：
存储设备，存储预先为每种图面信息准备的一幅预先确定的图标图像；
生成设备，从存储设备获取一幅与多个图面信息中每个图面信息的类型相对应的图标图像，并使用所获取的图标图像生成一个图标；
布置设备，根据一个相应图面信息的特征量确定每个图标在一个虚拟空间内的布置位置；和
显示设备，同时显示在虚拟空间中布置的多个图面信息的图标，并在每个图标附近显示每个图面信息的特有内容。
8.一种计算机可读记录介质，记录一个使计算机支持在多个图面信息中搜索所期望的图面信息的操作的程序，该程序使计算机执行：
从多个图面信息中每个图面信息的图像数据提取一个图面区域；
生成一个突出显示所提取图面区域内一个线条图的图标；
根据一个相应图面信息的特征量确定每个图标在一个虚拟空间内的布置位置；和
同时显示在虚拟空间中布置的多个图面信息的图标。
9.一种计算机可读记录介质，记录一个使计算机支持在多个图面信息中搜索所期望的图面信息的操作的程序，该程序使计算机执行：
从多个图面信息中每个图面信息的图像数据提取一个图面区域；
生成一个突出显示所提取图面区域内一个线条图的图标；
根据一个相应图面信息的特征量确定每个图标在一个虚拟空间内的布置位置；和
发送显示数据以同时显示在虚拟空间中布置的多个图面信息的图标。
10.一种计算机可读记录介质，记录一个使计算机支持在多个图面信息中搜索所期望的图面信息的操作的程序，该程序使计算机执行：
从存储设备获取一幅与多个图面信息中每个图面信息的类型相对应的图标图像，所述存储设备存储预先为每种图面信息准备的一幅预先确定的图标图像；
使用所获取的图标图像生成一个图标；
根据一个相应图面信息的特征量确定每个图标在一个虚拟空间内的布置位置；
同时显示在虚拟空间中布置的多个图面信息的图标；和
在每个图标附近显示每个图面信息的特有内容。
11.一种传播信号，用于将一个程序传播给一台计算机以支持在多个图面信息中搜索所期望的图面信息的操作，该程序使计算机执行：
从多个图面信息中每个图面信息的图像数据提取一个图面区域；
生成一个突出显示所提取图面区域内一个线条图的图标；
根据一个相应图面信息的特征量确定每个图标在一个虚拟空间内的布置位置；和
同时显示在虚拟空间中布置的多个图面信息的图标。
12.一种传播信号，用于将一个程序传播给一台计算机以支持在多个图面信息中搜索所期望的图面信息的操作，该程序使计算机执行：
从多个图面信息中每个图面信息的图像数据提取一个图面区域；
生成一个突出显示所提取图面区域内一个线条图的图标；
根据一个相应图面信息的特征量确定每个图标在一个虚拟空间内的布置位置；和
发送显示数据以同时显示在虚拟空间中布置的多个图面信息的图标。
13.一种传播信号，用于将一个程序传播给一台计算机以支持在多个图面信息中搜索所期望的图面信息的操作，该程序使计算机执行：
从存储设备获取一幅与多个图面信息中每个图面信息的类型相对应的图标图像，所述存储设备存储预先为每种图面信息准备的一幅预先确定的图标图像；
使用所获取的图标图像生成一个图标；
根据一个相应图面信息的特征量确定每个图标在一个虚拟空间内的布置位置；
同时显示在虚拟空间中布置的多个图面信息的图标；和
在每个图标附近显示附加信息，该信息显示每个图面信息的特有内容。
14.一种在多个图面信息中搜索所期望的图面信息的图面搜索方法，包括：
从多个图面信息中每个图面信息的图像数据提取一个图面区域；
生成一个突出显示所提取图面区域内一个线条图的图标；
根据一个相应图面信息的特征量确定每个图标在一个虚拟空间内的布置位置；
同时显示在虚拟空间中布置的多个图面信息的图标；和
使用所显示的图标搜索所期望的图面信息。
15.一种在多个图面信息中搜索所期望的图面信息的图面搜索方法，包括：
在存储设备中存储预先为每种图面信息准备的预先确定的图标图像；
从存储设备获取一幅与多个图面信息中每个图面信息的类型相对应的图标图像；
使用所获取的图标图像生成一个图标；
根据一个相应图面信息的特征量确定每个图标在一个虚拟空间内的布置位置；
同时显示在虚拟空间中布置的多个图面信息的图标；
在每个图标附近显示附加信息，该信息显示每个图面信息的特有内容；和
使用所显示的图标和附加信息搜索所期望的图面信息。
16.一种图面搜索支持设备，支持在多个图面信息中搜索所期望的图面信息的操作，该设备包括：
生成装置，从多个图面信息中每个图面信息的图像数据提取一个图面区域，并生成一个突出显示所提取图面区域内一个线条图的图标；
布置装置，根据一个相应图面信息的特征量确定每个图标在一个虚拟空间内的布置位置；和
显示设备，同时显示在虚拟空间中布置的多个图面信息的图标。
17.一种图面搜索支持设备，支持在多个图面信息中搜索所期望的图面信息的操作，该设备包括：
生成装置，从多个图面信息中每个图面信息的图像数据提取一个图面区域，并生成一个突出显示所提取图面区域内一个线条图的图标；
布置装置，根据一个相应图面信息的特征量确定每个图标在一个虚拟空间内的布置位置；和
发送装置，发送显示数据以同时显示在虚拟空间中布置的多个图面信息的图标。
18.一种图面搜索支持设备，支持在多个图面信息中搜索所期望的图面信息的操作，该设备包括：
存储装置，存储预先为每种图面信息准备的一幅预先确定的图标图像；
生成装置，从存储设备获取一幅与多个图面信息中每个图面信息的类型相对应的图标图像，并使用所获取的图标图像生成一个图标；
布置装置，根据一个相应图面信息的特征量确定每个图标在一个虚拟空间内的布置位置；和
显示装置，同时显示在虚拟空间中布置的多个图面信息的图标，并在每个图标附近显示每个图面信息的特有内容。
CNB031197116A 2002-06-25 2003-03-07 图面搜索支持设备 Expired - Fee Related CN100410928C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2002184118A JP2004030122A (ja) 2002-06-25 2002-06-25 図面検索支援装置および図面検索方法
JP184118/2002 2002-06-25

Publications (2)

Publication Number Publication Date
CN1467659A true CN1467659A (zh) 2004-01-14
CN100410928C CN100410928C (zh) 2008-08-13

Family

ID=29728354

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB031197116A Expired - Fee Related CN100410928C (zh) 2002-06-25 2003-03-07 图面搜索支持设备

Country Status (3)

Country Link
US (1) US20030236778A1 (zh)
JP (1) JP2004030122A (zh)
CN (1) CN100410928C (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101529422B (zh) * 2006-10-17 2011-10-05 惠普开发有限公司 通过词汇表示的图像管理
CN101896904B (zh) * 2007-12-12 2012-08-22 国际商业机器公司 基于样例元素的元数据搜索数字内容的方法、系统
CN103838810A (zh) * 2012-11-20 2014-06-04 三星电子株式会社 使用标签信息进行图像搜索的方法和装置
CN111352033A (zh) * 2018-12-20 2020-06-30 丰田自动车株式会社 电池容量的推定方法以及电池容量的推定装置

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8677274B2 (en) 2004-11-10 2014-03-18 Apple Inc. Highlighting items for search results
JP4641414B2 (ja) * 2004-12-07 2011-03-02 キヤノン株式会社 文書画像検索装置、文書画像検索方法、プログラム、記憶媒体
JP4315927B2 (ja) * 2005-03-24 2009-08-19 株式会社ソニー・コンピュータエンタテインメント 記号分析装置、記号分析方法、プログラム及び情報記憶媒体
JP2007293429A (ja) 2006-04-21 2007-11-08 Sony Computer Entertainment Inc 画像閲覧装置、コンピュータの制御方法及びプログラム
US7627831B2 (en) * 2006-05-19 2009-12-01 Fuji Xerox Co., Ltd. Interactive techniques for organizing and retrieving thumbnails and notes on large displays
JP4837534B2 (ja) * 2006-11-29 2011-12-14 株式会社リコー コンテンツ閲覧システム
JP5103955B2 (ja) * 2007-03-09 2012-12-19 富士通株式会社 画像検索方法、装置およびプログラム
JP2009004999A (ja) * 2007-06-20 2009-01-08 Panasonic Corp 映像データ管理装置
US8577417B2 (en) * 2007-06-26 2013-11-05 Sony Corporation Methods, devices, and computer program products for limiting search scope based on navigation of a menu screen
US20090112830A1 (en) * 2007-10-25 2009-04-30 Fuji Xerox Co., Ltd. System and methods for searching images in presentations
GB0901351D0 (en) * 2009-01-28 2009-03-11 Univ Dundee System and method for arranging items for display
KR101412823B1 (ko) 2010-05-26 2014-06-27 미쓰비시덴키 가부시키가이샤 캠 데이터 작성 장치 및 캠 데이터 작성 프로그램
US9009188B1 (en) 2012-06-12 2015-04-14 Google Inc. Drawing-based search queries
CN102831187A (zh) * 2012-08-02 2012-12-19 成都众合云盛科技有限公司 基于内容的图像检索系统
JP7119348B2 (ja) * 2017-11-17 2022-08-17 日本電気株式会社 情報処理システム、情報処理方法及びプログラム
CN113826101A (zh) 2019-05-15 2021-12-21 株式会社半导体能源研究所 检索方法、检索装置以及检索系统
CN111831791B (zh) * 2020-06-29 2024-03-22 深圳市万翼数字技术有限公司 图纸显示方法、电子设备和图形服务器
US20220155942A1 (en) * 2020-11-18 2022-05-19 Yokogawa Electric Corporation Information processing apparatus, information processing method, and program
WO2023062668A1 (ja) * 2021-10-11 2023-04-20 楽天グループ株式会社 情報処理装置、情報処理方法、情報処理システム、およびプログラム
JP7472422B1 (ja) 2023-01-13 2024-04-23 株式会社Fact Base 図面管理システム、図面管理装置、図面管理方法

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5579471A (en) * 1992-11-09 1996-11-26 International Business Machines Corporation Image query system and method
JP3030485B2 (ja) * 1994-03-17 2000-04-10 富士通株式会社 ３次元形状抽出方法及び装置
US6078915A (en) * 1995-11-22 2000-06-20 Fujitsu Limited Information processing system
DE69725186T2 (de) * 1996-12-30 2004-06-17 Sharp K.K. Sprite-gestütztes videocodiersystem
JP3780623B2 (ja) * 1997-05-16 2006-05-31 株式会社日立製作所 動画像の記述方法
US6556713B2 (en) * 1997-07-31 2003-04-29 Canon Kabushiki Kaisha Image processing apparatus and method and storage medium
WO1999022318A1 (en) * 1997-10-27 1999-05-06 Massachusetts Institute Of Technology Image search and retrieval system
JP2000148795A (ja) * 1998-08-31 2000-05-30 Canon Inc 画像検索装置及びその方法、コンピュ―タ可読メモリ
JP4443722B2 (ja) * 2000-04-25 2010-03-31 富士通株式会社 画像認識装置及び方法
US6882350B2 (en) * 2000-08-07 2005-04-19 Sony Corporation Information processing apparatus, information processing method, program storage medium and program
JP4363792B2 (ja) * 2001-03-23 2009-11-11 富士通株式会社 情報検索システムおよび方法
JP4078085B2 (ja) * 2001-03-26 2008-04-23 キヤノン株式会社 変倍画像生成装置、方法、及びそのコンピュータプログラムとコンピュータ読み取り可能な記憶媒体
JP2003006198A (ja) * 2001-04-20 2003-01-10 Canon Inc 画像処理装置およびその方法、並びに、サーバ装置

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101529422B (zh) * 2006-10-17 2011-10-05 惠普开发有限公司 通过词汇表示的图像管理
CN101896904B (zh) * 2007-12-12 2012-08-22 国际商业机器公司 基于样例元素的元数据搜索数字内容的方法、系统
CN103838810A (zh) * 2012-11-20 2014-06-04 三星电子株式会社 使用标签信息进行图像搜索的方法和装置
CN103838810B (zh) * 2012-11-20 2018-12-07 三星电子株式会社 使用标签信息进行图像搜索的方法和装置
CN111352033A (zh) * 2018-12-20 2020-06-30 丰田自动车株式会社 电池容量的推定方法以及电池容量的推定装置
CN111352033B (zh) * 2018-12-20 2023-02-28 丰田自动车株式会社 电池容量的推定方法以及电池容量的推定装置

Also Published As

Publication number Publication date
JP2004030122A (ja) 2004-01-29
CN100410928C (zh) 2008-08-13
US20030236778A1 (en) 2003-12-25

Similar Documents

Publication Publication Date Title
CN1467659A (zh) 图面搜索支持设备和图面搜索方法
US5999664A (en) System for searching a corpus of document images by user specified document layout components
JP3942290B2 (ja) ドキュメント画像のクライアント・ワークステーションへの送信方法
JP4335335B2 (ja) ドキュメント画像のソート方法
EP1024437B1 (en) Multi-modal information access
KR101732754B1 (ko) 콘텐츠 기반 이미지 검색
US7904455B2 (en) Cascading cluster collages: visualization of image search results on small displays
US8775424B2 (en) System for creative image navigation and exploration
US6728752B1 (en) System and method for information browsing using multi-modal features
US6567797B1 (en) System and method for providing recommendations based on multi-modal user clusters
US6564202B1 (en) System and method for visually representing the contents of a multiple data object cluster
US6606623B1 (en) Method and apparatus for content-based image retrieval with learning function
US20070133947A1 (en) Systems and methods for image search
US20090187843A1 (en) Apparatus, system, and method for information search
Shin et al. Document Image Retrieval Based on Layout Structural Similarity.
US11727051B2 (en) Personalized image recommendations for areas of interest
CN1196071C (zh) 适用于多媒体内容的数据库构造方法
Liu et al. Clustering-based navigation of image search results on mobile devices
JP2023057658A (ja) 情報処理装置、情報を提供するためにコンピューターによって実行される方法、および、プログラム
Smith et al. Reports of the DAS02 working groups
Chadha et al. Query by Image for Efficient Information Retrieval: A Necessity
Toledo et al. Automatic cataloguing of advertisement in magazines
Loia et al. An alternative, layout‐driven approach to the clustering of documents
JPH11224267A (ja) ドキュメント画像の要約方法
MALLIKA et al. AN EFFICIENT CONTENT BASED IMAGE RETRIEVAL USING HIERARCHICAL CLUSTERING APPROACH

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20080813

Termination date: 20110307