CN1181557A - 信息检索装置 - Google Patents

信息检索装置 Download PDF

Info

Publication number
CN1181557A
CN1181557A CN97111481A CN97111481A CN1181557A CN 1181557 A CN1181557 A CN 1181557A CN 97111481 A CN97111481 A CN 97111481A CN 97111481 A CN97111481 A CN 97111481A CN 1181557 A CN1181557 A CN 1181557A
Authority
CN
China
Prior art keywords
anchor
information
cursor
data
connection information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN97111481A
Other languages
English (en)
Other versions
CN1093956C (zh
Inventor
岛光秀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Publication of CN1181557A publication Critical patent/CN1181557A/zh
Application granted granted Critical
Publication of CN1093956C publication Critical patent/CN1093956C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/954Navigation, e.g. using categorised browsing

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Data Mining & Analysis (AREA)
  • Processing Or Creating Images (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

一种从对虚拟三维空间设定的锚中进行检索的信息检索装置,能够在广泛的检索范围内使用用户界面进行检索。设有移动锚生成部180,生成移动锚。三维空间生成部184在三维图像中不仅生成普通物体,也生成表示移动锚的物体。使用者用鼠标等在图像上选择移动锚的虚拟物体。在连接数据存储部74中登记连接数据。检索部192可将普通物体作为锚,根据移动锚进行检索。。在应用程序执行部70,能够使用任意结果处理关连信息。

Description

信息检索装置
本发明涉及从在虚拟三维空间中指定的锚中检索、显示关连信息的信息检索装置。
作为先有的信息检索装置,例如有《日经计算机图形学》1995年11月号第96-113页记载的虚拟现实建模语言(VRML)浏览器的Web Space。它在计算机上构造的虚拟三维空间中配置虚拟物体,在显示图面中进行显示。如果操作者利用鼠标等指示设备操作图面上的光标、指定图面上的虚拟物体的话,该装置就检索与虚拟物体相关连的互连网上的主页等关连信息。
图15是在虚拟空间中进行检索的先有信息检索装置的概略功能框图。在图中,视点位置改变部2输出“操作杆”等指示设备中的坐标数据信号。该坐标数据信号例如是表示位移量的电信号。
视点位置设定部4具有将来自视点位置改变部2的坐标数据信号变换成图像生成部6能够使用的形式的功能。就是说,视点位置设定部4例如将视点位置改变部2输出的坐标数据信号变换成正交坐标系中的三维坐标数据、将该三维坐标数据作为视点位置及视线方向(下面将其称为视点向量)输出到图像生成部6。图像生成部6从由视点位置设定部4设定的视点向量定义的视点位置、向同一视点向量定义的视线方向生成由三维数据8定义的虚拟三维空间。
光标位置改变部10是例如鼠标等指示设备,锚指定部12例如是光标按钮等。锚信息设定部14将从光标位置改变部10输入的光标的坐标数据信号变换成与图面对应的二维坐标、在图面上的该位置显示光标。另一方面,由于锚信息设定部14从图像生成部6得到成为锚的虚拟物体的图面上的坐标,所以,利用光标位置改变部10在成为锚的虚拟物体上移动光标,如果用锚指定部12指定该虚拟物体的话,则能够判断锚信息设定部14已选择了虚拟物体。在用锚指定部12选择的虚拟物体作为锚定义时,向关连信息检索部16输出指定该虚拟物体的数据、例如物体ID。关连信息检索部16根据粘贴在作为锚的虚拟物体上的连接数据18,检索并显示互连网上的主页等的关连信息20,图象显示部22显示上述图像生成部6和上述关连信息显示部16显示的图像。
具体地说,上述视点位置设定部4、锚信息设定部14、图像生成部6、关连信息检索部16例如是执行各个规定程序的计算机内的中央处理单元(CPU),另外,三维数据8通常存储在计算机上的存储装置中,根据需要读出使用。
图16是表示利用视点向量和图像生成部6生成的图像的例子的模式图。图16(a)表示在三维空间配置同样大小的物体A(物体30)和物体B(物体32)的例子。这里,坐标系是与显示器的布劳恩管(阴极射线管)对应的管面座标系。就是说,例如x轴与图面的垂直方向对应,y轴与水平方向对应,z轴与深度方向对应。由于视线和画面正对,所以,在该坐标系中,以视点位置34为起点的视线向量的方向与z轴平行。图16(b)是从视点34沿z轴方向看物体A、B时的二维图像。这里,所谓二维图像是指“二维的”图像,即没有距离感的、平面表现的图像。因此,在图16(b)中,尽管物体A、B离开视点34的距离互不相同,在图像36上还是以相互相同大小的像38、40表现。
图17是说明光标位置改变部10及锚指定部12的操作例的模式图。如果在桌面等上前后左右地移动光标位置改变部10的鼠标50的话,则与此对应,光标52在图面36上下左右地移动,(图17(a))。操作鼠标50使光标52在物体A的像38上移动后,如果单击锚指定部12的例如鼠标左按钮54的话,则锚信息设定部14把从图像生成部6所得的虚拟物体A的图面上的坐标与用光标指定的坐标进行比较,判断已指定了该物体(图17(b))。
关连信息检索部16将由锚信息设定部14指定的三维空间中的物体作为锚,根据预先粘贴在锚上的连接检索互连网上的主页等关连信息。图18是表示从锚信息设定部14指定的三维空间中的物体来检索关连信息的操作的例子的模式图。例如,锚信息设定部14取出附属在由锚指定部12指定的物体的像38上的物体ID,送到关连信息检索部16。并且,关连信息检索部16由连接数据18检索与物体ID相当的关连信息20。这里,关连信息检索部16基本上能够处理和显示HTML浏览器中的、由HTML记述的HTML文件。
连接数据18是与表示物体ID和互连网上的存储地址的URL地址对应添加的信息,在HTML文件中记述。另外,关连信息20是HTML文件,具体地说,是与互连网相连的服务器计算机上的主页等HTML文件。
另外,上述虚拟三维空间中视点位置的改变等操作用VRML文件和对其进行处理和显示的VRML浏览器实现。VRML浏览器是HTML浏览器的帮助应用和即插式软件,嵌入在HTML浏览器中使用。HTML浏览器解码HTML文件、在其中嵌入VRML浏览器时,该处理依赖于VRML浏览器。
就是说,连接信息检索部16从连接数据18取出与物体ID对应的URL地址55,存取与网络56相连的服务器计算机上的HTML文件57。HTML文件57送给关连信息检索部16中的HTML浏览器。嵌入到HTML文件中的VRML文件通过HTML的界面送到VRML浏览器,变换成图像数据58;用图像显示部22进行显示。
在上述先有的信息检索装置中,通过在HTML浏览器中嵌入提供各功能的应用,不仅能实现上述虚拟三维空间的操作,还能实现其他功能。
但是,在上述先有的信息检索装置中,被嵌入的应用必须是HTML浏览器和界面。另外,在各功能中操作的数据必须是装在HTML文件中的、即由HTML文件所表示的数据。由于该制约,在使用先有的超多媒体技术的信息检索装置中,存在着在统一现存各种应用时需要相当多的工夫、不容易实现的问题,而且还存在可以检索的信息范围受到制约的问题。
另外,在先有的信息检索装置中,能够作为锚指定的只有虚拟空间中的虚拟物体,不能将此外的物体作为锚。
另外,在先有的信息检索装置中,使用者能够单个指定或全部一并指定是否显示识别虚拟物体是不是锚的显示状态,然而,不能根据一些条件和状态进行切换。
另外,在上述那样先有的检索装置中,由于在虚拟空间中指示虚拟物体的光标只在特定的平面上移动,所以,在立体地显示虚拟三维空间时,存在着在虚拟物体背后隐有光标的问题。
作为在先有装置中解决该问题的一个方法,虽然可以举出通过操作使视点位置向上述虚拟物体更深处移动,但存在操作繁琐的问题。
另外,作为解决上述问题的其他方法,使光标移动的平面由立体显示虚拟三维空间的图面覆盖,即在总是位于虚拟三维空间自己这边的平面上移动光标,但在这种方法中存在着显示的立体感受到损坏的问题。
本发明为解决上述问题而做,其第一目的在于提供一种信息检索装置,在具有真实感特别好的用户界面的三维空间操作型的信息检索装置中,可容易地处理各种应用的数据。
另外,第二目的在于提供一种信息检索装置,该装置能以单独一个输入设备进行虚拟三维空间中的视点及视线方向的操作及作为图面上检索数据节点的锚的指定,具有提高操作性的简便界面。
第三目的在于提供一种信息检索装置,该装置能够进行在虚拟三维空间中可指定的锚的种类相当丰富、多样的信息检索。
第四目的在于提供一种信息检索装置,该装置能够容易地识别在虚拟三维空间中显示的锚。
第五目的在于提供一种信息检索装置,该装置能够容易地观看和使用在三维图像上显示的光标。
与本发明有关的信息检索装置包括:多种应用程序执行部,用于根据各输入信息生成显示图像;关连信息存储部,用于存储成为任意一个这些应用程序执行部的输入信息的关连信息;连接数据存储部,用于存储与关连信息和作为连接节点的锚对应的连接数据;视点操作部,用于操作虚拟三维空间中的视点向量;三维空间生成部,用于作为基于视点向量的虚拟三维空间中的图象生成有立体感的三维图像;锚确定部,用于在三维图像上指定由虚拟三维空间中的虚拟物体定义的锚;检索部,根据连接数据检索与指定的上述锚对应的关连信息,输入到对应于检索的关连信息的应用程序执行部;图像显示部,在三维图像上显示由应用程序执行部生成的信息显示图像。
另外,与本发明有关的信息检索装置包括设定功能部、设定改变部和功能确定部;设定功能部进行在所述三维生成部设定视点向量的视点位置设定功能和锚信息设定功能,锚信息设定功能指定作为虚拟三维空间中的物体而与锚对应添加的虚拟物体,从该虚拟物体取出该锚的信息;设定改变部向所述设定功能部输入坐标数据,坐标数据形成视点向量的改变数据或锚的位置数据;功能确定部通过切换该坐标数据作为视点位置设定功能和锚信息设定功能中的某一个功能的输入使用,确定设定功能部的功能。
另外,与本发明有关的信息检索装置包括意义属性指定部、意义集合数据存储部和检索部;意义属性指定部在三维图像中指定虚拟三维空间中的虚拟物体,输出与该虚拟物体对应添加的意义属性;意义集合数据存储部用于存储意义集合数据,该意义集合数据定义作为该意义属性的要素的属性信息集合和与该属性信息集合关连的意义信息;检索部根据意义集合数据求取与意义属性指定部输出的意义属性对应的意义信息,将该意义信息作为锚、根据连接数据检索关连信息,把检索的该关连信息输入到与之对应的应用程序执行部。
另外,与本发明有关的信息检索装置包括移动锚生成部、三维空间生成部和锚确定部;移动锚生成部将视点操作部的视点向量的改变信息作为锚,生成与该锚对应添加的虚拟物体的数据;三维空间生成部生成包含该虚拟物体的虚拟三维空间的三维图象;锚确定部在三维图像中指定用该虚拟物体定义的锚。
另外,与本发明有关的信息检索装置包括移动锚生成部和检索部,移动锚生成部将视点操作部的视点向量的改变信息作为锚来生成并指定;检索部根据连接数据检索与指定的锚对应的关连信息并输入到与其对应的应用程序执行部中。
另外,与本发明有关的信息检索装置包括锚识别显示部,该锚识别显示部具有在三维空间生成部中设定与视点向量对应的锚显示条件的锚显示条件设定部,在三维空间生成部中,根据锚是否适合锚显示条件来切换表示该锚的虚拟物体的显示状态。
另外,与本发明有关的信息检索装置包括光标位置改变部、移动面上光标位置确定部、光标吞食检测部、物体前光标位置确定部和锚信息设定部;光标位置改变部在锚确定部中用于指定操作指示锚的光标位置的坐标数据;移动面上光标位置确定部将坐标数据变换成设在虚拟三维空间中的光标移动面上的光标生成位置;光标吞食检测部用于检测在光标移动面上的光标生成位置位于三维图象上虚拟物体背后的光标吞食状态;物体前光标位置确定部在吞食状态中把光标生成位置从该虚拟物体向跟前位置改变;锚信息设定部根据由移动面上光标位置确定部或物体前光标位置确定部确定的光标生成位置在图像显示部上显示光标。
另外,与本发明有关的信息检索装置包括对象变换部,用于切换在三维图像上重合显示的多个上述虚拟物体中的某一个,使其可以用光标指示。
图1是根据本发明的实施方案1在虚拟空间中进行检索的信息检索装置的概略功能框图;
图2是用于说明在本发明的实施方案1中锚决定部的操作的模式图;
图3是表示在本发明的实施方案1中从锚信息设定部指定的虚拟物体中检索关连信息的操作例的模式图;
图4是表示在本发明的实施方案1中虚拟三维空间的一个例子的模式图;
图5是表示在本发明的实施方案1中信息显示图像表示的三维图像的例子的模式图;
图6是根据本发明的实施方案2在虚拟空间进行检索的信息检索装置的概略功能框图;
图7是根据本发明的实施方案3在虚拟空间进行检索的信息检索装置的概略功能框图;
图8是表示在本发明的实施方案3中从由锚信息设定部指定的虚拟物体中检索关连信息的操作例的模式图;
图9是根据本发明的实施方案4在虚拟空间进行检索的信息检索装置的概略功能框图;
图10是表示在本发明实施方案4中、三维空间生成部生成的三维图像的一个例子的模式图;
图11是表示根据本发明的实施方案5、在虚拟空间进行检索的信息检索装置的概略功能框图;
图12是表示根据本发明的实施方案6、在虚拟空间进行检索的信息检索装置的概略功能框图;
图13是表示根据本发明的实施方案7、在虚拟空间进行检索的信息检索装置的概略功能框图;
图14是表示根据本发明的实施方案8、在虚拟空间进行检索的信息检索装置的概略功能框图;
图15是先有的在虚拟空间中进行检索的信息检索装置的概略功能框图;
图16是表示用于说明先有的信息检索装置的操作的虚拟三维空间的例子和用图像生成部生成的图像的例子的模式图;
图17是说明先有的信息检索装置中的光标位置改变部和锚指定部的操作例子的模式图。
图18是表示在先有信息检索装置中从用锚信息设定部指定的虚拟物体中检索关连信息的操作例的模式图。
下面,使用附图说明本发明的实施方案。实施方案1
图1是在虚拟空间中进行检索的、本发明的实施方案1中的信息检索装置的概略功能框图。使用具有运算装置、存储装置、输入输出装置的计算机构成本装置。首先使用图1说明各功能框图。
在图1中,视点操作部60包括视点位置改变部2和视点位置设定部4。视点位置改变部2输出操作杆、槽球等指示设备中的坐标数据信号。该坐标数据信号例如是表示指示设备位移量的电信号。
视点位置设定部4将来自视点位置改变部2的坐标数据信号变换成表示在本装置上构造的虚拟三维空间中的视点位置及视线方向的信息。这里,下面将视点位置和视线方向合起来称为视点向量。
三维数据8是虚拟三维空间内的虚拟物体的ID、形状、颜色配置及光源是点光源还是平行光源的种类及其配置等的信息。三维数据8通常存储在计算机上的存储装置中,根据需要读出使用。
三维空间生成部62构造由三维数据8定义的三维空间、即从视点向量定义的视点沿视线方向看去的虚拟三维空间。此时,三维空间生成部62进行透视变换显出远近感,进行荫蔽处理表现物体的立体感。当然,也可以不用透视投影,而用平面投影表现,不用荫蔽而用接线框表示。将视点向量作为基准的虚拟三维空间的坐标系是正交坐标,通常在构成图象显示部22的显示器阴极射线管(CRT)的管面的纵向和水平方向分别设定一个轴,在纵深方向上设定剩余的一个轴,这里将其称为管面坐标系。三维空间生成部62一边将视点向量作为基准生成三维空间的图像数据,一边向其他模块供给管面坐标系中的物体配置及该物体的附属信息。通过进行透视变换和荫蔽,能够得到具有由于物体的远近而产生的表观上的大小差异以及由于光线照射形成阴影而产生立体感的三维图像。
锚确定部64是在图像显示部22显示的三维图像上显示光标、由该光标指示在该图像上显示的虚拟物体等的功能块,光标位置改变部10包括锚指定部12及锚信息设定部14。
光标位置改变部10例如是鼠标等指示设备,锚指定部12例如是鼠标按钮等。锚信息设定部14在虚拟三维空间中设定与图面平行的光标移动面,把从光标位置改变部10输入的光标的坐标数据信号变换成与光标移动面对应的二维坐标,在其位置上显示光标。另外,锚信息设定部14从三维空间生成部62得到成为锚的虚拟物体的管面坐标系的坐标。这样,如果利用光标位置改变部10使光标移动到成为锚的虚拟物体上、用锚指定部12指定该虚拟物体的话,则锚信息设定部14能够判断选择了虚拟物体。锚信息设定部14从三维空间生成部62供给的信息中取出特定选择的虚拟物体的数据、例如物体ID。
关连信息处理部66包括检索部68及应用程序执行部70。检索部68从锚信息设定部14得到物体ID,检索与锚的虚拟物体连接的关连信息。虽然应用程序执行部70在图中只示出了一个,但实际上存在多个。它们是执行提供互不相同的业务、例如所谓文字编辑处理、表计算处理、动画显示处理、声音合成处理等业务的应用程序的模块组,由处理的结果分别生成显示检索的关连信息的信息显示图像数据。
连接数据存储部74是存储定义锚和关连信息间的连接的连接数据的存储装置,例如磁盘装置等。关连信息存储部76是存储关连信息的存储装置,例如磁盘装置等。另外,上述视点位置设定部4、锚信息设定部14、三维空间生成部62、检索部68及应用程序执行部70例如具体地分别是执行规定程序的计算机内的中央处理单元(CPU)。
接着,说明本装置的操作。如果利用视点位置改变部2指定计算机的虚拟三维空间中的视点向量的话,则坐标数据信号从视点位置改变部2送到视点位置设定部4。视点位置设定部4将其变换成视点向量,在三维空间生成部62中进行设定。三维空间生成部62根据视点向量和三维数据8生成虚拟三维空间。将三维空间生成部62生成的三维图像输出到图像显示部22。另一方面,把三维空间生成部62运算所得的虚拟物体的坐标和该物体的属性供给锚信息设定部14。锚信息设定部14在图像显示部22显示光标的同时,选择成为三维图像上的锚的虚拟物体,起动关连信息处理部66中的检索处理。
图2是用于说明将锚信息设定部14作为要素包含在内的锚确定部64的操作的模式图。图2(a)是表示锚信息设定部14在虚拟三维空间中设定的光标移动平面80与视点向量的位置关系的模式图。这里,坐标系是管面坐标系,例如x轴对应于图面的垂直方向,y轴对应于水平方向,z轴对应于纵深方向。将光标移动平面80设定为平行于图面。另外,由于视线和图面正对,所以,在该坐标系中,将视点位置34作为起点的视线向量的方向与z轴平行,垂直地对着光标移动平面。
图2(b)是说明锚确定部64中的虚拟物体的指示方法的模式图。在该图中,视线向着虚拟物体84。如果在桌上前后左右地移动光标位置改变部10的鼠标的话,则在光标移动平面上显示的光标82上下左右地移动。在选择和指示虚拟物体84时,首先在图面上使光标82移动到与虚拟物体84重合的位置上。在这种情况下,由于虚拟物体84在视线方向上,所以,如图所示,可以使光标82移动到作为视点向量的延长线的连接视点34与虚拟物体84的直线与光标移动平面80的交点附近。其后,如果单击作为锚指定部12的鼠标的例如左按钮的话,则锚信息设定部14把从三维空间生成部62得到的虚拟物体84的xy坐标与光标82指定的xy坐标进行对照,判断已指定了该物体,这样来选择虚拟物体84。在此,当从光标82的位置到图面的纵深方向上存在多个虚拟物体时,选择相对光标移动平面80位于视点位置34的相反一侧的、最接近光标82即光标移动平面80的物体。
图3是表示从锚信息设定部14指定的虚拟三维空间中的虚拟物体检索关连信息的操作例子的模式图。锚信息设定部14从三维空间生成部62供给的信息中取出在图2的说明中所选择的虚拟物体84上附属的物体ID,送到关连信息处理部66。之后,在关连信息处理部66,检索部68将物体ID作为键检索连接数据存储部74,取出对应的连接数据。连接数据是物体ID和指向与之对应的关连信息文件的指针的组合。
检索部68使用从连接数据所得的指针90,检索关连信息存储部76。在关连信息存储部76存储嵌入在本装置中的各种应用程序执行部70的数据文件92~98。检索部68从关连信息存储部76取出指针90指定的数据文件。在连接数据中指定了多个指针时,从关连信息存储部76取出对应的多个数据文件。
这里,例如将与指针90对应的应用B的数据文件94作为关连信息取出。在关连信息处理部66,检索部68判别取出的关连信息是应用B的数据文件,将该数据文件94送给执行该应用B的应用程序执行部70。执行应用B的应用程序执行部70处理数据文件94,生成例如表示文本和图像信息的信息显示图像数据。该信息显示图像数据100从关连信息处理部66输出到图像显示部22。
图像显示部22在显示器上显示来自三维空间生成部62的三维图像、来自关连信息处理部66的信息显示图像和来自锚信息设定部14的光标的图像。
图4是表示虚拟三维空间的一个例子的模式图。在该例中,在相对光标移动平面80的视点位置侧与其相反一侧分别配置相同大小的物体30和物体32。坐标系是管面坐标系。
图5是在图4所示虚拟三维空间的三维图像上显示信息显示图像的例子的模式图。图5(a)所示的图面110是平行投影且无荫蔽的三维图像与信息显示图像112重合显示的图面。信息显示图像112例如表示通过用光标点一下虚拟物体的像40所检索的关连信息。图面例如在图面周围配置  具有画刷工具等工具的图标类114,在其中显示实际的信息图像116。通过操作图标类114,可以放大也可以擦除信息显示图像112。如图所示,如果以平行投影等上述条件生成三维图像的话,则能够得到立体感抑制了的平面图像。与此相反,图5(b)是表示在透视投影、有荫蔽的条件下生成的三维图像与信息显示图像重合显示的图。位于跟前的虚拟物体30的像122显示为比位于纵深的虚拟物体32的像124大。在三维空间生成部62中进行这样的处理。
本装置的检索部68检索的关连信息是由应用程序执行部70执行的应用程序的输入数据文件,检索部68基本上将其取出,送给该应用。就是说,检索部68不需要在关连信息和应用程序执行部70执行的应用程序间进行特别的界面处理。在这个意义上,对能够作为应用程序执行部70嵌入的应用程序没有限制,能够将各种信息登记在关连信息存储部76中。就是说,本装置具有三维空间操作型的良好用户界面,且容易为用户提供统一的检索业务。
另外,在本装置中,例如将用某应用程序执行部A生成的信息显示图像中的对象作为锚a、检索其他应用程序执行部B的数据文件b,进而能够在三维图像上显示该信息显示图像。为实现此,可以在连接数据存储部74中登记由表示锚a和数据文件b的指针构成的连接数据。
实施方案2
在实施方案1中,移动图面上的光标的装置例如是鼠标,改变视点向量的装置例如是操作杆那样地使用了不同的装置。在下述实施方案2中,使具有三维空间操作型的用户界面的信息检索装置的操作更简便。图6是在虚拟空间进行检索的本发明的实施方案2的信息检索装置的概略功能框图。在本实施方案中,在与上述实施方案具有相同或相当的功能的主要构成部分上添加了相同的符号,省略其说明。使用图6说明本装置的功能结构。
设定改变部130通过在桌上的移动操作、根据移动的方向和移动量输出坐标数据。设定功能部132是兼有实施方案1的视点位置的改变部2、光标位置改变部10及锚指定部12的功能的、向计算机输入的输入装置,例如是鼠标等。设定功能部132是包含视点位置设定部134和锚信息设定部136的计算机上的组件,锚信息设定部134具有实施方案1的视点位置设定部4的功能,锚信息设定部136具有同一实施方案1的锚信息设定部14的功能。功能确定部138包括功能改变部140和功能切换部142。功能改变部例如是键盘、鼠标按钮和图面上的图标等,是向计算机指示输入的装置。功能切换部142是计算机上的组件,用于切换使用设定功能部132包含的上述二个视点位置设定部134、锚信息设定部136的某一个功能。
接着,对操作进行说明。作为功能改变部140例如使用键盘时,通过按压例如配置在键盘上的不同键来指定设定功能部132的功能的切换。另外,也可以是通过一边单击例如鼠标的左右按钮一边选择图面上的图标和菜单来指定设定功能部132的功能切换那样的结构。
接着,功能切换部142接收功能改变部140输出的切换信号,执行设定功能部132的功能切换。该切换操作例如操作设定功能部132中的程序上的开关,通过把来自设定改变部130的数据切换输入到视点位置设定部134和锚信息设定部136的某一方来进行。这里,作为设定改变部130使用的鼠标通过桌上移动操作,根据其移动方向和移动量输出坐标数据。将该坐标数据输入到设定功能部132,在视点位置设定部134和锚信息设定部136中,利用上述切换操作所指定的组件。如果坐标数据输入到视点位置设定部134的话,则作为指定视点向量的数据使用;另一方面,如果输入到锚信息设定部136的话,则作为指定图面上的光标位置的数据使用。另外,例如在功能选择了锚信息设定部136时,鼠标的按钮单击信号作为选择进行检索的锚的虚拟物体的信号使用。接收到来自设定改变部130的输入后的视点位置设定部134及锚信息设定部136的操作分别与实施方案1的视点位置设定部4及锚信息设定部14相同,故省略其说明。
作为利用功能确定部138切换设定功能部132的功能的方法,例如有功能改变部140通过使键盘上不同的键分别与两个功能中的一个相对应并按压该键来选择功能的方法和通过按压规定的公共键交替切换功能的方法。另外,功能改变部140也可以是上述鼠标的按钮,图面上的图标和菜单。例如,在功能改变部140是鼠标的按钮时,可以是通过左按钮单击和右按钮单击来将功能分开,也可以是若为右按钮则在单击右按钮时交互地切换功能。在功能改变部140例如是图面上的图标或菜单时,例如通过用鼠标移动光标选择图标或菜单来实现功能切换。
实施方案3
实施方案1是作为关连信息的锚能在虚拟三维空间中指定存在物体的方案。在下面说明的实施方案3中,和作为锚的实施方案1相同,不仅能够指定物体,而且,如图7所示,还具有能够参照意义集合数据、将意义信息作为锚检索关连信息的结构。下面,对实施方案3的信息检索装置进行说明。
图7是在虚拟空间进行检索的、本发明的实施方案3的信息检索装置的概略框图。在本实施方案中,在具有与上述实施方案相同或相当的功能的主要构成部分上添加相同的符号,省略其说明。首先,使用图7说明本装置的功能结构。
与实施方案1相同,三维数据150是虚拟物体的形状等数据、物体ID等信息。属性数据152是在由三维数据150定义的虚拟物体上添加的意义属性数据,和三维数据150一起预先存储在例如磁盘装置等存储装置中。意义属性指定部154包括锚位置改变部10、锚指定部12及锚信息设定部156。锚信息设定部156和实施方案1的锚信息设定部14具有类似的功能,但本质的不同在于,如果指定了虚拟物体的话,实施方案1的锚信息设定部14只输出与虚拟物体对应的物体ID,与此相反,本实施方案的锚信息设定部156输出从三维空间生成部62送来的信息中与该虚拟物体对应添加的意义属性的数据。
关连信息处理部158包括检索部160和应用程序执行部70。检索部160根据来自锚信息设定部156的信息检索关连信息,将其输出到应用程序执行部70,这点和实施方案1的检索部68类似,但在作为锚检索意义信息这一点上却大相径庭。在下述的操作部分中对该不同点详细叙述。意义集合数据存储部162是预先存储锚信息设定部156输出的、定义意义属性与意义信息的关系的意义集合数据的存储装置,例如磁盘装置等。连接数据存部164是预先存储表示意义信息与指向关连信息的指针的关系的连接数据的存储装置,例如磁盘装置等。
接着,对操作进行说明。用视点操作部60设定视点位置的操作与实施方案1相同。另外,在意义属性指定部154中,使用光标位置改变部10及锚指定部12指定虚拟物体的操作同样与实施方案1相同。本实施方案的特征在于以后的操作。使用图8说明以后的操作。
图8是表示从锚信息设定部156指定的虚拟三维空间的虚拟物体中检索关连信息的操作例的模式图。三维图像170表示三维空间生成部62根据三维数据150生成的人脸的计算机图形。在该图像上,使用光标位置改变部10、例如鼠标把光标172移动到“眼”,这里,如果单击了锚指定部12、例如鼠标铵钮的话,则锚信息指定部156选择表示“眼”的虚拟物体。锚信息设定部156检查从三维空间生成部62送来的信息中的该虚拟物体的信息,在该虚拟物体中定义了表示意义的意义属性数据174时,将其取出并输出。在该例中,意义属性数据表示“眼”的意义。意义属性数据174送到关连信息处理部158。
之后,在关连信息处理部158,检索部160将定义属性作为键、检索意义集合数据存储部162,如果对应的意义集合数据存在,则作为锚采用在其中定义的意义。意义集合数据是例如某“意义”和与其关连的意义属性的集合的属性信息集合以及与“意义”是一一对应的意义ID的组合。若结合这里的例子进行说明,则“眼”“鼻”“口”“耳”都是脸的一部分,这一点是相同的。因而,可以确定把意义属性“眼”“鼻”“口”“耳”作为要素包含的属性信息集合,对该属性信息集合定义意义集合数据,该意义集合数据附加了作为意义信息的集合了这些要素的“脸”的概念。检索部160检索意义集合数据存储部162的结果,将意义信息“脸”作为锚采用。
具体地说,检索部160从意义集合数据存储部162取出与意义信息对应的意义ID,接着,将该意义ID作为键、检索连接数据存储部164,取出连接数据。连接数据是意义ID及指向与之对应的关连信息的文件的指针的组合。检索部160使用从连接数据得到的指针检索关连信息存储部76。之后的操作与实施方案1所述相同,故省略其说明,但信息显示图像数据176是从关连信息处理部158向图像显示部22输出的。
根据本装置,在能够将在与实施方案1的装置相同的三维空间存在的单个三维物体作为锚设定的功能之外,还具有用某意义集合将三维物体分组、能够将该意义集合作为锚来设定的功能。这样,对意义集合能够粘贴关连信息的连接,这样,即使对不同的物体,如果是属于同一意义集合的物体,则也能够检索同一关连信息。在上例中,即使在三维图像170上选择了“鼻”和“口”,与用三维图像170选择检索“眼”并在图像显示部22显示的眼有关的信息也可以在图像显示部22上显示。
当然,在实施方案1的装置中,如果在将“眼”等各个部分作为虚拟物体登记之外,还将“脸”整体作为虚拟物体在三维数据150中登记,也能够进行类似的检索。然而,在本装置中,由于将“脸”的整体作为意义集合数据来定义,所以,日后能够容易地进行各虚拟物体的整体关系的结构的改变与添加。
实施方案4
实施方案1是能指定在虚拟三维空间中存在的物体作为关连信息的锚的方案。在下面说明的实施方案4中,作为锚,和实施方案1相同,不仅能够指定物体,而且,如图9所示,还具有备有移动锚生成部180、能够作为锚设定视点向量改变的结构。下面,对实施方案4的信息检索装置进行说明。
图9是在虚拟空间进行检索的、本发明实施方案4的信息检索装置的概略功能框图。在本实施方案中,在具有与上述实施方案相同或相当的功能的主要构成部分上添加相同的符号,省略其说明。首先,使用图9说明本装置的功能结构。
移动锚生成部180包括移动锚部182和锚条件183。移动锚部182在具有接收来自视点操作部60的视点向量数据、在三维空间生成部184中进行设定的功能的同时,还具有当视点向量及其变化满足规定的条件时、将该事件作为锚设定、定义表现该锚的虚拟物体的数据并将其输出到三维空间生成部184的功能。移动锚部182例如具体地是执行规定程序的计算机内的中央处理单元(CPU)。
这里,为便于说明,将移动锚生成部180设定的锚称为移动锚以便与上述实施方案对普通虚拟物体定义的锚相区别。锚条件183是预先定义了的移动锚部182生成移动锚的条件的数据,例如将视点向量或者朝着特定的方向或者朝向特定的物体、视点位置向着特定的方向或特定的物体移动时应设定移动锚的条件及与此时的移动锚对应的虚拟物体的数据登记下来。该锚条件183例如存储在磁盘装置等存储装置中。
三维空间生成部184除了处理三维数据8所得的虚拟物体的数据和从移动锚部182所得的虚拟物体的数据外,还进行和实施方案1的三维空间生成部62相同的处理。锚确定部186包括锚信息设定部188、光标位置改变部10和锚指定部12。锚信息设定部188除了也使表示移动锚的虚拟物体的信息输入到三维空间生成部184这一点之外,基本上和实施方案1的锚信息设定部14具有相同的功能。关连信息处理部190包括检索部192和应用程序执行部70。检索部192除了输入表示移动锚的虚拟物体的ID这一点之外,具有和实施方案1的检索部68相同的功能。
接着,对操作进行说明。如果视点位置改变部2操作视点向量的话,视点位置设定部4就把该视点向量的信息送到移动锚部182。移动锚部182判断视点向量及其变化是否适合锚条件183定义的条件,适合时,把表示锚条件183的移动锚的虚拟物体的数据输出到三维空间生成部184。例如,在锚条件183中、设定大意为当在该虚拟三维空间定义的路径分支点上有视点位置且视线向东时应生成移动锚的条件和记有与该移动锚对应的虚拟物体的文字“东”的图标数据。如果移动锚部182在来自视点位置设定部4的视点向量信息中检测到视点位置移动到该分支点、最初向北的视线方线改变为东那样的改变事件时,就用该事件检索锚条件183,将上述图标的数据输出到三维空间生成部184。
图10是表示在该例中三维空间生成部184生成的三维图像的模式图。三维空间生成部184在三维图像200上显示上述图标202作为表示上述移动锚的虚拟物体。三维空间生成部184随着该三维图像的生成,和其他虚拟物体一样,将该图标的坐标和属性数据输出到锚信息设定部188。
锚信息设定部188用于选择以和选择在虚拟三维空间存在的物体时相同的操作显示移动锚而生成的物体,例如上述图标202。而且,向检索部192输出虚拟物体附带的物体ID。检索部192根据物体ID,从连接数据存储部74检索连接数据,根据这样得到的指针检索关连信息存储部76,取出关连信息,将其送到应用程序执行部70。
如上所述,在移动锚向特定的三维物体和朝着特定的方向移动时,用移动锚部182生成移动锚。在此,如果列举其他例子的话,例如在虚拟三维空间中假定宇宙为虚拟物体配置月亮、太阳等天体时,如果宇宙飞船朝着相当于月亮的物体移动的话,就生成与“月亮”有关的移动锚。实施方案5
在上述实施方案中,使用者通过选择虚拟物体,需要起动关连信息的检索。在下面说明的实施方案5中,具有使用者不起动逐个检索的执行而是进行自动检索、移动锚生成部如图11所示根据视点向量的改变直接起动检索部的结构。下面,对实施方案5的信息检索装置进行说明。
图11是在虚拟空间中进行检索的、本发明实施方案5的信息检索装置的概略功能框图。在本实施方案中,和上述实施方案相同或相当的部分添加相同的符号,省略其说明。首先,使用图11说明本装置的功能结构。
移动锚生成部210包括移动锚部212和锚条件183。移动锚部212具有生成移动锚的功能,但由于该功能与上述实施方案4的移动锚部182相同,所以省略其说明。移动锚部212与实施方案4的移动锚部182的不同之处在于生成移动锚并将检索的起动信号送给检索部192这一点。在本装置中,由于移动锚部212生成起动信号,所以,使用者不需要选择锚。因此,在实施方案4中存在的锚确定部186在本实施方案中不再需要。三维空间生成部214从移动锚部212设定视点向量,根据三维数据8的虚拟物体的数据生成三维图像。
接着,对操作进行说明,如果视点位置改变部2操作视点向量的话,则视点位置设定部4将该视点向量的信息送到移动锚部212。移动锚部122根据视点向量及其变化是否适合锚条件183定义的条件的判断结果,把表示该移动锚的虚拟物体的数据输出到三维空间生成部214,另一方面,将物体ID输出到检索部192。如果检索部192接收到该物体ID的话,就自动开始关连信息的检索。由于该检索方法与实施方案4相同,所以,省略其说明。将检索的关连信息输出到与其对应的应用程序执行部70。应用程序执行部70处理关联信息,生成信息显示图像数据,由图像显示部进行显示。
另外,在上述说明中,移动锚部212把表示移动锚的虚拟物体的数据输出到三维空间生成部214,在三维图像上进行显示,然而,在本装置中,与实施方案4不同,表示三维图像上的移动锚的虚拟物体的图像不是用于起动指定并检索该虚拟物体的。在本装置,上述那样的检索是利用根据视点向量操作生成移动锚来自动开始的,虚拟物体的图像基本上只要有表示检索什么的功能就足够了,也可以构成为根据需要不显示与移动锚对应的虚拟物体。
也可以在本装置中附设上述实施方案那样的锚确定部,使用该锚确定部提供使用者能够随意检索所需信息的环境和不通过锚确定部、在规定的情况下自动检索信息的环境。后者的自动检索对于想要将像强制地通知给使用者那样的信息的提示特别方便。实施方案6
在上述实施方案中,能够是使用者用程序中的开关等操作切换是否可识别地显示在三维图像上显示的物体是否为锚的结构,但不能在任意条件和状态下自动切换。
在该实施方案6中,如图12所示,为了可以使是否可识别锚的显示状态的通/断与视点向量连动,导入了将移动锚作为上述显示状态切换的开关的锚显示条件设定部220。
图12是在虚拟空间中进行检索的、本发明的实施方案6的信息检索装置的概略功能框图。在本实施方案中,在具有与上述实施方案相同或相当的功能的主要构成部分上添加了相同的符号,省略其说明。首先,使用图12说明本装置的功能结构。
锚显示条件设定部220包括移动锚部222和锚条件224。移动锚部222接收来自视点操作部60的视点向量数据,在三维空间生成部226进行设定,同时,在视点向量及其变化满足规定的条件时,生成识别显示指示,在三维图像中可识别地显示与该事件对应的虚拟物体。该移动锚部222能够以上述实施方案4、5中的移动锚部作为基础构成,这里,标以相同的名称。锚条件224是预先定义移动锚部222生成识别显示指示的条件的数据,例如登记有用于指定在视点向量向着特定的方向和特定的物体、视点位置向着特定的方向和特定的物体移动时应生成该信号的条件和在这种情况下识别显示被打开的虚拟物体的信息。该锚条件224例如存储在磁盘装置条件储装置中。另外,由于该锚条件224和上述实施方案4、5中的锚条件183相似,所以添加相同的名称。锚条件224可以是和锚条件183合并的结构。三维空间生成部226除提供上述实施方案的功能的结构外,还具有锚识别显示部228。锚识别显示部228接收上述识别显示指示,可识别地显示指定的虚拟物体。
接着,对操作进行说明。如果视点位置改变部2操作视点向量的话,则视点位置设定部4将该视点向量信息送到移动锚部222。移动锚部212根据视点向量及其变化是否适合锚条件224定义的条件的判断结果,把识别显示指示输出到三维空间生成部226。识别显示指示例如是存储了视点向量信息、指示方式、对象范围等信息的信号。指示方式例如指定用于改变显示状态的条件和显示状态的种类,显示状态的改变是改变视点位置变化方向的虚拟物体的显示状态或是改变视线方向的虚拟物体的显示状态,显示状态的种类包括亮度周期性变化的显示状态即所谓闪烁状态、颜色改变了的状态和虚拟物体的外框加框显示的显示状态。作为对象范围,例如指定切换在以移动方向或视线方向为中心多大角度范围内的虚拟物体的显示状态。
三维空间生成部226的锚识别显示部228输入识别显示指示,按照该指示改变图像生成参数以便在处于对象范围中的虚拟物体中只改变作为锚设定的虚拟物体的显示状态。三维空间生成部226根据三维数据8、视点向量及锚识别显示部228改变的信息生成图像,输出到图像显示部22。在三维图像上指定锚、进行检索并显示的处理和实施方案1及实施方案4相同,故省略其说明。
在本装置中,不是可以从空间等识别非锚的虚拟物体、将作为三维图像中的锚指定的全部虚拟物体一并进行显示,而是使用者通过在虚拟三维空间中向着关心的某方向移动视线、只可识别地显示在该方面作为锚指定的虚拟物体。实施方案7
在实施方案1中,在三维图像中显示光标使其在光标移动平面移动。因此,如上所述,存在着光标被位于光标移动平面前的虚拟物体隐蔽的问题。另外,存在着在虚拟三维空间的最前面覆盖光标移动平面的方法会破坏立体感的问题。在本实施方案7中,表现成光标恰如在虚拟三维空间中移动那样,而且使用者便于操作,为改善用户界面,导入了图13所示结构的锚确定部230。
图13是在虚拟空间中进行检索的本发明的实施方案7的信息检索装置的概略功能框图。在本实施方案中,在具有与上述实施方案相同或相当的功能的结构部分上添加相同的符号,省略其说明。首先,说明本装置的功能结构。
锚确定部230包括光标位置改变部10、锚指定部12、锚信息设定部14、移动面上光标位置确定部232、物体前光标位置确定部234及光标吞食检测部236。移动面上光标位置确定部232把操作从光标位置改变部10所得的光标位置的坐标数据在设在虚拟三维空间中的光标移动平面上  变换成光标应处的光标生成位置。光标吞食检测部236检测光标移动平面上的光标生成位置隐藏在三维图像上虚拟物体后的事件(下面称作光标吞食)。物体前光标位置确定部234在光标吞食状态中,不是在光标移动平面上改变光标生成装置,而是将光标改变到比隐藏光标的虚拟物体更接近自己的一侧,例如改变到该虚拟物体的视点侧表面上。这些移动面上光标位置确定部232、物体前光标位置确定部234及光标吞食检测部236例如具体地分别是执行规定程序的计算机中的中央处理单元(CPU)。
接着,对操作进行说明。三维空间生成部62根据从视点位置设定部4所得的视点向量与三维数据8生成虚拟三维空间。将变换成该管面坐标系的虚拟三维空间的数据供给锚确定部230。在锚确定部230中的锚的指定功能与实施方案1相同。锚确定部230的移动面上光标位置确定部232从操作光标位置改变部10所得的光标位置的坐标数据和在虚拟三维空间设定的光标移动平面中变换出光标生成位置,输出到光标吞食检测部236。光标吞食检测部236判断该光标生成位置和来自三维空间生成部62的虚拟三维空间中的虚拟物体的坐标数据在管坐标系中的前后关系,在光标生成位置没有隐藏在虚拟物体中时,把光标生成位置输出到锚信息设定部14。另一方面,在光标生成位置隐藏在虚拟物体背后时,光标吞食检测部236通知物体前光标位置确定部234。如果物体前光标位置确定部234接受该通知的话,例如将移动面上光标位置确定部232生成的光标生成位置改变到管面坐标系的纵深方向(z轴)自己跟前这一侧,确定在该虚拟物体前面的新的光标生成位置,将其输出到锚信息设定部14。锚信息设定部14根据移动面上光标位置确定部232或物体前光标位置确定部234所得的光标生成位置,在图像显示部22上显示光标。实施方案8
在实施方案1中,在三维图像上光标显示成光标在移动平面上移动,利用该光标指定位于视点位置和光标连线的光标一侧的延长线上的虚拟物体。该直线成为在进行了透视投影等坐标变换的管面坐标系中与图面垂直的直线,因此,在该直线上存在多个虚拟物体时,这些虚拟物体在图像上重合。因此,在实施方案1的装置中,虽然能够指定这些虚拟物体中最前面的虚拟物体,但具有不能指定背后虚拟物体的缺点。在本实施方案8中,为实现在虚拟三维空间中便于使用光标的用户界面,如图14所示,导入在三维空间显示光标、能够依次选择重合的虚拟物体的对象改变部。
图14是在虚拟空间中进行检索的、本发明的实施方案8的信息检索装置的概略功能框图。在本实施方案中,在具有与上述实施方案相同或相当的功能的主要构成部分上,添加了相同的符号,省略其说明。首先,使用图14说明本装置的功能结构。
锚信息确定部250包括光标位置改变部10、锚指定部12、锚信息设定部252及对象改变部254。对象改变部254是在光标的图像上的位置处有多个虚拟物体时、光标指定这些多个虚拟物体中某一个的切换装置,例如键盘、鼠标按钮、图面上的图标等。锚信息设定部252输出由光标位置改变部10、锚指定部12及对象改变部254确定的锚的虚拟物体的物体ID。
接着,对确定在三维图像上处于重合状态的虚拟物体的本装置的操作进行说明。三维空间生成部62利用视点操作部60设定视点向量,生成由三维数据8定义的虚拟三维空间的三维图像。这里,根据需要切换三维空间生成部62的模式,进行接线框显示,以便使用者能够识别虚拟物体处于重合状态。使用者操作光标位置改变部10,使光标移动到重合显示的虚拟物体上。如果在该状态下利用使用者的操作从对象改变部254输出对象改变信号的话,锚信息设定部252例如把光标处的锚改变为当前指定的虚拟物体之后的虚拟物体。即,在操作对象改变部254例如单击鼠标的右按钮时,将光标处的锚依次切换到之后的虚拟物体上。如果在最后的虚拟物体上操作对象改变部254的话,光标就返回到最前面的虚拟物体。该循环也可以反向进行。这样,操作对象改变部254、把光标位置切换到重合显示的虚拟物体中的希望的虚拟物体处之后,如果操作锚指定部12、例如用鼠标的左按钮单击的话,锚信息设定部252将光标处的虚拟物体作为锚指定。
另外,虽然在上述实施方案1至8中示出了作为光标位置改变部10专门利用鼠标的例子,但也可以是操作杆等能够改变两个坐标的装置,能够实现具有和上述实施方案相同效果的装置。
另外,虽然作为锚指定部12示出了利用鼠标数据的左按钮单击的例子,但也可以是键盘上的特定键等,这样也能够得到具有和上述实施方案相同的效果的装置。
由于本发明由以上说明那样地构成,所以得到下述效果。
设有多种应用程序执行部,在关连信息存储部中登记成为这些应用程序执行部的输入信息的关连信息。如果利用锚确定部在三维图像上指定锚的话,则检索部根据在连接数据存储部登记的连接数据检索关连信息存储部,把取出的关连信息送到对应的应用程序执行部。通过这样来构成,应用程序执行部不受检索部界面的制约,因而容易在装置中统一各种应用程序执行部,能够扩大检索的关连信息的种类,同时,容易通过三维操作型的用户界面扩大检索范围,能够为用户提供统一的检索业务。
另外,通过利用功能确定部将输入装置的设定改变部的操作对象功能切换成设定功能部所含的视点位置设定和锚信息设定中的某一方,能够用单一的输入装置进行虚拟三维空间内视点及视线方向的操作及图面上检索数据节点的锚的指定。因此,能够实现简单的用户界面,能够提高信息检索装置的操作性。
另外,由于具备意义集合数据存储部,在虚拟物体上附属具有意义的意义属性,意义集合数据存储部登记该意义属性的集合和与该集合有关的意义信息的关连,因此,在指定了属于同一意义属性的虚拟物体中的任一物体时,能够将该意义信息作为锚来设定。就是说,能够将除了虚拟三维空间中的物体之外的信息作为锚来设定,所以,能够增强信息检索方法的多样性,改善用户界面。
另外,生成移动锚的移动锚生成部本身通过指示在检索部检索,能够利用移动锚自动执行连接检索,因此,能够提供在增强信息检索方法的多样性的同时还容易操作的用户界面。
另外,通过设有锚显示条件设定部和锚识别显示部,锚显示条件设定部根据视点向量的改变等操作设定锚的虚拟物体的显示条件,锚识别显示部根据设定的显示条件在三维图像上显示锚的虚拟物体,能够可识别地只显示由锚显示条件设定部指定的、必要的最小限度的锚,因此,例如与要么可识别地一并显示全部锚要么不能识别的先有显示方法相比,能够提供使三维图像变得容易观看、同时能够极快地发现所关心的锚、容易使用的用户界面。
另外,判断虚拟物体是否遮住了光标移动面上的光标,在遮住时,通过将光标的生成位置改变到比该虚拟物体更靠近自己一侧并显示,能够提供光标不被虚拟物体遮住、容易使用的用户界面。
另外,由于具备对象改变部,在重合显示三维图像上的锚的虚拟物体时,改变光标指示的图面纵深方向的位置,切换光标的指示对象中的虚拟物体,因此,不改变视点向量来消除虚拟物体的重合就能够选择重合地存在于后面的虚拟物体,因而,能够提供容易观看、容易使用的用户界面。

Claims (8)

1.一种信息检索装置,该装置指定了锚、检索与该锚对应的关连信息,其特征在于,包括:
多种应用程序执行部,用于根据各输入信息生成信息显示图像;
关连信息存储部,用于存储成为所述任一应用程序执行部的输入信息的关连信息;
连接数据存储部,用于存储与所述锚和所述关连信息对应添加的连接数据;
视点操作部,用于操作在该装置上构造的虚拟三维空间中的视点向量;
三维空间生成部,用于作为基于所述视点向量的所述虚拟三维空间中的图象生成有立体感的三维图像;
锚确定部,用于在所述三维图像上指定由虚拟三维空间中的虚拟物体定义的所述锚;
检索部,根据所述连接数据检索与指定的所述锚对应的所述关连信息并输入到对应该关连信息的应用程序执行部;
图像显示部,在所述三维图像上显示由所述应用程序执行部生成的所述信息显示图像。
2.一种信息检索装置,该装置指定了锚、检索与该锚对应的关连信息,其特征在于,包括:
多种应用程序执行部,用于根据各输入信息生成信息显示图像;
关连信息存储部,用于存储成为所述任一应用程序执行部的输入信息的所述关连信息;
连接数据存储部,用于存储与所述锚和所述关连信息对应添加的连接数据;
三维空间生成部,根据在该装置上构成的虚拟三维空间中设定的视点向量,生成所述虚拟三维空间的图象即有立体感的三维图像;
设定功能部,进行在所述三维空间生成部设定所述视点向量的视点位置设定功能和锚信息设定功能,锚信息设定功能指定与所述虚拟三维空间中的物体即所述锚对应添加的虚拟物体,从该虚拟物体取出该锚的信息;
设定改变部,向所述设定功能部输入坐标数据,该坐标数据由所述视点向量的改变数据或所述锚的位置数据构成;
功能确定部,通过切换所述坐标数据作为所述视点位置设定功能和所述锚信息设定功能中的某一功能的输入使用,确定所述设定功能部的功能;
检索部,根据所述连接数据检索与所述设定功能部指定的所述锚对应的所述关连信息并输入到对应该关连信息的所述应用程序执行部;
图像显示部,在所述三维图像上显示由所述应用程序执行部生成的所述信息显示图像。
3.一种信息检索装置,该装置指定了锚、检索与该锚对应的关连信息,其特征在于,包括:
多种应用程序执行部,用于根据各输入信息生成信息显示图像;
关连信息存储部,用于存储成为所述任一应用程序执行部的输入信息的所述关连信息;
连接数据存储部,用于存储与所述锚和所述关连信息对应添加的连接数据;
视点操作部,用于操作在该装置上构成的虚拟三维空间中的视点向量;
三维空间生成部,用于根据所述视点向量,生成所述虚拟三维空间的图象即有立体感的三维图像;
意义属性指定部,在所述三维图像中指定所述虚拟三维空间中的虚拟物体,输出与该虚拟物体对应添加的意义属性;
意义集合数据存储部,用于存储意义集合数据,该意义集合数据定义作为该意义属性的要素的属性信息集合和与该属性信息集合关连的意义信息;
检索部,根据所述意义集合数据求取与所述意义属性指定部输出的所述意义属性对应的所述意义信息,将该意义信息作为所述锚、根据所述连接数据检索所述关连信息,把检索的该关连信息输入到与之对应的所述应用程序执行部;
图像显示部,在所述三维图像上显示由所述应用程序执行部生成的所述信息显示图像。
4.一种信息检索装置,该装置指定了锚、检索与该锚对应的关连信息,其特征在于,包括:
多种应用程序执行部,用于根据各输入信息生成信息显示图像;
关连信息存储部,用于存储成为所述任一应用程序执行部的所述输入信息的所述关连信息;
连接数据存储部,用于存储与所述锚和所述关连信息对应添加的连接数据;
视点操作部,用于操作在该装置上构成的虚拟三维空间中的视点向量;
移动锚生成部,将所述视点操作部的所述视点向量的改变信息作为所述锚,生成与所述虚拟三维空间中的物体即该锚对应添加的虚拟物体的数据;
三维空间生成部,根据所述视点向量,生成所述虚拟三维空间的图象即有立体感的三维图像;
锚确定部,在所述三维图像上指定用所述虚拟物体定义的所述锚;
检索部,根据所述连接数据检索与指定的所述锚对应的所述关连信息,输入到与之对应的所述应用程序执行部;
图像显示部,在所述三维图像上显示由所述应用程序执行部生成的所述信息显示图像。
5.一种信息检索装置,该装置指定了锚、检索与该锚对应的关连信息,其特征在于,包括:
多种应用程序执行部,用于根据各输入信息生成信息显示图像;
关连信息存储部,用于存储成为所述任一应用程序执行部的所述输入信息的所述关连信息;
连接数据存储部,用于存储与所述锚和所述关连信息对应添加的连接数据;
视点操作部,用于操作在该装置上构成的虚拟三维空间中的视点向量;
三维空间生成部,根据所述视点向量,生成所述虚拟三维空间的图象即有立体感的三维图像;
移动锚生成部,将所述视点操作部的所述视点向量的改变信息作为锚来生成并指定;
检索部,根据所述连接数据检索与指定的所述锚对应的所述关连信息,输入到与之对应的所述应用程序执行部;
图像显示部,在所述三维图像上显示由所述应用程序执行部生成的所述信息显示图像。
6.权利要求1记载的信息检索装置,其特征在于:
具有锚显示条件设定部,在所述三维空间生成部设定与所述视点向量对应的锚显示条件;
所述三维空间生成部包括锚识别显示部,根据所述锚是否适合所述锚显示条件,切换表示该锚的所述虚拟物体的显示状态。
7.权利要求1记载的信息检索装置,其特征在于,所述锚确定部包括:
光标位置改变部,用于指定操作指示所述锚的光标位置的坐标数据;
移动面上光标位置确定部,将所述坐标数据变换成设在所述虚拟三维空间中的光标移动面上的光标生成位置;
光标吞食检测部,用于检测所述光标移动面上的所述光标生成位置位于所述三维图象中所述虚拟物体的背后的光标吞食状态;
物体前锚位置确定部,在所述吞食状态中,将所述光标生成位置改变到该虚拟物体跟前的位置上;
锚信息设定部,根据所述光标生成位置,在所述图像显示部上显示所述光标。
8.权利要求1记载的信息检索装置,其特征在于:所述锚确定部包括锚位置改变部和对象变换部,锚位置改变部用于操作指示所述锚的光标在所述三维图象上的位置,对象变换部用于用所述光标切换指示在所述三维图像上重合显示的多个所述虚拟物体中的某一个。
CN97111481A 1996-10-30 1997-05-21 信息检索装置 Expired - Fee Related CN1093956C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP28798096A JP3148133B2 (ja) 1996-10-30 1996-10-30 情報検索装置
JP287980/96 1996-10-30

Publications (2)

Publication Number Publication Date
CN1181557A true CN1181557A (zh) 1998-05-13
CN1093956C CN1093956C (zh) 2002-11-06

Family

ID=17724249

Family Applications (1)

Application Number Title Priority Date Filing Date
CN97111481A Expired - Fee Related CN1093956C (zh) 1996-10-30 1997-05-21 信息检索装置

Country Status (3)

Country Link
US (1) US6084589A (zh)
JP (1) JP3148133B2 (zh)
CN (1) CN1093956C (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102024036A (zh) * 2010-11-29 2011-04-20 清华大学 基于超图的三维对象检索方法和装置
CN102402281A (zh) * 2010-09-07 2012-04-04 索尼公司 信息处理装置、程序及信息处理方法
CN102016910B (zh) * 2008-04-30 2012-11-28 公立大学法人大阪府立大学 三维物体识别用图像数据库的制作方法、处理装置以及处理方法
CN102915220A (zh) * 2011-08-04 2013-02-06 英华达(上海)科技有限公司 一种手持式投影装置及其投影方法
CN103562957A (zh) * 2011-05-31 2014-02-05 乐天株式会社 信息提供装置、信息提供方法、信息提供处理程序、记录了信息提供处理程序的记录介质以及信息提供系统

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3664336B2 (ja) * 1996-06-25 2005-06-22 株式会社日立メディコ 三次元画像構成法における視点位置及び視線方向の設定方法及び装置
GB9723654D0 (en) * 1997-11-10 1998-01-07 Philips Electronics Nv Distributed database access via virtual environment browser
US6462754B1 (en) * 1999-02-22 2002-10-08 Siemens Corporate Research, Inc. Method and apparatus for authoring and linking video documents
US6804683B1 (en) * 1999-11-25 2004-10-12 Olympus Corporation Similar image retrieving apparatus, three-dimensional image database apparatus and method for constructing three-dimensional image database
US6574696B1 (en) * 2000-03-07 2003-06-03 Hewlett-Packard Development Company, L.P. Methods and arrangements for providing bi-directional control between data storage drives and automation controllers
JP4701479B2 (ja) * 2000-07-05 2011-06-15 ソニー株式会社 リンク情報表示装置及びその表示方法
JP2002140369A (ja) * 2000-10-30 2002-05-17 Mitsubishi Electric Corp 情報検索装置、情報検索方法およびその方法をコンピュータに実行させるプログラムを記録したコンピュータ読み取り可能な記録媒体
JP4216460B2 (ja) * 2000-12-26 2009-01-28 パイオニア株式会社 情報処理システム、端末装置及び情報処理方法
US20020158846A1 (en) * 2001-04-30 2002-10-31 Clapper Edward O. Controlling cursor of a pointing device
US20020180811A1 (en) * 2001-05-31 2002-12-05 Chu Sing Yun Systems, methods, and articles of manufacture for providing a user interface with selection and scrolling
US7190378B2 (en) * 2001-08-16 2007-03-13 Siemens Corporate Research, Inc. User interface for augmented and virtual reality systems
US20060248463A1 (en) * 2005-04-28 2006-11-02 Damien Forkner Persistant positioning
JP3961545B2 (ja) * 2005-11-29 2007-08-22 株式会社コナミデジタルエンタテインメント オブジェクト選択装置、オブジェクト選択方法、ならびに、プログラム
JP5300206B2 (ja) * 2007-04-02 2013-09-25 キヤノン株式会社 情報処理装置、機能制限方法、記憶媒体及びプログラム
US20100162151A1 (en) * 2008-12-19 2010-06-24 Microsoft Corporation Techniques for organizing information on a computing device using movable objects
TWI400467B (zh) * 2009-05-11 2013-07-01 Acer Inc Electronic device with object guidance function and its object guidance method
US8854357B2 (en) * 2011-01-27 2014-10-07 Microsoft Corporation Presenting selectors within three-dimensional graphical environments
JP5127959B2 (ja) 2011-06-17 2013-01-23 株式会社東芝 表示制御装置、表示制御方法、及びプログラム
US8732620B2 (en) 2012-05-23 2014-05-20 Cyberlink Corp. Method and system for a more realistic interaction experience using a stereoscopic cursor
US8957855B2 (en) 2012-06-25 2015-02-17 Cyberlink Corp. Method for displaying a stereoscopic cursor among stereoscopic objects
US11567627B2 (en) * 2018-01-30 2023-01-31 Magic Leap, Inc. Eclipse cursor for virtual content in mixed reality displays
US10540941B2 (en) 2018-01-30 2020-01-21 Magic Leap, Inc. Eclipse cursor for mixed reality displays
US11157159B2 (en) 2018-06-07 2021-10-26 Magic Leap, Inc. Augmented reality scrollbar

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0414415B1 (en) * 1989-08-25 1998-11-18 Hitachi, Ltd. Method and apparatus for generating an image
US5490239A (en) * 1992-10-01 1996-02-06 University Corporation For Atmospheric Research Virtual reality imaging system
US5751289A (en) * 1992-10-01 1998-05-12 University Corporation For Atmospheric Research Virtual reality imaging system with image replay
JP3523338B2 (ja) * 1994-09-14 2004-04-26 富士通株式会社 立体モデル作成方法および装置
US5751931A (en) * 1995-04-18 1998-05-12 Lucent Technologies Inc. Three dimensional graphical display of information
US5751612A (en) * 1995-08-24 1998-05-12 Lockheed Martin Corporation System and method for accurate and efficient geodetic database retrieval

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102016910B (zh) * 2008-04-30 2012-11-28 公立大学法人大阪府立大学 三维物体识别用图像数据库的制作方法、处理装置以及处理方法
CN102402281A (zh) * 2010-09-07 2012-04-04 索尼公司 信息处理装置、程序及信息处理方法
CN102024036A (zh) * 2010-11-29 2011-04-20 清华大学 基于超图的三维对象检索方法和装置
CN102024036B (zh) * 2010-11-29 2012-09-05 清华大学 基于超图的三维对象检索方法和装置
CN103562957A (zh) * 2011-05-31 2014-02-05 乐天株式会社 信息提供装置、信息提供方法、信息提供处理程序、记录了信息提供处理程序的记录介质以及信息提供系统
CN103562957B (zh) * 2011-05-31 2016-12-14 乐天株式会社 信息提供装置、信息提供方法以及信息提供系统
US9886789B2 (en) 2011-05-31 2018-02-06 Rakuten, Inc. Device, system, and process for searching image data based on a three-dimensional arrangement
CN102915220A (zh) * 2011-08-04 2013-02-06 英华达(上海)科技有限公司 一种手持式投影装置及其投影方法
CN102915220B (zh) * 2011-08-04 2016-02-10 英华达(上海)科技有限公司 一种手持式投影装置及其投影方法

Also Published As

Publication number Publication date
JPH10134069A (ja) 1998-05-22
CN1093956C (zh) 2002-11-06
US6084589A (en) 2000-07-04
JP3148133B2 (ja) 2001-03-19

Similar Documents

Publication Publication Date Title
CN1093956C (zh) 信息检索装置
Nebeling et al. The trouble with augmented reality/virtual reality authoring tools
Yu et al. Fully-occluded target selection in virtual reality
JP5698733B2 (ja) 三空間入力の検出、表現、および解釈:自由空間、近接、および表面接触モードを組み込むジェスチャ連続体
US7917868B2 (en) Three-dimensional motion graphic user interface and method and apparatus for providing the same
Qian et al. Scalar: Authoring semantically adaptive augmented reality experiences in virtual reality
Deering HoloSketch: a virtual reality sketching/animation tool
EP2469474B1 (en) Creation of a playable scene with an authoring system
Millette et al. DualCAD: integrating augmented reality with a desktop GUI and smartphone interaction
US20100306696A1 (en) Dynamic network browser
US20060164409A1 (en) System and method for providing a dynamic user interface for a dense three-dimensional scene
CN1725168A (zh) 三维运动图形用户接口和提供其的方法和设备
JPWO2002069276A1 (ja) 表示制御装置、その表示制御装置を備えた情報端末装置、及び、視点位置制御装置
US10310618B2 (en) Gestures visual builder tool
JP2003518681A (ja) 3d画像「ナビゲーション3d」の操作による3d画像の合成におけるナビゲーション方法
JP2004288170A (ja) 三次元モデル検索方法及びシステム
GB2375699A (en) Three dimensional graphical user interface
EP3285216A1 (en) Association of comments to points of interest in virtual reality
Luo et al. PEARL: Physical environment based augmented reality lenses for in-situ human movement analysis
US20070038945A1 (en) System and method allowing one computer system user to guide another computer system user through a remote environment
Zhao et al. MeTACAST: Target-and Context-aware Spatial Selection in VR
US20210241539A1 (en) Broker For Instancing
Li et al. Generating activity snippets by learning human-scene interactions
KR100283617B1 (ko) 삼차원가상공간구축시스템
US11694376B2 (en) Intuitive 3D transformations for 2D graphics

Legal Events

Date Code Title Description
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C06 Publication
PB01 Publication
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20021106

Termination date: 20120521