CN100468290C - 视线诱导信息显示装置及视线诱导信息显示方法 - Google Patents

Abstract

本发明提供视线诱导信息显示装置及视线诱导信息显示方法。能够根据局部区域的布局设计来准确预测观察者的视线运动方向，将视觉文档(200)等的图像信息划分为局部区域并进行识别，然后分别计算出每个局部区域的初期注视概率、其视线诱导方向及其概率，分别显示这些初期注视概率、其视线诱导方向及其概率，根据这些显示，预测用户观察该视觉文档(200)时的用户的视线运动路径。由此，可以根据局部区域的布局设计来准确预测观察者的视线运动方向。

Description

视线诱导信息显示装置及视线诱导信息显示方法

技术领域

本发明涉及一种用于在作成产品目录或网页等文档时准确预测观察者的视线运动(眼睛运动：Eye flow)的视线诱导信息显示装置和视线诱导信息显示程序及视线诱导信息显示方法。

背景技术

一般，通过适宜地配置标题、照片、文章、插图等来提高设计性的文档(以下也适当地称为“视觉文档”)，根据其设计效果有时会给商品或企业的形像或销售产生重大影响。

因此，以往这种视觉文档是全权委托被称为文档设计师等的具有专业技能和设计灵感的人员作成，实际上也成立了许多以此为专业的设计公司。

众所周知，这些专业设计师在制作视觉文档时，需要运用一种技巧，即所谓的视线运动控制技巧，也就是要注意实际观看视觉文档的观察者(以下在本文中也适当地称为读者或用户)的视线在如何运动。

即，当专业设计师在一个显示面上配置例如标题、文章、照片、插图等多个局部区域(以下也适当地称为“文档区块”)时，为了设计出客户或读者满意的视觉文档，不仅要考虑到该局部区域彼此间的信息关联性，还要根据经验把握人们的视线运动特性，有意识或无意识地灵活运用经验知识，力求最醒目且美丽的配置。

因此，对于视觉文档的设计开发等没有经验(经验少)的普通商务人员等来说，为了制作高品质的视觉文档，重要的一点是，首先要准确预测这些观察者的视线运动。作为与观察者的视线运动有关的技术，以往例如已经提出以下专利文献1、2等所公开的技术。

专利文献1特开2002—175290号公报

专利文献2特开平6—162号公报

但是，这些现有技术是运用以往使用的视线运动的检测方法，即利用视线运动记录仪等实际测定观察者的视线来求出视线的运动，但不能根据各文档区块的布局设计来预测观察者的视线运动。

发明内容

本发明是为了有效解决这种问题而提出的，其目的是提供一种能够根据各文档区块(局部区域)的布局设计来准确预测观察者的视线运动的新型视线诱导信息显示装置、视线诱导信息显示程序及视线诱导信息显示方法。

为了解决所述问题，本发明之一的视线诱导信息显示装置的特征在于，具有：根据图像信息计算视线诱导信息的视线诱导信息计算单元；显示由该视线诱导信息计算单元计算的视线诱导信息的视线诱导信息显示单元。

由此，不仅可以显示所述视觉文档，还可以仅根据单纯的文档或文件、图像、画册等的图像信息就能获得后述的用于判断视线运动的视线诱导信息，并且将该视线诱导信息明确展示给用户。

另外，本发明所说的“图像信息”指一个布局版面(显示面)上一览地配置了多个局部区域的视觉信息，例如，上述的视觉文档或单纯的文档或文件、图像、画册等其他的已调整过的电子文件、样本、海报、图表等，并且，该“局部区域”是构成所述“图像信息”的各要素，例如上述的标题或文章、照片、插图等，与其形状和面积大小无关(在以下的视线诱导信息显示装置、视线诱导信息显示程序、视线诱导信息显示方法中也相同)。

并且，本发明之二的视线诱导信息显示装置是根据本发明之一的视线诱导信息显示装置，其特征在于，所述视线诱导信息计算单元具有将所输入的所述图像信息划分为局部区域并进行识别的局部区域识别单元，所述视线诱导信息显示单元具有显示所述每个局部区域的初期注视概率的输出单元。

即，本发明利用所述视线诱导信息计算单元的局部区域识别单元将所述图像信息划分为局部区域并进行识别，然后所述视线诱导信息显示单元的输出单元显示这些每个局部区域的初期注视概率。

由此，和本发明之一相同，不仅可以显示所述视觉文档，还可以仅根据单纯的文档或文件、图像、画册等的图像信息就能获得后述的用于判断视线运动的视线诱导信息，并且将该视线诱导信息明确展示给用户。

并且，本发明之三的视线诱导信息显示装置是根据本发明之一的视线诱导信息显示装置，其特征在于，所述视线诱导信息计算单元具有将所输入的所述图像信息划分为局部区域并进行识别的局部区域识别单元，所述视线诱导信息显示单元具有显示所述每个局部区域的视线诱导方向及其概率的输出单元。

即，本发明利用所述视线诱导信息计算单元的局部区域识别单元将所述图像信息划分为局部区域并进行识别，然后所述视线诱导信息显示单元的输出单元显示这些每个局部区域的视线诱导方向及其概率。

由此，和本发明之一相同，不仅可以显示所述视觉文档，还可以仅根据单纯的文档或文件、图像、画册等的图像信息就能获得后述的用于判断视线运动的视线诱导信息，并且将该视线诱导信息明确展示给用户。

并且，本发明之四的视线诱导信息显示装置是根据本发明之一的视线诱导信息显示装置，其特征在于，所述视线诱导信息计算单元具有将所输入的所述图像信息划分为局部区域并进行识别的局部区域识别单元，所述视线诱导信息显示单元具有分别显示所述每个局部区域的初期注视概率、所述每个局部区域的视线诱导方向及其概率的输出单元。

即，本发明利用所述视线诱导信息计算单元的局部区域识别单元将所述图像信息划分为局部区域并进行识别，然后所述视线诱导信息显示单元的输出单元分别如本发明之二那样显示每个局部区域的初期注视概率、如本发明之三那样显示每个局部区域的视线诱导方向及其概率。

由此，和本发明之一相同，不仅可以显示所述视觉文档，还可以仅根据单纯的文档或文件、图像、画册等的图像信息就能获得后述的用于判断视线运动的视线诱导信息，并且将该视线诱导信息明确展示给用户。

并且，本发明之五的视线诱导信息显示装置是根据本发明之一的视线诱导信息显示装置，其特征在于，所述视线诱导信息计算单元根据构成所输入的所述图像信息的每个局部区域的初期注视概率、或该每个局部区域的视线诱导方向及其概率，生成视线诱导路径，所述视线诱导信息显示单元显示由所述视线诱导信息计算单元生成的所述每个局部区域的初期注视概率或所述视线诱导路径。

由此，和本发明之一相同，不仅可以显示所述视觉文档，还可以仅根据单纯的文档或文件、图像、画册等的图像信息就能获得后述的用于判断视线运动的视线诱导信息，并且将该视线诱导信息明确展示给用户。

并且，本发明之六的视线诱导信息显示装置用于预测并显示用户在观察一览配置了多个局部区域的图像信息时的视线运动路径，其特征在于，具有：获取所述每个局部区域的初期注视概率及所述每个局部区域的视线诱导方向及其概率的视线诱导方向计算单元；分别显示由所述初期注视概率计算单元获取的每个局部区域的初期注视概率及由所述视线诱导方向计算单元计算出的每个局部区域的视线诱导方向及其概率的输出单元。

即，本发明的所述视线诱导方向计算单元不仅根据每个局部区域的初期注视概率或该每个局部区域的视线诱导方向及其概率亲自计算出视线诱导路径，而且也从外部接收这些信息。

由此，和本发明之一相同，不仅可以显示所述视觉文档，还可以仅根据单纯的文档或文件、图像、画册等的图像信息就能获得后述的用于判断视线运动的视线诱导信息，并且将该视线诱导信息明确展示给用户。

并且，本发明之七的视线诱导信息显示装置用于预测并显示用户在观察一览配置了多个局部区域的图像信息时的视线运动路径，其特征在于，具有：输入所述图像信息的输入单元；将所输入的所述图像信息划分为局部区域并进行识别的局部区域识别单元，计算出由该局部区域识别单元识别的每个局部区域的初期注视概率的初期注视概率计算单元；计算出由所述局部区域识别单元识别的每个局部区域的视线诱导方向及其概率的视线诱导方向计算单元；分别显示由所述初期注视概率计算单元计算出的每个局部区域的初期注视概率、和由所述视线诱导方向计算单元计算出的每个局部区域的视线诱导方向及其概率的输出单元。

即，本发明是通过使发明之一～四的结构更加具体化而得到的发明，首先，通过作为所述视线诱导信息计算单元之一的局部区域识别单元将由输入单元输入的图像信息划分为标题和照片、文章等的每个局部区域，并识别该每个局部区域的位置和大小(布局)，然后通过初期注视概率计算单元使用利用了人们的先天的或通过经验形成的视觉特性的规则来计算出每个局部区域的初期注视概率，并且通过视线诱导方向计算单元并使用相同规则计算出每个局部区域的视线诱导方向及其概率。

并且，作为所述视线诱导信息显示单元之一的输出单元使用CRT(阴极射线管)或LCD(液晶显示器)等电子显示单元显示这些每个局部区域的初期注视概率、以及每个局部区域的视线诱导方向及其概率。

由此，可以获得成为用于进行视线运动预测的有力判断素材(要素)的每个局部区域的初期注视概率和视线诱导方向及其概率，同时进行可以使任何人都能容易识别这些要素的视觉显示，不需要如以往那样使用视线运动记录仪等的特殊装置及进行烦杂的操作，根据该图像信息的各局部区域的布局设计即可准确预测观察者的视线运动。

结果，在不具备设计开发等经验(经验少)的普通商务人员作成视觉文档等时，可以把其作为设计知识或技巧的一部分进行参考，有助于作成高品质的视觉文档。

并且，本发明之八的视线诱导信息显示装置是根据本发明之七的视线诱导信息显示装置，其特征在于，具有视线诱导信息计算单元，利用基于所述初期注视概率计算单元和视线诱导方向计算单元的计算结果的概率组合，同时计算出视线运动路径及其概率，所述输出单元显示由所述视线诱导信息计算单元计算出的视线运动路径。

由此，可以计算出并显示更具体的视线运动路径，能够根据该图像信息的各局部区域的布局设计更加准确地预测观察者的视线运动。

并且，本发明之九的视线诱导信息显示装置是根据本发明之八的视线诱导信息显示装置，其特征在于，具有仅指定限定在所指定的局部区域的路径的视线诱导信息的路径指定单元。

即，如所述本发明之三那样，如果在视线诱导信息计算单元中所识别的局部区域较少，则计算出所有组合的路径及其概率不特别困难，但是如果成为对象的局部区域的数量较多，则其路径的组合变庞大，结果，相对于装置的负荷变大，获得计算结果的时间变长，或显示变得紊乱而不能进行准确预测。

因此，本发明在发明之五的基础上还设有路径指定单元，通过该路径指定单元可以指定任意的局部区域，计算出将该指定的局部区域仅限定为始点或终点或者经过的路径的视线诱导信息。

由此，可以避免组合的庞大化(产生数量庞大的组合)，限定路径的组合数量，可以在短时间内仅计算出并显示准确路径的视线诱导信息，并且可以进行显示清晰的准确预测。

并且，本发明之十的视线诱导信息显示装置是根据本发明之七～九中任意一项的视线诱导信息显示装置，其特征在于，所述输出单元按照每个局部区域以数值、或不同色彩或色彩浓度来显示由所述初期注视概率计算单元计算出的初期注视概率。

这样通过利用数值来显示各局部区域的初期注视概率，能够仅凭视觉即可明确每个局部区域的初期注视概率的大小，并且通过以不同色彩或色彩浓度来显示初期注视概率，可以容易判别每个局部区域的初期注视概率的大小。

并且，本发明之十一的视线诱导信息显示装置是根据本发明之七～九中任意一项的视线诱导信息显示装置，其特征在于，所述输出单元以表示方向的图形和数值或表示方向的图形的强度来显示由所述视线诱导方向计算单元计算出的每个局部区域的视线诱导方向和概率。

由此，可以在视觉上明确识别每个局部区域的视线诱导方向及其概率。

并且，本发明之十二的视线诱导信息显示装置是根据本发明之七～九中任意一项的视线诱导信息显示装置，其特征在于，所述输出单元以表示方向的图形来显示由所述视线诱导信息计算单元计算出的视线运动路径。

由此，可以在视觉上容易明确把握在各个局部区域间运动的视线路径。

并且，本发明之十三的视线诱导信息显示装置是根据本发明之七～九中任意一项的视线诱导信息显示装置，其特征在于，所述输出单元以表示方向的图形和数值或表示方向的图形的强度的组合来显示由所述视线诱导信息计算单元计算出的视线运动路径及其概率。

由此，容易在视觉上容易明确把握在各个局部区域间运动的视线路径及其概率。

本发明之十四的视线诱导信息显示程序的特征在于，使计算机执行下述步骤：根据图像信息计算视线诱导信息的视线诱导信息计算步骤；显示由该视线诱导信息计算单元计算的视线诱导信息的视线诱导信息显示步骤。

由此，和本发明之一相同，当然可以仅根据图像信息即可获得视线诱导信息，并将其明确展示给用户，而且通过使用个人计算机等通用计算机系统等可以从软件上实现这些功能，所以与另外准备专用硬件来实现这些功能的情况相比，可以发挥良好的经济实用性。

并且，本发明之十五的视线诱导信息显示程序是根据本发明之十四的视线诱导信息显示程序，其特征在于，所述视线诱导信息计算步骤具有将所输入的所述图像信息划分为局部区域并进行识别的局部区域识别步骤，所述视线诱导信息显示步骤具有显示所述每个局部区域的初期注视概率的输出步骤。

由此，和本发明之一相同，当然可以仅根据图像信息即可获得视线诱导信息，并将其明确展示给用户，并且和本发明之十四相同，通过使用计算机等通用计算机系统等可以从软件上实现这些功能，所以与另外准备专用硬件来实现这些功能的情况相比，可以发挥良好的经济实用性。

并且，本发明之十六的视线诱导信息显示程序是根据本发明之十四的视线诱导信息显示程序，其特征在于，所述视线诱导信息计算步骤具有将所输入的所述图像信息划分为局部区域并进行识别的局部区域识别步骤，所述视线诱导信息显示步骤具有显示所述每个局部区域的视线诱导方向及其概率的输出步骤。

由此，和本发明之一相同，当然可以仅根据图像信息即可获得视线诱导信息，并将其明确展示给用户，并且和本发明之十四相同，通过使用计算机等通用计算机系统等可以从软件上实现这些功能，所以与另外准备专用硬件来实现这些功能的情况相比，可以发挥良好的经济实用性。

并且，本发明之十七的视线诱导信息显示程序是根据本发明之十四的视线诱导信息显示程序，其特征在于，所述视线诱导信息计算步骤具有将所输入的所述图像信息划分为局部区域并进行识别的局部区域识别步骤，所述视线诱导信息显示步骤具有分别显示所述每个局部区域的初期注视概率、和所述每个局部区域的视线诱导方向及其概率的输出步骤。

由此，和本发明之一相同，当然可以仅根据图像信息即可获得视线诱导信息，并将其明确展示给用户，并且和本发明之十四相同，通过使用计算机等通用计算机系统等可以从软件上实现这些功能，所以与另外准备专用硬件来实现这些功能的情况相比，可以发挥良好的经济实用性。

并且，本发明之十八的视线诱导信息显示程序是根据本发明之十四的视线诱导信息显示程序，其特征在于，所述视线诱导信息计算步骤根据构成所输入的所述图像信息的每个局部区域的初期注视概率、或该每个局部区域的视线诱导方向及其概率，生成视线诱导路径，所述视线诱导信息显示步骤显示由所述视线诱导信息计算单元生成的所述每个局部区域的初期注视概率或所述视线诱导路径。

由此，和本发明之一相同，当然可以仅根据图像信息即可获得视线诱导信息，并将其明确展示给用户，并且和本发明之十四相同，通过使用计算机等通用计算机系统等可以从软件上实现这些功能，所以与另外准备专用硬件来实现这些功能的情况相比，可以发挥良好的经济实用性。

并且，本发明之十九的视线诱导信息显示程序用于预测并显示用户在观察一览配置了多个局部区域的图像信息时的视线运动路径，其特征在于，具有：获取所述每个局部区域的初期注视概率及所述每个局部区域的视线诱导方向及其概率的视线诱导方向计算步骤；分别显示由所述初期注视概率计算步骤获取的每个局部区域的初期注视概率及由所述视线诱导方向计算步骤计算出的每个局部区域的视线诱导方向及其概率的输出步骤。

由此，和本发明之一相同，当然可以仅根据图像信息即可获得视线诱导信息，并将其明确展示给用户，并且和本发明之十四相同，通过使用计算机等通用计算机系统等可以从软件上实现这些功能，所以与另外准备专用硬件来实现这些功能的情况相比，可以发挥良好的经济实用性。

并且，本发明之二十的视线诱导信息显示程序用于预测并显示用户在观察一览配置了多个局部区域的图像信息时的视线运动路径，其特征在于，使计算机执行下述步骤：输入所述图像信息的输入步骤；将所输入的所述图像信息划分为局部区域并进行识别的局部区域识别步骤；计算出由该局部区域识别单元识别的每个局部区域的初期注视概率的初期注视概率计算步骤；计算出由所述局部区域识别单元识别的每个局部区域的视线诱导方向及其概率的视线诱导方向计算步骤；分别显示由所述初期注视概率计算步骤计算出的每个局部区域的初期注视概率、和由所述视线诱导方向计算单元计算出的每个局部区域的视线诱导方向及其概率的输出步骤。

由此，和本发明之一～七相同，当然可以仅根据图像信息的局部区域的布局设计即可准确预测观察者的视线运动，而且通过使用个人计算机等通用计算机系统等可以从软件上实现这些功能，所以与另外准备专用硬件来实现这些功能的情况相比，可以发挥良好的经济实用性。

并且，本发明之二十一的视线诱导信息显示程序是根据本发明之二十的视线诱导信息显示程序，其特征在于，具有视线诱导信息计算步骤，利用基于所述初期注视概率计算步骤和视线诱导方向计算步骤的计算结果的概率组合，同时计算出视线运动路径及其概率，所述输出步骤显示由所述视线诱导信息计算步骤计算出的视线运动路径。

由此，和本发明之八相同，可以计算出并显示更具体的视线运动路径，所以能够根据该图像信息的各局部区域的布局设计更加准确地预测观察者的视线运动。

并且，本发明之二十二的视线诱导信息显示程序是根据本发明之二十一的视线诱导信息显示程序，其特征在于，具有指定仅限定在所指定的局部区域的路径的视线诱导信息的路径指定步骤。

由此，和本发明之九相同，可以避免组合的庞大化(产生数量庞大的组合)，限定路径的组合数量，可以在短时间内仅计算出并显示准确路径的视线诱导信息，并且可以进行显示清晰的准确预测。

并且，本发明之二十三的视线诱导信息显示程序是根据本发明之二十～二十二中任意一项的视线诱导信息显示程序，其特征在于，所述输出步骤按照每个局部区域以数值、或不同色彩或色彩浓度来显示由所述初期注视概率计算步骤计算出的初期注视概率。

由此，和本发明之十相同，能够容易判别每个局部区域的初期注视概率的大小。

并且，本发明之二十四的视线诱导信息显示程序是根据本发明之二十～二十二中任意一项的视线诱导信息显示程序，其特征在于，所述输出步骤以表示方向的图形和数值或表示方向的图形的强度来显示由所述视线诱导方向计算步骤计算出的每个局部区域的视线诱导方向和概率。

由此，和本发明之十一相同，能够容易判别每个局部区域的视线诱导方向和概率。

并且，本发明之二十五的视线诱导信息显示程序是根据本发明之二十～二十四中任意一项的视线诱导信息显示程序，其特征在于，所述输出步骤以表示方向的图形来显示由所述视线诱导信息计算步骤计算出的视线运动路径。

由此，和本发明之十五相同，可以在视觉上容易明确把握在各个局部区域间运动的视线路径。

并且，本发明之二十六的视线诱导信息显示程序是根据本发明之二十～二十四中任意一项的视线诱导信息显示程序，其特征在于，所述输出步骤以表示方向的图形和数值或表示方向的图形的强度的组合来显示由所述由所述视线诱导信息计算步骤计算出的视线运动路径及其概率。

由此，不仅和本发明之十一相同，容易在视觉上容易明确把握在各个局部区域间运动的视线路径，而且还能明确把握其概率。

并且，本发明之二十七的视线诱导信息显示方法用于预测并显示用户在观察一览配置了多个局部区域的图像信息时的视线运动路径，其特征在于，将所述图像信息划分为局部区域并进行识别，然后分别计算出并显示所识别的每个局部区域的初期注视概率、其视线诱导方向及其概率，根据该显示预测并显示观察所述图像信息的用户的视线运动路径。

由此，和本发明之二～七相同，可以进行使任何人都能容易识别各局部区域的初期注视概率和视线诱导方向及其概率的视觉显示，不需要如以往那样使用视线运动记录仪等的特殊装置及进行烦杂的操作，根据该图像信息的各局部区域的布局设计即可准确预测观察者的视线运动。

并且，本发明之二十八的视线诱导信息显示方法用于预测并显示用户在观察一览配置了多个局部区域的图像信息时的视线运动路径，其特征在于，将所述图像信息划分为局部区域并进行识别，然后分别计算出所识别的每个局部区域的初期注视概率、其视线诱导方向及其概率，根据该计算结果并利用概率的组合来同时计算出视线运动路径及其概率，根据该显示预测并显示观察所述图像信息的用户的视线运动路径。

即，本发明的方法像本发明之二十那样，不仅根据初期注视概率和其视线诱导方向及其概率预测用户的视线运动，并且根据这些计算结果同时计算出视线运动路径和其概率，根据该计算结果预测并显示用户的视线运动。

由此，可以更加准确地预测观察者的视线运动，并将该结果显示给用户。

并且，本发明之二十九的视线诱导信息显示方法是根据本发明之二十六或二十八的视线诱导信息显示方法，其特征在于，所述用户的视线运动路径的计算是通过限定为经过所指定的局部区域的路径来进行的。

由此，和本发明之八相同，可以避免组合的庞大化，限定路径的组合数量，可以在短时间内仅计算出并显示准确路径的视线诱导信息，并且可以进行显示清晰的准确预测。

并且，本发明之三十的视线诱导信息显示方法是根据本发明之二十九的视线诱导信息显示方法，其特征在于，所述局部区域的指定是从初期注视概率大的局部区域的开始的顺序进行的。

由此，可以在短时间内准确计算出容易指定的路径的视线诱导信息。

并且，本发明之三十一的视线诱导信息显示方法是根据本发明之二十六～三十中任意一项的视线诱导信息显示方法，其特征在于，所述用户的视线运动路径的计算是通过把所指定的局部区域作为始点或终点来进行的。

这样通过预先指定成为始点或终点的局部区域，和本发明之十五相同，可以限定成为显示候补的路径的组合，在短时间内计算出把该局部区域作为始点或终点的路径的视线诱导信息。

并且，本发明之三十二的视线诱导信息显示方法是根据本发明之三十一的视线诱导信息显示方法，其特征在于，成为所述路径计算出的始点的局部区域是通过指定初期注视概率最大的局部区域而形成的。

由此，在本发明之二十六的效果的基础上，可以计算出更准确的路径的视线诱导信息。

本发明之三十三的视线诱导信息显示方法，使用了用于预测并显示用户在观察一览配置了多个局部区域的图像信息时的视线运动路径的计算机，其特征在于，所述计算机将所述图像信息划分为局部区域并进行识别，然后分别计算出并显示所识别的每个局部区域的初期注视概率、其视线诱导方向及其概率，根据该显示预测并显示观察所述图像信息的用户的视线运动路径。

由此，可以进行使任何人都能容易识别各局部区域的初期注视概率和视线诱导方向及其概率的视觉显示，不需要像以往那样使用视线运动记录仪等的特殊装置及进行烦杂的操作，根据该图像信息的各局部区域的布局设计即可准确预测观察者的视线运动。

并且，本发明之三十四的视线诱导信息显示方法，使用了用于预测并显示用户在观察一览配置了多个局部区域的图像信息时的视线运动路径的计算机，其特征在于，所述计算机将所述图像信息划分为局部区域并进行识别，然后分别计算出所识别的每个局部区域的初期注视概率、其视线诱导方向及其概率，根据该计算结果并利用概率的组合来同时计算出视线运动路径和其概率，根据该显示预测并显示观察所述图像信息的用户的视线运动路径。

由此，可以更加准确地预测观察者的视线运动，并将该结果显示给用户。

并且，本发明之三十五的视线诱导信息显示方法是根据本发明之三十三或三十四的视线诱导信息显示方法，其特征在于，所述用户的视线运动路径的计算是通过所述计算机限定为经过所指定的局部区域的路径来进行的。

由此，可以避免组合的庞大化，限定路径的组合数量，可以在短时间内仅计算出并显示准确路径的视线诱导信息，并且可以进行显示清晰的准确预测。

并且，本发明之三十六的视线诱导信息显示方法是根据本发明之三十五的视线诱导信息显示方法，其特征在于，所述局部区域的指定是所述计算机从初期注视概率大的局部区域开始的顺序进行的。

由此，可以在短时间内准确计算出容易指定的路径的视线诱导信息。

并且，本发明之三十七的视线诱导信息显示方法是根据本发明之三十三～三十六中任意一项的视线诱导信息显示方法，其特征在于，所述用户的视线运动路径的计算是通过所述计算机把所指定的局部区域作为始点或终点来进行的。

这样通过预先指定成为始点或终点的局部区域，和本发明之十三相同，可以限定成为显示候补的路径的组合，在短时间内计算出把该局部区域作为始点或终点的路径的视线诱导信息。

并且，本发明之三十八的视线诱导信息显示方法是根据本发明之三十七的视线诱导信息显示方法，其特征在于，成为所述路径计算出的始点的局部区域是通过所述计算机指定初期注视概率最大的局部区域而形成的。

由此，在本发明之三十七的效果的基础上，可以计算出更准确的路径的视线诱导信息。

附图说明

图1是表示本发明的视线诱导信息显示装置的一实施方式的图。

图2是表示通过局部区域识别单元被分割识别为各个局部区域的视觉文档的说明图。

图3是表示通过初期注视概率计算单元在各个局部区域中显示出所计算出的初期注视概率的视觉文档的说明图。

图4是表示通过初期注视概率计算单元在各个局部区域中显示出所计算出的视线诱导方向及其概率的视觉文档的说明图。

图5是表示显示了通过视线诱导信息计算单元计算出的视线运动路径及其概率的视觉文档的说明图。

图6是表示实现本发明的视线诱导信息显示装置的硬件结构的方框图。

图7是把箭头分解成边缘成分来显示其直方图的说明图。

图8是在视觉上显示视线运动路径的方向和概率的概念图。

图9是表示各局部区域的代表点及该代表点彼此间的连接路径的图。

图10是表示各局部区域的代表点及该代表点彼此间的连接路径的图。

图11是表示本发明的视线诱导信息显示装置的其他实施方式的图。

图12是表示本发明的视线诱导信息显示装置的其他实施方式的图。

图13是表示本发明的视线诱导信息显示装置的其他实施方式的图。

图中：10 输入单元；20 局部区域识别单元；30 初期注视概率单元；40 视线诱导方向计算单元；50 视线诱导信息计算单元；60 输出单元；70路径指定单元；80 初期注视区域单元；90 视线诱导方向决定单元；100视线诱导信息显示装置；110 CPU；120 RAM；130 ROM；140 存储部；150显示部；160 输入部；170 接口；180 总线；200、200A、200B、200C 视觉文档(图像信息)；210、220、230 局部区域；211、221、231 代表点；212、213、222、223、232 控制点；N 网络。

具体实施方式

以下，参照附图说明实施本发明的最佳方式。

图1表示本发明的视线诱导信息显示装置100的结构和作用的一实施方式。

如图所示，该视线诱导信息显示装置100主要由以下部分构成：输入单元10；局部区域识别单元20；初期注视概率计算单元30；视线诱导方向计算单元40；视线诱导信息计算单元50；输出单元60。

首先，输入单元10发挥下述功能，获取通过用户的视觉可以识别的图像信息，例如是在一个布局版面(画面)等一览配置了标题、照片、文章、插图等多个局部区域(文档区块)的视觉文档，将其作为输入信息提供给后述的局部区域识别单元20，例如，可以使用图像扫描仪或键盘、鼠标、OCR(Optical Character Reader)、数字转换器等公知的输入单元，此外也可使用通过互联网的上传或下载等利用数据通信的输入单元。

另外，该输入单元10不仅包括利用扫描仪等以光学方式读取并识别现有的文件的情况，还包括，在具有如XML(Extensible Markup Language)那样的布局信息和结构的意义的状态下进行输入的情况。

局部区域识别单元20提供将这样地由输入单元10输入的视觉文档划分为局部区域，并识别该每个局部区域的位置和大小的功能。

例如图2(a)所示，把由“标题”、“照片”、“正文(文本)”这三个局部区域构成的视觉文档200分别划分为由“标题”构成的局部区域210、由“照片”构成的局部区域220、由“正文(文本)”构成的局部区域230，然后如该图(b)等所示，对每个局部区域210、220、230进行色彩区分等，从而容易在视觉上进行识别。

初期注视概率计算单元30提供计算出由该局部区域识别单元20识别的每个局部区域的初期注视概率的功能，例如图3所示，在某视觉文档200由“标题”、“照片”、“正文(文本)”这三个局部区域210、220、230构成的情况下，针对每个局部区域210、220、230计算出其初期注视概率，并显示在各个局部区域210、220、230内。在图3(b)的示例中，由“标题”构成的局部区域210的初期注视概率是“0.5”，由“照片”构成的局部区域220的初期注视概率是“0.3”，由“正文(文本)”构成的局部区域230的初期注视概率是“0.2”，这些各个局部区域210、220、230的初期注视概率的合计为“1.0”。

另一方面，视线诱导方向计算单元40提供计算出与由该初期注视概率计算单元30获得的初期注视概率不同的、由所述局部区域识别单元20识别的每个局部区域的视线诱导方向及其概率的功能，例如图4所示，在某视觉文档200由“标题”、“照片”、“正文(文本)”这三个局部区域210、220、230构成的情况下，针对每个局部区域210、220、230计算出观察者的视线从该局部区域被诱导到其他局部区域的方向及概率，并显示在各个局部区域210、220、230内。在图4(b)的示例中，在注视由“标题”构成的局部区域210时，来自该局部区域210的视线的诱导方向几乎(90％)是朝向由“照片”构成的局部区域220和由“正文(文本)”构成的局部区域230这2个方向，把视线从该局部区域210分别诱导到局部区域220、局部区域230的概率是“0.7”和“0.2”。另外，在注视由“照片”构成的局部区域220时，来自该局部区域220的视线的诱导方向中，由“正文(文本)”构成的局部区域230和显示面以外这两方向占整体的80％，视线从局部区域220分别被诱导到局部区域230和显示面以外的概率是“0.5”和“0.3”。另外，在注视由“正文(文本)”构成的局部区域230时，视线在该局部区域230内的运动方向几乎(在图示例中为100％(“1.0”))是从左上方向右下方运动。

另一方面，视线诱导信息计算单元50提供下述功能，根据由所述初期注视概率计算单元30获得的每个局部区域的初期注视概率、和由所述视线诱导方向计算单元40计算出的每个局部区域的视线诱导方向及其概率的组合，同时计算出视线的运动路径及其概率，例如图5所示，根据按照每个局部区域210、220、230来显示初期注视概率的视觉文档200A、和显示每个局部区域210、220、230的视线诱导方向及其概率的视觉文档200B，同时计算出视线的运动路径及其概率，作成表示其结果的视觉文档C并进行显示。

并且，输出单元60提供下述功能，明确显示由该视线诱导信息计算单元50计算出的视线运动路径、由所述局部区域识别单元20划分并识别的各个局部区域、由所示初期注视概率计算单元30计算出的每个局部区域的初期注视概率、由所示视线诱导方向计算单元40计算出的每个局部区域的视线诱导方向及其概率，例如可以利用CRT(Cathode Ray Tube)或液晶屏、等离子显示屏等显示器，投影仪，触摸屏显示器，激光打印机或喷墨式打印机等印刷装置，绘图仪等公知输出装置来实现该功能。

另外，对于构成该视线诱导信息显示装置100的输入单元10、局部区域识别单元20、初期注视概率计算单元30、视线诱导方向计算单元40、视线诱导信息计算单元50、输出单元60，可以由分别制作的专用装置以硬件的形式实现各功能，也可以使用具备了输入、控制、运计算、存储、输出这些各项功能的计算机等通用的计算机系统以软件的形式实现各功能，如果使用后者的方法，可以更容易且经济地实现各功能。

即，用于实现该视线诱导信息显示装置100的硬件结构如图6所示，利用由PCI(Peripheral Component Interconnect)总线和ISA(Industrial Standard Architecture)总线等构成的处理机总线、存储器总线、系统总线、输入输出总线等的各种内外总线180，总线连接负责各种控制和运计算处理的中央运计算处理装置CPU(CentralProcessing Unit)110、构成主存储装置(Main Storage)的RAM(RandomAccess Memory)120、读出专用存储装置即ROM(Read Only Memory)130、硬盘驱动器装置(HDD)和半导体存储器等的辅助用存储部(SecondaryStorage)140、由监视器(LCD(液晶显示屏))或CRT(阴极射线管)等构成的显示部150、由图像扫描仪和鼠标等构成的输入部160、LAN或因特网等的通信网络N、以及它们的输入输出接口(I/F)170等。

并且，例如，将保存在CD—ROM或DVD—ROM、软盘(FD)等存储介质中的、或者通过因特网等的通信网络N保存在存储部140的各种专用计算机程序，或者预先存储在ROM130的各种专用计算机程序导入主存储装置(RAM)130，由CPU110按照被导入在该主存储装置(RAM)130的程序运用各种资源进行规定的控制和运计算处理，通过总线180将其处理结果输出给显示部150并进行显示，同时根据需要，把与该输出结果等有关的数据保存在存储部140中。

下面，说明这样构成的本发明的视线诱导信息显示装置100的作用和效果。

首先，在成为视线诱导方向的预测对象的视觉文档是如图2(a)所示的、由在打印纸上打印有“标题”和“照片”、“正文(文本)”的印刷物构成的视觉文档200的情况下，如图1所示，利用图像扫描仪等输入单元10获取该视觉文档200的图像，将该图像信息发送给局部区域识别单元20。

此处，该视觉文档200除利用图像扫描仪等输入单元10获取外，也可以利用个人计算机等计算机和专用应用软件在计算机(RAM34等)上制作，该情况时，构成该计算机上的视觉文档200的电子数据被直接或通过LAN等网络N发送给成为对象的其他计算机的局部区域识别单元20。

然后，已获取该图像信息的局部区域识别单元20如图2(b)所示，把该视觉文档200分别划分为“标题”部分、“照片”部分、“正文”部分这三个局部区域210、220、230，然后如图1所示，把与这些局部区域210、220、230有关的信息分别发送给初期注视概率计算单元30和视线诱导方向计算单元40。

另外，该局部区域识别单元20在划分局部区域210、220、230的同时，对每个局部区域210、220、230实施色彩区分处理等，可以一眼就识别出该局部区域识别单元20的各个局部区域210、220、230的划分是否正确，假定进行了错误的划分时，例如在“标题”部分和“正文”部分被划分为一个局部区域时等的情况下，操作本发明的装置10的操作者等可以在该时间马上修改错误的划分范围。

并且，这样识别局部区域的方法如果整体是图像数据时，可以利用图形数据等公知的图像处理技术划分成各个局部区域并进行识别。另外，如果是以具有“标题”、“正文等”的属性信息的形式输入的文件，例如类似利用标志来规定属性信息的HTML(Hyper Text Markup Language)、XML(Extensible Markup Language)、XHTML(Extensible Hyper TextMarkup Language)等的结构化文件等，不需要特殊的图像识别技术即可容易划分成每个局部区域并进行识别。

然后，如图1所示，从该局部区域识别单元20接受了局部区域信息的一方的初期注视概率计算单元30，计算出由该局部区域识别单元20识别的每个局部区域210、220、230的初期注视概率，将该计算结果发送给视线诱导信息计算单元50。

例如，在图3的示例中，计算出相当于“标题”的局部区域210的初期注视率为“0.5”，相当于“照片”的局部区域220的初期注视率为“0.3”，相当于“正文”的局部区域230的初期注视率为“0.2”，各自的数值按照“标题”>“照片”>“正文”的顺序，注视概率变小。

另外，该初期注视概率的大小关系未必一定采用上述的数值表现方式，如果采用与其概率对应的色彩种类或色彩浓度的表现方式，例如初期注视概率越高就使其着色彩浓度越浓或进行暖色系的着色等，可以更加明确地把握每个局部区域的初期注视概率的大小关系。

并且，对于该初期注视概率计算单元30的每个局部区域的初期注视概率的计算方法没有特别限定，例如，可以使用计算“诱目率”等注视率的公知技术。

即，所谓“诱目率”是指与人的主观因素相符的参数，其计算方法例如被详细公开在“特开2001—126070号公报(注视区域提取出装置及使用其的自动构图决定装置)”等中，以下对其进行简单扼要的说明。

为了计算出“注视区域”，根据原图像的物理特征评价“诱目率”。

“注视区域”的计算是根据评价结果把最醒目的区域作为“注视区域”提取出。即，评价“注视区域”时，由于是根据物理特征进行的与人的主观意识相符的评价，所以能够提取出与人的主观意识相适合的“注视区域”。

例如，在物理特征包括色彩差异度的情况下，可以根据各区域的不同色彩评价“诱目率”。并且，在物理特征除色彩差异外，还包括形状的差异度、面积的差异度和图案的差异度的情况下，如果根据这四种差异度中的至少一种差异度来评价“诱目率”，可以按照原图像的特征准确评价“诱目率”。另外，在也评价色彩的三要素(色调、色彩、明亮度)的情况下，可以把最接近人的主观意识的醒目色彩(红色)的区域评价为最醒目区域。如果也评价空间频率或原图像的各区域的面积，可以更加准确地判断最醒目区域的评价。

并且，根据以下步骤进行该“诱目率”的评价。

(1)首先对最初成为对象的原图像划分区域。此时，把原图像划分为图区域和画区域。在该划分方法中，应用了基于1997IEEE中由W.Y.Ma和B.S.Manjunath等记载于“Edge Flow：A Framework of BoundaryDetection and Image Segmentation”的“edgeflow”的边界检测方法。

(2)然后，提取出如此划分的图区域，评价区域的“诱目率”。

该“诱目率”的评价大致是如下进行的。

(a)最初求出各区域的“差异性诱目率”。此时，分别求出色彩的差异度、图案的差异度、形状的差异度和面积的差异度，并向这些差异度赋予加权系数，进行线性结合，求出各区域的“差异性诱目率”。(b)然后，求出各区域的“特征诱目率”。此时，求出色彩的诱目率、空间频率的诱目率、面积的诱目率，并向这些诱目率赋予加权系数，进行线性结合，求出各区域的“特征诱目率”。(c)最后，加计算各区域的“差异性诱目率”和“特征诱目率”，求出特征量综合值，根据规定的β函数评价该特征量综合值，计算出目标“诱目率”。

另一方面，如图1所示，从同一局部区域识别单元20接受了与局部区域有关的信息的视线诱导方向计算单元40，计算出由所述局部区域识别单元20识别的各局部区域的视线诱导方向及其概率，将该计算结果发送给同一视线诱导信息计算单元50。

在图4的示例中，视线从“标题”的局部区域210到其他区域的诱导方向可以认为是“照片”的局部区域220和“正文”的局部区域230和其他(区域以外)的三个方向，各方向的概率分别是“0.7”、“0.2”、其他为“0.1”。并且，同样视线从“照片”的局部区域220到其他区域的诱导方向可以认为是“正文”的局部区域230和区域以外以及其他这三个方向，各方向的概率分别是“0.5”、“0.3”、其他为“0.2”。同样，视线在“正文”的局部区域230内的诱导方向一般多是右下方向，在图例中该方向的概率为“1.0”，即表示只有该方向。

另外，该每个局部区域的视线诱导方向及其概率不限于箭头和数值，也可以按图4所示利用箭头的粗细来表示其概率的大小。

并且，该视线诱导方向的概率只是用于表示与其他视线诱导方向的概率的相关关系(大小关系)，所以没有必要必须把该概率之合控制为“1.0”，也可以小于或大于“1.0”。

并且，关于该箭头，也可以代替长度而使用粗细度的与视线诱导的相关的矢量。

此处，虽然对成为该视线诱导方向计算单元40的基准的计算规则没有特别限定，但一般的情况是使用从人的视线动态特性和公知特性而导出的规则，该公知特性例如有以下所示各特性：

i 视线沿着诱导箭头等的视线的标志而运动。

ii 视线向尖状物的前端方向运动。

iii 视线向照片中拍摄的人物的视线方向运动。

为了识别这种箭头或尖状物的前端，可以利用下述方法，即如图7所示，把它们分解成边缘成分，获取其直方图，以此为基础计算诱导视线的方向。

然后，如图1所示，从初期注视概率计算单元30获取各局部区域210、220、230的初期注视概率、从视线诱导方向计算单元40获取各局部区域210、220、230的视线诱导方向及其概率的视线诱导信息计算单元50，根据这些每个局部区域210、220、230的初期注视概率、每个局部区域210、220、230的视线诱导方向及其概率的组合，同时计算出视线的运动路径及其概率，把该计算结果发送给输出单元60。

在图5(c)的示例中，根据按图5(a)所示划分为每个局部区域210、220、230并进行了色彩区分的视觉文档200A、和按图5(b)所示显示每个局部区域210、220、230的视线诱导方向及其概率的视觉文档200B，计算出以初期注视概率最高的“标题”的局部区域210为始点的三种“路径A”(从局部区域210向局部区域220运动后，运动到区域以外的路径)、“路径B”(从局部区域210向局部区域220运动后，转移到局部区域230，由此处向右下方向运动的路径)、“路径C”(从局部区域210直接运动到局部区域230一侧的路径)，并且，计算出各个“路径A、B、C”的概率，根据该概率按照图8所示分别改变表示路径的箭头(线)的粗细，并进行显示。

即，如图5(c)所示，视线沿着“路径A”运动的概率是向局部区域210的初期注视概率“0.5”乘以从局部区域210向局部区域220运动的概率“0.7”和从局部区域220向区域以外运动的概率“0.3”所得的值，即“0.105”。

并且，视线沿着“路径B”运动的概率是向局部区域210的初期注视概率“0.5”乘以从局部区域210向局部区域220运动的概率“0.7”和从局部区域220向局部区域230一侧运动的概率“0.5”和在局部区域230内向右下方向运动的“1.0”所得的值，即“0.175”。

并且，视线沿着“路径C”运动的概率是向局部区域210的初期注视概率“0.5”乘以从局部区域210直接向局部区域230运动的概率“0.2”和在局部区域230内向右下方向运动的“1.0”所得的值，即“0.1”。

并且，从视线诱导信息计算单元50接受了与视线的运动路径及其概率有关的信息的输出单元60，在显示器上显示表示该路径和概率的视觉文档200C，或者通过印刷装置作成并提示给用户等。

在图5(c)的示例中，三种路径“A、B、C”中合计概率最大的“路径B”被预测为作为观察者的视线运动最自然(概率大)的路径。

另外，利用视线运动记录仪观测实际观看该视觉文档的多个观察者的视线运动发现，和该预测结果相同，沿着“路径B”的视线运动的概率高。

这样，本发明把视觉文档等的图像信息划分为各个局部区域，计算出每个局部区域的初期注视概率和每个局部区域的视线诱导方向及其概率，根据该计算结果显示视线的运动路径及其概率，所以能够进行使任何人都容易识别该视线运动路径及其概率的视觉显示，能够根据该视觉文档的文档区块的布局设计准确预测观察者的视线运动。

结果，在不具备设计开发等经验(或经验少)的普通商务人员制作视觉文档等时，可以把其作为设计知识或技巧的一部分进行参考，有助于制作高品质的视觉文档。

另外，在图1的实施方式中，虽然是使输出单元60仅显示由视线诱导信息计算单元50获得的计算结果，但也可以不仅显示该计算结果，还分别显示由所有的所述各装置10、20、30、40、50获得的结果。例如，如上所述在由局部区域识别装置10划分的局部区域的划分位置错误的情况下，如果直接采用错误的局部区域，则以后的计算结果的差异会很大，将明显影响预测的可靠性，但是如果在划分阶段能够视觉显示该结果，则会容易发现各阶段的错误，可以进行更准确的视线诱导信息预测。

并且，如果随时显示在各阶段获得的结果，操作者可以积累经验，能够根据图3所示的显示初期注视概率的视觉文档200A和图4所示的显示每个局部区域的视线诱导方向及其概率的视觉文档200B，容易求出显示在视觉文档200C的视线诱导路径和概率，所以也可以根据情况省略(跳过)视线诱导信息计算单元50自身。

另外，也可以代替表示视线的诱导方向和路径的箭头、或者和箭头一起并用其他图形例如等腰三角形等来进行显示。并且，如图5(c)所示表示视线运动的线不必是连续的线，也可以是点列，除使用贝济埃(Bezier)曲线或样条(spline)曲线等的曲线显示外，还可以使用连续连接多个直线的折线。

此处，为了生成图5(c)所示的视线运动路径，可以使用从多个点列生成曲线的样条曲线、贝济埃曲线等公知的计算法。例如图9(a)所示，把代表各个局部区域210、220、230的点分别作为代表点211、代表点221、代表点231，如果单纯地将它们连接，则如图9(b)所示，“路径A”成为连接代表点211和代表点221这两点的直线，“路径B”成为连接代表点211、代表点221和代表点231这三点的曲线，“路径C”成为连接代表点211和代表点231这两点的直线。但是，例如在“正文”局部区域230等中视线会随着文章的进程而移动等，视线不可能直线地跳到下方，所以仅这样单纯连接各局部区域210、220、230的代表点211、221、231是不充分的。

因此，在本发明中，通过设定每个局部区域210、220、230的各自的视线诱导方向和以其概率为大小的假想矢量，在该矢量的前端设定控制点，然后生成通过各局部区域210、220、230的代表点211、221、231和从各局部区域210、220、230选择的路径方向的控制点双方的曲线，从而可以显示自然的视线运动路径，例如图10(a)所示，首先在从表示“标题”的局部区域210的代表点211向表示概率为“0.2”的“正文”的局部区域230的方向上设定与该概率成比例的大小的假想的矢量，并在其前端设定控制点213，并且同样在表示概率为“0.7”的“照片”的局部区域220的方向上也设定与该概率成比例的大小的假想的矢量，并设定控制点212。与此相同，在从表示“照片”的局部区域220的代表点221向概率为“0.3”的区域以外的方向上设定与该概率成比例的大小的假想矢量，并在其前端设定控制点222，并且同样也在表示概率为“0.5”的“正文”的局部区域230的方向上设定与该概率成比例的大小的假想矢量，并设定控制点223。并且与此相同，在从表示“正文”的局部区域230的代表点231在右下方向上设定与该概率成比例的大小的假想矢量，并在其前端设定控制点232。

并且，如该图(b)所示，通过生成顺序连接代表点211、控制点213、代表点232和控制点231的曲线，可以显示上述的自然的视线运动之一的“路径C”。并且同样通过生成顺序连接代表点211、控制点212、代表点221和控制点222的曲线，可以显示上述的自然的视线运动之一的“路径A”。此外，同样通过生成顺序连接代表点211、控制点212、代表点221、控制点223、代表点232和控制点231的曲线，可以显示上述的自然的视线运动之一的“路径B”。

另外，不仅“视线诱导方向”，关于局部区域识别也可以从外部获取使用高级算法进行局部区域识别或对象识别的结果。作为视线诱导信息的最低限度的必要信息，整体被划分为几个部分，只要该部分中具有初期注视概率和视线诱导方向(方向和大小)这种信息即足够，内部不需要进行划分的处理·求出初期注视概率的处理·求出视线诱导方向的处理。

下面，图11～图13表示本发明的其他实施方式。

首先，图11表示在图1所示的视线诱导信息计算单元50和输出单元60之间具有新的路径指定单元70。

该路径指定单元70提供将该视线诱导信息发送给输出单元60的功能，以便限定由用户等指定的路径，并且仅显示相关联的路径，由此可以进行显示清晰的最佳路径的预测。

即，如果局部区域如上述实施方式所示是3个左右，则其整体路径的数量极少，即使计算出并显示所有组合的路径及其概率，用户也能准确把握各个路径，但如果划分后的局部区域的数量变多，则其路径的组合变庞大，显示变得紊乱，将导致不能进行准确的预测。

因此，如本实施方式那样，如果设置用于限定由用户等指定的路径并且仅显示相关联的路径的路径指定单元70，则被显示的路径数量变少且清晰，结果能够进行更准确的预测。

此处，作为使用该路径指定单元70的路径指定方法，例如一般可以是仅限定视线运动的始点或终点的局部区域、或仅限定其双方或经过始点和终点之间的局部区域的指定方法。

并且，如果在视线诱导信息计算单元50的上游侧设置该路径指定单元70，可以减轻该视线诱导信息计算单元50的负荷，能够将其计算结果迅速发送给输出单元60。

并且，作为具体的局部区域指定方法，没有特别限定，例如用户使用鼠标等指向设备来个别指定特定局部区域，或者可以使装置提示所有局部区域的清单，由用户从中任意选择的方法等。

下面，图12所示结构如下，取消图11所示的初期注视概率计算单元30和视线诱导方向计算单元40，同时重新在局部区域识别单元20的下游侧顺序设置向所述初期注视概率计算单元30赋予了可确定出概率最高的局部区域的功能的初期注视概率决定单元80、和向所述视线诱导方向计算单元40赋予了可确定出概率最高的局部区域的功能的视线诱导方向决定单元90。

即，本实施方式如图所示，在初期注视概率计算单元30计算初期注视区域后，确定出一个概率最高的局部区域，把其作为初期注视区域，根据该初期注视区域计算出诱导视线的方向，关于该方向，也是在以各种概率分支的方向中确定出一个概率最高的方向。

针对位于概率最高的方向上的局部区域，进一步反复计算诱导视线的方向的处理，结果，虽然是局部，但可以计算连接概率最高的组合的路径。

即，上述图11的结构通过对用户进行的来自外部的过多组合加以限制来避免组合的庞大化，但根据本实施方式的结构，虽然整体上不是最佳方案，但通过连接局部的最佳方案即可自动求出一种视线运动。

另外，图13表示使用图11中所使用的路径指定单元70取代图12所示的初期注视区域决定单元80，同时使用视线诱导方向计算单元40取代视线诱导方向决定单元90。

即，在图13所示实施方式中，不自动求出初期注视区域，而是可以通过用户来指定初期注视区域(＝计算的开始地点)，由此，例如可以对应“希望知道视线从自己指定的局部区域如何运动”的要求，能够进行更灵活的控制。

并且，特别是与图11所示结构不同的是，相对图11所示的在完成所有组合的计算后，在显示之前限定应该显示的路径，而本实施方式是通过在最初指定路径，而能够省略不必要的计算。

Claims (20)

1.一种视线诱导信息显示装置，用于预测并显示用户在观察一览配置了多个局部区域的图像信息时的视线运动路径，其特征在于，具有：

获取所述每个局部区域的初期注视概率的初期注视概率获取单元；

获取所述每个局部区域的视线诱导方向及其概率的视线诱导方向获取单元；以及

分别显示由所述初期注视概率获取单元获取的每个局部区域的初期注视概率及由所述视线诱导方向获取单元获取的每个局部区域的视线诱导方向及其概率的输出单元。

2.一种视线诱导信息显示装置，用于预测并显示用户在观察一览配置了多个局部区域的图像信息时的视线运动路径，其特征在于，具有：

输入所述图像信息的输入单元；

将所输入的所述图像信息划分为局部区域并进行识别的局部区域识别单元；

计算出由该局部区域识别单元识别的每个局部区域的初期注视概率的初期注视概率计算单元；

计算出由所述局部区域识别单元识别的每个局部区域的视线诱导方向及其概率的视线诱导方向计算单元；

分别显示由所述初期注视概率计算单元计算出的每个局部区域的初期注视概率、和由所述视线诱导方向计算单元计算出的每个局部区域的视线诱导方向及其概率的输出单元。

3.根据权利要求2所述的视线诱导信息显示装置，其特征在于，具有，通过根据所述初期注视概率计算单元和视线诱导方向计算单元的计算结果进行概率的组合，来同时计算出视线运动路径及其概率的视线诱导信息计算单元，

所述输出单元显示由所述视线诱导信息计算单元计算出的视线运动路径。

4.根据权利要求3所述的视线诱导信息显示装置，其特征在于，具有路径指定单元，该路径指定单元仅指定针对被指定的局部区域而限定的路径的视线诱导信息。

5.根据权利要求2～4中任意一项所述的视线诱导信息显示装置，其特征在于，所述输出单元将由所述初期注视概率计算单元计算出的初期注视概率以数值、或不同色彩或色彩浓度的形式分别显示在每个局部区域中。

6.根据权利要求2～4中任意一项所述的视线诱导信息显示装置，其特征在于，所述输出单元以表示方向的图形和数值或表示方向的图形的强度的形式来显示由所述视线诱导方向计算单元计算出的每个局部区域的视线诱导方向和概率。

7.根据权利要求3或4所述的视线诱导信息显示装置，其特征在于，所述输出单元以表示方向的图形的形式来显示由所述视线诱导信息计算单元计算出的视线运动路径。

8.根据权利要求3或4所述的视线诱导信息显示装置，其特征在于，所述输出单元以表示方向的图形和数值或表示方向的图形的强度的形式的组合来显示由所述视线诱导信息计算单元计算出的视线运动路径及其概率。

9.一种视线诱导信息显示方法，用于预测并显示用户在观察一览配置了多个局部区域的图像信息时的视线运动路径，其特征在于，

将所述图像信息划分为局部区域并进行识别，然后分别计算并显示所识别的每个局部区域的初期注视概率、其视线诱导方向及其概率，根据该显示，预测并显示用户观察所述图像信息时的用户的视线运动路径。

10.一种视线诱导信息显示方法，用于预测并显示用户在观察一览配置了多个局部区域的图像信息时的视线运动路径，其特征在于，

将所述图像信息划分为局部区域并进行识别，然后分别计算出所识别的每个局部区域的初期注视概率、其视线诱导方向及其概率，通过根据该计算结果进行概率的组合来同时计算出视线运动路径及其概率，并且根据该显示，预测并显示用户观察所述图像信息时的用户的视线运动路径。

11.根据权利要求9或10所述的视线诱导信息显示方法，其特征在于，将所述用户的视线运动路径限定为在经过所指定的局部区域的路径，进行所述用户的视线运动路径的计算。

12.根据权利要求11所述的视线诱导信息显示方法，其特征在于，从初期注视概率大的局部区域开始顺序进行所述局部区域的指定。

13.根据权利要求9或10所述的视线诱导信息显示方法，其特征在于，把所述多个局部区域中被指定的一个作为始点或终点来进行所述用户的视线运动路径的计算。

14.根据权利要求13所述的视线诱导信息显示方法，其特征在于，指定初期注视概率最大的局部区域为所述路径计算的始点的局部区域。

15.一种视线诱导信息显示方法，使用了用于预测并显示用户在观察一览配置了多个局部区域的图像信息时的视线运动路径的计算机，其特征在于，

所述计算机将所述图像信息划分为局部区域并进行识别，然后分别计算并显示所识别的每个局部区域的初期注视概率、其视线诱导方向及其概率，根据该显示，预测并显示用户观察所述图像信息时的用户的视线运动路径。

16.一种视线诱导信息显示方法，使用了用于预测并显示用户在观察一览配置了多个局部区域的图像信息时的视线运动路径的计算机，其特征在于，

所述计算机将所述图像信息划分为局部区域并进行识别，然后分别计算出所识别的每个局部区域的初期注视概率、其视线诱导方向及其概率，通过根据该计算结果进行概率的组合来同时计算出视线运动路径及其概率，根据该显示，预测并显示用户观察所述图像信息时的用户的视线运动路径。

17.根据权利要求15或16所述的视线诱导信息显示方法，其特征在于，所述计算机将所述用户的视线运动路径限定为经过所指定的局部区域的路径来进行所述用户的视线运动路径的计算。

18.根据权利要求17所述的视线诱导信息显示方法，其特征在于，所述计算机从初期注视概率大的局部区域开始顺序进行所述局部区域的指定。

19.根据权利要求15或16所述的视线诱导信息显示方法，其特征在于，所述计算机把所述多个局部区域中被指定的一个作为始点或终点来进行所述用户的视线运动路径的计算。

20.根据权利要求19所述的视线诱导信息显示方法，其特征在于，所述计算机将初期注视概率最大的局部区域指定为成为所述路径计算的始点的局部区域。

Images