CN101388029B - 用于产生图像显示数据的方法和设备 - Google Patents

用于产生图像显示数据的方法和设备 Download PDF

Info

Publication number
CN101388029B
CN101388029B CN2008101494342A CN200810149434A CN101388029B CN 101388029 B CN101388029 B CN 101388029B CN 2008101494342 A CN2008101494342 A CN 2008101494342A CN 200810149434 A CN200810149434 A CN 200810149434A CN 101388029 B CN101388029 B CN 101388029B
Authority
CN
China
Prior art keywords
image
unit
user
list
degree
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN2008101494342A
Other languages
English (en)
Other versions
CN101388029A (zh
Inventor
稻本浩久
小林幸二
木原酉华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Publication of CN101388029A publication Critical patent/CN101388029A/zh
Application granted granted Critical
Publication of CN101388029B publication Critical patent/CN101388029B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/54Browsing; Visualisation therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

设备产生在显示单元上的显示数据。图像构建单元构建图像列表的图像,所述图像列表包括每一个与以列表形式排列的图像数据文件对应的多个图像。数据输出单元输出图像列表的第一显示数据,然后,当从用户接收到切换命令时,响应于切换命令输出图像列表的第二显示数据。确认计算单元计算指示是否针对图像列表中的每个图像执行了用户确认的确认程度。图像修改单元基于确认程度修改图像列表中的图像。

Description

用于产生图像显示数据的方法和设备
相关申请的交叉引用 
本申请要求于2007年9月12日在日本提交的日本优先权文档2007-236428的优先权,并且通过引用其全部内容将其合并在此。 
技术领域
本发明涉及用于产生图像显示数据的技术。 
背景技术
近来,随着扫描仪的成本的降低以及电子文件法的实施等,已经广泛利用扫描仪将基于纸张的图形或文档扫描为图像来将其数字化。将数字化的图形或文档存储为图像数据文件,这带来节省存储空间的效果。 
然而,很难从在诸如硬盘之类的记录介质中的大量图像数据文件中搜索所期望的图像数据文件。 
为了解决这个问题,已经开发并广泛使用了用于管理图像数据文件的软件,利用该软件,基于存储在记录介质中的多个图像数据文件的图像作为被称为缩略图的缩小了尺寸的图像显示在列表中。利用该软件,用户可以通过缩略图大致识别每个图像,并且通过依靠图像的模糊记忆容易发现所期望的图像数据文件。一旦确认在屏幕上显示的缩略图是所期望的图像,则用户可以通过用鼠标点击缩略图开始图像显示软件来促使图像的细节在屏幕上显示。 
在日本专利No.3614235中公开了一种信息搜索装置,作为利用显示这样的缩略图的列表的技术的装置。 
然而,在常规缩略图列表中,很难指定用户已经确认了的区域。因此,如果用户不正确地滚动缩略图列表,则确认缩略图的操作变得复杂。具体地,如果图像数据文件数量大,则不能同时在屏幕上显示与图像数据文件对应的所有缩略图。因此,在屏幕上显示缩略图列表的一部分中的一些缩略图(下面,称为“显示区域”)。如果需要,则用户利用鼠标等滚动屏幕来移动显示区 域,并且显示之前未被显示在屏幕上的缩略图。如果用户不正确地操作鼠标来快速滚动显示区域,并且用户不能确认缩略图,则用户需要以反方向滚动显示区域来确认缩略图。在这种情况下,最好在反方向上以一次击键(at astroke)滚动显示区域来立即返回到之前状态。然而,用户不能确定返回到之前状态的滚动量。因此,用户需要缓慢地在反方向上滚动显示区域来逐一确认缩略图,直到用户发现用户已经在之前见到过的缩略图为止。其后,如果用户需要确认未被确认的缩略图,则用户需要通过在前向方向上滚动显示区域将显示区域移动到未被确认的区域。在这种情况下,用户需要缓慢地在前向方向上滚动显示区域,并且在一段时间内再次确认用户已经确认过的缩略图,而这是无意义的。 
发明内容
本发明的目的是至少部分解决常规技术中的问题。 
根据本发明的一方面,提供用于产生用来在显示单元上显示图像的显示数据的设备。该设备包括图像构建单元,用于构建图像列表的图像,所述图像列表包括每一个与以列表形式排列的图像数据文件对应的多个图像;数据输出单元,用于输出用于在显示单元上显示图像列表的第一显示的第一显示数据,然后,当从用户接收到用于切换至少显示区域和显示放大倍率之一的切换命令时,响应于切换命令输出用于显示图像列表的第二显示的第二显示数据;确认计算单元,用于计算指示是否针对图像列表中的每个图像执行了用户确认的确认程度;和图像修改单元,用于基于确认程度修改图像列表中的图像。 
当结合附图考虑时,通过阅读本发明的当前优选实施例的下列详细描述,将更好地理解本发明的以上和其它目的、特征、优点和技术和工业重要性。 
附图说明
图1是根据本发明的当前实施例的数据产生设备及其外部设备的方框图; 
图2是图解由数据产生设备产生的图像列表的示意图; 
图3是图1所示的数据产生设备的方框图; 
图4是表示显示器上的屏幕和距离d之间的关系的示意图; 
图5是图3所示的图像排列单元的方框图; 
图6是图解过滤器矩阵的示意图; 
图7是用于解释灰度图像的亮度的相对位置的示意图; 
图8是图解在修改后的图像列表的示意图;和 
图9是图解图8所示的图像列表中的图像的放大示意图。 
具体实施方式
下面参照附图解释本发明的示例性实施例。 
在实施例中,在个人计算机(PC)中安装专用文件管理软件来用作应用本发明的数据产生设备。 
根据本实施例的数据产生设备能够基于存储在具有已经广泛用在一般家庭中的内置扫描仪的多功能打印机(MFP)的硬盘中的图像数据文件产生图像列表。 
图1是根据本实施例的数据产生设备1及其外部设备的方框图。连接到数据产生设备1的是作为通过其用户可以做出指令的输入单元的键盘101和鼠标102。数据产生设备1还连接到作为显示单元的显示器103和具有扫描仪的MFP 100。MFP 100包括作为用于在其中存储由扫描仪扫描为位图格式、联合图像专家组(JPEG)格式、图形交换格式(GIF)等的图像数据文件的图像数据的记录介质的硬盘(未示出)。 
当通过用户操作键盘101或鼠标102启动软件时,数据产生设备1经由网线访问MFP 100的硬盘来获得关于硬盘的文件存储状态的数据,并且使显示器103在其上显示文件存储状态。用户通过参照显示器103上的显示指定硬盘中包含所期望的文件的目录(文件夹)。然后,数据产生设备1经由网线向MFP 100传送用于请求在所指定的目录中存储的图像数据文件的传输的传输请求信号。MFP 100基于传输请求信号将所指定的目录中存储的所有图像数据文件传送到数据产生设备1。 
数据产生设备1在其中在其硬盘中的临时存储区域中存储从MFP 100接收到的图像数据文件。然后,数据产生设备1加载和处理与图像数据文件对应的图像,并且产生其中以矩阵形式排列图像的图像列表的图像。图像列表被部分显示在显示器103上。 
图2是图解由数据产生设备1产生的图像列表的示意图。如图2所示, 以矩阵方式排列的小矩形表示基于图像数据文件产生的图像Ic,而由粗线f围绕的区域表示作为要被显示在显示器103上的图像列表的一部分的显示区域。在图2所示的示例中,显示区域包括6个图像Ic(2(纵向)×3(横向));然而,用户可以将显示区域中的图像的数量最大改变为24(4(纵向)×6(横向))。显示区域的大小是固定的,使得随显示区域中图像数量的增加,图像的分辨率和放大倍率变低。 
用户可以通过使用键盘101或鼠标102在纵向方向上或横向方向上移动显示区域,或者增加或减少在显示区域中显示的图像的数量(所显示的图像的放大倍率)。具体地,用户可以通过移动鼠标102移动在显示器103中的屏幕上显示的鼠标指针。此外,通过使用鼠标102的拖曳操作(切换操作),用户可以在纵向方向上或横向方向上移动(滚动)显示区域。此外,用户可以通过旋转鼠标102的滚轮(切换操作)增加或减少所显示的图像的放大倍率,根据该操作增加或减少所显示的图像的数量。 
图3是图解与数据产生设备1的功能对应的装置的连接状态的数据产生设备1的方框图。如图3所示,数据产生设备1包括图像排列单元2、显示位置确定单元3、处理单元4、确认计算单元5和确认存储单元6。在实践中,数据产生设备1不被制造为专用于产生图像显示数据的设备,而是用作通过执行专用软件产生图像显示数据的设备。因此,在实践中,PC中的中央处理单元(CPU)、随机存取存储器(RAM)、硬盘等用作图3中的装置。 
如图3所示,从MFP 100接收到的多个图像数据文件被输入到图像排列单元2。图像排列单元2基于图像数据文件加载和处理图像,并且以矩阵方式排列图像,由此产生图像列表。 
显示位置确定单元3基于关于用户的操作的信息,确定屏幕上的图像列表的显示区域。确认计算单元5基于关于用户的操作的信息为图像列表中的每个图像计算确认程度。可以根据多个值计算确认程度,并且用于确定用户是否已经确认图像。如果在图像列表中显示的图像数量大,则很难确定用户已经确认了图像列表中的图像的区域。甚至对于在显示器103的屏幕上显示的区域中的图像,在某些情况下,也很难确定已经确认了所有图像。因此,针对每个图像计算确认程度。然后,处理单元4基于由确认计算单元5计算的确认程度执行对图像的修改。 
由确认计算单元5基于从显示器103的屏幕上的显示区域的中心(矩形 屏幕的重心)到图像的中心的距离d(像素)、图像的放大因数z、显示时间t(秒)等计算确认的程度。放大因数z为从0到1,也就是,显示在显示器103上的图像最大具有等于其完整尺寸的尺寸。显示时间t不是关于每个图像的累积显示时间,而是表示关于每次滚动的显示时间的二进制数据值。在典型的字处理器中,以特定行数(number of lines)为单位滚动屏幕。以类似的方式,在数据产生设备1中以特定像素数(如,数十像素)为单位滚动显示区域。当在短时间连续地滚动显示区域时,用户看见图像在屏幕上平滑地移动。在首次滚动后立即开始显示时间t的测量。如果在测量的结果到达预定时间(如0.5秒)之前执行下一滚动,则显示时间t被设置为0。如果在执行下一滚动之前测量的结果到达预定时间,则显示时间t被设置为1。 
图4是表示显示器103的屏幕和距离d之间的关系的示意图。如图4所示,距离d是以像素为单位测量的、屏幕的中心和图像的中心(矩形的重心)之间的长度。由等式(1)计算确认的程度c,其中“W”是屏幕的宽度。 
c = ( - 4 W 2 d 2 + 1 ) × z × t
if(c<0);then;c=0              ...(1) 
在等式(1)中右边的第一项的值随着距离d的减少在正侧增加。假设距离d是从屏幕的中心到左边缘或右边缘,则在右边第一项的值变为0。 
通常,用户经常注视屏幕的中心附近,使得在屏幕中心附近的由用户浏览的图像更可能被用户确认。在显示区域中显示的图像数量随放大因数z的增加而减少。因此,当放大因数z很大时,用户更可能确认图像。作为二进制数据的显示时间t指示图像被用户确认还是仅仅通过连续滚动通过屏幕。 
作为用于确定显示时间t的参考的预定时间被设置为0.5秒作为默认值;然而,根据用户的技能或计算机中的优选项等,预定时间可以在个案中变化,使得其可以根据用户而改变。确认程度c具有最大值255,并且仅为显示区域中的图像计算该值。每次滚动计算确认程度c。如果该确认程度c小于之前计算的确认程度c,则不更新确认程度c。 
图5是图像排列单元2的方框图。如图5所示,图像排列单元2包括特征量计算单元2a和坐标确定单元2b。特征量计算单元2a针对每一份输入图像数据计算表示图像的特征的N维特征量向量。例如,特征量计算单元2a计算每个图像的三种特征量(包括颜色特征量、边缘特征量和纹理(texture) 特征量)作为三维向量。 
关于在图像中每个像素的颜色信息通过从0到255的灰度级表示三基色,即,红(R)、绿(G)和蓝(B)的灰度。如果所有三基色的灰度级为0,则像素是黑色的。如果每一个三基色的灰度级为255,则像素是白色的。以这种方式,将在标准RGB(sRGB)颜色系统中的三维颜色信息赋予每个像素。 
特征量计算单元2a以下列方式计算边缘特征量。首先,图像中的像素矩阵的每个像素与图6所示的3×3像素的过滤器矩阵卷积。该过滤器矩阵中的中心像素的“4”值被赋予图像中的目标像素,并且过滤器矩阵中的中心像素周围的像素值被赋予图像中的目标像素周围的像素。关于整幅图像执行卷积积分来获得边缘图像。其后,通过使用预定阈值(如,128)二进制化像素。接下来,将整幅图像划分为每一个具有相同大小的10×10块。针对每个块计算超出阈值的像素数,其由包含在块中的像素划分,由此获得100维向量。 
由特征量计算单元2a以下列方式计算颜色特征量。首先,基于等式(2),sRGB颜色系统中的图像被转换为Lab颜色系统中的图像。 
R’=R2.2,G’=G2.2,B’=B2.2
X=0.39R’+0.37G’+0.19B’ 
Y=0.21R’+0.70G’+0.09B’ 
Z=0.02R’+0.11G’+0.96B’ 
L * = 116 ( Y Y n ) 1 / 3 - 16
a * = 500 ( ( X X n ) 1 / 3 - ( Y Y n ) 1 / 3 ) ...(2) 
b * = 200 ( ( Y Y n ) 1 / 3 - ( Z Z n ) 1 / 3 )
假设使用D65光源,Xn=95、Yn=100,而Zn=109。然后,以与边缘特征量的计算相同的方式,将图像划分为10×10块,并且针对每一块计算平均Lab,由此获得300维向量(即,100×3=300)。 
由特征量计算单元2a通过使用已知密度共现矩阵(known densityco-occurrence matrix)计算纹理特征量。在密度共现矩阵中,在特定小区域中,用以指示1的像素被呈现在远离具有灰度级图像亮度k的像素的、被定位在δ(r,θ)的相对位置上的频率称为pδ(r,θ)。在sRGB颜色系统中的图像被转 换为灰度级图像。之后,将每个像素的亮度除以16,并且忽略余数,以将每个像素量化为16个等级。然后,基于等式(3)获得16×16维密度共现矩阵,其中“m”是灰度数(在这种情况下,“m”是16)。 
f = Σ k = 0 m - 1 Σ l = 0 m - 1 p δ ( k , l ) ...(3) 
在本实施例中,获得三个密度共现矩阵δ(1,0)、δ(1,45)、δ(1,90),使得最终获得768维特征量向量(即,256×3=768)。密度共现矩阵是表示图像的频率信息的轮廓的特征量,使得密度共现矩阵可以用于计算纹理特征量。傅立叶变换可以用于获得频率信息。如果使用JPEG格式压缩存储在MFP中的图像数据文件,则可以通过使用离散余弦变换(DCT)容易地获得频率信息。 
以上述方式,最终获得1168维特征量向量(即,100+300+768=1168)。边缘信息、颜色信息和纹理信息是具有不同标度(scale)的值,因此最好加权每一个向量。 
坐标确定单元2b基于预先以矩阵方式产生的映射(map)和特征量计算单元2a计算的特征量确定图像列表中的每个图像的位置。该映射存储与特征量相同维度的向量与用于整个图像列表的具有特定大小的网格的每一个交叉相关联的数据。坐标确定单元2b输出与最接近于特征量计算单元2a计算的特征量向量相关联的网格的交叉点的坐标作为输入图像的坐标。 
映射存储单元7在其中存储映射。自组织映射(self organizing)被用作容易地视觉识别多个多值向量的映射,虽然在诸如T.Kohonen的“Self-organized formation of topologically correct feature maps”,BiologicalCybernetics,43:59-69,1982之类的参考文献中公开了其细节,但是在下面进行简要说明。首先,作为最终输出图像的图像被划分为具有特定大小的网格。输入各种图像,并且以与特征量计算单元2a执行的方式相同的方式针对每个图像计算特征量。具有与输入向量维度相同的向量Wxyi(在下面,节点的加权向量)被分配给作为网格的交叉点的每个节点。在加权向量Wxyi中,下标“x”和“y”指示节点的行和列,而下标“i”表示向量的特征值。随机值被预先输入到每个加权向量。然后,搜索具有与从每个图像获得的向量最接近的加权向量的节点(步骤1)。虽然可以使用各种方法测量距离,但在本实施例中使用欧几里得距离。当X行和Y列中的节点最接近于第0输入向量时,通过使用等 式(4)重新计算每个节点的加权向量(步骤2)。 
Wxyi=Wxyi+αh((x,y),(X,Y))(WXYO-WXYi
h ( ( x , y ) , ( X , Y ) ) = exp ( - ( ( x - X ) 2 + ( y - Y ) 2 ) σ 2 )
其中α是指示学习速度的参数(在本实施例中,α=100)。 
重复以上步骤1和步骤2,直到加权向量收敛为止。结果,在图像列表中,具有接近的特征量的图像被彼此接近地排列,并且具有彼此不接近的特征量的图像不被彼此接近地排列。因此,类似的图像在图像列表的每个区域中集中。用户可以通过跟踪被认为与所期望的图像类似的图像来找到所期望的图像,使得与逐一随机确认图像的情况相比,用户可以有效地搜索图像。 
处理单元4基于确认程度c修改图像列表中的每个图像。图8是图解修改后的图像列表的示例的示意图。如图9所示,在图像列表中的每个图像Ic包括矩形原始图像部分Ia和像边框(frame)那样的围绕在原始图像部分Ia周围的边缘部分Ib。原始图像部分Ia是通过基于图像数据文件扩展图像而获得的图像(具有微小的变化)。由图像排列单元2提供边缘部分Ib来围绕原始图像部分Ia。 
例如,处理单元4通过基于确认程度c改变边缘部分Ib的颜色来修改图像Ic。具体地,随确认程度c的增加,边缘部分Ib颜色变黑,并且当确认程度c具有初始值时,所述边缘部分被设置为高亮。当灰度级用于边缘部分Ib的颜色时,可以将0到255的灰度级分别分配给0到255的确认程度c。 
如图8所示,显示具有高确认程度c的图像,即,很可能被用户确认的图像,使得其边缘部分Ib是黑色的。因此,可以通过注视每个图像Ic的边缘部分Ib容易地确定每个图像Ic是否已经被确认。因此,用户可以容易地识别在图像列表中用户已经确认的区域。 
最好以彩色表示边缘部分Ib。例如,如果通过使用确认程度c基于下面的等式(5)确定边缘部分Ib的颜色,则边缘部分Ib的色调根据确认程度c而改变,使得可以更清楚地区分还未被确认的图像与已经被确认的图像。 
R=255-c 
G = 255 - ( 255 128 2 × ( c - 128 ) 2 ) ...(5) 
B=c 
在本发明的实施例中,针对每个图像Ic计算确认程度c;然而,可以针对每个像素计算确认程度c,并且每个图像Ic中的像素的确认程度c可以相加来获得用于每个图像Ic的确认程度c。此外,在本实施例中,边缘部分Ib的颜色根据确认程度c而变化;然而,可以改变原始图像本身的色调。此外,可以在原始图像部分Ia周围提供写入文件名的文件名部分,并且文件名的颜色、大小或字体可以根据确认程度c而变化来代替作为标记图像的边缘部分Ib。 
数据产生设备1包括数据库构建单元(未示出),用于以相关方式构建包括图像数据文件的文件名和确认程度c的图像数据库。一旦用户完成软件的启动,数据库构建单元就基于此时显示的每个图像的确认程度c更新硬件中的图像数据库。之后,从在硬盘中的临时存储区域删除图像数据文件。 
一旦重新启动软件,数据产生设备1在其中在临时存储区域中存储从MFP100接收到的图像数据文件,然后以上述方式产生图像列表。紧接着,数据产生设备1检查在图像数据库中是否存在与图像列表中的每个图像对应的图像。如果在图像数据库中存在对应的图像,则图像的确认程度c的初始值被更新到图像数据库中存储的值,并且基于这些值修改图像的边缘部分Ib。以这种方式,之前图像列表的用户的浏览历史被反映在当前图像列表中。 
在紧接着软件启动之后的图像列表中,由于确认程度c被设置为初始值,因此不在之前图像列表中的图像的边缘部分Ib是亮色的,使得可以容易地将该图像与包含在之前图像列表中的图像相区分。换句话说,在MFP 100中新注册的图像是容易引起注意的。因此,用户可以容易地从图像列表中搜索新注册的图像。即使位于新注册的图像周围的图像的确认程度c相对地小,即,即使很难区分新注册的图像与新注册的图像周围的图像,但是与其它区域相比,该区域中的图像是亮色,这样容易引起用户的注意。因此,用户可以仅注视具有亮色的区域而容易地搜索新注册的图像。 
在某些情况下,用户不希望在紧接着软件的启动之后的当前图像列表中反映之前图像列表中的图像的确认程度c。例如,当在之前图像列表中存在不作为搜索目标的图像时,之前图像列表中确认程度c可能干扰图像的搜索。在这种情况下,用户可以通过操作鼠标102等初始化当前图像列表中的每个图像的确认程度c。 
根据如在修改的示例中的数据产生设备中的表1所示的条件改变距离d 的定义。 
[表1] 
Figure GA20168458200810149434201D00101
当屏幕不滚动并且鼠标指针停止时,假设用户很可能注视屏幕的中心周围的图像。在这种情况下,以与以上实施例相同的方式,距离d被定义为是在屏幕的中心和图像的中心之间。 
当屏幕不滚动同时鼠标指针移动时,假设用户很可能用眼睛跟随移动的鼠标指针而不注视屏幕的中心。在这种情况下,距离d被定义为是在鼠标的指针和图像的中心之间。 
当屏幕滚动并且鼠标指针移动时,即,屏幕被拖曳操作滚动时,假设用户很可能用眼睛跟随除鼠标指针之外的区域。例如,当用户通过拖曳操作移动显示区域到屏幕的右侧时,在用户开始移动鼠标指针进行拖曳操作之前用户眼睛跟随鼠标指针,但是在拖曳操作开始之后在用户希望确认的区域的方向上移动。当屏幕以这样的方式滚动时,用户经常注视屏幕的边缘。因此,当屏幕滚动并且鼠标指针移动时,距离d被定义为是在屏幕的边缘和图像的中心之间。以这样的方式根据用户的操作条件改变距离d的定义,使得与固定距离d的定义的情况相比,可以在确认程度c中更精确地反映用户对图像的注意。 
对文档图像执行光学字符识别(OCR)处理来提取标题以设置文件名或实现全文本搜索的技术已经公知。然而,即使在理想条件下扫描文档,OCR处理的识别率也低于100%,并且特别在包含大量字符的文档中通常出现许多识别错误。例如,如果OCR处理的识别率是98%,在一般的400字符的手稿纸中错误识别8个字符。此外,根据文档的类型和扫描条件实际的识别率被大幅降低。因此,有时在OCR处理中不能搜索文档中的字。此外,存在包含少量字符的许多文档。因此,从图像列表中的图像搜索是更有利的。 
当使用图像的缩略图从相同格式的商业形式图像中搜索特定商业形式图像时,很难区分其它图像与商业形式图像。商业形式图像除了特定空白中的字符之外是相同的,使得它们在缩小的图像中看上去是相同的。因此,在常规缩略图显示中,用户不得不通过图像显示软件逐一重复打开缩略图的图像、将每个图像放大到用户可以识别图像中的字符的大小以及之后关闭图像显示软件的操作。在由根据本实施例的数据产生设备产生的图像列表中,甚至当用户不能确定图像是否是所期望的图像时,用户也在不需要用图像显示软件打开图像的情况下滚动屏幕,并且由于所期望的图像具有更高的确认程度c,因此可以通过滚动确认图像来容易地发现图像。 
本实施例可以应用到可机读记录介质,所述可机读记录介质记录下列用于使计算机用作产生用于在诸如显示器之类的显示单元上显示图像的图像显示数据的数据产生设备的计算机程序。计算机程序使计算机用作执行图像构建处理、显示数据输出处理、确认计算处理和图像修改处理的单元。图像构建处理用于构建包括与彼此排列的多个图像数据文件对应的多个图像的图像列表。显示数据输出处理是这样的处理:用于输出用来显示图像列表的全部或一部分的显示数据,之后根据用户的用于切换显示区域的切换操作或者基于用户的切换操作在图像列表的所有区域中的图像显示单元的屏幕上的图像列表的显示放大倍率,输出用来仅显示一个区域的数据。确认计算处理用于基于用户的切换操作计算确认程度c作为表示图像列表中的每个图像是否被用户确认的指标(index)。图像修改处理用于根据确认计算处理中的计算结果修改图像列表中的图像。 
在数据产生设备中,配置确认计算单元5,使得基于通过鼠标在显示区域的指定操作计算在显示器103上的图像列表中显示图像Ic的显示时间t,并且图像Ic的确认程度c随所计算的显示时间t增加而增加。利用该配置,通过假设当图像Ic的显示时间t长时图像Ic很可能被用户确认,确认程度c可以用作表示图像是否被用户确认的指标(index)。 
此外,配置确认计算单元5,使得基于指定操作计算作为显示器103上的显示放大倍率的放大因数z,并且图像Ic的确认程度c随所计算的放大因数z增加而增加。利用该配置,通过假设当图像Ic的放大因数z大时图像Ic很可能被用户确认,确认程度c可以用作表示图像Ic是否被用户确认的指标。 
此外,配置确认计算单元5,使得基于指定操作计算距离d,并且图像Ic的确认程度c随所计算的距离d减小而增加。利用该配置,通过假设当距离d很小时图像Ic很可能被用户确认,确认程度c可以用作表示图像是否被用户确认的指标。 
此外,显示时间t、放大因数z和距离d被组合来反映确认程度c,使得确认程度c可以用作能够进行量化判断(即,用户确认图像的程度)而不是定性判断(即,用户是否已经确认图像)的指标。 
此外,图像构建单元构建图像列表,使得在每个图像周围提供边缘图像Ib作为标志图像,并且作为图像修改单元的处理单元4根据确认程度c修改边缘图像Ib。利用该配置,用户可以基于边缘部分Ib中的变化识别确认程度c。 
此外,提供用于构建其中相互关联并存储图像数据文件和与图像数据文件对应的确认程度c的图像数据库的数据库构建单元,并且作为图像构建单元的图像排列单元2基于图像数据库构建图像列表。利用该配置,在当前图像列表中可以反映之前图像列表中的图像的确认程度c。 
此外,确认计算单元5基于用户的初始化操作初始化确认程度c,使得当搜索在之前图像列表中不作为搜索目标的图像时,防止之前图像列表中的确认程度c干扰图像搜索。 
此外,在修改的示例中的数据产生设备包括显示用于在显示器103的屏幕上指示用户指定点的鼠标指针的指针显示单元(未示出)。配置确认计算单元5,使得可以基于鼠标指针的运动改变距离d的定义。利用该配置,与固定距离d的定义的情况相比,可以在确认程度c中更精确地反映用户对图像的注意。 
根据本发明的一方面,用户可以容易地识别在图像列表中是否已经确认了每个图像。 
虽然为了完整和清楚的公开,已经关于特定实施例描述了本发明,但是所附权利要求不限于此,而是应该理解为本领域技术人员可以进行各种修改和替换,而其落入这里阐述的基本教导中。 

Claims (9)

1.一种产生用于在显示单元上显示图像的显示数据的设备,该设备包括:
图像构建单元,用于构建将多个图像以排列的方式配设的图像列表,所述多个图像分别对应于多个图像数据文件;
数据输出单元,用于输出用于在显示单元上显示所述图像列表的第一显示的第一显示数据,然后,当从用户接收到用于切换显示区域和显示放大倍率中的至少一个的切换操作时,响应于所述切换操作输出用于显示所述图像列表的第二显示的第二显示数据;
确认计算单元,用于基于所述切换操作分别针对所述图像列表中的所述多个图像计算其确认程度,所述确认程度是指所述图像是否已被用户确认的指标;和
图像修改单元,用于基于所述确认程度修改图像列表中的所述图像,
其中,随着所述确认程度增加,该图像修改单元增加所述图像列表中的所述图像的修改程度。
2.如权利要求1所述的设备,还包括时间测量单元,用于基于所述切换操作计算所述图像列表中的图像的显示时间,其中
该确认计算单元基于由所述时间测量单元计算的所述显示时间计算确认程度。
3.如权利要求1所述的设备,还包括放大测量单元,用于基于所述切换操作计算所述图像列表中的每个图像的显示放大倍率,其中
该确认计算单元基于由所述放大测量单元计算的所述显示放大倍率计算所述确认程度。
4.如权利要求1所述的设备,还包括距离计算单元,用于基于所述切换操作计算显示单元的屏幕中心和所述图像列表中的图像之间的距离,其中
该确认计算单元基于由所述距离计算单元计算的所述距离计算确认程度。
5.如权利要求1所述的设备,其中
所述图像构建单元利用所述图像中或其周围的标志图像构建所述图像列表的图像,和
所述图像修改单元基于所述确认程度修改所述标志图像。
6.如权利要求1所述的设备,还包括构建图像数据库的数据库构建单元,所述图像数据库将所述多个图像数据文件分别与所述确认程度对应地存储,其中
该图像构建单元基于存储在所述图像数据库中的所述图像数据文件和所述确认程度构建所述图像列表。
7.如权利要求6所述的设备,其中当从用户接收到初始化命令时,所述确认计算单元初始化存储在所述图像数据库中的所述确认程度。
8.如权利要求4所述的设备,还包括指针显示单元,用于显示用来在显示单元上指示用户指定点的指针,其中
所述距离计算单元计算作为所述显示单元的屏幕中心与所述图像列表中的图像之间的距离的第一距离和作为所述指针与所述图像之间的距离的第二距离,和
所述确认计算单元基于所述指针的运动利用从所述第一距离和所述第二距离中选择的一个距离来计算所述确认程度。
9.一种产生用于在显示单元上显示图像的显示数据的方法,该方法包括:
构建将多个图像以排列的方式配设的图像列表,所述多个图像分别对应于多个图像数据文件;
输出用于在显示单元上显示所述图像列表的第一显示的第一显示数据,然后,当从用户接收到用于切换显示区域和显示放大倍率中的至少一个的切换操作时,响应于所述切换操作输出用于显示图像列表的第二显示的第二显示数据;
基于所述切换操作分别针对所述图像列表中的所述多个图像计算其确认程度,所述确认程度是指所述图像是否已被用户确认的指标;和
基于所述确认程度修改所述图像列表中的所述图像,
其中,随着所述确认程度增加,增加所述图像列表中的所述图像的修改程度。
CN2008101494342A 2007-09-12 2008-09-12 用于产生图像显示数据的方法和设备 Expired - Fee Related CN101388029B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP236428/07 2007-09-12
JP2007236428A JP5168619B2 (ja) 2007-09-12 2007-09-12 画像表示データ生成装置及び画像表示データ生成方法

Publications (2)

Publication Number Publication Date
CN101388029A CN101388029A (zh) 2009-03-18
CN101388029B true CN101388029B (zh) 2013-06-26

Family

ID=40431894

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2008101494342A Expired - Fee Related CN101388029B (zh) 2007-09-12 2008-09-12 用于产生图像显示数据的方法和设备

Country Status (3)

Country Link
US (1) US8581936B2 (zh)
JP (1) JP5168619B2 (zh)
CN (1) CN101388029B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5214367B2 (ja) * 2008-08-08 2013-06-19 株式会社東芝 特徴量抽出装置、特徴量抽出方法、画像処理装置、及び、プログラム
US8670618B2 (en) * 2010-08-18 2014-03-11 Youwho, Inc. Systems and methods for extracting pedigree and family relationship information from documents
JP5755064B2 (ja) * 2011-07-08 2015-07-29 株式会社ドワンゴ 会場設置ディスプレイシステム
WO2013080373A1 (ja) * 2011-12-02 2013-06-06 株式会社 東芝 医用画像観察装置
JP6171353B2 (ja) 2013-01-18 2017-08-02 株式会社リコー 情報処理装置、システム、情報処理方法およびプログラム
JP6255944B2 (ja) 2013-11-27 2018-01-10 株式会社リコー 画像解析装置、画像解析方法及び画像解析プログラム
CN105550923A (zh) 2015-12-23 2016-05-04 阿里巴巴集团控股有限公司 在产品货架上展示网络产品的方法和装置
CN113628571A (zh) * 2020-05-07 2021-11-09 广州汽车集团股份有限公司 玻璃盖板显示屏一体黑显示方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1992063A (zh) * 2005-12-26 2007-07-04 上海乐金广电电子有限公司 标题列表内的广播节目图像显示装置及方法
CN101047756A (zh) * 2006-03-30 2007-10-03 富士施乐株式会社 图像处理装置及图像数据列表显示方法

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0580960A (ja) * 1991-09-20 1993-04-02 Nippon Telegr & Teleph Corp <Ntt> 対話型システムにおける画面選択支援方式
JP3614235B2 (ja) 1996-03-19 2005-01-26 富士通株式会社 情報探索装置
JPH1165812A (ja) * 1997-08-20 1999-03-09 Nippon Telegr & Teleph Corp <Ntt> 情報表示装置および情報表示プログラムを記録した記録媒体
JP3567084B2 (ja) * 1998-06-30 2004-09-15 シャープ株式会社 電子ブック装置
JP2000105772A (ja) * 1998-07-28 2000-04-11 Sharp Corp 情報管理装置
JP3836261B2 (ja) * 1998-08-10 2006-10-25 株式会社リコー ファイルシステム
JP2000076271A (ja) * 1998-08-31 2000-03-14 Sony Corp 情報処理装置および方法、並びに提供媒体
JP2001008149A (ja) * 1999-06-21 2001-01-12 Casio Comput Co Ltd 画像表示装置及び画像表示処理プログラムを記憶した記憶媒体
US7434177B1 (en) * 1999-12-20 2008-10-07 Apple Inc. User interface for providing consolidation and access
US6859909B1 (en) * 2000-03-07 2005-02-22 Microsoft Corporation System and method for annotating web-based documents
US6628283B1 (en) * 2000-04-12 2003-09-30 Codehorse, Inc. Dynamic montage viewer
JP2002044218A (ja) * 2000-07-27 2002-02-08 Interactive Program Guide:Kk 表示画面制御装置及び表示画面制御方法
JP2002044555A (ja) * 2000-07-28 2002-02-08 Sony Corp 情報表示制御装置および方法
US6704034B1 (en) * 2000-09-28 2004-03-09 International Business Machines Corporation Method and apparatus for providing accessibility through a context sensitive magnifying glass
JP2002202463A (ja) * 2000-12-27 2002-07-19 Nikon Corp 画像表示装置、画像表示装置を備えた顕微鏡システムおよび記録媒体
JP3826039B2 (ja) * 2002-01-22 2006-09-27 キヤノン株式会社 信号処理装置
JP4235393B2 (ja) * 2002-03-11 2009-03-11 富士フイルム株式会社 インデックス画像表示制御装置
JP2004096329A (ja) * 2002-08-30 2004-03-25 Nikon Corp 電子カメラ
JP3892407B2 (ja) * 2003-03-25 2007-03-14 富士通株式会社 撮影装置
US7420540B2 (en) * 2003-12-01 2008-09-02 Olbrich Craig A Determining positioning and/or relative movement of graphical-user interface element based on display images
JP4533791B2 (ja) * 2005-04-19 2010-09-01 株式会社日立製作所 情報閲覧装置
US7519469B2 (en) * 2005-04-28 2009-04-14 Alpine Electronics, Inc. Display method and apparatus for navigation system
JP2007025457A (ja) * 2005-07-20 2007-02-01 Nikon Corp 画像表示プログラム、および画像表示装置
US8120577B2 (en) * 2005-10-28 2012-02-21 Tobii Technology Ab Eye tracker with visual feedback
JP2007286864A (ja) 2006-04-17 2007-11-01 Ricoh Co Ltd 画像処理装置、画像処理方法、プログラムおよび記録媒体
US20080134070A1 (en) 2006-11-09 2008-06-05 Koji Kobayashi Image processing apparatus and image processing method
JP4367663B2 (ja) * 2007-04-10 2009-11-18 ソニー株式会社 画像処理装置、画像処理方法、プログラム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1992063A (zh) * 2005-12-26 2007-07-04 上海乐金广电电子有限公司 标题列表内的广播节目图像显示装置及方法
CN101047756A (zh) * 2006-03-30 2007-10-03 富士施乐株式会社 图像处理装置及图像数据列表显示方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JP特开2000-341644A 2000.12.08

Also Published As

Publication number Publication date
US20090067747A1 (en) 2009-03-12
JP2009069365A (ja) 2009-04-02
CN101388029A (zh) 2009-03-18
US8581936B2 (en) 2013-11-12
JP5168619B2 (ja) 2013-03-21

Similar Documents

Publication Publication Date Title
CN101388029B (zh) 用于产生图像显示数据的方法和设备
US8812978B2 (en) System and method for dynamic zoom to view documents on small displays
US10984295B2 (en) Font recognition using text localization
CN100517316C (zh) 图像文件一览显示装置
US8331677B2 (en) Combined image and text document
CN1940912B (zh) 文件作成系统、文件作成方法
US7930634B2 (en) Document display apparatus and document display program
US7623711B2 (en) White space graphs and trees for content-adaptive scaling of document images
JP2776295B2 (ja) 画像インデックス生成方法及び画像インデックス生成装置
US8515176B1 (en) Identification of text-block frames
US8612848B2 (en) N-up display method and apparatus, and image forming device thereof
US9177199B2 (en) Semantic magazine pages
US20140312125A1 (en) One-dimensional barcode resizing device, method, non-transitory computer-readable medium, and one-dimensional barcode system
US20080244384A1 (en) Image retrieval apparatus, method for retrieving image, and control program for image retrieval apparatus
US9734132B1 (en) Alignment and reflow of displayed character images
US6999636B1 (en) Image search method and apparatus
US7130492B2 (en) Image processing apparatus and method, and program
JP2006184415A (ja) 画像処理装置、画像処理プログラム及び画像処理方法
US20070002339A1 (en) Image processing apparatus and image processing method
JP2001134765A (ja) 画像検索方法及び装置
Chiu et al. Content based automatic zooming: Viewing documents on small displays
JP2001143080A (ja) 画像検索方法及び装置
JP2009122841A (ja) 画像一覧イメージ構築装置、記録媒体及び画像形成装置
JP6485579B2 (ja) 表示処理装置、画面表示方法およびコンピュータープログラム
JP2004102393A (ja) 画像処理システム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20130626

Termination date: 20190912

CF01 Termination of patent right due to non-payment of annual fee