CN116941861A - 脚形测量装置以及计算机可读存储介质 - Google Patents

Abstract

本发明提供一种脚形测量装置以及计算机可读存储介质，能够简单地执行高精度的脚形测量。在脚形测量装置中，获取由拍摄部从多个角度拍摄受检者的脚所得的多个脚图像，生成脚的三维模型。显示控制部使目标标记与状态标记作为引导对象而重叠显示于由拍摄部所拍摄的影像，所述目标标记表示增强现实空间内的拍摄部的拍摄视点相对于受检者的脚呈规定角度的视点位置，所述状态标记表示增强现实空间内的拍摄部的当前的拍摄视点的状态。图像获取部获取增强现实空间内的拍摄部的拍摄视点处于目标标记的显示状态以及状态标记的显示状态满足规定条件的拍摄视点时的图像，来作为从规定角度拍摄的脚图像。

Description

脚形测量装置以及计算机可读存储介质

技术领域

本发明涉及一种脚形测量装置。本发明尤其涉及一种通过图像处理来测量受检者的脚形的装置以及计算机可读存储介质。

背景技术

穿着相对于脚为不适当的尺寸的鞋不仅会使步行困难，而且还可能对健康造成影响。近年来，在线购物时购买鞋也变得普遍，但与在店里购买不同，未试穿便购买的情况多。未试穿便购买的结果是，若尺寸不适当的鞋购买增加，则会导致退货增加或购买者的满意度下降，因此期望购买者自身基于适当的脚尺寸的测定进行购买。已知有一种即便在自家等店铺以外的场所也能够测量顾客自身的脚尺寸的技术(例如参照专利文献1)。

[现有技术文献]

[专利文献]

专利文献1：国际公开第2020/059716号

发明内容

[发明所要解决的问题]

根据鞋的种类，即便穿尺寸稍许宽松的鞋也多无问题。但是，在运动鞋的情况下或者脚的形状有特征的人的情况下，必须更准确地识别脚的尺寸或脚的形状的特征，以购买符合此种尺寸或形状的鞋。另一方面，要利用计算机来越精密地分析脚尺寸或脚的形状，则此分析处理会要求计算机越高的处理能力或越长的处理时间，普通人可能无法轻易地测量。

本发明是有鉴于此种状况而完成，其目的在于提供一种能够简单地执行高精度的脚形测量的技术。

[解决问题的技术手段]

为了解决所述问题，本发明的一形态的脚形测量装置包括：拍摄部；空间设定部，基于由拍摄部所拍摄的图像来设定增强现实空间；显示控制部，使由拍摄部所拍摄的图像与为了引导拍摄流程而配置于增强现实空间的引导对象显示于画面；图像获取部，获取由拍摄部从多个角度拍摄受检者的脚所得的多个脚图像；模型生成部，基于多个脚图像来生成受检者的脚的三维模型；以及结果输出部，输出基于所生成的三维模型的测量结果。显示控制部使目标标记与状态标记作为引导对象而重叠显示于由拍摄部所拍摄的影像，所述目标标记表示增强现实空间内的拍摄部的拍摄视点相对于受检者的脚呈规定角度的视点位置，所述状态标记表示增强现实空间内的拍摄部的当前的拍摄视点的状态，图像获取部获取增强现实空间内的拍摄部的拍摄视点处于目标标记的显示状态以及状态标记的显示状态满足规定条件的拍摄视点时的图像，来作为从规定角度拍摄的脚图像。

另外，以上的构成元件的任意组合、将本发明的表达在方法、装置、系统、计算机程序、数据结构、记录介质等之间转换的形态也作为本发明的形态而有效。

[发明的效果]

根据本发明，能够简单地执行高精度的脚形测量。

附图说明

图1是表示利用脚形测量系统的脚形测量的执行中的受检者的姿势的图。

图2是表示基准片材的外观的图。

图3的(a)、图3的(b)是表示相对于脚的多个拍摄方向的图。

图4是表示用户终端以及脚形测量服务器的基本结构的功能框图。

图5是表示在脚形测量的开始时对基准片材进行图像识别的工序的画面例的图。

图6是表示基准片材的第一区域中所含的颜色成分范围的图。

图7是表示第一拍摄方向上的拍摄工序的画面例的图。

图8是表示第二拍摄方向至第七拍摄方向上的拍摄工序的开始画面例的图。

图9是表示第二拍摄视点的对位工序的画面例的图。

图10是表示第二拍摄方向上的倾斜调整工序的画面例的图。

图11是表示指示拍摄部的静止的画面例的图。

图12是表示了表示来自第二拍摄方向的脚图像的获取完成的画面例的图。

图13是表示对并非成为测量对象的另一只脚的放置处进行引导的画面例的图。

图14是表示三维同源模型以及规定数量的轮廓点的图。

图15是表示将三维同源模型重叠于从脚图像中检测的脚轮廓的状态的图。

图16的(a)、图16的(b)是表示对脚趾的轮廓的凸包处理的图。

图17是表示脚轮廓中所含的多个特征检测点的图。

图18是表示输出脚形的三维模型以及测量结果的画面例的图。

图19是表示第二实施方式中的脚形测量的过程的流程图。

图20是例示第二实施方式中的测定模式选择画面的图。

图21是例示第二实施方式中的单脚设定画面的图。

图22是表示第二实施方式中的第二拍摄视点至第七拍摄视点处的拍摄开始时的第一画面例的图。

图23是表示第二实施方式中的第二拍摄视点至第七拍摄视点处的拍摄开始时的第二画面例的图。

图24是表示第二实施方式中的倾斜调整工序的画面例的图。

图25是表示第二实施方式中的第二拍摄视点的对位工序的画面例的图。

图26是表示第二实施方式中的第五拍摄视点至第七拍摄视点的对位工序的画面例的图。

图27是表示第二实施方式中的指示拍摄部的静止的画面例的图。

[符号的说明]

11：受检者

12：单脚

20：基准片材

22：第一区域

24：第二区域

26：基准标记

29：第二脚形标记

40：拍摄部

42：图像获取部

44：空间设定部

45：模型生成部

46：显示控制部

47：结果输出部

64：图像获取部

66：模型生成部

110：画面

129：方向示意标记

132：方向示意标记

140：三维同源模型

170：三维模型

具体实施方式

以下，对于本发明，基于优选的实施方式，一边参照各附图一边例示性地说明脚形测量系统以及脚形测量程序。在实施方式、变形例中，对于相同或同等的构成元件标注相同的符号，并适当省略重复的说明。

(第一实施方式)

图1表示利用脚形测量系统的脚形测量的执行中的受检者的姿势。受检者11在将作为测量对象的自身的单脚12放置于基准片材20的规定位置的状态下，利用手持的用户终端10的摄像机来拍摄单脚12以测量脚形。本实施方式中，受检者11将单脚12放置于基准片材20上，一边将用户终端10的画面朝上而查看画面显示内容，一边按照所显示的引导而以七个拍摄方向14来对单脚12进行拍摄，由此来测量单脚12的脚形。用户终端10例如是智能手机等移动终端，一边查看画面显示一边利用内置的摄像机来拍摄脚下。当单脚的测量结束时，受检者11将另一只脚放置于基准片材20，按照同样的流程来测量脚形。

以下说明受检者11自身拍摄受检者11的单脚12的自拍模式下的流程，但也可设为他人协助拍摄模式而由他人代替受检者11来拍摄受检者11的单脚12。本实施方式中，前提是，不使用借助激光雷达(Light Detection And Ranging，LiDAR)等激光图像检测的三维测量功能，而是基于利用摄像机功能所拍摄的图像来生成三维模型。

图中，将基准片材20以及单脚12的前后方向设为y轴，将基准片材20以及单脚12的宽度方向设为x轴，将相对于铺放基准片材20的xy平面的垂直轴设为z轴。在以后的图中，也以将基准片材20作为基准而包含与图1相同的x轴、y轴、z轴的三维空间为前提进行说明。在用户终端10的画面上，在与将基准片材20作为基准的三维空间对应的增强现实空间即由摄像机所拍摄的现实空间的影像上，显示使对象重叠于虚拟三维空间上的位置坐标的图像。

图2表示基准片材20的外观。基准片材20是为了检测增强现实空间内的位置坐标以及基准长度而与受检者11的单脚12一同成为拍摄对象的大致正方形的纸制或乙烯制的片材或垫子。基准片材20包含第一区域22与第二区域24。基准片材20例如由一边为40cm～45cm的正方形所形成。

第一区域22是放置受检者11的单脚12的区域，且是施予有相对于单脚12的颜色而易成为补色关系的规定颜色的区域。所谓第一区域22的规定颜色，例如是指蓝色或绿色。对于本实施方式的第一区域22，施予有淡蓝色作为规定颜色。第一区域22具有沿着y轴的纵长的长方形状，且周围被第二区域24包围。沿着x轴的第一区域22的横宽例如为25cm左右，具有受检者11的平均脚宽的两倍以上。使第一区域22的横宽具备下述程度的余量，即，当从单脚12的侧斜上方利用摄像机来拍摄单脚12时，从拍摄视点看能够越过脚背而看到第一区域22的一部分。由此，在拍摄以第一区域22作为背景的脚时，以第一区域22的颜色来包围脚的周围，由此能够更简便地检测脚的轮廓。

第二区域24是配置有为了检测增强现实空间内的位置坐标而参照的规定形状的多个基准标记26的区域。作为基准标记26，配置有大、中、小的各种尺寸的标记(大标记26a、中标记26b、小标记26c)。基准标记26是也被称作增强现实(Augmented Reality，AR)标记的标识，例如已知有在开源计算机视觉库(Open Source Computer Vision Library，OpenCV)中公开的ArUco等程序模块。

在本实施方式的第二区域24中，配置有约300个ArUco的AR标记作为正方形的基准标记26。在所配置的所有基准标记26分别绘制有唯一形状的图形。对每个基准标记26预先分配有识别符(IDentification，ID)，通过借助图像识别来识别基准标记26，从而能够确定被分配给所述基准标记26的ID。由于各基准标记26的位置坐标与ID的对应关系已预先存储，因此通过利用摄像机而借助图像识别来确定基准标记26的形状，从而能够确定与所述基准标记26的ID对应的位置坐标。

基于映照在拍摄图像内的多个基准标记26的位置坐标与它们的间隔或配置，映照在增强现实空间内的拍摄图像内的基准片材20的各部的长度成为基准长度。由于现实世界中的长度已预先判明，因此基准片材20的各部的长度例如多个基准标记26彼此的间隔或基准片材20的各边的长度等可通过将增强现实空间内的单脚12的各部的长度作为基准长度来与基准片材20进行对比而求出。

在图2的俯视中，在单脚12被放置于基准片材20的状态下，从七个拍摄方向进行拍摄。将图的左右方向设为x轴，将上下方向设为y轴，将相对于铺放有基准片材20的xy平面的垂直轴设为z轴。第一拍摄方向31是在第一区域22的前半部分的中央附近即单脚12的中指周边或脚背中心的正上方将用户终端10设为水平且将拍摄方向设为大致正下方的方向。

第二拍摄方向32是在单脚12的右斜前方的上方使用户终端10倾斜，使摄像机朝斜下方朝向单脚12的右前部的方向。第三拍摄方向33是在单脚12的右侧方的上方使用户终端10倾斜，使摄像机朝斜下方朝向单脚12的右侧部的方向。第四拍摄方向34是在单脚12的右斜后方使用户终端10倾斜，使摄像机朝斜下方朝向单脚12的右后部的方向。

第五拍摄方向35是在单脚12的左斜前方的上方使用户终端10倾斜，使摄像机朝斜下方朝向单脚12的左前部分的方向。第六拍摄方向36是在单脚12的侧方的斜上方使用户终端10倾斜，使摄像机朝斜下方朝向单脚12的左侧部的方向。第七拍摄方向37是在单脚12的左斜后方的上方使用户终端10倾斜，使摄像机朝斜下方朝向单脚12的左后部的方向。另外，本实施方式中，表示了从七个拍摄方向进行拍摄的示例，但拍摄方向并不限于七方向。例如也可设为从八方向以上的拍摄方向进行拍摄的规格。此时，尽管拍摄的工序数增加，但拍摄方向越多，则有可能能够精度更好地测量脚形。另一方面，也可设为从小于七方向的拍摄方向进行拍摄的规格。此时，拍摄方向越少，则有可能越难以确保良好的脚形的测量精度，但有能够减少拍摄的工序数的优点。

图3的(a)、图3的(b)表示相对于脚的多个拍摄方向。图3的(a)表示单脚12的右侧视时的拍摄方向。第一拍摄方向31是在从单脚12的脚趾至脚背的正上方将用户终端10的上端朝向前方设为水平，且将摄像机的方向设为大致垂直的方向。另外，在利用他人协助拍摄模式而由他人进行拍摄的情况下，由于是从受检者11的对面使用户终端10的上端朝向受检者11进行拍摄，因此显示将自拍模式下的画面内容上下倒转的画面内容。以下，在其他拍摄方向上，在他人协助拍摄模式下也显示将自拍模式下的画面内容上下倒转的画面内容。第二拍摄方向32是在单脚12的右斜前方的上方以降低用户终端10的上端的方式使其倾斜，使摄像机朝斜下方朝向单脚12的右前部的方向。第三拍摄方向33是在单脚12的右侧方的上方以降低用户终端10的上端的方式使其倾斜，使摄像机朝斜下方朝向单脚12的右侧部的方向。第四拍摄方向34是在单脚12的右斜后方以降低用户终端10的上端的方式使其倾斜，使摄像机朝斜下方朝向单脚12的右后部的方向。

图3的(b)表示单脚12的左侧视时的拍摄方向。第一拍摄方向31是从单脚12的脚趾或脚背的上方朝正下方俯瞰的方向。第五拍摄方向35是在单脚12的左斜前方的上方以降低用户终端10的上端的方式使其倾斜，使摄像机朝斜下方朝向单脚12的左前部分的方向。第六拍摄方向36是在单脚12的左侧方的斜上方以降低用户终端10的上端的方式使其倾斜，使摄像机朝斜下方朝向单脚12的左侧部的方向。第七拍摄方向37是在单脚12的左斜后方的上方以降低用户终端10的上端的方式使其倾斜，使摄像机朝斜下方朝向单脚12的左后部的方向。另外，关于各拍摄方向即拍摄视点的高度或角度，根据受检者11的身高或身体可动性，在初始的拍摄视点的高度或角度的设定下，也有时姿势变得别扭而难以拍摄，因此也可根据受检者11的身高来变更。例如，也可在测量开始前输入受检者11的身高、年龄、体重指数(Body Mass Index，BMI)等身体信息，并基于预先存储的表示身体信息与拍摄方向的对应关系的表来设定适当的拍摄角度。而且，在检测到在后述的各拍摄方向上的拍摄中再三重新拍摄，或者直至条件充足为止需要长时间的状况时，也可进行提高拍摄视点的高度这一拍摄方向的变更。

图4是表示用户终端10以及脚形测量服务器60的基本结构的功能框图。脚形测量系统100包括经由无线通信或国际互联网等网络18而连接的用户终端10以及脚形测量服务器60。受检者11使用用户终端10的摄像机功能来拍摄自身的单脚12，将所拍摄的图像经由网络18而发送至脚形测量服务器60。脚形测量服务器60基于所收到的脚图像来生成脚形的三维模型并发送至用户终端10，在用户终端10的画面上显示三维模型以及基于此三维模型所测量的脚尺寸等信息。本图中描绘了着眼于功能的框图，这些功能块能够通过硬件、软件或它们的组合而以各种形式来实现。

用户终端10以及脚形测量服务器60可包含移动终端或计算机、以及存储于移动终端或计算机中的程序，所述移动终端或计算机包含中央处理器(Central ProcessingUnit，CPU)、图形处理器(Graphics Processing Unit，GPU)、随机存取存储器(RandomAccess Memory，RAM)、只读存储器(Read Only Memory，ROM)、辅助存储装置、显示装置、通信装置、摄像机模块等。例如，也可以下述形式构成：从用户终端10侧执行的程序经由网络18来执行在脚形测量服务器60侧执行的程序处理。

但也可构成为，利用具备用户终端10与脚形测量服务器60的所有功能的单个装置以及程序来实现脚形测量系统100，受检者11能够通过直接操作此装置来实现脚形测量程序。作为单个装置，并不限于个人计算机，也可以智能手机等移动终端或平板终端与存储在这些计算机或终端中的程序的形式来提供。或者，也可以设置在鞋的销售店中而由店员等辅助者来操作的终端与存储于所述终端中的程序的形式来实现。

用户终端10包括拍摄部40、图像获取部42、操作处理部43、空间设定部44、模型生成部45、显示控制部46、结果输出部47以及通信部48。拍摄部40拍摄受检者11的单脚12以及基准片材20的图像。拍摄部40可在硬件上包含例如内置于智能手机的摄像机模块。

空间设定部44从由拍摄部40所拍摄的图像中通过图像识别来识别基准片材20的图像内的位置，以所识别出的基准片材20的位置为基准来设定增强现实空间。图像获取部42获取由拍摄部40从多个角度拍摄受检者11的单脚12所得的多个脚图像。图像获取部42获取用户终端10的方向或倾斜角度满足规定的多个拍摄方向以及角度的条件时的图像来作为脚图像。用户终端10的方向或倾斜角度既可由内置于用户终端10的加速度传感器等运动传感器来检测，也可通过从拍摄部40所拍摄的影像中对基准片材20的位置进行图像识别而检测。模型生成部45将图像获取部42所获取的多个脚图像经由通信部48而发送至脚形测量服务器60。脚形测量服务器60基于多个脚图像来生成三维模型，并将脚形的测量结果返回模型生成部45。模型生成部45包含颜色成分检测部49。颜色成分检测部49从由拍摄部40所拍摄的图像中检测对基准片材20的第一区域22施予的规定颜色的颜色成分范围并予以存储。颜色成分检测部49将颜色成分范围的信息经由通信部48而发送至脚形测量服务器60。

操作处理部43受理操作输入来作为一连串的脚形测量程序中的来自受检者11的指示。显示控制部46使由拍摄部40所拍摄的图像与为了引导脚形测量程序的拍摄流程而配置于增强现实空间的引导对象显示于画面。结果输出部47输出基于三维模型的脚形以及基于所述脚形的脚尺寸等各种测量结果。更具体而言，经由显示控制部46所进行的控制而使脚形的三维模型以及测量结果显示于画面。

图像获取部42、空间设定部44、模型生成部45、结果输出部47可在硬件上包含例如CPU、GPU、RAM、ROM等。操作处理部43以及显示控制部46可在硬件上包含例如触摸屏等。通信部48可在硬件上包含例如无线局域网(Local Area Network，LAN)通信或移动电话通信等无线通信模块。

脚形测量服务器60包括通信部62、图像获取部64、模型生成部66以及存储部68。图像获取部64经由通信部62而从用户终端10接收多个脚图像。模型生成部66基于图像获取部42所获取的多个脚图像来生成脚形的三维模型，并经由通信部62而将三维模型返送至用户终端10的模型生成部45。用户终端10的模型生成部45通过与脚形测量服务器60的模型生成部66的协作来生成脚形的三维模型。模型生成部66包含脚轮廓检测部70、模型适用部72、凸包处理部74以及最佳化处理部76。但具备脚轮廓检测部70、模型适用部72、凸包处理部74、最佳化处理部76的功能的模型生成部66的结构不过是例示，也可使模型生成部45具备模型生成部66的一部分或全部功能。关于在模型生成部45与模型生成部66中分别具备哪种功能，可考虑各种变形。存储部68存储三维同源模型，所述三维同源模型规定了三维空间内的平均性的脚的解剖学特征点的坐标群。关于模型生成部66的处理以及三维同源模型将后述。

通信部62可在硬件上包含例如有线LAN等通信模块。图像获取部64、模型生成部66可在硬件上包含例如CPU、GPU、RAM、ROM等。存储部68可在硬件上包含例如硬盘等辅助存储介质。

图5表示在脚形测量的开始时对基准片材20进行图像识别的工序的画面例。首先，操作用户终端10的用户启动脚形测量程序，在未图示的画面中输入先测量右脚与左脚的哪一个。接下来，如图5的画面例那样，在尚未将脚放置于基准片材20的状态下利用用户终端10的摄像机进行拍摄。画面110包含图像区域111以及文字区域112。在图像区域111中，实时显示由摄像机所拍摄的影像。在文字区域112中显示为“请识别基准片材”，以敦促基准片材20的识别以及检测。

当用户使摄像机靠近基准片材20以将基准片材20整体收敛于画面110内的图像区域111中时，模型生成部45的颜色成分检测部49从影像中对基准片材20进行图像识别。此时，颜色成分检测部49从所拍摄的影像中识别基准片材20的整体形状以及位置，并且检测对第一区域22施予的规定颜色的颜色成分范围。对于本实施方式的基准片材20的第一区域22，作为与脚的颜色存在差异的颜色，一样地施予有淡蓝色，但根据房间的亮度或照明的照射情况，映照于影像中的淡蓝色的饱和度或明度不同，因此对实际上映照于影像中的淡蓝色的颜色成分范围进行检测。模型生成部45将颜色成分范围的信息发送至模型生成部66。以后，模型生成部66的脚轮廓检测部70基于预先检测的颜色成分范围来从影像中识别第一区域22，并且从作为背景的第一区域22中提取重叠映照于第一区域22的脚的轮廓。

如上所述，颜色成分检测部49在三维模型的生成之前检测从由拍摄部40所拍摄的图像识别出的基准片材20中所含的规定颜色的颜色成分范围。脚轮廓检测部70基于所检测出的颜色成分范围来从脚图像中识别受检者11的脚与第一区域22的边界，以检测受检者11的脚轮廓。当基准片材20的识别以及第一区域22的颜色成分范围的检测结束时，从图5的画面转变为图7的画面。

图6表示基准片材20的第一区域22中所含的颜色成分范围。本图的图表表示从在实际将单脚12放置于基准片材20上的状态下拍摄时的第一区域22的部分检测出的颜色成分分布。RGB的颜色成分中，纵轴取蓝色的256灰度(0～255)的值，横轴取红色的256灰度(0～255)的值。此处，对第一区域22施予的淡蓝色的成分中，红色成分分布在0～a(例如a为40～70的值)的范围且蓝色成分分布在b～c(例如b为40～60的值且c为200～255的值)的范围。而且，红色成分为0～d(例如d为1～60的值)的范围且蓝色成分为0～e(例如e为50～80的值)的范围表示相当于脚的轮廓附近的影子的黑色部分。其他区域可认为是从脚的部分检测出的颜色成分。

当设红色成分的值为R、蓝色成分的值为B时，相当于分布在图表上的黑影的部分的切线即第一直线162的倾斜为“255/f”(例如f为210～230的值)且截距为“0”。第一直线162更上的区域以“R*255/f＜B”的数式表示。而且，分布在图表上的淡蓝色部分的切线即第二直线163的倾斜为“g/255”(例如g为100～255的值)且截距为“h”(例如h为40～100的值)。第二直线163更上的区域以“R*g/255+h＜B”的数式表示。因而，将满足“R*255/f＜B”且“R*g/255+h＜B”的条件的区域(图表中的第一范围160)识别为第一区域22的部分，将其他区域(图表中的第二范围161)识别为单脚12的部分。模型生成部45将此种条件式作为颜色成分范围的信息而发送至模型生成部66。另外，本实施方式中，表示了检测RGB的值来作为颜色成分的示例，但作为变形例，也可检测色相、饱和度、明度(Hue Saturation Value，HSV)的值来作为颜色成分范围的信息。

图7表示第一拍摄方向上的拍摄工序的画面例。在图像区域111中，映照有包含基准片材20的增强现实空间的影像与重叠于此影像的各种对象。显示控制部46在文字区域112中显示为“请以不从中央的脚框突出的方式放置单脚，并请将基准片材对准外框”，在图像区域111的中央附近显示外框28，在外框28的中央附近显示脚框27。用户调整拍摄部40与基准片材20的距离，以使映照于图像区域111中的基准片材20对准外框28，由此将基准片材20与拍摄部40的距离或拍摄方向调整成为从第一拍摄视点的、在第一拍摄方向31上的拍摄。图像获取部42获取基准片材20对准外框28时的图像作为从第一拍摄视点的、在第一拍摄方向31上的脚图像。在脚图像的获取后，移转至从下个拍摄视点的拍摄步骤。以下说明按照第二拍摄视点至第七拍摄视点的顺序拍摄的工序。但第二拍摄视点至第七拍摄视点的拍摄顺序为任意，也可按照用户的喜好顺序来拍摄。

图8表示第二拍摄方向至第七拍摄方向上的拍摄工序的开始画面例。在映照于图像区域111的增强现实空间中，显示控制部46在基准片材20的周围显示表示六个拍摄视点的六个视点目标标记以作为引导对象。六个视点目标标记以此标记的位置与大小来表示拍摄部40的拍摄视点相对于受检者11的脚呈规定角度的六个视点位置。显示控制部46在文字区域112中显示为“请将摄像机靠近位于画面上的目标标记”，以敦促用户将拍摄视点靠近视点目标标记。

显示控制部46使表示第二拍摄视点的位置的第一视点目标标记121显示于基准片材20的右上，使表示第三拍摄视点的位置的第二视点目标标记122显示于基准片材20的右边中央，使表示第四拍摄视点的位置的第三视点目标标记123显示于基准片材20的右下。显示控制部46使表示第五拍摄视点的位置的第四视点目标标记124显示于基准片材20的左上，使表示第六拍摄视点的位置的第五视点目标标记125显示于基准片材20的左边中央，使表示第七拍摄视点的位置的第六视点目标标记126显示于基准片材20的左下。

第一视点目标标记121、第二视点目标标记122、第三视点目标标记123、第四视点目标标记124、第五视点目标标记125、第六视点目标标记126通过其显示尺寸来表示各拍摄视点与拍摄部40的距离。即，拍摄部40距地板越远，则各视点目标标记以越小的圆来显示，拍摄部40越靠近拍摄视点的高度，则各视点目标标记的圆显示得越大。当用户使拍摄部40的拍摄视点在映照于图像区域111的增强现实空间中靠近第一视点目标标记121时，移转至第二拍摄方向32上的拍摄工序。

图9表示第二拍摄视点的对位工序的画面例。显示控制部46在映照于图像区域111的增强现实空间中显示第一视点目标标记121与视点状态标记128以作为引导对象。视点状态标记128是表示增强现实空间内的拍摄部40的当前的拍摄视点的状态的圆形框线。视点状态标记128固定为规定的位置以及显示尺寸。显示控制部46在文字区域112中显示为“请移动摄像机以将目标标记对准圆框”，由此，敦促用户将用户终端10朝向第二拍摄视点移动。当用户将拍摄部40的拍摄视点靠近第一视点目标标记121时，第一视点目标标记121的位置以及显示尺寸接近视点状态标记128的位置以及显示尺寸。当用户将拍摄部40的拍摄视点靠近第一视点目标标记121时，以跟视点状态标记128与第一视点目标标记121的位置及显示尺寸的接近度相应的强度或振动频率，来执行基于触觉反馈(haptics)技术的用户终端10的振动。显示控制部46在视点状态标记128以及第一视点目标标记121的位置与大小大致重叠时，表示当前的拍摄视点的位置位于满足规定的位置条件的拍摄视点。更具体而言，在第一视点目标标记121的位置以及显示尺寸与视点状态标记128的位置以及显示尺寸之差收敛在规定范围内时，视为拍摄部40已大致到达第二拍摄视点，将第一视点目标标记121切换为在接下来的图中说明的目标标记。

此处，在视点状态标记128的圆周上的90度间隔的位置，辅助性地显示短放射线状的四个方向示意标记129。四个方向示意标记129中的上下的方向示意标记129以沿着作为目标的拍摄方向的方式而配置，表示从拍摄部40的拍摄视点朝向受检者11的单脚12的方向。通过使方向示意标记129停留在用户的眼中，能够期待用户无意识地将用户终端10的方向对准拍摄方向，从而能够平滑地移转至接下来的倾斜角度的调整。但显示控制部46在第一视点目标标记121重叠于视点状态标记128时，即便从拍摄部40的拍摄视点朝向受检者11的单脚12的方向并非沿着方向示意标记129的方向，仍允许将第一视点目标标记121切换为在接下来的图中说明的目标标记。这是因为，在使第一视点目标标记121与视点状态标记128的位置对准的时间点用户终端10的画面的方向变得与第二拍摄方向平行在拍摄效率方面优选，但即便在此时间点未必变得平行，也只要在接下来的工序中平行地对准即可。另外，作为变形例，也可并非将方向示意标记129附加于圆形的视点状态标记128，而是通过使用五边形等多边形的视点状态标记128来示意作为目标的拍摄方向。

图10表示第二拍摄方向上的倾斜调整工序的画面例。显示控制部46在映照于图像区域111的增强现实空间中显示倾斜目标标记130与一对倾斜状态标记131以作为引导对象。倾斜目标标记130为圆形的框线，以标记的位置来表示满足规定条件的拍摄部40的倾斜角度的目标。显示控制部46将倾斜目标标记130显示于图像区域111的中央。倾斜目标标记130固定为规定的位置以及显示尺寸，以被一对倾斜状态标记131(倾斜状态标记131a、倾斜状态标记131b)夹着的形态而显示。

倾斜状态标记131a、倾斜状态标记131b均为圆形标记，以标记的位置来表示自增强现实空间内的拍摄部40的当前的拍摄视点计起的拍摄部40的倾斜角度。在倾斜状态标记131a、倾斜状态标记131b中，分别显示有朝向倾斜目标标记130的箭头。用户通过使用户终端10倾斜的操作来将拍摄部40的拍摄方向朝向单脚12。用户终端10的倾斜角度越接近作为目标的倾斜角度，则倾斜状态标记131a、倾斜状态标记131b越朝倾斜目标标记130的方向即在各自中显示的箭头的方向移动而重叠于倾斜目标标记130。当用户终端10的倾斜角度接近作为目标的倾斜角度时，以跟用户终端10的倾斜角度与目标的倾斜角度的接近度相应的强度或振动频率，执行基于触觉反馈技术的用户终端10的振动。当用户终端10的倾斜从作为目标的倾斜朝右偏离时，上侧的倾斜状态标记131a朝左方向移动，下侧的倾斜状态标记131b朝右方向移动。用户一边调整用户终端10的左右倾斜一边使其倾斜，以使倾斜状态标记131a来到倾斜目标标记130的正上方且倾斜状态标记131b来到倾斜目标标记130的正下方。显示控制部46在倾斜目标标记130中，以数字显示用户终端10的倾斜角度与作为目标的倾斜角度之差。图中显示为“21°”，使用户终端10倾斜以使此数值变为零。用户终端10的方向或倾斜角度既可由内置于用户终端10的加速度传感器等运动传感器来检测，也可通过从拍摄部40所拍摄的影像中对基准片材20的位置进行图像识别而检测。

此处，在倾斜目标标记130的圆周上的90度间隔的位置辅助性地显示短放射线状的四个方向示意标记132。四个方向示意标记132中的上下的方向示意标记132以沿着作为目标的拍摄方向的方式而配置，表示从拍摄部40的拍摄视点朝向受检者11的单脚12的方向。显示控制部46在通过用户所进行的使拍摄部40的倾斜发生变化的操作而倾斜状态标记131a、倾斜状态标记131b重叠于倾斜目标标记130并静止时，表示从当前的拍摄视点计起的拍摄部40的倾斜角度为满足规定条件的倾斜角度。另外，作为变形例，也可并非将方向示意标记132附加于圆形的倾斜目标标记130，而是通过使用五边形等多边形的倾斜目标标记130来示意作为目标的拍摄方向。

图11表示指示拍摄部40的静止的画面例。当倾斜状态标记131与倾斜目标标记130重叠时，在倾斜状态标记131中显示“保持”的文字以及在文字区域112中显示“请保持此状态静止”的文字，由此来敦促用户将拍摄部40的倾斜静止。在用户将用户终端10的移动静止的期间，图像获取部42获取映照于图像区域111中的图像来作为从第二拍摄方向的角度拍摄的脚图像。所述脚图像是增强现实空间内的拍摄部40的拍摄视点位于目标标记的显示状态以及状态标记的显示状态满足规定条件的拍摄视点时的图像。

图12表示了表示来自第二拍摄方向的脚图像的获取完成的画面例。在倾斜状态标记131中显示表示完成的标记。此时，执行表示完成的声音输出与表示完成的基于触觉反馈技术的用户终端10的短振动。由此，用户能够通过声音或触觉反馈来容易地掌握拍摄已完成的情况。尤其，即便在周围的声音喧闹的场所，也能够通过传至手的振动来简单地知晓拍摄完成。这样，从第二拍摄方向进行的脚图像的拍摄结束。用户关于第三拍摄方向至第七拍摄方向，也通过同样的工序获取来自各个拍摄方向的脚图像。

图13表示对并非成为测量对象的另一只脚的放置处进行引导的画面例。显示控制部46在由拍摄部40所拍摄的基准片材20的规定位置重叠显示脚框27，以作为表示放置成为测量对象的其中一只脚12的区域的第一脚形标记。另一方面，显示控制部46在基准片材20的外侧且对于放置并非测量对象的另一只脚而言优选的位置显示第二脚形标记29。第二脚形标记29表示在拍摄视点相对于受检者11的脚呈规定角度时受检者11的重心位置收敛于支撑基底面的、另一只脚的位置。支撑基底面是包围放置于地板的两脚的放置处而包含的虚拟区域，身体的重心线位于越接近支撑基底面中心的位置的状态，可说是身体平衡的稳定性越高的状态。第二脚形标记29显示于可获得容易确保身体平衡的稳定性的支撑基底面的位置。关于显示第二脚形标记29的位置，针对每个拍摄视点而预先规定与以来自此拍摄视点的拍摄方向进行拍摄的姿势相应的位置并予以存储。另外，也可仅在根据另一只脚的放置处而姿势变得别扭从而容易导致拍摄变得困难的拍摄方向例如第四拍摄方向34或第七拍摄方向37的情况下显示第二脚形标记29。或者，也可在检测出在拍摄中再三重新拍摄的拍摄方向的情况、或者检测出直至条件充足为止需要长时间的拍摄方向的情况下，显示第二脚形标记29而引导适当的脚的放置处。

图14表示三维同源模型以及规定数量的轮廓点。图示的三维同源模型140是对三维空间内的平均性的脚的解剖学特征点的坐标群进行规定的模型，被预先存储于存储部68中。平均性的脚的解剖学特征点是基于从大量受检者获得的脚的样本而事先获得。在三维同源模型140中，规定了规定数量例如295点轮廓点。本图的三维同源模型140是由295点轮廓点与将轮廓点彼此相连的线所构建。如图所示，对于各轮廓点，以唯一的数字(1～295的范围)分配ID。

模型生成部66的模型适用部72将预先存储于存储部68中的平均性的脚的三维同源模型拟合于从多个脚图像中检测出的脚的轮廓(以下也称作“脚轮廓”)。由于实际检测出的脚的轮廓与三维同源模型140之间并无完全的相似性，因此，三维同源模型140除非变形，否则不会准确地匹配脚轮廓。因此，模型适用部72将三维同源模型140作为初始的拟合而重叠于比所检测出的脚轮廓窄的大致范围。

图15表示将三维同源模型重叠于从脚图像中检测的脚轮廓的状态。本图表示模型适用部72将三维同源模型140以大致的倍率进行单纯的缩放而重叠于从脚图像中检测出的脚轮廓142的状态。在此状态下，平均性的脚的模型即三维同源模型140与受检者11的脚的轮廓并无完全的相似性，因此三维同源模型140的轮廓点不沿着受检者11的脚轮廓。

图16的(a)、图16的(b)表示对脚趾的轮廓的凸包处理。图16的(a)表示将三维同源模型140拟合于从脚图像中检测出的脚轮廓142的初始状态。通常，脚趾的轮廓存在凹凸，尤其在脚趾彼此之间存在凹部，因此若与严格的轮廓一致，则会过度追随至脚趾间的凹部为止，如图16的(a)那样，三维同源模型140的轮廓点仅与脚趾间的凹部一致，未扩展到趾尖。像这样获得的脚形模型小于实际的脚，若基于此脚形来选择鞋或者制作鞋模，则有可能成为比实际的脚小的鞋。

因此，模型生成部66的凸包处理部74对轮廓实施如下所述的凸包处理，即，将从脚图像中检测出的轮廓中的相当于脚趾间形状的凹部予以省略。凸包(Convex hull)是算出包含所有的所给出的多个点的最小的凸多边形的处理。作为凸包处理，例如也可使用在OpenCV中公开的现有的程序模块。图16的(b)表示作为省略了脚趾间凹部的最小的凸多边形而算出的脚轮廓142。

模型生成部66的最佳化处理部76对三维同源模型140追加使三维同源模型140尽可能接近经凸包处理的脚轮廓的变形，由此来生成所检测的脚的三维模型。更具体而言，最佳化处理部76使三维同源模型140的轮廓朝向所检测出的轮廓移动至在三维同源模型140中规定的轮廓点与从脚图像中检测出的轮廓中所含的检测点的位置差的总和成为最小的位置为止。三维同源模型140的轮廓点与来自脚图像的轮廓的检测点的位置差以下式A表示。

位置差的总和＝Σ{W_i(检测点j-轮廓点i)}…式A

W_i＝权重、1≦i≦295、1≦j≦检测点数的最大值

模型生成部66使三维同源模型140发生变形以使利用所述式A算出的位置差成为最小，由此来使三维同源模型140接近所检测出的轮廓。通过将三维同源模型140的轮廓点限定地预先规定为295点，能够抑制接近点的探索处理的增加，实现计算处理的高速化。而且，通过事先对脚轮廓实施凸包处理，能够提高用于选择鞋的尺寸测量或用于鞋模的脚形测量的测量精度。

图17表示脚轮廓142中所含的多个特征检测点。第一脚宽端点144也被称作胫侧跖骨(Metatarsal Tibiale，MT)点，是在跖骨的横宽上突出至最内脚侧的顶点。第二脚宽端点145也被称作腓侧跖骨点(Metatarsal Fibulare，MF)点，是在跖骨的横宽上突出至最外脚侧的顶点。将第一脚宽端点144与第二脚宽端点145相连的线为脚宽148。而且，通过第一脚宽端点144与第二脚宽端点145而将单脚12的横宽设为一周的长度为脚围。以第一脚宽端点144为起点的脚长方向的假想线与跟拇趾(hallux)的内脚侧侧面相切的假想直线所成的角度为拇趾侧角度156，根据拇趾侧角度156的大小，可进行是否为拇趾外翻的诊断。第一踵宽端点146与第二踵宽端点147为踵宽149的端点。踵宽149为脚长150的约17％的位置(脚长的从踵侧端点计起为踵部151的长度量的位置)的脚宽方向的长度。

从单脚12中检测并经凸包处理的脚轮廓142中的、从作为测量脚宽及脚围时的基准的第一脚宽端点144直至通过脚趾侧轮廓的第二脚宽端点145为止的第一区间152尤其被认为是其形状或大小、长度方面个人差异相对较多的部位。而且，脚轮廓142中的、从作为测量踵宽149时的基准的第一踵宽端点146直至通过踵侧轮廓的第二踵宽端点147为止的第二区间153也被认为是其形状或大小、长度方面个人差异相对较多的部位。另一方面，从第一脚宽端点144直至第一踵宽端点146为止的内脚侧轮廓即第三区间154、或从第二脚宽端点145直至第二踵宽端点147为止的外脚侧轮廓即第四区间155被认为是与第一区间152或第二区间153相比而个人差异相对较少的部位。

因此，在三维同源模型140中规定的规定数量的轮廓点被规定为，第三区间154或第四区间155内的轮廓点彼此的间隔大于第一区间152或第二区间153内的轮廓点彼此的间隔。即，第一区间152或第二区间153内的轮廓点以相对紧密的间隔而设定，第三区间154或第四区间155内的轮廓点以相对稀疏的间隔而设定。通过像这样拉宽第二区间153或第三区间154的轮廓点的间距，能够在脚的各种尺寸的测定中减少重要性相对较低的部位的轮廓点，从而能够减少使三维同源模型140与脚轮廓一致的计算时间。

在三维同源模型140中的脚的轮廓中，包含成为测定对象的多个测定对象点以作为规定的部位尺寸。此处所述的多个测定对象点例如为所述的第一脚宽端点144、第二脚宽端点145、第一踵宽端点146、第二踵宽端点147。最佳化处理部76以三维同源模型140中的规定数量的轮廓点中的越接近多个测定对象点的轮廓点，则与检测点的位置差变得越小的方式，来使其优先接近检测点。更具体而言，越是接近第一脚宽端点144、第二脚宽端点145、第一踵宽端点146、第二踵宽端点147的轮廓点，则越加大式A中的加权值即W_i，而越远的轮廓点则越减小W_i。例如，在接近测定对象点的轮廓点的ID为“100”“101”“102”“103”的情况下，将W₁₀₀、W₁₀₁、W₁₀₂、W₁₀₃、W₁₀₄的值设为“10”，将除此以外的轮廓点的W_i的值全部设为“1”。

图18表示输出脚形的三维模型以及测量结果的画面例。结果输出部47通过显示控制部46所进行的控制，在画面上显示三维模型170以及脚尺寸172。三维模型170是对模型生成部45以及模型生成部66所生成的、受检者11的单脚12的三维模型进行了渲染的图像。脚尺寸172是推荐的鞋的尺寸。除此以外，也可显示脚长、脚宽、脚围、踵宽、拇趾侧角度、足弓高度、脚背高度等的测量结果。

(第二实施方式)

第二实施方式中，与在拍摄视点的对位工序之后实施倾斜调整工序的第一实施方式的不同之处在于，在实施了倾斜调整工序后实施拍摄视点的对位工序。除此以外，省略与第一实施方式的共同点的说明，以下以与第一实施方式的不同点为中心进行说明。

图19是表示第二实施方式中的脚形测量的过程的流程图。首先执行事先设定处理(S10)。作为事先设定处理，例如包含测定模式的设定、受检者信息的设定、指南(tutorial)的显示、先测量右脚与左脚的哪个的设定。本实施方式中的测定模式除了自拍模式、他人协助拍摄模式以外，还有儿童测定模式，选择这些中的任一个。作为受检者信息，例如输入受检者11的姓名或年龄、性别等信息。作为指南，显示对脚形测量的流程进行说明的动画。

接下来，与第一实施方式的图5同样地拍摄基准片材20并进行图像识别(S18)。接下来，与第一实施方式的图7同样地，作为第一拍摄方向，从正上方进行拍摄(S20)。以上的S10～S20的工序可为在第一实施方式中也同样地实施的工序。

第二实施方式中，与第一实施方式的不同之处在于，先于第二拍摄视点至第七拍摄视点处的拍摄而执行倾斜调整工序。即，在移动至拍摄视点之前，作为倾斜调整工序，使用户终端10的倾斜角度调整至目标倾斜角度为止(S22)，在维持此倾斜角度的状态下执行第二拍摄视点至第七拍摄视点处的拍摄。

在维持用户终端10的倾斜角度的状态下，开始第二拍摄视点至第七拍摄视点中的任一拍摄视点的拍摄(S24)。此处，若用户终端10的倾斜角度未维持在目标倾斜角度的前后规定范围内(S26的N)，则与第一实施方式的图10同样地实施倾斜角度的调整工序(S28)，若用户终端10的倾斜角度维持在目标倾斜角度的前后规定范围内(S26的Y)，则跳过S28。

将用户终端10移动至任一个拍摄视点，与第一实施方式的图9同样地使视点状态标记与视点目标标记对准，并与第一实施方式的图11、图12同样地静止了规定时间时，拍摄图像而保存为脚图像(S30)。另外，虽未图示，但可在S18～S34的任意时机中止测量工序，或者返回S18或S20而重新进行单脚的测量。

反复进行以上的S24～S30的拍摄处理，直至第二拍摄视点至第七拍摄视点的拍摄处理量完成为止(S32的N)，当完成时，前进至S34(S32的Y)。显示表示单脚的拍摄完成并且向用户确认是否前进至另一只脚的拍摄的画面，并且，若用户进行前进至另一只脚的拍摄的选择(S34的Y)，则返回S20而对于另一只脚执行S20～S32的拍摄处理。若用户进行了仅单脚的拍摄便结束而不前进至另一只脚的拍摄的选择(S34的N)，则前进至S36。作为用户仅单脚的拍摄便结束的情况，有用户判断为仅单脚的测量便已足够的情况(例如没有足够的测量时间的情况、两脚均测量嫌麻烦的情况、原本便只想知道仅单脚的尺寸的情况)或者只能测量单脚的情况(例如受检者因单脚缺损或受伤而只能测量单脚的情况)。另外，将S20～S32重复两次而两脚的拍摄、测量已完成的情况下，也前进至S36(S34的N)。在S36中，生成脚形的三维模型(S36)，并与第一实施方式的图18同样地跟测量结果或推荐尺寸一同显示于画面(S38)。另外，若在S34中仅单脚的拍摄、测量便选择了结束，则在S36中生成单脚的三维模型，并在S38中显示单脚的测量结果与基于所述单脚的测量结果的推荐尺寸。

图20例示第二实施方式中的测定模式选择画面。作为图19的S10所示的事先设定处理，显示测定模式选择画面200。在测定模式选择画面200中，显示第一按钮201、第二按钮202、第三按钮203。若要选择由受检者11自身拍摄受检者11的单脚12的自拍模式(以一人进行测定的模式)，则按下第一按钮201。若要选择由他人代替受检者11来拍摄受检者11的单脚12的他人协助拍摄模式(以两人进行测定的模式)，则按下第二按钮202。若要选择由父母对小的儿童的脚进行测定的儿童测定模式，则按下第三按钮203。

儿童测定模式是最终向父母提示推荐鞋便结束的模式，因此与自拍模式或他人协助拍摄模式加以区分，但基本的测量工序如图19所示。

图21例示第二实施方式中的单脚设定画面。单脚选择画面214是图19的S10所示的事先设定处理之一，是用于选择将右脚与左脚的哪个设为测量对象的画面。在单脚选择画面214中，若选择左脚图像216，则将左脚设定为测量对象，若选择右脚图像217，则将右脚设定为测量对象。

在单脚选择画面214的左上显示设定按钮215，当设定按钮215被按下时，移转至未图示的规定的设定画面。在设定画面中，例如能够设定将作为目标的拍摄视点与脚相连的距离以及角度。关于拍摄视点的距离以及角度的组合，例如可预先准备“100cm”以及“30度”这样的多个预置，通过选择预置来进行设定。而且，也可根据选择了自拍模式、他人协助拍摄模式、儿童测定模式的哪个，或者根据受检者信息，来自动地选择不同的预置作为初始设定。例如，在自拍模式下，拍摄视点越接近地板面，则受检者本人必须弯曲得越低，从而成为越费力的姿势。尤其，受检者越高，则姿势的艰难度易变得越显著。因此，也可为，在自拍模式的情况下，受检者的身高越高，则使拍摄视点的距离越长，而设定与体轴的角度越浅的拍摄视点。

而且，在儿童测定模式的情况下，受检者为越小的儿童，则所穿着的衣服与地板面的距离越近，因此若拍摄视点与体轴的角度小，则脚有可能被衣服掩盖而无法拍摄。因此，也可为，受检者的身高越低，则使拍摄视点的角度越深而设定越低的拍摄视点。

图22表示第二实施方式中的第二拍摄视点至第七拍摄视点处的拍摄开始时的第一画面例。拍摄开始画面210是在第二拍摄视点至第七拍摄视点处的拍摄开始时间点(图19的S24)所显示的画面，是第一实施方式中的图8的变形画面例。即，与图8的画面例的不同之处在于，第一视点目标标记121至第六视点目标标记126的各自中所含的第一视点目标编号221至第六视点目标编号226是以各自的编号从将单脚12放置于基准片材20中央的受检者11观察变得垂直的方式予以显示。另外，在他人协助拍摄模式或儿童测定模式下，第一视点目标编号221至第六视点目标编号226可以与图22的文字上下倒转的方向予以显示。在图22的画面例的状态下显示了约一秒后，第一视点目标标记121至第六视点目标标记126分别朝从放置于基准片材20中央的单脚12辐射的第一方向321至第六方向326移动，沿着其移动轨迹显示直线状的虚线(在接下来的图中表示)。

另外，在以后的画面例中，在画面的右上端显示关闭按钮211。当用户按下关闭按钮211时，中止测量工序或者显示选择从头开始重复单脚的测量的按钮，可选择任一个。例如，在测量中移动了脚等而造成测量失败的情况下，即便勉强前进至最终工序也无法以准确的精度进行测量。而且，若为在单脚的测量失败的情况下两脚均必须从头开始重新测量的方式则麻烦。因此，第二实施方式中，可在测量的中途随时中止，并且在中途中止的情况下，能够只从头开始重新测量未持续到结束的单脚。

图23表示第二实施方式中的第二拍摄视点至第七拍摄视点处的拍摄开始时的第二画面例。从图22的状态，沿着第一视点目标标记121至第六视点目标标记126朝放射状的第一方向321至第六方向326移动的轨迹而显示虚线状的第一目标线421至第六目标线426。环状线300是将已移动至本图的画面外的位置的第一视点目标标记121至第六视点目标标记126连成环状的线。通过显示环状线300以及第一目标线421至第六目标线426，即便第一视点目标标记121至第六视点目标标记126移动到画面外，也容易掌握配置在哪个方向的位置。

图24表示第二实施方式中的倾斜调整工序的画面例。在显示了图23的画面后，切换为图24那样的单色背景的画面，与第一实施方式的图10同样地显示倾斜目标标记130以及一对倾斜状态标记131a、倾斜状态标记131b。另外，尽管设为将背景设为单色背景而不显示拍摄中的实时取景影像的形态，但只是将实时取景影像设为不显示，用户终端10的摄像机仍保持启动，拍摄状态仍在继续。而且，第二实施方式的倾斜目标标记130在中央如“倾斜”那样显示有指示使用户终端10倾斜的字符串，但也可与第一实施方式同样地，以数字显示当前的用户终端10的倾斜角度与作为目标的倾斜角度之差。

之所以如图24那样，将拍摄中的实时取景影像设为不显示而显示倾斜目标标记130以及一对倾斜状态标记131a、倾斜状态标记131b，是为了使用户集中于倾斜的调整。由于在倾斜调整画面212的显示中不显示第一视点目标标记121至第六视点目标标记126，因此能够在视觉上以及直观上容易理解当前并非拍摄视点的对位而是使倾斜角度一致于目标的工序。而且，使拍摄视点对准目标视点的工序只要使视场角上下左右移动即可，因此相对，使倾斜角度一致于目标角度的工序会伴随使用户终端10与规定的倾斜轴一致地倾斜这一通常不太熟悉且不习惯的操作。因此，比起像第一实施方式那样针对每个拍摄视点而每次进行倾斜调整，可认为下述做法的操作更容易且更有效率，即，一开始兼作练习地仅实施一次倾斜调整，若决定了倾斜角度，则一边维持此倾斜角度，一边在受检者11的周围呈环状移动而使拍摄视点对准各目标视点。即，只要维持一开始调整好的倾斜角度，便不需要每个拍摄视点的倾斜角度的调整，从而容易以更短时间进行测量。

图25表示第二实施方式中的第二拍摄视点的对位工序的画面例。拍摄视点调整画面213表示与第一实施方式的图9同样地将视点状态标记128对准第一视点目标标记121的工序。与第一实施方式的图9的不同之处在于，第一视点目标标记121显示于沿着环状线300的位置，并且显示将基准片材20的中心附近与第一视点目标标记121相连的虚线状的第一目标线421。当用户使拍摄部40的拍摄视点靠近第一视点目标标记121时，第一视点目标标记121的位置以及显示尺寸接近视点状态标记128的位置以及显示尺寸。当用户使拍摄部40的拍摄视点靠近第一视点目标标记121时，以跟视点状态标记128与第一视点目标标记121的位置以及显示尺寸的接近度相应的强度或振动频率，来执行基于触觉反馈技术的用户终端10的振动。

图26表示第二实施方式中的第五拍摄视点至第七拍摄视点的对位工序的画面例。表示第五拍摄视点的第四视点目标标记124显示有表示已拍摄完毕的勾号(check mark)。第五视点目标标记125与第六视点目标标记126由于尚未拍摄完毕，因此显示第五视点目标编号225与第六视点目标编号226。第四视点目标标记124至第六视点目标标记126分别以在与基准片材20的中心附近之间以虚线状的第五目标线424至第七目标线426相连的方式予以显示。

图27表示第二实施方式中的指示拍摄部40的静止的画面例。当成为已将视点状态标记128与第一视点目标标记121至第六视点目标标记126的任一个对位的状态时，显示如图27那样的拍摄视点调整画面213，在视点状态标记128中显示“保持”的文字与在文字区域112中显示“请保持此状态静止”的文字，由此来敦促用户将拍摄部40的倾斜静止。此时，通过以着色为半透明的圆形来描绘视点状态标记128，从而可透视看到位于视点状态标记128背后的单脚12。由此，即便有视点状态标记128重叠，也能够看到在将用户终端10的位置静止的过程中受检者11的单脚12是否未移动。尤其在受检者11为儿童的情况下，可有效地确认是否未移动单脚12。

在拍摄视点已以规定时间维持为静止状态的情况下，如第一实施方式的图12那样，显示脚图像获取完成的画面，并且执行表示此拍摄视点处的拍摄完成的声音输出、与表示完成的基于触觉反馈技术的用户终端10的短振动。通过声音输出或触觉反馈技术的振动，即便是难以看到画面内容的拍摄视点处的拍摄，也能够容易地掌握拍摄完成。尤其，即便是控制了声音输出的环境或耳朵不好使的人，也能够通过触觉反馈技术的振动来容易地掌握拍摄完成。

另外，若在拍摄视点调整画面213中用户终端10的倾斜角度未能维持在目标倾斜角度的前后规定范围内(图19的S26的N)，则与第一实施方式的图10同样地实施倾斜角度的调整工序(图19的S28)。

变形例中，取代基准片材20，而将尺寸或形状已预先确定的规定物体作为参照物来与脚一同予以拍摄，由此，也可检测增强现实空间内的位置坐标以及基准长度。作为基准片材20的替代的参照物例如也可为A4或信纸尺寸等规定尺寸的纸张、或者像纸币那样尺寸已确定的纸。或者，并不限于四边形，也可为如圆形那样的容易识别形状的规定形状的纸张。

另一变形例中，也可设为下述规格：并非七个拍摄视点，而是缩减为更少的拍摄视点例如三个拍摄视点，根据三幅脚图像来测量脚的尺寸。此时，与从七个拍摄视点进行拍摄的情况相比，尽管测量精度有可能差，但在下述方面有利，即，能够简化拍摄流程，从而能够以更短的时间来简便地测量脚的尺寸。

本发明并不限于所述的实施方式，各结构能够在不脱离本发明主旨的范围内适当变更。而且，若将所述的实施方式一般化，则可获得以下的形态。

〔形态1〕

一种脚形测量装置，其特征在于包括：

拍摄部；

空间设定部，基于由所述拍摄部所拍摄的图像来设定增强现实空间；

显示控制部，使由所述拍摄部所拍摄的图像与为了引导拍摄流程而配置于所述增强现实空间的引导对象显示于画面；

图像获取部，获取由所述拍摄部从多个角度拍摄受检者的脚所得的多个脚图像；

模型生成部，基于所述多个脚图像来生成所述受检者的脚的三维模型；以及

结果输出部，输出基于生成的所述三维模型的测量结果，

所述显示控制部使目标标记与状态标记作为所述引导对象而重叠显示于由所述拍摄部所拍摄的影像，所述目标标记表示所述增强现实空间内的所述拍摄部的拍摄视点相对于所述受检者的脚呈规定角度的视点位置，所述状态标记表示所述增强现实空间内的所述拍摄部的当前的拍摄视点的状态，

所述图像获取部获取所述增强现实空间内的所述拍摄部的拍摄视点处于所述目标标记的显示状态以及所述状态标记的显示状态满足规定条件的所述拍摄视点时的图像，来作为从所述规定角度拍摄的脚图像。

〔形态2〕

根据形态1所述的脚形测量装置，其特征在于，

所述目标标记有：第一目标标记，以标记的位置以及大小的至少任一个来表示满足所述规定条件的拍摄视点的位置的目标；以及第二目标标记，以标记的位置来表示所述拍摄部从满足所述规定条件的拍摄视点计起的倾斜角度的目标，

所述状态标记有：第一状态标记，至少表示所述增强现实空间内的所述拍摄部的当前的拍摄视点的位置；以及第二状态标记，以标记的位置来表示所述拍摄部从所述增强现实空间内的所述拍摄部的当前的拍摄视点计起的倾斜角度，

所述显示控制部当在使所述第一目标标记与所述第一状态标记显示于所述增强现实空间的状态下，通过操作者所进行的使所述拍摄部的位置移动的操作而所述第一状态标记以及所述第一目标标记的位置与大小重叠时，表示当前的拍摄视点的位置处于满足所述规定条件的拍摄视点，当在使所述第二目标标记与所述第二状态标记显示于所述增强现实空间的状态下，通过操作者所进行的使所述拍摄部的倾斜发生变化的操作而所述第二状态标记重叠于所述第二目标标记并静止时，表示所述拍摄部从当前的拍摄视点计起的倾斜角度为满足所述规定条件的倾斜角度。

〔形态3〕

根据形态2所述的脚形测量装置，其特征在于，在所述第一状态标记以及所述第二目标标记，从所述拍摄部的所述拍摄视点朝所述受检者的脚辅助性地显示有表示方向的方向示意标记。

〔形态4〕

根据形态1至3中任一项所述的脚形测量装置，其特征在于还包括：

规定的基准片材，为了检测所述增强现实空间内的基准长度而与所述受检者的脚一同成为拍摄对象，

所述显示控制部使表示放置成为测量对象的其中一只脚的区域的第一脚形标记重叠显示于由所述拍摄部所拍摄的所述基准片材的规定位置，并且显示表示在所述拍摄视点相对于所述受检者的脚呈所述规定角度时所述受检者的重心位置收敛于支撑基底面的所述另一只脚的位置的第二脚形标记，以作为对于在所述基准片材的外侧放置并非测量对象的另一只脚而言优选的位置。

〔形态5〕

根据形态1至4中任一项所述的脚形测量装置，其特征在于，

所述模型生成部将三维空间内的平均性的脚的解剖学特征点的坐标群预先存储为三维同源模型，在三维同源模型中预先规定有规定数量的轮廓点，从所述脚图像中检测轮廓，并使所述三维同源模型的轮廓朝向所述检测出的轮廓移动至所述轮廓点与所述检测出的轮廓中所含的检测点的位置差的总和成为最小的位置为止，由此来使所述三维同源模型接近所述检测出的轮廓，

所述三维同源模型中的脚的轮廓中存在个人差异相对较多的部位即第一部位与个人差异相对较少的部位即第二部位，在所述三维同源模型中规定的所述规定数量的轮廓点被规定为，所述第二部位的轮廓点彼此的间隔大于所述第一部位的轮廓点彼此的间隔。

〔形态6〕

根据形态1至4中任一项所述的脚形测量装置，其特征在于，

所述模型生成部将三维空间内的平均性的脚的解剖学特征点的坐标群预先存储为三维同源模型，在三维同源模型中预先规定有规定数量的轮廓点，从所述脚图像中检测轮廓，并使所述三维同源模型的轮廓朝向所述检测出的轮廓移动至所述轮廓点与所述检测出的轮廓中所含的检测点的位置差的总和成为最小的位置为止，由此来使所述三维同源模型接近所述检测出的轮廓，

在所述三维同源模型中的脚的轮廓中，包含成为测定对象的多个测定对象点作为规定的部位尺寸，

所述模型生成部以所述三维同源模型中的所述规定数量的轮廓点中的越接近所述多个测定对象点的轮廓点，则与所述检测点的位置差变得越小的方式来优先使其接近所述检测点。

〔形态7〕

根据形态1至4中任一项所述的脚形测量装置，其特征在于，

所述模型生成部将三维空间内的平均性的脚的解剖学特征点的坐标群预先存储为三维同源模型，在三维同源模型中预先规定有规定数量的轮廓点，从所述脚图像中检测轮廓，并使所述三维同源模型的轮廓朝向所述检测出的轮廓移动至所述轮廓点与所述检测出的轮廓中所含的检测点的位置差的总和成为最小的位置为止，由此来使所述三维同源模型接近所述检测出的轮廓，

所述模型生成部对所述轮廓实施将所述检测出的轮廓中的相当于脚趾间的形状的凹部予以省略的凸包处理，并且以所述轮廓点与实施了所述凸包处理后的轮廓中所含的检测点的位置差的总和成为最小的方式来使所述三维同源模型接近所述检测出的轮廓。

〔形态8〕

根据形态1至7中任一项所述的脚形测量装置，还包括：

规定的基准片材，是为了检测所述增强现实空间内的基准长度而与所述受检者的脚一同成为拍摄对象的片材，且具有第一区域与第二区域以作为放置所述受检者的脚的区域，所述第一区域是由相对于脚的颜色容易成为补色关系的规定颜色所形成，所述第二区域配置有为了检测位置坐标而参照的规定形状的多个基准标记，

所述空间设定部从由所述拍摄部所拍摄的图像中通过图像识别来识别所述基准片材的图像内的位置，以识别出的基准片材的所述位置作为基准来设定所述增强现实空间，

所述模型生成部在所述三维模型的生成之前检测从由所述拍摄部所拍摄的图像中识别出的基准片材中所含的所述规定颜色的颜色成分范围，基于检测出的所述颜色成分范围来从所述脚图像中识别所述受检者的脚与所述第一区域的边界，以检测所述受检者的脚的轮廓。

〔形态9〕

一种计算机程序，使计算机实现如下所述的功能，所述功能包括下述功能：

基于由规定的拍摄部所拍摄的图像来设定增强现实空间；

使拍摄的所述图像与为了引导拍摄流程而配置于所述增强现实空间的引导对象显示于画面；

获取从多个角度拍摄受检者的脚所得的多个脚图像；

基于所述多个脚图像来生成所述受检者的脚的三维模型；以及

输出基于生成的所述三维模型的测量结果，

所述显示的功能是使目标标记与状态标记作为所述引导对象而重叠显示于拍摄的影像，所述目标标记表示所述增强现实空间内的所述规定的拍摄部的拍摄视点相对于所述受检者的脚呈规定角度的视点位置，所述状态标记表示所述增强现实空间内的所述规定的拍摄部的当前的拍摄视点的状态，

所述获取的功能是获取所述增强现实空间内的所述规定的拍摄部的拍摄视点处于所述目标标记的显示状态以及所述状态标记的显示状态满足规定条件的所述拍摄视点时的图像，来作为从所述规定角度拍摄的脚图像。

Claims (9)

1.一种脚形测量装置，其特征在于，包括：

拍摄部；

空间设定部，基于由所述拍摄部所拍摄的图像来设定增强现实空间；

显示控制部，使由所述拍摄部所拍摄的图像与为了引导拍摄流程而配置于所述增强现实空间的引导对象显示于画面；

图像获取部，获取由所述拍摄部从多个角度拍摄受检者的脚所得的多个脚图像；

模型生成部，基于所述多个脚图像来生成所述受检者的脚的三维模型；以及

结果输出部，输出基于生成的所述三维模型的测量结果，

所述显示控制部使目标标记与状态标记作为所述引导对象而重叠显示于由所述拍摄部所拍摄的影像，所述目标标记表示所述增强现实空间内的所述拍摄部的拍摄视点相对于所述受检者的脚呈规定角度的视点位置，所述状态标记表示所述增强现实空间内的所述拍摄部的当前的拍摄视点的状态，

所述图像获取部获取所述增强现实空间内的所述拍摄部的拍摄视点处于所述目标标记的显示状态以及所述状态标记的显示状态满足规定条件的所述拍摄视点时的图像，来作为从所述规定角度拍摄的脚图像。

2.根据权利要求1所述的脚形测量装置，其特征在于，

所述目标标记有：第一目标标记，以标记的位置以及大小的至少任一个来表示满足所述规定条件的拍摄视点的位置的目标；以及第二目标标记，以标记的位置来表示所述拍摄部从满足所述规定条件的拍摄视点计起的倾斜角度的目标，

所述状态标记有：第一状态标记，至少表示所述增强现实空间内的所述拍摄部的当前的拍摄视点的位置；以及第二状态标记，以标记的位置来表示所述拍摄部从所述增强现实空间内的所述拍摄部的当前的拍摄视点计起的倾斜角度，

所述显示控制部当在使所述第一目标标记与所述第一状态标记显示于所述增强现实空间的状态下，通过操作者所进行的使所述拍摄部的位置移动的操作而所述第一状态标记以及所述第一目标标记的位置与大小重叠时，表示当前的拍摄视点的位置处于满足所述规定条件的拍摄视点，当在使所述第二目标标记与所述第二状态标记显示于所述增强现实空间的状态下，通过操作者所进行的使所述拍摄部的倾斜发生变化的操作而所述第二状态标记重叠于所述第二目标标记并静止时，表示所述拍摄部从当前的拍摄视点计起的倾斜角度为满足所述规定条件的倾斜角度。

3.根据权利要求2所述的脚形测量装置，其特征在于，

在所述第一状态标记以及所述第二目标标记，从所述拍摄部的所述拍摄视点朝所述受检者的脚辅助性地显示有表示方向的方向示意标记。

4.根据权利要求1所述的脚形测量装置，其特征在于，还包括：

规定的基准片材，为了检测所述增强现实空间内的基准长度而与所述受检者的脚一同成为拍摄对象，

所述显示控制部使表示放置成为测量对象的其中一只脚的区域的第一脚形标记重叠显示于由所述拍摄部所拍摄的所述基准片材的规定位置，并且显示表示在所述拍摄视点相对于所述受检者的脚呈所述规定角度时所述受检者的重心位置收敛于支撑基底面的另一只脚的位置的第二脚形标记，以作为对于在所述基准片材的外侧放置并非测量对象的所述另一只脚而言优选的位置。

5.根据权利要求1所述的脚形测量装置，其特征在于，

所述模型生成部将三维空间内的平均性的脚的解剖学特征点的坐标群预先存储为三维同源模型，在三维同源模型中预先规定有规定数量的轮廓点，从所述脚图像中检测轮廓，并使所述三维同源模型的轮廓朝向检测出的轮廓移动至所述轮廓点与所述检测出的轮廓中所含的检测点的位置差的总和成为最小的位置为止，由此来使所述三维同源模型接近所述检测出的轮廓，

所述三维同源模型中的脚的轮廓中存在个人差异相对较多的部位即第一部位与个人差异相对较少的部位即第二部位，在所述三维同源模型中规定的所述规定数量的轮廓点被规定为，所述第二部位的轮廓点彼此的间隔大于所述第一部位的轮廓点彼此的间隔。

6.根据权利要求1所述的脚形测量装置，其特征在于，

所述模型生成部将三维空间内的平均性的脚的解剖学特征点的坐标群预先存储为三维同源模型，在三维同源模型中预先规定有规定数量的轮廓点，从所述脚图像中检测轮廓，并使所述三维同源模型的轮廓朝向检测出的轮廓移动至所述轮廓点与所述检测出的轮廓中所含的检测点的位置差的总和成为最小的位置为止，由此来使所述三维同源模型接近所述检测出的轮廓，

在所述三维同源模型中的脚的轮廓中，包含成为测定对象的多个测定对象点作为规定的部位尺寸，

所述模型生成部以所述三维同源模型中的所述规定数量的轮廓点中的越接近所述多个测定对象点的轮廓点，则与所述检测点的位置差变得越小的方式来优先使其接近所述检测点。

7.根据权利要求1所述的脚形测量装置，其特征在于，

所述模型生成部将三维空间内的平均性的脚的解剖学特征点的坐标群预先存储为三维同源模型，在三维同源模型中预先规定有规定数量的轮廓点，从所述脚图像中检测轮廓，并使所述三维同源模型的轮廓朝向检测出的轮廓移动至所述轮廓点与所述检测出的轮廓中所含的检测点的位置差的总和成为最小的位置为止，由此来使所述三维同源模型接近所述检测出的轮廓，

所述模型生成部对所述轮廓实施将所述检测出的轮廓中的相当于脚趾间的形状的凹部予以省略的凸包处理，并且以所述轮廓点与实施了所述凸包处理后的轮廓中所含的检测点的位置差的总和成为最小的方式来使所述三维同源模型接近所述检测出的轮廓。

8.根据权利要求1所述的脚形测量装置，还包括：

规定的基准片材，是为了检测所述增强现实空间内的基准长度而与所述受检者的脚一同成为拍摄对象的片材，且具有第一区域与第二区域以作为放置所述受检者的脚的区域，所述第一区域是由相对于脚的颜色容易成为补色关系的规定颜色所形成，所述第二区域配置有为了检测位置坐标而参照的规定形状的多个基准标记，

所述空间设定部从由所述拍摄部所拍摄的图像中通过图像识别来识别所述基准片材的图像内的位置，以识别出的基准片材的所述位置作为基准来设定所述增强现实空间，

所述模型生成部在所述三维模型的生成之前检测从由所述拍摄部所拍摄的图像中识别出的基准片材中所含的所述规定颜色的颜色成分范围，基于检测出的所述颜色成分范围来从所述脚图像中识别所述受检者的脚与所述第一区域的边界，以检测所述受检者的脚的轮廓。

9.一种计算机可读存储介质，其存储有一种计算机程序，使计算机实现下述功能：

基于由规定的拍摄部所拍摄的图像来设定增强现实空间；

使拍摄的所述图像与为了引导拍摄流程而配置于所述增强现实空间的引导对象显示于画面；

获取从多个角度拍摄受检者的脚所得的多个脚图像；

基于所述多个脚图像来生成所述受检者的脚的三维模型；以及

输出基于生成的所述三维模型的测量结果，

所述显示的功能是使目标标记与状态标记作为所述引导对象而重叠显示于拍摄的影像，所述目标标记表示所述增强现实空间内的所述规定的拍摄部的拍摄视点相对于所述受检者的脚呈规定角度的视点位置，所述状态标记表示所述增强现实空间内的所述规定的拍摄部的当前的拍摄视点的状态，

所述获取的功能是获取所述增强现实空间内的所述规定的拍摄部的拍摄视点处于所述目标标记的显示状态以及所述状态标记的显示状态满足规定条件的所述拍摄视点时的图像，来作为从所述规定角度拍摄的脚图像。