CN109492515A - 信息处理装置、图像文件的数据结构以及计算机可读介质 - Google Patents

信息处理装置、图像文件的数据结构以及计算机可读介质 Download PDF

Info

Publication number
CN109492515A
CN109492515A CN201811013605.9A CN201811013605A CN109492515A CN 109492515 A CN109492515 A CN 109492515A CN 201811013605 A CN201811013605 A CN 201811013605A CN 109492515 A CN109492515 A CN 109492515A
Authority
CN
China
Prior art keywords
information
image
processing unit
work flow
real space
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811013605.9A
Other languages
English (en)
Other versions
CN109492515B (zh
Inventor
得地贤吾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd filed Critical Fuji Xerox Co Ltd
Publication of CN109492515A publication Critical patent/CN109492515A/zh
Application granted granted Critical
Publication of CN109492515B publication Critical patent/CN109492515B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/10—Terrestrial scenes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04812—Interaction techniques based on cursor appearance or behaviour, e.g. being affected by the presence of displayed objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/004—Artificial life, i.e. computing arrangements simulating life
    • G06N3/008—Artificial life, i.e. computing arrangements simulating life based on physical entities controlled by simulated intelligence so as to replicate intelligent life forms, e.g. based on robots replicating pets or humans in their appearance or behaviour
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
    • H04L12/282—Controlling appliance services of a home automation network by calling their functionalities based on user interaction within the home
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038—Indexing scheme relating to G06F3/038
    • G06F2203/0383—Remote input, i.e. interface arrangements in which the signals generated by a pointing device are transmitted to a PC at a remote location, e.g. to a PC in a LAN

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Data Mining & Analysis (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Library & Information Science (AREA)
  • Automation & Control Theory (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Molecular Biology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Computational Linguistics (AREA)
  • Evolutionary Computation (AREA)
  • General Health & Medical Sciences (AREA)
  • Robotics (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明包括一种信息处理装置、图像文件的数据结构及计算机可读介质，与未在附属于图像文件的属性信息的一部分中记述用于执行与被摄物关联的作业流程处理的信息的情况相比，提高了图像的便利性。信息处理装置包括：识别部，识别用户对包含属性信息所对应的被摄物的图像的指定；以及控制部，当识别出用户在图像上对被摄物的指定时，基于与被摄物对应的属性信息和与实际空间相关的信息，来执行属性信息所规定的作业流程处理。

Description

信息处理装置、图像文件的数据结构以及计算机可读介质
技术领域
本发明涉及一种信息处理装置、图像文件(file)的数据(data)结构以及存储程序(program)的计算机可读介质。
背景技术
以往的联合图像专家小组(Joint Photographic Experts Group，JPEG)格式(format)中，允许记载拍摄日或作者等元数据(metadata)作为属性信息。例如在专利文献1中，记载了对图像文件的属性信息的记述使用可交换图像文件(Exchangeable imagefile，Exif)格式的示例。
现有技术文献
专利文献
专利文献1：日本专利特开2004-120069号公报
发明内容
[发明所要解决的问题]
当前的属性信息仅限于与图像文件相关的信息的记述。
本发明的目的在于，与未在附属于图像文件的属性信息的一部分中记述用于执行与被摄物关联的作业流程处理的信息的情况相比，提高图像的便利性。
[解决问题的技术手段]
技术方案1所述的发明是一种信息处理装置，其包括：识别部，识别用户对包含属性信息所对应的被摄物的图像的指定；以及控制部，当识别出用户在所述图像上对所述被摄物的指定时，基于与所述被摄物对应的所述属性信息和与实际空间相关的信息，来执行所述属性信息所规定的作业流程处理。
技术方案2所述的发明是根据技术方案1所述的信息处理装置，其中，所述控制部通过所述作业流程处理，与用户所指定的作为被摄物的机器进行通信，获取与所述实际空间相关的信息。
技术方案3所述的发明是根据技术方案2所述的信息处理装置，其中，所述控制部基于与所述实际空间相关的信息，来对所述图像上的被摄物的显示给予变化。
技术方案4所述的发明是根据技术方案2所述的信息处理装置，其中，所述控制部基于与所述实际空间相关的信息，来显示用于敦促用户进行特定行动的通知画面。
技术方案5所述的发明是根据技术方案2所述的信息处理装置，其中，所述控制部基于与所述实际空间相关的信息，来显示用于对作为被摄物的所述机器所具有的功能进行操作的画面。
技术方案6所述的发明是根据技术方案2所述的信息处理装置，其中，所述控制部基于与所述实际空间相关的信息，来发送针对作为被摄物的所述机器或其他机器的指示。
技术方案7所述的发明是根据技术方案1所述的信息处理装置，其中，所述控制部基于所述被摄物中被指定的部位，来发送针对作为被摄物的机器的指示。
技术方案8所述的发明是根据技术方案1所述的信息处理装置，其中，当在所述图像上指定了作为被摄物的多个机器时，所述控制部通过所述作业流程处理来发送使所述多个机器进行联动动作的指示。
技术方案9所述的发明是根据技术方案8所述的信息处理装置，其中，所述控制部基于所述多个机器的指定顺序，来变更使所述多个机器进行联动动作的指示的内容。
技术方案10所述的发明是根据技术方案9所述的信息处理装置，其中，所述控制部基于所述被摄物中被指定的部位，来变更使所述多个机器进行联动动作的指示的内容。
技术方案11所述的发明是根据技术方案8所述的信息处理装置，其中，所述控制部基于被指定的所述被摄物的显示状态，来变更使所述多个机器进行联动动作的指示的内容。
技术方案12所述的发明是根据技术方案1所述的信息处理装置，其中，当所述图像为动态图像、且在所述图像的不同的播放时刻识别出所述被摄物的指定时，所述控制部基于各播放时刻的所述属性信息和与实际空间相关的所述信息，来执行所述作业流程处理。
技术方案13所述的发明是根据技术方案1所述的信息处理装置，其中，当所述图像为动态图像、且在所述图像的不同的播放时刻识别出所述被摄物的指定时，或者指示了所述作业流程处理的执行时，所述控制部使针对对应物体的指示发送，待机根据从所述图像的播放开始直至各播放时刻为止所经过的时间而定的时间。
技术方案14所述的发明是根据技术方案1所述的信息处理装置，其中，所述控制部与位于实际空间的传感器进行通信，获取与所述实际空间相关的信息。
技术方案15所述的发明是根据技术方案14所述的信息处理装置，其中，所述控制部基于与所述实际空间相关的信息，来对所述图像上的被摄物的显示给予变化。
技术方案16所述的发明是根据技术方案14所述的信息处理装置，其中，所述控制部基于与所述实际空间相关的信息，来显示用于敦促用户进行特定行动的通知画面。
技术方案17所述的发明是根据技术方案14所述的信息处理装置，其中，所述控制部基于与所述实际空间相关的信息，来显示用于对与所指定的被摄物相关联的机器所具有的功能进行操作的画面。
技术方案18所述的发明是根据技术方案1所述的信息处理装置，其中，与所述实际空间相关的信息是识别出所述被摄物的指定的时间点的信息。
技术方案19所述的发明是根据技术方案1所述的信息处理装置，其中，与所述实际空间相关的信息是环境信息。
技术方案20所述的发明是根据技术方案1所述的信息处理装置，其中，所述图像的数据文件遵照JPEG格式，所述属性信息是以JSON而记述。
技术方案21所述的发明是根据技术方案1所述的信息处理装置，其中，所述作业流程处理是以声音数据的格式而记载。
技术方案22所述的发明是根据技术方案1所述的信息处理装置，其中，所述作业流程处理是以文本数据的格式而记载。
技术方案23所述的发明是一种信息处理装置，其包括：检测部，对图像上与用户所指定的被摄物对应的区域部分进行检测，或者对预定的被摄物所存在的所述图像上的区域部分进行检测；以及控制部，将对作业流程处理进行规定的信息，记述于属性信息的一部分，所述作业流程处理是当与所检测出的所述区域部分关联的被摄物受到指定时，基于与实际空间相关的信息而执行，所述属性信息附属于所述图像的数据文件。
技术方案24所述的发明是根据技术方案23所述的信息处理装置，其中，若所指定的所述被摄物为机器，则所述控制部将对所述机器的控制进行规定的信息记述为所述作业流程处理。
技术方案25所述的发明是根据技术方案23所述的信息处理装置，其中，若所指定的所述被摄物为无法操作的物体，则所述控制部将对与所述物体相关的信息的显示进行规定的信息记述为所述作业流程处理。
技术方案26所述的发明是根据技术方案23所述的信息处理装置，其中，所述控制部将与拍摄所述图像的日期时间相应的信息记述为所述作业流程处理。
技术方案27所述的发明是一种图像文件的数据结构，所述图像文件是由信息处理装置进行处理，所述图像文件的数据结构包括：第1数据区域，保存图像的本体；以及第2数据区域，为保存所述图像本体的属性信息的第2数据区域，且包含对基于与实际空间相关的信息来执行的作业流程处理进行规定的信息，以作为所述属性信息的一部分，当用户在所述图像上指定了被摄物时，执行与所述实际空间相关的信息所规定的所述作业流程处理。
技术方案28所述的发明是一种存储程序的计算机可读介质，所述程序使计算机(computer)执行信息处理，所述信息处理包括：识别用户对包含属性信息所对应的被摄物的图像的指定；以及当识别出用户在所述图像上对所述被摄物的指定时，基于与所述被摄物对应的所述属性信息和与实际空间相关的信息，来执行所述属性信息所规定的作业流程处理。
[发明的效果]
根据技术方案1所述的发明，与未在附属于图像文件的属性信息的一部分中记述用于执行与被摄物关联的作业流程处理的信息的情况相比，能够提高图像的便利性。
根据技术方案2所述的发明，能够通过图像来获取与实际存在的机器等相关的信息。
根据技术方案3所述的发明，能够通过图像来确认实际存在的机器等的状态。
根据技术方案4所述的发明，能够利用图像来作为实际存在的机器等的信息画面。
根据技术方案5所述的发明，能够利用图像来作为实际存在的机器等的操作画面。
根据技术方案6所述的发明，能够通过图像来控制实际存在的机器等的动作。
根据技术方案7所述的发明，能够根据在图像上指定的被摄物的部位来切换控制的内容。
根据技术方案8所述的发明，能够通过图像来使多个机器联动动作。
根据技术方案9所述的发明，能够切换多个机器的联动动作的内容。
根据技术方案10所述的发明，能够根据在图像上指定的被摄物的部位来切换联动动作的内容。
根据技术方案11所述的发明，能够根据图像上的被摄物的显示状态来切换联动动作的内容。
根据技术方案12所述的发明，能够执行与动态图像的播放时刻相应的处理。
根据技术方案13所述的发明，能够执行与动态图像的播放时刻相应的处理。
根据技术方案14所述的发明，能够通过图像来获取与实际空间相关的信息。
根据技术方案15所述的发明，能够通过图像来确认对应的实际空间的状态。
根据技术方案16所述的发明，能够利用图像来作为对应的实际空间的信息画面。
根据技术方案17所述的发明，能够通过图像来控制实际存在的机器等的动作。
根据技术方案18所述的发明，能够获取对图像进行操作的时间点的与实际空间相关的信息。
根据技术方案19所述的发明，能够获取跟与图像对应的实际空间的环境相关的信息。
根据技术方案20所述的发明，能够提高遵照JPEG格式的图像的便利性。
根据技术方案21所述的发明，能够使提高图像便利性的方式多样化。
根据技术方案22所述的发明，能够使提高图像便利性的方式多样化。
根据技术方案23所述的发明，与未在附属于图像文件的属性信息的一部分中记述用于执行与被摄物关联的作业流程处理的信息的情况相比，能够提高图像的便利性。
根据技术方案24所述的发明，能够将与被摄物相应的作业流程处理记述于属性信息中。
根据技术方案25所述的发明，能够将与被摄物相应的作业流程处理记述于属性信息中。
根据技术方案26所述的发明，能够使与进行拍摄的日期时间相关的信息反映至作业流程处理中。
根据技术方案27所述的发明，与未在附属于图像文件的属性信息的一部分中记述用于执行与被摄物关联的作业流程处理的信息的情况相比，能够提高图像的便利性。
根据技术方案28所述的发明，与未在附属于图像文件的属性信息的一部分中记述用于执行与被摄物关联的作业流程处理的信息的情况相比，能够提高图像的便利性。
附图说明
图1是表示本实施方式中使用的JPEG文件的数据结构的图。
图2是表示本实施方式中使用的图像处理系统的结构例的图。
图3是将计算机的画面放大表示的图。
图4是表示计算机的硬件(hardware)结构的一例的图。
图5是表示计算机的功能结构的一例的图。
图6是表示由实施方式1中的控制部所执行的处理动作的一例的流程图。
图7的(a)及图7的(b)是表示在各利用形态中设为前提的实际空间、与显示于计算机的操作画面上的静态图像的关系的图。图7的(a)表示实际空间，图7的(b)表示静态图像。
图8的(a)及图8的(b)是说明利用形态1的作业流程处理的一例的图。图8的(a)表示在选择一个像之前的静态图像的显示状态，图8的(b)表示在选择了一个像之后的静态图像的显示状态。
图9的(a)及图9的(b)是说明利用形态2的作业流程处理的一例的图。图9的(a)表示在选择一个像之前的静态图像的显示状态，图9的(b)表示在选择了一个像之后的静态图像的显示状态。
图10的(a)及图10的(b)是说明利用形态2的作业流程处理的后续例的图。图10的(a)表示显示有通知画面的状态，图10的(b)表示显示有操作画面的状态。
图11的(a)及图11的(b)是说明利用形态2的作业流程处理的另一例的图。图11的(a)表示在选择了一个像之后的静态图像的显示状态，图11的(b)表示通知画面的另一显示例。
图12的(a)及图12的(b)是说明利用形态3的作业流程处理的一例的图。图12的(a)表示在选择一个像之前的静态图像的显示状态，图12的(b)表示在选择了一个像之后的静态图像的显示状态。
图13的(a)及图13的(b)是说明利用形态3的作业流程处理的另一例的图。图13的(a)表示在选择一个像之前的静态图像的显示状态，图13的(b)表示在选择了一个像之后的静态图像的显示状态。
图14的(a)及图14的(b)是说明利用形态4的作业流程处理的一例的图。图14的(a)表示在静态图像上依序选择两个像的样子，图14的(b)表示实际空间内的动作状况。
图15的(a)及图15的(b)是说明利用形态4的作业流程处理的另一例的图。图15的(a)表示在静态图像上依序选择两个像的样子，图15的(b)表示实际空间内的动作状况。
图16的(a)及图16的(b)是说明利用形态5的作业流程处理的一例的图。图16的(a)表示在静态图像上依序选择两个像的样子，图16的(b)表示实际空间内的动作状况。
图17的(a)及图17的(b)是说明利用形态5的作业流程处理的另一例的图。图17的(a)表示在静态图像上依序选择两个像的样子，图17的(b)表示实际空间内的动作状况。
图18的(a)及图18的(b)是说明利用形态5的作业流程处理的另一例的图。图18的(a)表示在静态图像上依序选择两个像的样子，图18的(b)表示实际空间内的动作状况。
图19的(a)及图19的(b)是说明利用形态5的作业流程处理的另一例的图。图19的(a)表示在静态图像上依序选择两个像的样子，图19的(b)表示实际空间内的动作状况。
图20的(a)及图20的(b)是说明利用形态6的作业流程处理的示例的图。图20的(a)表示在反映出实际存在的机器的状态而显示发生了变化的静态图像中依序指定了两个像的情况，图20的(b)表示实际空间的样子。
图21的(a)及图21的(b)是说明利用形态6的作业流程处理的另一例的图。图21的(a)表示在反映出实际存在的机器的状态而显示发生了变化的静态图像中依序指定了两个像的情况，图21的(b)表示实际空间的样子。
图22的(a)及图22的(b)是说明利用形态7的作业流程处理的图。图22的(a)表示在静态图像上依序选择两个像的样子，图22的(b)表示实际空间内的动作状况。
图23是表示从记录对作业流程处理进行规定的信息的观点而表达的、控制部的功能结构的一例的框图。
图24是说明用户对目标体(object)区域的指定的示例的图。
图25的(a)及图25的(b)是说明对作业流程处理进行规定的信息向属性信息中的写入的图。图25的(a)表示在JPEG文件的属性信息中包含信息之前的数据结构，图25的(b)表示在JPEG文件的属性信息中追加有信息的状态。
图26的(a)及图26的(b)是说明在白天进行拍摄时记述于信息中的作业流程处理的一例的图。图26的(a)表示静态图像，图26的(b)说明记述于JPEG文件中的信息的内容。
图27的(a)及图27的(b)是说明在晚上进行拍摄时记述于信息中的作业流程处理的一例的图。图27的(a)表示静态图像，图27的(b)说明记述于JPEG文件中的信息的内容。
图28的(a)及图28的(b)是说明在动态图像的情况下执行的作业流程处理的示例的图。图28的(a)表示动态图像播放中的像的指定，图28的(b)表示在实际空间中执行的动作。
图29的(a)及图29的(b)是说明在动态图像的情况下执行的作业流程处理的另一例的图。图29的(a)表示动态图像播放中的像的指定，图29的(b)表示在实际空间中执行的动作。
图30的(a)及图30的(b)是说明在动态图像的情况下执行的作业流程处理的另一例的图。图30的(a)表示动态图像播放中的像的指定，图30的(b)表示在实际空间中执行的动作。
[符号的说明]
10：JPEG文件
11：影像开始片段
12：1型应用片段
13：11型应用片段
13A、13B：对作业流程处理进行规定的信息
14：图像数据
15：影像结束片段
16：属性信息
100：图像处理系统
110：计算机
110A、211：操作画面
110B：任务栏
111：静态图像
112：鼠标指针
113：图标
114：当前时刻
115：区域
116：动态图像
120：服务器装置
131：控制部
131A：CPU
131B：ROM
131C：RAM
132：存储部
133：显示部
134：操作受理部
135：通信部
136：总线
141：指示识别部
142：执行控制部
143：位置检测部
144：目标体检测部
145：属性信息生成部
150：实际空间
151：图像形成装置
152：显示装置
153：录像播放机
154、158：人
155：植物
156：空调机
157：监控摄像机
160：机器人
201：图像形成装置的像
202：显示装置的像
203：录像播放机的像
204：人的像
205：植物的像
206：空调机的像
207：监控摄像机的像
209：计算机的像
210：通知画面
213：通知画面
215：餐厅的像
216：路灯的像
1210：机器人的像
S1～S5：步骤
具体实施方式
以下，参照附图来说明本发明的实施方式。
＜实施方式1＞
本实施方式中，为了方便，对遵照JPEG格式的JPEG文件的示例进行说明，但也可适用于与其他图像格式对应的其他图像文件。
＜静态图像文件的数据结构＞
图1是表示本实施方式中所使用的JPEG文件10的数据结构的图。JPEG文件10是图像文件的一例，遵照JPEG格式。
JPEG文件10具有：影像开始片段(Start Of Image segment，SOI)11，表示影像(image)的开始位置；1型应用片段(Application type 1segment，App1)12，用于Exif信息等的记述；11型应用片段(Application type 11segment，App11)13，用于对与被摄物相关的作业流程处理进行规定的信息的记述；影像数据(Image Data，ID)14；以及影像结束片段(End Of Image segment，EOI)15，表示影像的结束位置。
此处，在影像数据14中保存静态图像的本体。影像数据14为第1数据区域的一例。
由影像开始片段11与影像结束片段15所夹着的区域也被称作帧(frame)。
另外，图1中虽未示出，但在JPEG文件中还包含未图示的两个片段即量化表定义片段(Define Quantization Table segment，DQT)、霍夫曼表定义片段(Define HuffmanTable segment，DHT)。除此以外的片段根据需要来配置。
1型应用片段12与11型应用片段13是JPEG文件10的属性信息16的一部分。属性信息16为第2数据区域的一例。
在应用片段13中，记述有信息13A、13B，所述信息13A、13B对与制作JPEG文件10的静态图像中所含的被摄物相关的作业流程处理进行规定。例如信息13A为跟与被摄物1关联的作业流程处理1对应的信息，信息13B为跟与被摄物2关联的作业流程处理2对应的信息。
保存在11型应用片段13中的信息的个数既可为零，也可为一个，还可为三个以上。以下，在不区分信息13A及信息13B时简称作信息13A。
例如两个信息13A及信息13B也可与一个被摄物对应。即，也可相对于一个被摄物而对应有多个信息。
例如也可为，信息13A被用于基于第1语言(例如日语，第1OS用)的处理，信息13B被用于基于第2语言(例如英语，第2OS用)的处理。利用哪种语言来执行作业流程处理，例如只要由用户(user)通过选择画面来指定即可。
各个作业流程处理例如包含跟与信息13A及信息13B对应的目标体相关的信息的保存、显示、总计、发送、获取等。与目标体相关的信息除了位于国际互联网(Internet)上的信息以外，还包含由实物所保持的信息、对实物进行拍摄所得的图像、关于实物而在实际空间中进行管理的信息等。
而且，各个作业流程处理例如包含：显示操作面板，所述操作面板用于对信息13A及信息13B所对应的、与被摄物对应的实物机器的动作进行控制；控制由信息13A及信息13B预先规定的实物机器的动作；从与被摄物对应的实物机器等获取信息；以及将所获取的实物机器的状态反映到图像中等。
而且，例如也可为，两个信息13A及信息13B均是对应一个机器的操作的不同种类而设。例如也可为：信息13A为电视接收机(television receiver)的频道操作用，信息13B为电视接收机的电源按钮(button)操作用。
例如信息13A及信息13B是以文本数据的格式而记述。本实施方式中，对于信息13A及信息13B的记述，使用作为数据交换格式的一例的Java脚本目标体记法(Java ScriptObject Notation，JSON)。JSON(注册商标)是将JavaScript(注册商标)中的目标体记法的一部分用于语法基础(base)的语言。当然，用于作业流程处理的记述的语言并不限于JSON。
＜图像处理系统以及信息处理装置的结构＞
图2是表示本实施方式中使用的图像处理系统100的结构例的图。
图像处理系统100包含：便携式计算机110，被用于静态图像111(例如电子照相)的显示；服务器(server)装置120，与计算机110联动地执行处理功能的一部分或全部；以及机器，位于与静态图像111的拍摄场所对应的实际空间150内。
计算机110与服务器装置120是信息处理装置的一例。但是，服务器装置120也可省略。
本实施方式中的计算机110并不限于图2所示的笔记(note)型计算机，也可为平板(tablet)型计算机、智能电话(smartphone)、移动电话、摄像机(camera)、便携式游戏机等。
实际空间150既可为与计算机110实际存在的空间相同的空间，也可为不同的空间。
图2所示的实际空间150表示某室内。在实际空间150内，存在有：图像形成装置151，具有在纸张等记录材质上形成图像的功能或光学读取原稿图像的功能等；显示装置152，显示播放节目等；录像播放机153，将动态图像或声音(以下称作“动态图像等”)记录到记录介质中，或者从记录介质播放动态图像等；人154；植物155；空调机156；以及监控摄像机157。
另外，实际空间150并不限定于室内，也可为室外。
图3是将计算机110的画面放大表示的图。
图3所示的画面包含操作画面110A与任务栏(task bar)110B。其中，在操作画面110A上，以小画面(窗口(window))的形式显示有对实际空间150(参照图2)进行拍摄所得的静态图像111。对于操作位置的指定，使用鼠标指针(mouse pointer)112。在任务栏110B上，显示有启动中的三个应用的图标(icon)113、及当前时刻114。
在本实施方式的情况下，设想静态图像111为所谓的电子照相。另外，由于动态图像是被定义为多个静态图像的时间序列，因此以下说明的说明也适用于动态图像的情况。
图3所示的静态图像111上，包含图像形成装置的像201、显示装置的像202、录像播放机的像203、人的像204、植物的像205、空调机的像206、监控摄像机的像207。
静态图像111表示实际空间150(参照图2)在某时刻的状态。因此，人的像204的位置与当前时刻的人154(参照图2)的位置不同。一般而言，在拍摄静态图像111的时间点与显示的时间点，无论是人物还是人数均不同。而且，在静态图像111中映照在显示装置的像202上的图像也与当前时刻的显示装置152(参照图2)上映照的图像不同。
静态图像111的数据被保存在JPEG文件10(参照图1)的影像数据14(参照图1)的部分。在本实施方式的情况下，在JPEG文件10的属性信息16(参照图1)的部分，与静态图像111中所含的七个像中的至少一个对应地，记述有对各像固有的作业流程进行规定的信息13A。
图4是表示计算机110的硬件结构的一例的图。另外，服务器装置120的基本结构也相同。
计算机110包含：控制部131，控制装置整体；存储部132，用于JPEG文件10等的存储；显示部133，用于操作画面110A(参照图3)的显示；操作受理部134，受理用户的输入操作；以及通信部135，用于与外部装置(例如服务器装置120(参照图1))或实际空间150(参照图1)的通信。前述的各部通过总线(bus)136相互连接。
控制部131是控制部件的一例，包含中央处理器(Central Processing Unit，CPU)131A、只读存储器(Read Only Memory，ROM)131B、以及随机存取存储器(Random AccessMemory，RAM)131C。
在ROM 131B中，存储有由CPU 131A所执行的基本输入输出系统(Basic Input/Output System，BIOS)或操作系统(Operation System，OS)。
RAM 131C被用作应用程序的作业区域。
控制部131通过应用程序的执行，执行前述的信息13A、13B所规定的作业流程处理。关于作业流程处理的具体例将后述。
存储部132包含硬盘(hard disk)装置或半导体存储器等存储装置。
显示部133是通过程序(包含操作系统或固件(firmware))的执行来显示各种图像的显示器(display)装置。显示部133例如包含液晶显示面板(display panel)或有机电致发光(Electro Luminescence，EL)显示面板。
操作受理部134是受理来自用户的操作的设备(device)，例如包含键盘(keyboard)、按钮、开关(switch)、触控板(touch pad)、触控面板(touch panel)等。
通信部135例如包含局域网络(Local Area Network，LAN)接口(interface)。
图5是表示计算机110的功能结构的一例的图。
图5所示的功能结构是通过控制部131对应用程序的执行而实现。
控制部131作为指示识别部141与执行控制部142发挥功能，所述指示识别部141对通过操作受理部134而输入的用户的指示进行识别，所述执行控制部142读出并执行与所指定的像(目标体)对应的信息13A(参照图1)。
此处的指示识别部141是识别部以及检测部的一例，执行控制部142是控制部的一例。
用户的指示被识别为对静态图像111(参照图3)中所含的特定像(目标体)的选择。但是，如后所述，指定也有时是将多个像作为对象(目标体)，还有时是将像的一部分作为对象(目标体)。
在将整个像作为目标体的情况下，用户的指示位置是作为相对于对静态图像111所规定的坐标系(例如以静态图像111的左上角为原点的坐标系)的坐标(像素(pixel)值)而给予。指示位置既可识别为重合于静态图像111而显示的鼠标指针112(参照图3)的位置，也可识别为用户触摸相对于操作画面110A而配置在跟前(用户侧)的触控面板传感器的位置。
执行控制部142基于附属于JPEG文件10(参照图1)的属性信息16(参照图1)和从实际空间获取的信息(以下称作“实际空间信息”)来执行作业流程处理，所述JPEG文件10与所显示的静态图像111对应。
图6是表示由实施方式1中的控制部131(参照图4)所执行的处理动作的一例的流程图。
首先，控制部131从与显示于显示部133(参照图4)的静态图像111(参照图3)对应的JPEG文件10(参照图1)，读取属性信息16(参照图1)(步骤1)。
接下来，控制部131对位于静态图像111上的鼠标指针112(参照图3)的位置进行识别(步骤2)。
继而，控制部131判定在由鼠标指针112所指定的位置是否存在JSON格式的记述(即信息13A)(步骤3)。
由鼠标指针112所指定的位置，是在未图示的鼠标上进行确定位置的操作(例如左击(click))的时间点，鼠标指针112所处的坐标。
控制部131判定鼠标指针112的位置是否包含在属性信息16中所存储的信息13A的区域(目标体)中。具体而言，控制部131判定鼠标指针112的位置是否包含在信息13A所对应的各个像的区域(目标体)或像的一部分区域(目标体)中。在本实施方式的情况下，相对于目标体而登记有信息13A。
若由指示识别部141(参照图5)所识别出的鼠标指针112的位置不包含在信息13A所对应的区域(目标体)中，则控制部131待机至指定新的位置为止。另外，当显示在操作画面110A(参照图3)上的静态图像111(参照图3)切换时，控制部131结束图6所示的处理。
另一方面，若由指示识别部141所识别出的鼠标指针112的位置包含在信息13A所对应的区域(目标体)中，则控制部131解读JSON格式的记述，获取与鼠标指针112的位置存在关联的实际空间150(参照图2)的信息(实际空间信息)(步骤4)。
实际空间信息是跟与拍摄静态图像111的实际空间内的场所或静态图像111的各像对应的实物关联的信息。
对于实际空间信息的获取，例如使用属性信息16(参照图1)中所含的拍摄时的全球定位系统(Global Positioning System，GPS)信息。而且，对于实际空间信息的获取，例如使用作为被摄物的各制品固有的制造编号、在通信网络上确定各机器的地址(address)等。
通信网络并无限制，例如也可使用所谓的国际互联网(Internet)、移动电话网、物联网(Intranet of Things，IoT)网络、电力线通信网。另外，通信网络既可为无线线路，也可为有线线路。而且，计算机110(参照图2)与各机器的通信无须为直接通信，也可为经由网关(gateway)或路由器(router)的连接。而且，也可以多跳(multi-hop)方式连接。
而且，若计算机110位于与静态图像111(参照图2)对应的实际空间150(参照图2)内，则也可进行基于无线的直接通信。对于直接通信，例如可使用蓝牙(Bluetooth)(注册商标)、紫蜂(Zigbee(注册商标))、红外线通信等。
而且，在本实施方式的情况下，只要能够获取实际空间信息即可，因此未必需要指定各个机器来进行通信，也可将可与位于作为拍摄场所的房间或地点的机器进行通信的地址记录为信息13A(参照图1)，对与使用所述地址进行通信的机器之间所需的、或可获取的实际空间信息进行收集。
本实施方式中，通信所需的位置信息被记录为信息13A或属性信息16的一部分。但是，位置信息并不限于拍摄时，也可在拍摄后登记。位置信息的登记既可通过手动输入，也可通过应用程序的执行来实现。
而且，即使信息13A中不包含位置信息，也可使用对与所指定的像对应或关联的机器进行确定的信息和可利用的位置数据库等，来解决与特定机器的通信所需的地址。
另外，在静态图像111中指定的像(目标体)并不限于可通信的机器。例如也有时会指定人的像204(参照图3)或植物的像205(参照图3)。
此种情况下，也可使用属性信息16中所含的拍摄时的GPS信息、跟作为与这些像对应的信息13A而对应的可通信的机器相关的位置信息等。例如也可对植物的像205指定监控摄像机的像207(参照图3)。
在所获取的实际空间信息中，例如包含与环境相关的信息。与环境相关的信息(环境信息)中，包含拍摄静态图像111的场所的气温、温度、湿度、照度、季节、天气(包含预报)等。
温度、湿度、照度等不仅可为从设置在拍摄静态图像111的场所的传感器所获取的值，也可为从设置在拍摄静态图像111的场所周围(例如作为拍摄场所的房间的外部)的传感器所获取的值。而且，关于天气，也可获取由气象厅或民间的气象业者等对于包含拍摄静态图像111的场所的地域所发布的信息。
除此以外，所获取的实际空间信息中，包含由各个机器所产生或收集的信息、通过监控摄像机的像207(参照图3)所拍摄的图像等。
本实施方式中的实际空间信息设为用户对静态图像111进行操作的时间点(识别出对特定被摄物的指定的时间点)的信息。即，设想可与操作时间点同步利用的最新信息，但也可指定过去的时间点。
当在步骤4中获取了实际空间信息时，控制部131解读JSON格式的记述，并基于所获取的信息来执行作业流程处理(步骤5)。关于所执行的作业流程处理的具体例将后述。
另外，本实施方式中，实际空间信息的获取(步骤4)与作业流程处理的执行(步骤5)是独立地执行，但实际空间信息的获取也可作为作业流程处理动作的一部分而执行。
＜利用形态＞
以下，对可通过由在属性信息16中记述的信息13A(11型应用片段)所规定的作业流程处理的执行来实现的利用形态进行说明。
另外，各利用形态中所用的作业流程处理或实际空间信息不过是例示。
图7的(a)及图7的(b)是表示在各利用形态中设为前提的实际空间150、与显示于计算机110(参照图2)的操作画面110A(参照图3)上的静态图像111的关系的图。图7的(a)表示实际空间150，图7的(b)表示静态图像111。
在图7的(a)及图7的(b)的情况下，在实际存在于实际空间150内的显示装置152的画面上，显示有16频道所播放的节目。而且，在实际空间150内，存在两位(人154与人158)人物。
另一方面，在为实际空间150的过去一时间点的状态的静态图像111中，在作为被摄物的显示装置152的画面上，显示有18频道的画面。而且，在静态图像111上，仅映照有一人(人的像204)。
＜利用形态1＞
此处，对下述情况进行说明，即：计算机110(参照图2)跟与在静态图像111上所指定的像对应的实物机器进行通信，基于从实物机器获取的信息，来对静态图像111的相应机器的显示给予变化。
图8的(a)及图8的(b)是说明利用形态1的作业流程处理的一例的图。图8的(a)表示在选择一个像之前的静态图像111的显示状态，图8的(b)表示在选择了一个像之后的静态图像111的显示状态。
在图8的(a)及图8的(b)的情况下，鼠标指针112被定位于显示装置的像202上。
在此状态下，当左击未图示的鼠标而确定鼠标指针112的位置时，计算机110(参照图2)启动由与所确定的鼠标指针112的位置对应的信息13A所规定的作业流程处理。
接下来，计算机110将与在静态图像111上所确定的显示装置的像202(在属性信息16中作为目标体而受到管理)对应的、实际存在的显示装置152(参照图2)作为目标，请求当前时间点的动作状况的通知。
所述询问例如是作为IoT网络上的通信而实现。在本例的情况下，将当前显示装置152的电源为接通(ON)、正在显示16频道的节目等情况，从显示装置152通知给计算机110。
当收到显示装置152的动作状况的通知时，计算机110例如使静态图像111的显示装置的像202的内容由18频道变为16频道。图8的(a)及图8的(b)的示例中，显示画面的内容与频道号的记载发生了变化。
变化后显示的显示画面既可为对应不同频道而预先准备的固定图像，也可为从播放中的节目抓取(capture)的图像。
这些图像既可从计算机110的存储部132(参照图4)读出，也可从显示装置152(参照图2)获取，还可从提供与作业流程处理关联的服务(service)的服务器装置120(参照图2)获取。
另外，当在计算机110中内置有用于节目显示的调谐器(tuner)时，也可基于从实际存在的显示装置152接收的动作状况来控制内置的调谐器，生成在操作时间点显示的节目的图像。
但是，若显示于显示装置152的图像是从录像播放机153(参照图2)播放的图像，则也可使用由显示装置152所抓取的图像。
但是，在显示装置152的画面上，也可通过文本来显示实际存在的显示装置152的当前时间点的显示为16频道。
若使用所述利用形态的功能，则用户可通过电子照相等静态图像111，将与各像对应的实物的状态确认为在静态图像111上所显示的像的变化。
另外，若映照在静态图像111上的空间为私密(private)的空间，则也可通过例如智能电话等来访问(access)家庭网络(home network)(家庭内LAN)，通过与位于家庭内的IoT设备进行通信来收集所需的信息，对于映照在静态图像111上的其他像，也根据当前的状态来变更显示。
＜利用形态2＞
此处，对下述情况进行说明，即：计算机110(参照图2)跟与在静态图像111上所指定的像对应的实物机器进行通信，基于从实物机器获取的信息，来显示用于敦促用户进行特定行动的通知画面。
图9的(a)及图9的(b)是说明利用形态2的作业流程处理的一例的图。图9的(a)表示在选择一个像之前的静态图像111的显示状态，图9的(b)表示在选择了一个像之后的静态图像111的显示状态。
在图9的(a)及图9的(b)的情况下，鼠标指针112被定位于空调机的像206上。
在此状态下，当左击未图示的鼠标而确定鼠标指针112的位置时，计算机110(参照图2)启动由与所确定的鼠标指针112的位置对应的信息13A所规定的作业流程处理。
接下来，计算机110将与在静态图像111上所确定的空调机的像206(目标体)对应的、实际存在的空调机156(参照图2)作为目标，请求当前时间点的动作状况的通知。所述询问例如是作为IOT网络上的通信而实现。在本例的情况下，将当前空调机156的电源为断开、室温为28℃等情况通知给计算机110。另外，在空调机中内置有温度传感器。
当收到空调机156的动作状况的通知时，计算机110对预先设定的目标温度与所获取的室温进行比较，并执行控制，以使室温达到目标温度。在图9的(a)及图9的(b)的情况下，由于实际存在的空调机156处于停止动作中，因此显示通知画面210，所述通知画面210表示当前的室温为28℃、及应打开(启用)空调机以将室温降低至目标温度。
另外，若实际存在的空调机156正在进行启用动作，则也可不将通知画面210重合显示于静态图像111，而是将控制信号从计算机110发送至空调机156，所述控制信号降低设定温度以使室温下降至目标温度。
此处的目标温度既可作为信息13A的一部分而存储，也可由计算机110侧的程序(与由信息13A所规定的作业流程处理联动地进行动作的应用程序)所规定。另外，应用程序是由计算机110所执行。
图10的(a)及图10的(b)是说明利用形态2的作业流程处理的后续例的图。图10的(a)表示显示有通知画面210的状态，图10的(b)表示显示有操作画面211的状态。
图10的(a)及图10的(b)中，表示由鼠标指针112选择了启用按钮与关闭按钮中的启用按钮的状态。另外，也可显示设定温度或目标温度的输入用画面。
在图10的(a)及图10的(b)的情况下，在伴随静态图像111上的空调机的像206的指定而执行的作业流程处理的过程中显示操作画面211，因此能够一边确认操作时间点的室温，一边远程操作实际存在的空调机156。
此处的操作画面211是用于操作机器所具有的功能的画面的一例。
另外，图10的(a)及图10的(b)的示例中，设想了室温高的情况，但在室温低的情况下也可使用。
而且，图9的(a)及图9的(b)以及图10的(a)及图10的(b)中，在映照于静态图像111的被摄物中的、空调机的像206被用户指定时，基于从实际存在的空调机156获取的室温信息来显示通知画面210或操作画面211，但也可基于所获取的室温信息来对与空调关联的其他机器(例如风扇)也发送控制信号。
继而，对其他的用法进行说明。
图11的(a)及图11的(b)是说明利用形态2的作业流程处理的另一例的图。图11的(a)表示在选择了一个像之后的静态图像111的显示状态，图11的(b)表示通知画面的另一显示例。
图11的(a)及图11的(b)的示例中，表示图像形成装置的像201的显示根据实际存在的图像形成装置151的状态发生了变化后的样子。具体而言，表示了下述情况：图像形成装置的像201的前门打开，而处于能够确认内部的状态。
此时，在操作画面110A上，例如显示旨在通知门正打开及应去现场关闭的通知画面212、或者旨在通知黑墨粉(toner)不足及应更换黑墨粉的通知画面212。
另外，若在图像形成装置151上设有可通过远程操作来关门的机构，则也可通过计算机110的控制来输出关门的信号，还可对预先登记的商家发送订购黑墨粉的信号。
＜利用形态3＞
在前述的利用形态1以及利用形态2的情况下，在静态图像111上所指定的像(目标体)为具有通信功能的机器的像。然而，在现实中，被摄物未必都具有通信功能。
因此，所述利用形态3中，对与在静态图像111上所指定的像(目标体)对应的实物不具备通信功能的情况进行说明。
图12的(a)及图12的(b)是说明利用形态3的作业流程处理的一例的图。图12的(a)表示在选择一个像之前的静态图像111的显示状态，图12的(b)表示在选择了一个像之后的静态图像111的显示状态。
在图12的(a)及图12的(b)的情况下，鼠标指针112被定位于植物的像205上。
在此状态下，当左击未图示的鼠标而确定鼠标指针112的位置时，计算机110(参照图2)启动由与所确定的鼠标指针112的位置对应的信息13A所规定的作业流程处理。
在本例的情况下，所指定的是植物的像205，因此不具有通信功能，因而无法如实施方式1以及实施方式2般，与由鼠标指针112所指定的对象物进行通信。
此种情况下，通过预先将与像不同的物体登记为通信对象，从而能够获取实际空间信息。
在图12的(a)及图12的(b)的情况下，在与植物的像205对应的信息13A中，将监控摄像机157(参照图2)记录为通信目标。因此，计算机110通过与监控摄像机157的通信，来获取当前时间点的植物155(参照图2)的图像。
计算机110对所获取的图像进行处理，根据实际存在的植物155的当前状况，使静态图像111上的植物的像205的显示发生变化。
图12的(a)及图12的(b)的示例中，表示了植物较拍摄静态图像111时有所成长的样子。例如显示将静态图像111上的植物的像205通过图像处理而放大所得的图像。
另外，只要让人知晓植物有所成长即可，未必需要为真实的样子。例如也可利用文本文字来显示现状。而且，也可从数据库等中读出与通过图像处理而识别出的成长阶段类似的阶段的样品图像来进行置换。
而且，也可显示与通过图像处理而识别出的成长阶段相应的照料内容或照料时期、照料时的注意点、收获时期等相关的信息。
而且，也可从由监控摄像机157(参照图2)所拍摄的图像中提取植物155(参照图2)的土的图像，来分析土的干燥程度。
图13的(a)及图13的(b)是说明利用形态3的作业流程处理的另一例的图。图13的(a)表示在选择了一个像之前的静态图像111的显示状态，图13的(b)表示在选择了一个像之后的静态图像111的显示状态。
图13的(a)及图13的(b)中，显示了表示土干燥、及应浇水的通知画面213。
另外，所述利用形态中，针对植物的像205，是将监控摄像机157登记为通信目标，但也可将插入植物155的土中的湿度传感器登记为通信目标。此时，将由湿度传感器测量出的湿度值通知给计算机110。通过将湿度传感器设为通信目标，能够以比使用监控摄像机157来判定土的干燥程度时高的精度而获知土壤的干燥程度。
＜利用形态4＞
此处，对在静态图像111上指定了多个被摄物的像时的作业流程处理进行说明。
图14的(a)及图14的(b)是说明利用形态4的作业流程处理的一例的图。图14的(a)表示在静态图像111上依序选择两个像的样子，图14的(b)表示实际空间内的动作状况。
图14的(a)及图14的(b)中，设想依序点击了显示装置的像202与录像播放机的像203的情况。此时，计算机110(参照图2)从属性信息16中读出与第一次点击显示装置的像202且第二次点击录像播放机的像203的情况对应的信息13A，并考虑实际空间信息来决定针对实际存在的显示装置152与录像播放机153的控制动作。
具体而言，将使在实际空间内显示于显示装置152上的播放节目录制到录像播放机153中的指示从计算机110(参照图2)输出至录像播放机153。例如计算机110通过与显示装置152的通信来获取显示中的图像的源(调谐器)与频道(18频道)的节目信息，并指示录像播放机153录制所述播放中的节目。
图15的(a)及图15的(b)是说明利用形态4的作业流程处理的另一例的图。图15的(a)表示在静态图像111上依序选择两个像的样子，图15的(b)表示实际空间内的动作状况。
图15的(a)及图15的(b)的情况下，也点击了显示装置的像202与录像播放机的像203。但是，点击的顺序相反。即，设想下述情况：在点击录像播放机的像203之后，点击显示装置的像202。
此时，计算机110(参照图2)从属性信息16读出与第一次点击录像播放机的像203且第二次点击显示装置的像202的情况对应的信息13A，并考虑实际空间信息来决定针对实际存在的显示装置152与录像播放机153的控制动作。
具体而言，将使录像播放机153播放图像和显示在显示装置152上的指示从计算机110(参照图2)输出至显示装置152与录像播放机153。例如计算机110通过与显示装置152的通信来指示所显示的图像的切换，并且对录像播放机153指示所播放的图像。此时，在静态图像111上，显示用于选择录像播放机153的播放对象图像的操作画面。
另外，由信息13A所规定的作业流程处理也可无须与所点击的机器的顺序对应，而与所点击的像的组合对应。
当如所述利用形态般，在静态图像111上指定了与多个机器对应的像时，能够对基于从实际存在的多个机器获取的实际空间信息的联动动作进行控制。
＜利用形态5＞
利用形态4中，对指定了多个被摄物的像时的作业流程处理进行了说明，但所述作业流程处理也可根据被摄物的哪个部位受到点击而内容不同。
图16的(a)及图16的(b)是说明利用形态5的作业流程处理的一例的图。图16的(a)表示在静态图像111上依序选择两个像的样子，图16的(b)表示实际空间内的动作状况。
在图16的(a)及图16的(b)的情况下，依序点击了图像形成装置的像201与计算机的像209。即，在点击图像形成装置的像201之后，点击计算机的像209。
但是，图16的(a)及图16的(b)中的鼠标指针112是位于图像形成装置的像201中的图像读取部(所谓的扫描仪(scanner)的部分)。此时，计算机110(参照图2)指示图像形成装置151和计算机159将由图像读取部所读取的图像(扫描图像)保存到计算机159中。
图17的(a)及图17的(b)是说明利用形态5的作业流程处理的另一例的图。图17的(a)表示在静态图像111上依序选择两个像的样子，图17的(b)表示实际空间内的动作状况。
在图17的(a)及图17的(b)的情况下，与图16的(a)及图16的(b)的示例的相同之处在于，依序点击了图像形成装置的像201与计算机的像209，而与图16的(a)及图16的(b)的示例的不同之处在于，鼠标指针112位于图像形成装置的像201中的本体部分。
此时，计算机110(参照图2)指示图像形成装置151和计算机159将储蓄在图像形成装置151中的操作日志(log)输出至计算机159。
如此，不仅使所点击的像(目标体)，而且使哪个部位被点击也具备意义，由此，能够实现更多种多样的作业流程处理。
图18的(a)及图18的(b)是说明利用形态5的作业流程处理的另一例的图。图18的(a)表示在静态图像111上依序选择两个像的样子，图18的(b)表示实际空间内的动作状况。
图18的(a)及图18的(b)的情况是对图像形成装置的像201和计算机的像209的点击顺序与图16的(a)及图16的(b)调换的情况。即，表示下述情况：第一次点击计算机的像209，第二次点击图像形成装置的像201中的控制面板的位置。
在本例的情况下，指示将蓄积在实际存在的计算机159中的图像传真(facsimile)发送(FAX发送)至存储在图像形成装置151的操作部中的目标。
此时，在显示有静态图像111的计算机110的画面上，作为实际空间信息，显示对设为FAX发送对象的图像进行选择的画面、或对储蓄在图像形成装置151中的目标进行选择的画面。
图19的(a)及图19的(b)是说明利用形态5的作业流程处理的另一例的图。图19的(a)表示在静态图像111上依序选择两个像的样子，图19的(b)表示实际空间内的动作状况。
图19的(a)及图19的(b)的情况下，与图18的(a)及图18的(b)的示例的相同之处也是第一次点击计算机的像209，第二次点击图像形成装置的像201，但表示了图像形成装置的像201中的本体部分受到点击的情况。
此时，计算机110(参照图2)指示图像形成装置151和计算机159将储蓄在计算机159中的图像通过图像形成装置151进行打印。此时，在静态图像111上，显示从计算机159获取的图像的一览，以便对设为打印对象的图像进行选择。
如此，在相对于一个像而登记有多个目标体的情况下，通过对静态图像111的操作，来实现不仅与所点击的像(目标体)、而且与哪个部位受到点击相应的动作的指定。
＜利用形态6＞
在前述的利用形态3以及利用形态4的情况下，对在静态图像111上指定了多个像(目标体)的情况下的实际存在的机器间的联动动作进行了说明，但也要考虑到反映出静态图像111上的显示状态而切换联动动作内容的情况。
图20的(a)及图20的(b)是说明利用形态6的作业流程处理的示例的图。图20的(a)表示在反映出实际存在的机器的状态而显示发生了变化的静态图像111中依序指定了两个像的情况，图20的(b)表示实际空间的样子。
图20的(a)及图20的(b)的示例中，表示了下述状态，即：静态图像111上的图像形成装置的像201的显示变为前门打开的图像。此显示与图11的(a)及图11的(b)相同。
此处，表示下述情况，即：在点击图像形成装置的像201中的、因前门打开而变得可从外部进行确认的墨粉的部分后，点击计算机的像209。
此时，计算机110根据前门已打开这一信息与鼠标指针112所处的部位的关系，而判定为墨粉容器受到点击。此时，计算机110执行跟与所点击的机器的显示状态(换言之，从实际存在的图像形成装置151获取的、前门已打开这一信息)的组合对应的信息13A，来指示墨粉剩余量向计算机159的输出。
另外，当将前门为打开状态的部位登记为目标体时，也可读出与所述目标体对应的信息13A来执行同样的处理。
图21的(a)及图21的(b)是说明利用形态6的作业流程处理的另一例的图。图21的(a)表示在反映出实际存在的机器的状态而显示发生了变化的静态图像111中依序指定了两个像的情况，图21的(b)表示实际空间的样子。
图21的(a)及图21的(b)的示例中，表示了下述状态，即：静态图像111上的图像形成装置的像201的显示变为前门打开的图像。
与图20的(a)及图20的(b)的不同之处在于：在静态图像111上，第一次点击实际存在的机器人(robot)的像1210，第二次点击前门的位置。
此时，计算机110指示实际空间150中的机器人160移动到图像形成装置151的位置和关闭前门的操作。此处的机器人160具备自走式的移动机构(例如轮胎(tire)、履带(caterpillar)、用于直立行走的机构等)、用于识别目标物的摄像机、及可动式的臂等。
图21的(a)及图21的(b)中表示了在实际空间150中，图像形成装置151的前门被机器人160关闭后的样子。
＜利用形态7＞
前述的利用形态中，在静态图像111上指定的多个像均为机器与机器的组合，但也要考虑到指定的组合为机器与非机器(例如人、宠物(pet)、植物)或者非机器与非机器的情况。
图22的(a)及图22的(b)是说明利用形态7的作业流程处理的图。图22的(a)表示在静态图像111上依序选择两个像的样子，图22的(b)表示实际空间内的动作状况。
图22的(a)及图22的(b)的示例中，表示了下述情况，即：第一次点击空调机的像206，第二次点击人的像204。若在属性信息16中含有与此组合对应的信息13A，则计算机110对实际存在的空调机156指示以成为适合于与像204对应的A的温度的方式调整温度。
另外，由于难以将与所设想的所有组合相应的详细的作业流程处理预先记录到属性信息16中，因此也可通过由与各个像对应的信息13A所规定的作业流程处理来读出在计算机110中进行动作的特定的应用程序，并与计算机110侧的应用程序联动地实现与指定组合相应的动作。
＜实施方式2＞
前述的实施方式1的说明中，是设为在JPEG文件10(参照图1)的属性信息16(参照图1)中，登记有对与静态图像111(参照图1)中所含的各像关联的作业流程处理进行了记述的信息13A，且对通过读出了信息13A的计算机110(参照图1)来实现的利用形态进行了说明。
此处，作为实施方式2，对用于在JPEG文件10的属性信息16中记录信息13A的处理功能进行说明。
图23是表示从记录对作业流程处理进行规定的信息13A的观点而表达的、控制部131的功能结构的一例的框图。
本实施方式中的控制部131作为下述部分发挥功能，即：位置检测部143，对用户所指定的目标体区域进行检测；目标体检测部144，从JPEG文件10的影像数据14(参照图1)中，使用图像处理技术来对登记为目标体的像的区域进行检测；以及属性信息生成部145，使与所检测出的各区域对应的作业流程处理的记述对应地生成属性信息16。
图24是说明用户对目标体区域的指定的示例的图。图24中，通过鼠标指针112的拖拽(drag)，以用虚线来包围作为静态图像111的像之一的、显示装置的像202的显示区域的方式而设定有区域115。
位置检测部143例如输出作为拖拽开始点的左上角的坐标值、直至拖拽结束的时间点为止沿垂直方向移动的像素数和沿水平方向移动的像素数，以作为规定所述区域115的坐标信息。
目标体检测部144被用于下述情况，即，预先登记有记录信息13A的像的图像(登记图像)。目标体检测部144执行JPEG文件10中所含的影像数据14与登记图像的匹配(matching)处理，将对与登记图像匹配的像(目标体)所处的区域进行确定的坐标信息作为位置信息而输出。
属性信息生成部145执行下述处理，即，使通过其他画面而输入或者预先准备的作业流程处理的记述关联于各位置信息。本实施方式中，作业流程处理也是以JSON格式而记述。
另外，若与像对应的实际空间的物体为机器，则只要在拍摄静态图像111的时间点通过IoT网络来收集确定各机器的制造编号或IoT网络上的地址信息，并与静态图像111相对应，便能够节省手动输入各个机器的制造编号等的工夫。
另外，如实施方式1中所说明般，与各像对应的实际空间的物体无须是与各像对应的实物。
图25的(a)及图25的(b)是说明对作业流程处理进行规定的信息13A向属性信息16中的写入的图。图25的(a)表示在JPEG文件10的属性信息16中包含信息13A之前的数据结构，图25的(b)表示在JPEG文件10的属性信息16中追加有信息13A的状态。
如此，也可在后来向现有的JPEG文件10中追记对作业流程处理进行规定的信息13A。
此外，对于在信息13A中记述的作业流程处理的内容，也可采用由用户每次进行输入的方法，但也可采用由属性信息生成部145(参照图23)提供与所指定的像相应的内容的方法、或提示给用户的方法。
例如若在静态图像111(参照图24)中指定的是图像形成装置的像201(换言之，指定了机器的像时)，则属性信息生成部145也可从数据库(未图示)中读出对图像形成装置的像201的控制进行规定的内容而加以适用。
例如若在静态图像111(参照图24)中指定的是植物的像205(换言之，指定了无法操作的物体的像时)，属性信息生成部145也可从数据库(未图示)中读出对与植物的像205相关的信息的显示进行规定的内容而加以适用。
而且，例如，属性信息生成部145也可从数据库(未图示)中读出与拍摄静态图像111的日期时间相应的信息而加以适用。拍摄的日期时间例如作为Exif信息而记述在属性信息16中。
图26的(a)及图26的(b)是说明在白天进行拍摄时记述于信息13A中的作业流程处理的一例的图。图26的(a)表示静态图像111，图26的(b)说明记述于JPEG文件10中的信息13A的内容。
图26的(a)及图26的(b)的示例中，静态图像111中包含餐厅(restaurant)的像215与路灯的像216，且由鼠标指针112指定了餐厅的像215的区域115。此处的属性信息生成部145(参照图23)从数据库(未图示)中读出“获取并显示午餐菜单(lunch menu)”这一内容的作业流程处理并记述于属性信息16中。
图27的(a)及图27的(b)是说明在晚上进行拍摄时记述于信息13A中的作业流程处理的一例的图。图27的(a)表示静态图像111，图27的(b)说明记述于JPEG文件10中的信息13A的内容。
图27的(a)及图27的(b)的情况下，静态图像111中也包含餐厅的像215与路灯的像216，且由鼠标指针112指定了餐厅的像215的区域115。此处的属性信息生成部145(参照图23)从数据库(未图示)中读出“获取并显示晚餐菜单(dinner menu)”这一内容的作业流程处理并记述于属性信息16中。
另外，属性信息生成部145也可根据拍摄的日期、进行拍摄的季节(例如春、夏、秋、冬)来决定记述于属性信息16中的作业流程处理的内容。
＜其他实施方式＞
以上，对本发明的实施方式进行了说明，但本发明的技术范围并不限定于前述的实施方式所记载的范围。根据权利要求书的记载当明确，在前述的实施方式中添加有各种变更或改良的内容包含在本发明的技术范围内。
例如，前述的实施方式中，作为图像的文件格式的示例，例示了作为静态图像的JPEG文件10，但可适用的文件格式并不限于静态图像或JPEG文件，也可适用于动态图像或JPEG以外的文件格式。
图28的(a)及图28的(b)是说明在动态图像的情况下执行的作业流程处理的示例的图。图28的(a)是表示动态图像播放中的像的指定的图，图28的(b)表示在实际空间中执行的动作。
图28的(a)及图28的(b)所示的示例表示了在计算机110的操作画面110A上显示有动态图像116的情况。在动态图像116中，记录有表示各帧在时间轴上的位置的信息(时、分、秒、帧等)。
图28的(a)及图28的(b)的示例中，表示了下述情况，即：在从播放开始算起的一分钟后与三分钟后，通过鼠标指针112点击了图像形成装置的像201。另外，由于显示于操作画面110A的是动态图像116，因此未图示的期间的显示为任意。
在动态图像116的情况下，在与静态图像对应的各帧的像中记录有与各时间点相应的信息13A。在信息13A中记述的作业流程处理既可在各时间点相同，也可不同。在图28的(a)及图28的(b)的情况下，在从播放开始算起的一分钟后的帧中的图像形成装置的像201中记述有指示打印的作业流程处理，在三分钟后的帧中的图像形成装置的像201中记述有指示传真发送的作业流程处理。因此，根据各像的指定来从计算机110发送对应的指示。
另外，本例中，设想在通过鼠标指针112来指定像的同时执行记述于信息13A中的作业流程处理的情况，在作业流程处理的过程中显示指示操作的画面时，在操作了执行按钮等后发送对图像形成装置151的指示。
图29的(a)及图29的(b)是说明在动态图像的情况下执行的作业流程处理的另一例的图。图29的(a)是表示动态图像播放中的像的指定的图，图29的(b)表示在实际空间中执行的动作。
图28的(a)及图28的(b)的示例中，从播放开始算起的一分钟后与三分钟后显示的像相同，但图29的(a)及图29的(b)的示例中表示了像不同的情况。此外，图29的(a)及图29的(b)的示例中，在从播放开始算起的一分钟后显示图像形成装置的像201，三分钟后显示机器人的像1210。图29的(a)及图29的(b)的示例中，在从播放开始算起的一分钟后对图像形成装置151指示打印，与此相对，在从播放开始算起的三分钟后对机器人160指示移动。
如上所述，在动态图像的情况下，执行由各时间点(帧)的属性信息16(参照图1)中所含的信息13A(参照图1)所规定的作业流程处理。
图30的(a)及图30的(b)是说明在动态图像的情况下执行的作业流程处理的另一例的图。图30的(a)是表示动态图像播放中的像的指定的图，图30的(b)表示在实际空间中执行的动作。
图30的(a)及图30的(b)所示的示例中，表示了下述情况，即：直至从计算机110向与各像对应的物体(例如图像形成装置151、机器人160)发送指示为止的等待时间，是根据从播放开始直至各像受到指定或者指示了作业流程处理的执行的时间点为止所经过的时间而定。
例如在图30的(a)及图30的(b)的情况下，在从播放开始算起的一分钟后通过指定图像形成装置的像201而对打印的指示是在进而一分钟后的两分钟的时间点发送。而且，在从播放开始算起的三分钟后通过执行机器人的像1210而对移动的指示是在进而三分钟后的六分钟的时间点发送。
另外，等待执行的时间无须与从播放开始直至像受到指定为止的时间相同。例如也可设为从播放开始算起的经过时间的一半。
而且，前述的方法中，从播放开始算起的时间经过越长，则直至向对应的物体发送指示为止的待机时间越长，但待机时间也可根据像受到指定的时间点的播放时刻而定。
无论如何，通过使直至向对应的物体发送指示为止的待机时间根据像受到指定时的动态图像的播放时刻而可变，从而能够实现使用动态图像的实际空间150的多种多样的控制。
前述的实施方式中，使用JSON格式来将作业流程处理记录于属性信息16的一部分中，但也可以声音数据的格式或JSON以外的文本格式来记录于属性信息16的一部分中，还可记录于与JPEG文件10关联的其他文件中。例如在分配给属性信息16的数据区域存在限制的情况下，理想的是记录为其他文件。
此处，在以声音数据的格式来记录作业流程处理的情况下，也可对声音数据的播放声进行分析而执行相应的作业流程处理。此时，声音数据也可被记录为音调(tone)信号的组合。而且，也可不播放声音数据，而分析其频率成分或波形图案来执行作业流程处理。
前述的实施方式中，是在显示静态图像111的计算机110中执行作业流程处理，但也可在与计算机110连接的服务器装置120上执行作业流程处理，并将处理结果给予至计算机110。但是，服务器装置120也可与实际空间150的机器等进行通信而执行作业流程处理。
前述的实施方式中，当信息13A(参照图1)所对应的静态图像在图像上受到指定时，仅执行对应的作业流程处理，但也可记录作业流程处理执行中的用户操作，并追记到现有的信息13A中。若存在此功能，则用户以后只要指定特定的像，便可省略后续的操作。

Claims (28)

1.一种信息处理装置，其特征在于，包括：
识别部，识别用户对包含属性信息所对应的被摄物的图像的指定；以及
控制部，当识别出用户在所述图像上对所述被摄物的指定时，基于与所述被摄物对应的所述属性信息和与实际空间相关的信息，来执行所述属性信息所规定的作业流程处理。
2.根据权利要求1所述的信息处理装置，其特征在于，
所述控制部通过所述作业流程处理，与用户所指定的作为被摄物的机器进行通信，获取与所述实际空间相关的信息。
3.根据权利要求2所述的信息处理装置，其特征在于，
所述控制部基于与所述实际空间相关的信息，来对所述图像上的被摄物的显示给予变化。
4.根据权利要求2所述的信息处理装置，其特征在于，
所述控制部基于与所述实际空间相关的信息，来显示用于敦促用户进行特定行动的通知画面。
5.根据权利要求2所述的信息处理装置，其特征在于，
所述控制部基于与所述实际空间相关的信息，来显示用于对作为被摄物的所述机器所具有的功能进行操作的画面。
6.根据权利要求2所述的信息处理装置，其特征在于，
所述控制部基于与所述实际空间相关的信息，来发送针对作为被摄物的所述机器或其他机器的指示。
7.根据权利要求1所述的信息处理装置，其特征在于，
所述控制部基于所述被摄物中被指定的部位，来发送针对作为被摄物的机器的指示。
8.根据权利要求1所述的信息处理装置，其特征在于，
所述图像包含多个被摄物，当在所述图像上指定了作为所述多个被摄物的多个机器时，所述控制部通过所述作业流程处理来发送使所述多个机器进行联动动作的指示。
9.根据权利要求8所述的信息处理装置，其特征在于，
所述控制部基于所述多个机器的指定顺序，来变更使所述多个机器进行联动动作的指示的内容。
10.根据权利要求9所述的信息处理装置，其特征在于，
所述控制部基于所述被摄物中被指定的部位，来变更使所述多个机器进行联动动作的指示的内容。
11.根据权利要求8所述的信息处理装置，其特征在于，
所述控制部基于被指定的所述被摄物的显示状态，来变更使所述多个机器进行联动动作的指示的内容。
12.根据权利要求1所述的信息处理装置，其特征在于，
当所述图像为动态图像、且在所述图像的不同的播放时刻识别出所述被摄物的指定时，所述控制部基于各播放时刻的所述属性信息和与实际空间相关的所述信息，来执行所述作业流程处理。
13.根据权利要求1所述的信息处理装置，其特征在于，
当所述图像为动态图像、且在所述图像的不同的播放时刻识别出所述被摄物的指定时，或者指示了所述作业流程处理的执行时，所述控制部使针对对应物体的指示发送，待机根据从所述图像的播放开始直至各播放时刻为止所经过的时间而定的时间。
14.根据权利要求1所述的信息处理装置，其特征在于，
所述控制部与位于实际空间的传感器进行通信，获取与所述实际空间相关的信息。
15.根据权利要求14所述的信息处理装置，其特征在于，
所述控制部基于与所述实际空间相关的信息，来对所述图像上的被摄物的显示给予变化。
16.根据权利要求14所述的信息处理装置，其特征在于，
所述控制部基于与所述实际空间相关的信息，来显示用于敦促用户进行特定行动的通知画面。
17.根据权利要求14所述的信息处理装置，其特征在于，
所述控制部基于与所述实际空间相关的信息，来显示用于对与所指定的被摄物相关联的机器所具有的功能进行操作的画面。
18.根据权利要求1所述的信息处理装置，其特征在于，
与所述实际空间相关的信息是识别出所述被摄物的指定的时间点的信息。
19.根据权利要求1所述的信息处理装置，其特征在于，
与所述实际空间相关的信息是环境信息。
20.根据权利要求1所述的信息处理装置，其特征在于，
所述图像的数据文件遵照JPEG格式，所述属性信息是以JSON而记述。
21.根据权利要求1所述的信息处理装置，其特征在于，
所述作业流程处理是以声音数据的格式而记载。
22.根据权利要求1所述的信息处理装置，其特征在于，
所述作业流程处理是以文本数据的格式而记载。
23.一种信息处理装置，其特征在于，包括：
检测部，对图像上与用户所指定的被摄物对应的区域部分进行检测，或者对预定的被摄物所存在的所述图像上的区域部分进行检测；以及
控制部，将对作业流程处理进行规定的信息，记述于属性信息的一部分，所述作业流程处理是当与所检测出的所述区域部分关联的被摄物受到指定时，基于与实际空间相关的信息而执行，所述属性信息附属于所述图像的数据文件。
24.根据权利要求23所述的信息处理装置，其特征在于，
若所指定的所述被摄物为机器，则所述控制部将对所述机器的控制进行规定的信息记述为所述作业流程处理。
25.根据权利要求23所述的信息处理装置，其特征在于，
若所指定的所述被摄物为无法操作的物体，则所述控制部将对与所述物体相关的信息的显示进行规定的信息记述为所述作业流程处理。
26.根据权利要求23所述的信息处理装置，其特征在于，
所述控制部将与拍摄所述图像的日期时间相应的信息记述为所述作业流程处理。
27.一种图像文件的数据结构，所述图像文件是由信息处理装置进行处理，所述图像文件的数据结构的特征在于，包括：
第1数据区域，保存图像的本体；以及
第2数据区域，为保存所述图像本体的属性信息的第2数据区域，且包含对基于与实际空间相关的信息来执行的作业流程处理进行规定的信息，以作为所述属性信息的一部分，
当用户在所述图像上指定了被摄物时，执行与所述实际空间相关的信息所规定的所述作业流程处理。
28.一种存储程序的计算机可读介质，所述程序使计算机执行信息处理，其特征在于，所述信息处理包括：
识别用户对包含属性信息所对应的被摄物的图像的指定；以及
当识别出用户在所述图像上对所述被摄物的指定时，基于与所述被摄物对应的所述属性信息和与实际空间相关的信息，来执行所述属性信息所规定的作业流程处理。
CN201811013605.9A 2017-09-13 2018-08-31 信息处理装置、图像文件的数据结构以及计算机可读介质 Active CN109492515B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017-176001 2017-09-13
JP2017176001A JP6992342B2 (ja) 2017-09-13 2017-09-13 情報処理装置及びプログラム

Publications (2)

Publication Number Publication Date
CN109492515A true CN109492515A (zh) 2019-03-19
CN109492515B CN109492515B (zh) 2023-07-18

Family

ID=65632163

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811013605.9A Active CN109492515B (zh) 2017-09-13 2018-08-31 信息处理装置、图像文件的数据结构以及计算机可读介质

Country Status (3)

Country Link
US (1) US10896219B2 (zh)
JP (1) JP6992342B2 (zh)
CN (1) CN109492515B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019217163A1 (en) 2018-05-08 2019-11-14 Zermatt Technologies Llc Techniques for switching between immersion levels
US11468611B1 (en) * 2019-05-16 2022-10-11 Apple Inc. Method and device for supplementing a virtual environment

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002132558A (ja) * 2000-08-18 2002-05-10 Fujitsu Ltd 画像処理装置、方法、媒体、およびプログラム
JP2003058239A (ja) * 2001-08-21 2003-02-28 Inter Action Corp インタラクティブ・状態監視・表示および駆動装置
CN1820240A (zh) * 2003-09-10 2006-08-16 富士通株式会社 对背景图像进行设定的信息处理装置、信息显示方法及程序
CN101600051A (zh) * 2008-06-06 2009-12-09 索尼株式会社 图像拍摄设备、图像拍摄方法和计算机程序
US20100049740A1 (en) * 2008-08-21 2010-02-25 Akio Iwase Workflow template management for medical image data processing
US20100134410A1 (en) * 2006-10-02 2010-06-03 Isao Tomisawa Image display device
CN103069465A (zh) * 2010-08-06 2013-04-24 株式会社尼康 信息管理装置、数据分析装置、信号机、服务器、信息管理系统、信号机控制装置及程序
CN103823678A (zh) * 2014-02-21 2014-05-28 联想(北京)有限公司 图像处理方法和图像处理装置
US20140237366A1 (en) * 2013-02-19 2014-08-21 Adam Poulos Context-aware augmented reality object commands
JP2014191523A (ja) * 2013-03-27 2014-10-06 Hitachi Ltd エネルギー情報を表示する入退室端末、及びビル総合管理システム
US20150080125A1 (en) * 2012-06-05 2015-03-19 Sony Corporation Information processing apparatus, information processing method, program, and toy system
JP6187667B1 (ja) * 2016-10-24 2017-08-30 富士ゼロックス株式会社 情報処理装置、画像ファイルのデータ構造及びプログラム

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS60112847U (ja) * 1983-12-31 1985-07-31 カシオ計算機株式会社 記録位置検出装置
JP4088025B2 (ja) 2000-07-06 2008-05-21 株式会社東芝 インターネット商品受注装置
US20020021304A1 (en) 2000-08-18 2002-02-21 Harutaka Eguchi Image processing system for adding add information to image object, image processing method and medium
JP2004120069A (ja) 2002-09-24 2004-04-15 Canon Inc 画像処理装置、画像処理方法および該方法を実現するためのプログラム
JP2005217616A (ja) * 2004-01-28 2005-08-11 Konica Minolta Photo Imaging Inc デジタルカメラ
US7624123B2 (en) * 2004-02-26 2009-11-24 Ati Technologies, Inc. Image processing system and method
US20120151397A1 (en) * 2010-12-08 2012-06-14 Tavendo Gmbh Access to an electronic object collection via a plurality of views
EP2490142A1 (en) * 2011-02-15 2012-08-22 Dassault Systèmes Designing a navigation scene
US20130044912A1 (en) * 2011-08-19 2013-02-21 Qualcomm Incorporated Use of association of an object detected in an image to obtain information to display to a user
US20130278633A1 (en) * 2012-04-20 2013-10-24 Samsung Electronics Co., Ltd. Method and system for generating augmented reality scene
US20140047413A1 (en) * 2012-08-09 2014-02-13 Modit, Inc. Developing, Modifying, and Using Applications
JP6351313B2 (ja) * 2013-07-11 2018-07-04 キヤノン株式会社 画像符号化装置、画像復号装置、画像処理装置、並びにそれらの制御方法
US10609267B2 (en) * 2014-07-23 2020-03-31 Orcam Technologies Ltd. Systems and methods for analyzing advertisement effectiveness using wearable camera systems
US10019059B2 (en) * 2014-08-22 2018-07-10 Sony Interactive Entertainment Inc. Glove interface object
US10026229B1 (en) * 2016-02-09 2018-07-17 A9.Com, Inc. Auxiliary device as augmented reality platform
JP6179653B1 (ja) 2016-10-19 2017-08-16 富士ゼロックス株式会社 情報処理装置及びプログラム
US10388072B2 (en) * 2016-10-31 2019-08-20 Verizon Patent And Licensing Inc. Methods and systems for dynamically customizing a scene for presentation to a user

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002132558A (ja) * 2000-08-18 2002-05-10 Fujitsu Ltd 画像処理装置、方法、媒体、およびプログラム
JP2003058239A (ja) * 2001-08-21 2003-02-28 Inter Action Corp インタラクティブ・状態監視・表示および駆動装置
CN1820240A (zh) * 2003-09-10 2006-08-16 富士通株式会社 对背景图像进行设定的信息处理装置、信息显示方法及程序
US20100134410A1 (en) * 2006-10-02 2010-06-03 Isao Tomisawa Image display device
CN101600051A (zh) * 2008-06-06 2009-12-09 索尼株式会社 图像拍摄设备、图像拍摄方法和计算机程序
US20100049740A1 (en) * 2008-08-21 2010-02-25 Akio Iwase Workflow template management for medical image data processing
CN103069465A (zh) * 2010-08-06 2013-04-24 株式会社尼康 信息管理装置、数据分析装置、信号机、服务器、信息管理系统、信号机控制装置及程序
US20150080125A1 (en) * 2012-06-05 2015-03-19 Sony Corporation Information processing apparatus, information processing method, program, and toy system
US20140237366A1 (en) * 2013-02-19 2014-08-21 Adam Poulos Context-aware augmented reality object commands
JP2014191523A (ja) * 2013-03-27 2014-10-06 Hitachi Ltd エネルギー情報を表示する入退室端末、及びビル総合管理システム
CN103823678A (zh) * 2014-02-21 2014-05-28 联想(北京)有限公司 图像处理方法和图像处理装置
JP6187667B1 (ja) * 2016-10-24 2017-08-30 富士ゼロックス株式会社 情報処理装置、画像ファイルのデータ構造及びプログラム

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
李华盛等: "基于属性学习的图像识别研究与实现", 《大陆桥视野》, no. 18, pages 284 *
李宏侠: "物联网技术在智慧园区停车场系统中的应用研究", 《中国优秀硕士学位论文全文数据库 (工程科技Ⅱ辑)》 *
李宏侠: "物联网技术在智慧园区停车场系统中的应用研究", 《中国优秀硕士学位论文全文数据库 (工程科技Ⅱ辑)》, no. 5, 15 May 2014 (2014-05-15), pages 034 - 717 *

Also Published As

Publication number Publication date
JP2019053424A (ja) 2019-04-04
JP6992342B2 (ja) 2022-01-13
CN109492515B (zh) 2023-07-18
US20190079954A1 (en) 2019-03-14
US10896219B2 (en) 2021-01-19

Similar Documents

Publication Publication Date Title
CN106227439B (zh) 用于捕获增强型数字图像和与之交互的设备和方法
CN102945276B (zh) 生成和更新基于事件的回放体验
CN104135694B (zh) 信息处理装置以及信息处理方法
CN104756514B (zh) 通过社交网络共享电视和视频节目
WO2019105440A1 (zh) 视频编辑推送方法、系统及智能移动终端
JP5438377B2 (ja) 情報処理プログラムおよび情報処理装置
CN109061985A (zh) 用于相机效果的用户界面
DE202015003860U1 (de) Benutzerschnittstellen für Nachrichten zum Erfassen und Übertragen von Medien- und Standortinhalten
CN109416805A (zh) 用于具有自动广告的媒体集的呈现的方法和系统
US20070016868A1 (en) Method and a device for managing digital media files
CN105117102B (zh) 音频界面显示方法和装置
JP6628115B2 (ja) マルチメディアファイル管理方法、電子デバイス、およびコンピュータプログラム。
CN101322396A (zh) 数字图像的回放
WO2018152822A1 (zh) 一种生成相册的方法、装置和移动终端
CN101790034A (zh) 图像处理装置、图像显示方法和图像显示程序
KR20170011177A (ko) 디스플레이 장치 및 그 제어 방법
CN105519101A (zh) 用于计算装置的辨识界面
JP6046874B1 (ja) 情報処理装置、情報処理方法、プログラム
CN103250152A (zh) 响应于共享广度而控制的图像显示设备
CN104182232A (zh) 一种创建上下文感知应用的方法及用户终端
CN109033472A (zh) 图片检索方法及装置、计算机设备及计算机可读介质
CN108198162A (zh) 照片处理方法、移动终端、服务器、系统、存储介质
CN109492515A (zh) 信息处理装置、图像文件的数据结构以及计算机可读介质
CN107016034A (zh) 信息处理装置及信息处理方法
JP2008198135A (ja) 情報配信システム、情報配信装置および情報配信方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: No. 3, chiban 9, Dingmu 7, Tokyo port, Japan

Applicant after: Fuji film business innovation Co.,Ltd.

Address before: No. 3, chiban 9, Dingmu 7, Tokyo port, Japan

Applicant before: Fuji Xerox Co.,Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant