CN111226289A - 动态图像记录系统 - Google Patents
动态图像记录系统 Download PDFInfo
- Publication number
- CN111226289A CN111226289A CN201880038885.0A CN201880038885A CN111226289A CN 111226289 A CN111226289 A CN 111226289A CN 201880038885 A CN201880038885 A CN 201880038885A CN 111226289 A CN111226289 A CN 111226289A
- Authority
- CN
- China
- Prior art keywords
- moving image
- unit
- target person
- control unit
- station
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003860 storage Methods 0.000 claims abstract description 93
- 230000010365 information processing Effects 0.000 claims abstract description 72
- 230000033001 locomotion Effects 0.000 claims description 113
- 238000003384 imaging method Methods 0.000 claims description 50
- 230000009471 action Effects 0.000 claims description 43
- 239000000284 extract Substances 0.000 claims description 8
- 230000033458 reproduction Effects 0.000 description 125
- 238000000034 method Methods 0.000 description 97
- 230000008569 process Effects 0.000 description 84
- 238000001514 detection method Methods 0.000 description 83
- 210000002683 foot Anatomy 0.000 description 38
- 238000010586 diagram Methods 0.000 description 37
- 230000006870 function Effects 0.000 description 29
- 238000011156 evaluation Methods 0.000 description 19
- 230000005540 biological transmission Effects 0.000 description 18
- 238000012545 processing Methods 0.000 description 17
- 238000012986 modification Methods 0.000 description 14
- 230000004048 modification Effects 0.000 description 14
- 239000003550 marker Substances 0.000 description 11
- 238000011084 recovery Methods 0.000 description 11
- 230000008929 regeneration Effects 0.000 description 10
- 238000011069 regeneration method Methods 0.000 description 10
- 238000012546 transfer Methods 0.000 description 8
- 230000004913 activation Effects 0.000 description 7
- 238000004891 communication Methods 0.000 description 6
- 238000009826 distribution Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 5
- 238000003825 pressing Methods 0.000 description 5
- 101000652578 Homo sapiens Thyroid transcription factor 1-associated protein 26 Proteins 0.000 description 4
- 102100030344 Thyroid transcription factor 1-associated protein 26 Human genes 0.000 description 4
- 238000004458 analytical method Methods 0.000 description 4
- 230000008859 change Effects 0.000 description 4
- 238000005259 measurement Methods 0.000 description 4
- 238000002360 preparation method Methods 0.000 description 4
- 210000000707 wrist Anatomy 0.000 description 4
- 210000003423 ankle Anatomy 0.000 description 3
- 238000012790 confirmation Methods 0.000 description 3
- 238000005401 electroluminescence Methods 0.000 description 3
- 238000013459 approach Methods 0.000 description 2
- 210000000988 bone and bone Anatomy 0.000 description 2
- 210000004247 hand Anatomy 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000003032 molecular docking Methods 0.000 description 2
- 230000007704 transition Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 238000013075 data extraction Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 210000001503 joint Anatomy 0.000 description 1
- 238000013508 migration Methods 0.000 description 1
- 230000005012 migration Effects 0.000 description 1
- 230000000474 nursing effect Effects 0.000 description 1
- 238000001584 occupational therapy Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000004513 sizing Methods 0.000 description 1
- 230000009747 swallowing Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
- G16H20/30—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to physical therapies or activities, e.g. physiotherapy, acupressure or exercising
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
- A61B5/1126—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
- A61H1/00—Apparatus for passive exercising; Vibrating apparatus; Chiropractic devices, e.g. body impacting devices, external devices for briefly extending or aligning unbroken bones
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/22—Social work or social welfare, e.g. community support activities or counselling services
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/23—Recognition of whole body movements, e.g. for sport training
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
- H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
- H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2505/00—Evaluating, monitoring or diagnosing in the context of a particular type of medical care
- A61B2505/09—Rehabilitation or training
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
- A61H2201/00—Characteristics of apparatus not provided for in the preceding codes
- A61H2201/50—Control means thereof
- A61H2201/5023—Interfaces to the user
- A61H2201/5043—Displays
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
- A61H2201/00—Characteristics of apparatus not provided for in the preceding codes
- A61H2201/50—Control means thereof
- A61H2201/5058—Sensors or detectors
- A61H2201/5092—Optical sensor
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Multimedia (AREA)
- Public Health (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Epidemiology (AREA)
- Animal Behavior & Ethology (AREA)
- Physical Education & Sports Medicine (AREA)
- Veterinary Medicine (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- Rehabilitation Therapy (AREA)
- Pain & Pain Management (AREA)
- Human Computer Interaction (AREA)
- Social Psychology (AREA)
- Psychiatry (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Biophysics (AREA)
- Primary Health Care (AREA)
- Medical Informatics (AREA)
- Tourism & Hospitality (AREA)
- Child & Adolescent Psychology (AREA)
- Pathology (AREA)
- General Business, Economics & Management (AREA)
- Human Resources & Organizations (AREA)
- Strategic Management (AREA)
- Marketing (AREA)
- Physiology (AREA)
- Dentistry (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Economics (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Rehabilitation Tools (AREA)
Abstract
本发明提供一种动态图像记录系统,该动态图像记录系统具备信息处理装置和能够装卸所述信息处理装置的站。所述站具备与所述信息处理装置连接而收发数据的连接部、取得识别拍摄的目标人的目标人识别信息的取得部、从所述连接部向所述信息处理装置发送所述取得部取得的所述目标人识别信息的控制部。所述信息处理装置具备:与所述站连接而收发数据的连接部、拍摄所述目标人的拍摄部、存储所述拍摄部拍摄到的动态图像的存储部、经由所述连接部从所述站接收所述目标人识别信息且将接收到的所述目标人识别信息与所述拍摄部拍摄所述目标人的动态图像相关联地写入所述存储部的记录控制部。
Description
技术领域
本发明涉及动态图像记录系统。
本申请基于2017年10月27日在日本国申请的特愿2017-208304号主张优先权,并在此引用该内容。
背景技术
在康复领域中,正在进行以动态图像记录康复中的目标人的动作,并将该动态图像应用到康复中的研究(例如,参照专利文献1)。
现有技术文献
专利文献
专利文献1:日本特开2016-197330号公报
发明内容
发明所要解决的技术问题
本发明提供一种能提高拍摄目标人的动态图像记录系统的操作性的动态图像记录系统。
用于解决问题的技术方案
本发明一实施方式提供一种动态图像记录系统,其具备信息处理装置和能够装卸所述信息处理装置的站,其中,所述站具备:与所述信息处理装置连接而收发数据的连接部、取得识别拍摄的目标人的目标人识别信息的取得部、从所述连接部向所述信息处理装置发送所述取得部所取得的所述目标人识别信息的控制部,所述信息处理装置具备:与所述站连接而收发数据的连接部;拍摄所述目标人的拍摄部;存储所述拍摄部所拍摄的动态图像的存储部;以及经由所述连接部从所述站接收所述目标人识别信息且将接收到的所述目标人识别信息与所述拍摄部拍摄所述目标人的动态图像相关联地写入所述存储部的记录控制部。
发明效果
根据本发明,能提高拍摄目标人的动态图像记录系统的操作性。
附图说明
图1是表示本发明第一实施方式的康复支持系统的系统配置的立体图。
图2是表示本发明第一实施方式的康复支持系统中具备的平板终端及站的外观例的立体图。
图3是表示本发明第一实施方式的康复支持系统所具备的平板终端、站、遥控器及介质各自的功能构成例的概略框图。
图4是表示本发明第一实施方式的平板终端的硬件构成例的概略框图。
图5是表示本发明第一实施方式的平板终端的存储部存储的对应表的数据构成及数据例的概略图。
图6是表示本发明第一实施方式的康复支持系统中的处理的一例的示意图。
图7是表示本发明第一实施方式的康复支持系统中的处理的一例的时序图。
图8是表示在本发明第一实施方式的平板终端的显示部显示的动态图像再生画面的一例的示意图。
图9A是表示显示于本发明第一实施方式的平板终端的显示部的动态图像选择画面的一例的示意图。
图9B是表示该动态图像选择画面的变形例的示意图。
图10是表示显示于本发明第一实施方式的平板终端的显示部的同时再生画面的一例的示意图。
图11是表示本发明第一实施方式的平板终端进行的动态图像记录再生处理的一例的流程图。
图12是表示显示于变形例的平板终端的显示部的动态图像再生画面的一例的示意图。
图13是表示显示于变形例的平板终端的显示部的自动OUTPUT画面的一例的第一示意图。
图14是表示显示于变形例的平板终端的显示部的自动OUTPUT画面的一例的第二示意图。
图15是表示本发明第二实施例的康复支持系统的系统构成的立体图。
图16是表示本发明第二实施例的康复支持系统所具备的康复支持装置的功能构成例的概略框图。
图17是表示本发明第二实施方式的康复支持系统所具备的平板终端及站各自的功能构成例的概略框图。
图18是表示本发明第二实施方式的平板终端的存储部存储的对应表的数据构成及数据例的概略图。
图19是表示在本发明第二实施方式中目标人进行康复的情况的立体图。
图20是表示本发明第二实施例的康复支持系统中的处理的一例的时序图。
图21是表示显示于本发明第二实施方式的平板终端的显示部的动态图像再生画面的一例的示意图。
图22是表示显示于本发明第二实施方式的平板终端的显示部的动态图像选择画面的一例的示意图。
图23是表示显示于本发明第二实施方式的平板终端的显示部的同时再生画面的一例的示意图。
图24是表示本发明第二实施方式的康复支持装置进行的应用执行处理的一例的流程图。
图25是表示本发明第二实施方式的平板终端进行的动态图像记录再生处理的一例的流程图。
图26A是表示本发明第一实施方式及第二实施方式的变形例的图,表示由移动支承架台支承平板终端而不是由站支承的形式的立体图。
图26B是表示本变形例的图,是图26A的主要部分放大图。
具体实施方式
以下,参照附图对本发明的实施方式进行说明。
[第一实施方式]
首先,对第一实施方式进行说明。图1是表示本实施方式的康复支持系统S1(动态图像记录系统)的系统构成的立体图。康复支持系统S1是支持对康复的目标人EP(以下称为“目标人EP”)康复的实施的系统。更具体而言,康复支持系统S1是用于用动态图像拍摄并记录目标人EP的康复的情况,并再生显示所记录的动态图像的系统。
康复支持系统S1具备平板终端10、站20、遥控器30及介质40-1、40-2。在以下的说明中,在没有特别区别介质40-1、40-2的情况下,记载为介质40。
平板终端10是平板型的可移动的信息处理装置。平板终端10可以安装在站20上,且可以脱离站20。
站20是可以设置于房间的墙面等上的固定型的站。平板终端10可从站20装卸。站20在安装有平板终端10时,保持平板终端10以立起的状态朝着正面。另外,站20在安装有平板终端10时,与平板终端10连接收发数据。另外,站20与电源连接,当安装了平板终端10时,自动地向平板终端10供给电力。
遥控器30是用于远程操作平板终端10的遥控器。在遥控器30上,在正面配置有按钮。另外,遥控器30是收纳于手掌中的尺寸,例如是容易拿在手上的设计。
介质40是具有存储关于持有者的个人信息的RFID(Radio FrequencyIdentifier:射频标识符)标签的介质。个人信息至少包含识别所有者的识别信息。目标人EP的识别信息是患者编号(目标人识别信息)。在图示的例子中,目标人EP在手腕上安装有带式介质40-1。另一方面,支持目标人EP的康复的理疗师或职业治疗师等助手SP(以下称为“助手SP”)在手上保持有卡式介质40-2。
通过将介质40设为带型,能够始终将介质40带在身上,因此,能够防止忘带或丢失。另外,介质40不限于RFID,也可以是其它非接触ID。另外,目标人EP可以使用卡式介质40-2,操作者SP也可以使用带式介质40-1。另外,目标人EP和助手SP均可以使用带式介质40-1,目标人EP和助手SP均可使用卡式介质40-2。另外,介质40的形状不限于带式或卡式,也可以是目标人EP或操作者SP容易保持、安装的其它形状。
接着,对平板终端10、站20、遥控器30及介质40各自的构成例进行说明。图2是表示康复支持系统S1所具备的平板终端10及站20的外观例的立体图。
平板终端10在其正面具备拍摄部101和显示部103。拍摄部101是拍摄被摄体的摄像头。例如,拍摄部101对实施康复的目标人EP进行拍摄。显示部103是液晶显示器、有机EL(Electro Luminescence:电致发光)显示器等图像显示装置。显示部103在该显示画面上具备触摸面板。例如,显示部103再生并显示平板终端10存储的动态图像。
站20在其正面具备配对读取部201。配对读取部201是取得识别目标人EP的个人信息及康复的动作类别的取得部。配对读取部201从介质40读取个人信息。在配对读取部201中设有5个读取区域2011~2015。在各读取区域2011~2015分别与不同的动作类别相关联。动作类别是康复中的动作的类别。在图示的例子中,动作类别“坐姿”对应于读取区域2011,动作类别“站姿”对应于读取区域2012,动作类别“站起来”对应于读取区域2013,动作类别“步行”对应于读取区域2014,动作类别“其它”对应于读取区域2015。配对读取部201根据从介质40读取了个人信息的读取区域2011~2015取得动作类别。
此外,动作类别不限于上述,通过设定,能够自由变更、追加。另外,动作类别不仅限于“动作”,也可以包含表示“操作”、“练习”等的类别。另外,也可以将读取区域2011~2015设为一个,作为个人信息的读取专用,通过平板终端10内的应用选择动作类别。由此,通过更新应用程序,能够灵活地更新类别。
另外,站20具备对接部205。对接部205在侧面具有凹状的保持部,通过该保持部夹着平板终端10的侧面进行保持。对接部205也可以为左右可动式。由此,即使在变更平板终端的纵横朝向并保持的情况或平板终端10的尺寸被变更的情况下,也能够对应而不必变更站20。
图3是表示康复支持系统S1所具备的平板终端10、站20、遥控器30及介质40各自的功能构成例的概略框图。
平板终端10具备拍摄部101、控制部102、显示部103、存储部104、操作部105、接收部106以及连接部107。此外,平板终端10也可以不具有拍摄部101而经由连接部107取得外部的摄像头拍摄到的动态图像来使用。更具体而言,例如,可以配置与平板终端10分体的外部摄像头(网络摄像头等),代替拍摄部101而使用该外部摄像头进行拍摄。在这种情况下,外部摄像头可以实时地将所拍摄的动态图像发送到平板终端10,或者可以不发送而暂时保存在外部摄像头中。在将所拍摄的动态图像暂时保存于外部摄像头中的情况下,外部摄像头可以在接收到来自平板终端10的指示时,将动态图像发送到平板终端10。
控制部102使用CPU(Central Processing Unit(中央处理器);中央运算处理装置)构成,统一控制平板终端10的动作。控制部102具备记录控制部1021和显示控制部1022。记录控制部1021记录拍摄部101拍摄目标人EP的动态图像,将记录的动态图像、从站20接收到的目标人EP的患者编号及康复的动作类别、拍摄动态图像的拍摄日期时间相关联地写入存储部104进行保存。显示控制部1022将存储部104所存储的动态图像再生并显示在显示部103上。另外,显示控制部1022在显示部103并排同时再生目标人EP的多个(例如两个)动态图像。
存储部104使用ROM(Read Only Memory:只读存储器)、RAM(Random AccessMemory:随机存取存储器)等存储装置构成,存储各种信息。例如,存储部104对拍摄部101拍摄的动态图像的图像数据(以下称为动态图像数据)、使动态图像、目标人、动作类别以及拍摄日期时间对应的对应表等进行存储。
操作部105使用按钮、触摸面板等已有的输入装置构成,接受输入。操作部105在将助手SP的指示输入到平板终端10时由助手SP进行操作。
接收部106接收通过红外线等来自遥控器30的控制数据。控制数据中存在指示开始记录动态图像的启动信息或指示停止记录动态图像的停止信息。
连接部107是在将平板终端10安装于站20上时,与站20连接而收发数据的接口。
此外,平板终端10例如也可以具有输出声音的声音输出部等智能手机或平板终端通常具有的功能部。
站20具备配对读取部201、供电部202、控制部203以及第一连接部204。
供电部202向站20的各部供电。另外,供电部202在平板终端10安装于站20上时,经由第一连接部204向平板终端10供电。
控制部203统一控制站20的动作。控制部203也可以使用CPU构成。例如,控制部203将配对读取部201从介质40读取到的个人信息及动作类别从第一连接部204发送到平板终端10。第一连接部204是在将平板终端10安装于站20上时,与平板终端10连接而收发数据的接口。
此外,也可以通过平板终端10的应用程序来实现站20的一部分或全部功能。
遥控器30具备操作部301和发送部302。操作部301使用按钮构成,接受输入。发送部302在操作部301接受到输入时,通过红外线等将控制数据发送到平板终端10。
介质40具备存储部401。存储部401存储所有者的个人信息。个人信息例如是患者编号、姓名、出生年月日等。
图4是表示康复支持系统S1所具备的平板终端10的硬件构成例的概略框图。
平板终端10构成为包含CPU1001、RAM1002、ROM1003、通信模块1004、支持存储装置1005、输入装置1006和输出装置1007,分别通过总线1008等连接。
CPU1001对应于控制部102。RAM1002、ROM1003及支持存储装置1005对应于存储部104。通信模块1004对应于接收部106及连接部107。输入装置1006对应于拍摄部101。输出装置1007对应于显示部103。
图5是表示平板终端10的存储部104存储的对应表的数据结构及数据例的概略图。如图所示,对应表具有目标人、动作类别、日期时间、动态图像的各项目。目标人是作为动态图像的被摄体的目标人EP的患者编号。动作类别是康复的动作类别。日期时间是拍摄动态图像的年月日时分。动态图像是动态图像数据的数据名。
接着,参照图6及图7,对本实施方式的康复支持系统S1中的处理流程进行说明。图6是表示康复支持系统S1中的处理的一例的示意图。图7是表示康复支持系统S1中的处理的一例的时序图。在康复支持系统S1中,能够通过平板终端10用动态图像记录目标人EP的康复的情况,在平板终端10中再生所记录的动态图像并进行确认。
平板终端10预先安装在设置于墙面等的站20。由此,可以省去助手SP为了拍摄动态图像而将三脚架的位置、摄像头的高度等调节为可拍摄目标人EP而进行设定的工夫。另外,当通过三脚架等设定摄像头的位置时,对上次设定的位置进行定点观察会花费时间,或者位置会偏移。与之相对,在本康复支持系统S1中,只要将平板终端10安装于站点20上就可以容易地进行设定。另外,由于平板终端10的位置不会从上次的位置偏移,所以只要事先决定目标人EP的位置,就可以每次拍摄相同范围内的康复的动态图像,容易进行动态图像的比较等。另外,因为站20被设置在墙面等,所以平时在各种各样的人往来的康复室中不会成为妨碍,不需要收拾起来。另外,想使用时可以马上使用。
首先,助手SP将与目标人EP对应的介质40放在站20的配对读取部201(步骤S101)(参照图6的(a)。此时,助手SP将介质40放在配对读取部201中与之后目标人EP所进行的(即,记录于动态图像中)动作类别对应的读取区域。在图示的例子中,将介质40放在与动作类别“坐姿”对应的读取区域2011。
站20的配对读取部201从介质40读取目标人EP的个人信息,另外,取得与放置介质40的读取区域对应的动作类别(步骤S102)。然后,配对读取部201将取得的个人信息和动作类别输出到控制部203。控制部203经由第一连接部204将输入的个人信息及动作类别发送到平板终端10(步骤S103)。
当从站20接收个人信息及动作类别时,平板终端10的控制部102在显示部103显示与接收到的个人信息对应的菜单画面(步骤S104)。在菜单画面上,可选择地显示用于将目标人EP的个人信息注册到介质40的患者卡注册、各种设定、再生动态图像的动态图像再生、将动态图像传送给其它设备的动态图像传送、记录动态图像的动态图像记录、注销等各菜单。助手SP从菜单画面上选择动态图像记录(步骤S105)。
如果在菜单画面上选择动态图像记录(步骤S105),则控制部102根据存储部104中的动态图像记录用的空余容量计算能够记录的时间,并显示在显示部103上(步骤S106)。例如,控制部102在显示部103显示例如“剩余可记录〇〇MB(约××分钟)”等消息。
然后,控制部102启动拍摄部101,在显示部103显示用于记录动态图像的动态图像记录画面(步骤S107)。在动态图像记录画面上显示拍摄部101拍摄的图像。由于平板终端10的显示部103在与拍摄部101相同的面上配置有该画面,所以能够在从助手SP及目标人EP观察显示部103的画面的状态下进行拍摄。而且,通过在动态图像记录画面上显示拍摄部101拍摄的图像,助手SP能够在开始动态图像的记录之前、记录中确认目标人11EP的拍摄情况。另外,在动态图像记录画面上显示接收到的个人信息和动作类别。由此,能够降低动态图像的注册错误。
助手SP在平板终端10上显示动态图像记录画面后,按下位于遥控器30的操作部301的按钮,指示记录的开始(步骤S108)(参照图6的(b))。当操作部301接受输入时,遥控器30的发送部302将启动信息发送到平板终端10。当接收部106接收到启动信息时,平板终端10的控制部102的记录控制部1021开始记录拍摄部101拍摄的动态图像(步骤S109)。此外,也可以不使用遥控器30,而通过按下显示于平板终端10的启动按钮来开始动态图像的记录。
此后,助手SP在目标人EP结束康复动作时,再次按下遥控器30的操作部301的按钮,指示记录的结束(步骤S110)。这样,助手SP能够使用遥控器30操作平板终端10,因此,即使远离平板终端10,也能够拍摄动态图像。因此,在康复过程中可以处于目标人EP的旁边,能够安全地实施康复。另外,通过使配置于遥控器30的操作部301的按钮为最少限度(例如一个),能够降低操作失误、凭感觉操作。此外,也可以不使用遥控器30,而通过按下显示于平板终端10的停止按钮来结束动态图像的记录。
如上所述,上述步骤S108、S110也可以由平板终端10代替遥控器30进行。在这种情况下,在步骤S108中,助手SP在平板终端10上显示了动态图像记录画面后,操作平板终端10开始记录。另外,在步骤S110中,当目标人EP结束康复的动作时,助手SP再次操作平板终端10并结束记录。
此外,在这种情况下,也可以构成为编辑暂时存储于平板终端10中的动态图像,变更并保存起点及终点。在这种情况下,即使没有遥控器30,也可以获得必要的时间范围的动态图像。另一方面,在使用遥控器30的实施方式的情况下,具有操作轻松而无需编辑操作这一优点。
当操作部301接受输入时,遥控器30的发送部302将停止信息发送到平板终端10。当接收部106接收停止信息时,平板终端10的控制部102的记录控制部1021结束拍摄部101拍摄的动态图像的记录(步骤S111),且将动态图像数据写入存储部104中并保存(步骤S112)。此时,控制部102的记录控制部1021将从站20接收到的个人信息中包含的患者编号、动作类别、结束动态图像的记录的日期时间(拍摄时间)和动态图像相关联地进行存储。具体而言,控制部102的记录控制部1021将患者编号、动作类别、拍摄日期时间和动态图像相关联地写入存储部104存储的对应表。
即,仅通过在与动作类别对应的读取区域放上介质40这样的简单的一个动作,目标人、动作类别和拍摄日期时间会自动地与动态图像对应。这是因为,按每个动作类别设置有读取区域,所以只要改变放置介质40的场所就能指定动作类别。即,仅通过放置介质40这一动作,即可输入与动态图像对应的个人信息及动作类别。因此,助手SP不再需要耗费将这些信息输入到平板终端10的工夫,操作性提高。由此,能够减轻助手SP的业务负担。
进而,记录的动态图像能够当场立即再生。例如,助手SP能够从站20取下平板终端10,确认记录为对象EP的动态图像(参照图6的(c))。通常,由于摄像机的画面比平板终端10的画面小,所以对于老年人等视力较弱的目标人EP来说,很难确认摄像机的画面中的动态图像。与之相对,在本康复支持系统S1中,由于能够在平板终端10的较大的画面上再生所记录的动态图像,所以可以在拍摄的该现场向目标人EP显示动态图像进行确认。另外,也可以将所记录的动态图像从平板终端10转发到有线或无线连接的其它显示装置来显示。由此,能够通过更大的画面或多个画面确认动态图像。
另外,由于平板终端10能够从站20拆卸,因此,目标人EP不需要到达站20的某个位置。因为目标人EP所在的位置是拍摄点,所以大多远离站20。在这种情况下,可以从站20移除平板终端10,并将其拿到对象物EP之前。由此,能够在拍摄的该场景下确认助手SP和目标人EP记录的动态图像并共享。进而,助手SP和目标人EP也可以一边确认记录的动态图像,一边触摸动态图像,写入手绘图片(标记)或手写笔记,而且,也可以将这些标记或笔记与动态图像一起保存。在这种情况下,助手SP和目标人EP更容易共享信息。
当动态图像的记录结束时,平板终端10的控制部102的显示控制部1022在显示部103显示用于再生所记录的动态图像的动态图像再生画面。
图8是表示显示于平板终端10的显示部103的动态图像再生画面的一例的示意图。在本图所示的动态图像再生画面上配置有用于再生动态图像的再生区域G、用于再生动态图像的再生按钮BT1、用于将当前的再生位置复位到再生开始位置的复位按钮BT2、用于慢速再生动态图像的慢速ON按钮BT3、用于同时再生多个动态图像的同时再生ON按钮BT4、用于选择再生的动态图像的动态图像选择按钮BT5、用于结束动态图像再生画面并返回原画面的结束按钮BT6。
当在动态图像再生画面上按下再生按钮BT1并接受输入时,控制部102的显示控制部1022在再生区域G再生动态图像。另外,当在动态图像再生画面上按下复位按钮BT2并接受输入时,控制部102的显示控制部1022在再生区域G从最初开始再生动态图像。另外,当在动态图像再生画面上按下慢速ON按钮BT3并接受输入时,控制部102的显示控制部1022使再生区域G中的动态图像的再生变慢速。通过慢速再生,也能够容易地分析、理解起立动作等快的动作。特别是,在与目标人EP一起确认的情况下,慢速再生的一方容易被老年人等理解。另外,当在动态图像再生画面上按下动态图像选择按钮BT5并接受输入时,控制部102的显示控制部1022在显示部103上显示用于选择在动态图像再生画面上再生的动态图像的动态图像选择画面。另外,在动态图像再生画面上按下结束按钮BT6并接受输入时,控制部102的显示控制部1022结束动态图像再生画面,在显示部103上显示菜单画面。
进而,在动态图像再生画面上,在再生区域G的下部配置再生部位条BR1、结束部位条BR2、当前位置条BR3。再生部位条BR1是用于调节开始再生的位置的条。结束部位条BR2是用于调节结束再生的位置的条。当前位置条BR3是表示当前的再生位置的条。再生部位条BR1及结束部位条BR2可以通过例如触摸面板等的操作来变更其位置。
即,助手SP能够调节动态图像的再生部位。例如,助手SP在调节了再生部位条BR1和结束部位条BR2的位置之后,按下再生按钮BT1。平板终端10的控制部102的显示控制部1022从与再生部位条BR1对应的部位到再生区域G再生动态图像,在与结束部位条BR2对应的部位结束动态图像的再生。即,动态图像从再生部位条BR1的位置再生到结束部位条BR2的位置。由此,能够仅对想看的动作的部位进行重点再生。在确认动态图像时,多在多次再生后进行观察,而且动态图像的前半部分在动作准备期间是无意义的,因此,变更再生位置是有效的。
另外,平板终端10可以同时再生过去拍摄的动态图像和本次拍摄的动态图像,以便与过去的动作(康复的情况)比较来进行观察。首先,助手SP按下同时再生ON按钮BT4。在动态图像再生画面上按下了动态图像选择按钮BT4并接受输入时,平板终端10的控制部102的显示控制部1022在显示部103上显示用于选择同时再生的过去的动态图像的动态图像选择画面。
图9A是表示显示于平板终端10的显示部103的动态图像选择画面的一例的示意图。在本图所示的动态图像选择画面上,目标人EP的患者编号及姓名被显示在左上部,并且表示目标人EP的动态图像的图标被可选择地浏览显示。各图标由表示对应的动态图像的动作类别的象形图及字符串构成。由此,可以容易地判别动态图像的动作类别。另外,通过使用象形图表示动作类别,可以直观地传达动作类别的内容而不受语言限制,实现面向全球对应的表现。
如图所示,按拍摄动态图像的每个日期分开显示图标。另外,在图标下显示拍摄的时间。另外,以能够容易地识别各日期拍摄的时间是上午还是下午的方式显示图标。例如,也可以设定用红色区域包围上午的图标、用蓝色区域包围下午的图标等的颜色区分。
此外,在动态图像选择画面上也可以仅浏览显示在动态图像再生画面上再生的动态图像的动作类别(即,与站20从介质40读取个人信息的读取区域对应的动作类别)的动作图像。或者,在动态图像选择画面上,也可以按每个动作类别分开显示图标。
助手SP在动态图像选择画面上选择按压同时再生的动态图像的图标。平板终端10的控制部102的显示控制部1022从存储部104读出在动态图像选择画面上选择的图标的动态图像,且在显示部103显示同时再生画面。
作为代替图9A所示的动态图像选择画面的变形例,也可以采用图9B所示的动态图像选择画面。在该变形例中,能够用图标确认附带于动态图像的标记、笔记等编辑内容。
在图9B所示的区域ar1显示动作类别、拍摄日期、动态图像时间。另外,在图9B所示的区域ar2,用图标表示对动态图像关联如下所述的编辑数据。
·标志:可以任意选择数据的重要度
·有笔记记入的数据
·有自由记入标记的数据
·有各种测量数据(例如,有抬高手臂的角度、躯干的倾斜角度等数据)
·有马赛克加工数据
·有连续照片制作数据
·有2个画面比较数据
·有重叠比较数据
进而,在图9B所示的区域ar3中,用图标表示对2个画面比较数据、重叠比较数据、连续照片数据的每一个关联如下所述的编辑数据。
·有笔记记入的数据
·有自由记入标记的数据
·有各种测量数据
·有马赛克加工数据
图10是表示在平板终端10的显示部103上显示的同时再生画面的一例的示意图。在本图所示的同时再生画面上配置有用于再生本次的动态图像的本次再生区域G1、用于再生过去的动态图像的过去再生区域G2、按钮BT1~BT6。本次的动态图像是在动态图像再生画面上再生的动态图像,例如是最近拍摄的动态图像。另外,过去的动态图像是在动态图像选择画面上选择的动态图像。另外,同时再生画面上的按钮BT1~BT6的功能与动态图像再生画面的功能相同。
当在同时再生画面上按下再生按钮BT1并接受输入时,控制部102的显示控制部1022在再生区域G1再生本次的动态图像,同时在再生区域G2再生过去的动态图像。即,平板终端10能够将本次的动态图像与过去的动态图像并排地同时再生。因此,由于可以在一个画面上同时再生两个动态图像,所以可以容易地在拍摄的该场景下进行与过去的动态图像的比较。因此,目标人EP与过去(例如住院时)相比,可以在该场景下容易地确认恢复状态改善了多少(康复的效果)。另外,在拍摄的该场景下,可以在助手SP和目标人EP之间比较动态图像并共享课题,实施针对该课题的康复菜单。
此外,也可以在并排比较显示过去和当前的动态图像时,变更各自的位置或者扩大缩小各自的大小。
另外,也可以彼此改变放大率排列两个当前的动态图像。例如,也可以是,一个为俯瞰的动态图像,另一个为其中的一部分被放大的动态图像。
另外,也可以将拍摄了治疗师等不是患者的第三者的动态图像和拍摄目标人EP的动态图像这两个图像并列。在这种情况下,可以以治疗师等第三方的操作为范本,对比目标人EP的动作。
另外,不限于将并排比较多个动态图像时的排列配置横向排列,也可以将其纵向排列。在纵向排列动态图像的情况下,可以将后述的再生部位条BR11、结束部位条BR12及当前部位条BR13配置于纵向排列的动态图像的旁边,或者配置于纵向排列的动态图像的正下方。
在同时再生画面上,与本次的动态图像对应的再生部位条BR11、结束部位条BR12及当前部位条BR13配置在本次再生区域G1的下部。另外,在同时再生画面上,与过去的动态图像对应的再生部位条BR21、结束部位条BR22及当前部位条BR23配置在过去再生区域G2的下部。助手SP可以通过变更再生部位条BR11及结束部位条BR12的位置,调节本次的动态图像的再生部位。另外,助手SP通过变更再生部位条BR21及结束部位条BR22的位置,能够调节过去的动态图像的再生部位。
例如,从开始动态图像的记录到开始动作的时间有时会根据各动态图像而不同。因此,即使同时再生两个动态图像,也不限于目标人EP在各动态图像中同时开始动作。因此,当使两个动态图像直接从最初再生时,各动态图像中的目标人EP的动作的定时不同,难以比较。为了消除该问题,可以使各动态图像的再生部位与动作的开始定时等一致,调节为两个动态图像中的目标人EP的动作的定时一致。
例如,助手SP在将再生部位条BR11和再生部位条BR21调节到动作的开始定时的位置之后,按下再生按钮BT1。平板终端10的控制部102的显示控制部1022从与再生部位条BR11对应的部位、与再生部位条BR21对应的部位同时再生本次的动态图像和过去的动态图像。由此,在同时再生了两个动态图像时,目标人EP在两个动态图像中同时开始动作,因此,可以容易地比较差异,容易地确认动作速度的变化等。再生部位条BR1、BR11、BR21及结束部位条BR2、BR12、BR22构成指定动态图像中的再生位置的再生位置指定部。显示控制部1022再生动态图像中在再生位置指定部指定的再生位置。
另外,平板终端10不限于本次的动态图像,可以选择所记录的任意的动态图像再生。例如,当在菜单画面上选择了动态图像再生时,控制部102在显示部103上显示用于选择再生的动态图像的动态图像选择画面。在该动态图像选择画面上,可以选择一个或两个动态图像。在动态图像选择画面上选择了一个动态图像的情况下,控制部102在显示部103显示用于再生被选择的动态图像的动态图像再生画面。另一方面,在动态图像选择画面上选择了两个动态图像的情况下,控制部102在显示部103显示用于同时再生被选择的两个动态图像的同时再生画面。
另外,平板终端10可以将记录的动态图像传送到个人计算机、云(服务器装置)等其它设备,进行数据转移。例如,控制部102在菜单画面上选择了动态图像传送时,显示用于选择传送的动态图像选择画面,并传送与在动态图像选择画面上选择的动态图像相关的数据传送对应的数据(动态图像数据及在对应表中与该动态图像相关联的数据(目标人、动作类别及日期时间))。传送部例如可以使用计算机可读的记录介质,也可以使用无线LAN(Local Area Network:局域网)或Bluetooth(蓝牙)(注册商标)等无线通信。
此外,在平板终端10进行将记录的动态图像向其它设备传送的数据转移时,附带于动态图像的笔记及标记也可以与动态图像一起进行数据移管。
另外,平板终端10当存储部104的空闲容量变少时,无法记录新的动态图像,因此,为了防止该情况,也可以自动地向其它设备传送与动态图像相关的数据来进行数据移管。由此,能够减轻动态图像数据产生的容量负荷。传送的定时可以预先调度,也可以是记录了新的动态图像的定时,也可以是存储部104的空闲容量为规定值以下的定时等。
另外,平板终端10及站20能够解除和变更与介质40关联的目标人EP(介质40保持的个人信息)。因为目标人EP定期出院,所以出院后目标人EP的介质40变得不必要。因此,需要解除与出院的目标人EP的关联,将新的目标人EP与介质40关联。例如,当在菜单画面上选择了患者卡注册时,控制部102解除当前与介质40关联的目标人EP,执行将新的目标人EP与该介质40关联的处理。更具体而言,控制部102向站20发送包含与介质40新关联的目标人EP的患者编号的个人信息。站20的配对读取部201将介质40的存储部401存储的个人信息改写为从平板终端10接收到的新的个人信息。由此,与介质40关联的目标人EP被变更。
图11是表示平板终端10进行的动态图像记录再生处理的一例的流程图。本图表示平板终端10拍摄目标人EP,记录动态图像,再生所记录的动态图像的处理。平板终端10在从站20接收到个人信息及动作类别时,执行本图所示的处理。
首先,助手SP将介质40放在站的配对读取部201。当介质40被放在配对读取部201时,站20从介质40读取个人信息,将读取到的个人信息和与放置了介质40的读取区域对应的动作类别发送到平板终端10。
(步骤S201)控制部102经由连接部107从站20接收并取得个人信息及动作类别。然后,进入步骤S202的处理。
(步骤S201)控制部102判定接收到的个人信息是否为授权人。授权人是具有操作平板终端10的权限的人,例如是助手SP。当控制部102判定为是授权人时,进行步骤S203的处理。另外,在控制部102判定为不是授权人(即,目标人EP)的情况下,进入步骤S204的处理。
(步骤S203)控制部102在显示部103上显示表示授权人能够操作的处理的各种设定画面,执行对应的各处理。授权人能够操作的处理例如是目标人EP的动态图像的确认、目标人EP之间的动态图像的比较、动态图像的删除等。此外,也可以是对权限设定种类,可执行的处理根据类别而不同。例如,第一授权人能够进行所有目标人EP的动态图像的确认、比较及删除,第二授权人也可以仅能够对所负责的目标人EP进行动态图像的确认、比较及删除。之后,处理结束。
(步骤S204)控制部102在显示部103显示菜单画面。菜单画面上显示的项目例如是动态图像记录、动态图像再生、动态图像传送、患者卡注册、注销等。然后,进入步骤S205的处理。
(步骤S205)控制部102判定是否从菜单画面选择了动态图像记录。在控制部102判顶为选择了动态图像记录的情况下,进入步骤S207的处理。另外,在控制部102判定为没有选择动态图像记录的情况下,进入步骤S206的处理。
(步骤S206)控制部102执行在菜单画面上选择的各处理。之后,处理结束。
(步骤S207)控制部102启动拍摄部101,在显示部103显示动态图像拍摄画面。然后,进入步骤S208的处理。
(步骤S208)控制部102判定接收部106是否从遥控器30接收到启动信息。当控制部102判定为接收到的情况下,进入步骤S209的处理。另外,在控制部102判定为没有接收到的情况下,再次执行步骤S208的处理。
(步骤S209)控制部102开始记录拍摄部101所拍摄的动态图像。然后,进入步骤S210的处理。
(步骤S210)控制部102判定接收部106是否从遥控器30接收到停止信息。当控制部102判定为接收到的情况下,进入步骤S211的处理。另外,在控制部102判定为没有接收的情况下,再次执行步骤S210的处理。
(步骤S211)控制部102结束动态图像的记录。然后,进入步骤S212的处理。此外,也可以在结束动态图像的记录之前进行动态图像的编辑。例如,也可以在使动态图像的方向旋转或对其进行剪辑之后,结束动态图像的记录,然后进入步骤S212的处理。
(步骤S212)控制部102将记录的动态图像与在步骤S201中取得的个人信息及动作类别和结束记录的日期时间相关联地写入存储部104中保存。然后,进入步骤S213的处理。
(步骤S213)控制部102在显示部103显示再生所记录的动态图像的动态图像再生画面。然后,进入步骤S214的处理。
(步骤S214)控制部102判定在动态图像再生画面上是否按下了同时再生ON按钮并接受了输入。在控制部102判定为接受了输入的情况下,进入步骤S216的处理。另外,在控制部102判定为没有接受输入的情况下,进入步骤S215的处理。
(步骤S215)控制部102判定在动态图像再生画面上是否按下了结束按钮并接受了输入。在控制部102判定为接受了输入的情况下,返回步骤S204的处理。另外,在控制部102判定为没有接受输入的情况下,返回步骤S213的处理。
(步骤S216)控制部102在显示部103显示动态图像选择画面。然后,进入步骤S217的处理。
(步骤S217)控制部102判定在动态图像选择画面上是否选择了同时再生的动态图像。在控制部102判定为选择了的情况下,进入步骤S218的处理。另外,在控制部102判定为没有选择的情况下,返回步骤S213的处理。
(步骤S218)控制部102在显示部103显示用于同时再生在动态图像选择画面上选择的动态图像和记录的动态图像的同时再生画面。然后,进入步骤S219的处理。
(步骤S219)控制部102判定在同时再生画面上是否按下再生按钮并接受了输入。在控制部102判定为接受了输入的情况下,进入步骤S220的处理。另外,在控制部102判定为未接受输入的情况下,进入步骤S221的处理。
(步骤S220)控制部102同时再生所选择的动态图像和所记录的动态图像。然后,进入步骤S221的处理。
(步骤S221)控制部102判定在同时再生画面上是否按下结束按钮并接受了输入。在控制部102判定为接受了输入的情况下,返回步骤S204的处理。另外,在控制部102判定为没有接受输入的情况下,返回步骤S218的24处理。
如上所述,本实施方式的康复支持系统S1具备可移动的平板终端10和可装卸平板终端10的站20。站20具备:在安装有平板终端10时与平板终端10连接而收发数据的第一连接部204、取得识别康复的目标人的目标人识别信息的配对读取部201、从第一连接部204向平板终端10发送判定配对读取部201取得的目标人识别信息的控制部。平板终端10具备:在安装于站20时与站连接而收发数据的连接部107、对目标人进行拍摄的拍摄部101、存储拍摄部101拍摄到的动态图像的存储部104、经由连接部107从站20接收目标人识别信息并将接收到的目标人识别信息与拍摄部101拍摄目标人的动态图像相关联地写入存储部104的记录控制部1021。
根据上述结构,将站20取得的目标人识别信息自动地与动态图像关联地存储在平板终端10中。由此,可以通过简单的操作,将拍摄目标人EP的动态图像按每个目标人分开进行存储。因此,助手SP在业务结束后,无需进行确认动态图像并按每个目标人进行分类的作业,操作性提高。
特别是,在康复的现场,一般以如下的顺序进行动态图像的记录及管理。首先,助手SP为了定点观察康复动作,将摄像机设置在三脚架上,对目标人EP的康复中的运动进行拍摄。助手SP在拍摄之后立即确认所拍摄的动态图像,如果没有问题则进行三脚架的整理。康复结束后,从摄像机中取出记录介质,将动态图像的数据拷贝到个人计算机中。然后,在个人计算机上,一边观察确认拍摄的动态图像,一边更新康复的目标人名和做了哪些动作等的记录,进而进行文件夹的分类等。这样,在以往的动态图像的记录及管理中,存在作业的工时数多、很费工夫这样的问题。另外,由于助手SP在完成白天的康复等业务后开始进行动态图像的注册和整理,所以有时助手SP的业务结束时间会延迟。通过本实施方式的康复支持系统S1,可以提高动态图像记录系统的操作性,并且减轻助手SP的作业时间及作业负担。
另外,在本实施方式的康复支持系统S1中,配对读取部201随着目标人识别信息而一起取得康复的动作类别,控制部203将动作类别与目标人识别信息一同从第一连接部204发送到平板终端10,记录控制部1021将接收到的目标人识别信息及动作类别与动态图像对应地写入存储部104。根据上述构成,站20取得的目标人识别信息及动作类别自动与动态图像对应地存储在平板终端10中。由此,可以用简单的操作将拍摄目标人EP的动态图像分成按每个目标人及动作类别进行存储。因此,助手SP在业务结束后,不需要进行确认动态图像并按每个动作类别进行分类的工作,从而,操作性提高。
另外,在本实施方式的康复支持系统S1中,配对读取部201从存储目标人识别信息的介质40读取目标人识别信息。由此,通过将介质40放在配对读取部201这一简单操作,就可以将目标人识别信息输入到站20及平板终端10。
另外,在本实施方式的康复支持系统S1中,配对读取部201按每一动作类别具备从存储目标人识别信息的介质40读取目标人识别信息的读取区域,由读取了目标人识别信息的读取区域取得动作类别。由此,可以通过将介质40放置在与目标人EP之后进行的康复的动作类别对应的读取区域的一个简单操作,将目标人识别信息及动作分类输入到站20及平板终端10。
另外,在本实施方式的康复支持系统S1中,平板终端10具备再生并显示存储部104存储的动态图像的显示部103和在显示部103并排地同时再生目标人EP的多个动态图像的显示控制部1022。根据上述构成,可以将存储于平板终端10的多个动态图像并排地同时再生。因此,例如,通过同时再生两个动态图像并进行比较,可以容易地与过去的康复情况进行比较。由此,可以更直观地向目标人EP或助手SP提示康复的效果或恢复状态等。
另外,在本实施方式的康复支持系统S1中,平板终端10具备指定动态图像中的再生位置的再生位置指定部(再生部位条BR1、BR11、BR21及结束部位条BR2、BR12、BR22),显示控制部1022再生动态图像中在再生位置指定部指定的再生位置。根据上述结构,可以调节同时再生的动态图像的再生位置。因此,可以动作的开始定时等一致地同时再生多个动态图像。由此,更易于比较多个动态图像。
[变形例]
接着,对第一实施方式中的变形例进行说明。
图12是表示在本变形例中显示于平板终端10的显示部103的动态图像再生画面的一例的示意图。在本图所示的动态图像再生画面上,与图8同样地配置有用于再生动态图像的再生区域G、用于再生动态图像的再生按钮BT1、用于将当前的再生位置复位到再生开始位置的复位按钮BT2、用于慢速再生动态图像的慢速ON按钮BT3、用于同时再生多个动态图像的同时再生ON按钮BT4、用于选择再生的动态图像的动态图像选择按钮BT5、用于结束动态图像再生画面并返回原画面的结束按钮BT6。
另外,在动态图像再生画面上,与图8同样地在再生区域G的下部配置有再生部位条BR1、结束部位条BR2和当前位置条BR3。此外,在本变形例中,与各种按钮并排地配置自动将动态图像分割为规定张数的静态图像的自动OUTPUT按钮BT7和将动态图像分割为助手SP指定的多张静态图像的手动OUTPUT按钮BT8。
控制部102的显示控制部1022在动态图像再生画面上按下自动OUTPUT按钮BT7并接受输入时,从由再生部位条BR1指定的位置到由结束部位条BR2指定的位置为止的动态图像中提取规定张数的静态图像。规定的张数可以是预先设定的张数,也可以是在自动OUTPUT按钮BT7的按压前后助手SP指定的张数。另外,提取静态图像的间隔可以是等间隔,也可以是基于规定的比率的时间间隔。显示控制部1022将提取出的静态图像并排显示于显示部103。将从动态图像提取规定张数并显示的静态图像也称为自动OUTPUT。
当在动态图像再生画面上按下手动OUTPUT按钮BT8并接受输入时,控制部102的显示控制部1022从动态图像中提取与输入接受时间对应的静态图像,并在显示部103上显示。当多次按下手动OUTPUT按钮BT8时,显示控制部1022将提取出的各静态图像在显示部103并排显示。将从动态图像中提取助手SP指定的静态图像显示也称为手动OUTPUT。
图13是表示在本变形例中显示于平板终端10的显示部103的自动OUTPUT画面的一例的第一示意图。在显示部103的上部显示数据名和分析时间。数据名称是用于识别数据28的名称,例如是执行自动OUTPUT的年月日时分秒。分析时间是与提取静态图像的范围对应的动态图像的再生时间。
在显示部103内显示提取出的多个静态图像。在本图的例子中,在时间序列上并排显示静态图像G1~G4。在各静态图像G1~G4之下有评语栏,可以将评语写入并显示在特征性的动作场景中。另外,还可以一并显示可记入各种笔记及来自负责人的评价的栏。另外,也可以在各静态图像上显示纵向及横向的一个以上的网格线,在各静态图像之间使网格线的显示位置同步。例如,也可以在动作开始时为坐姿的状态的座面位置显示横向的网格线,在躯干位置显示纵向的网格线。由此,例如,在进行站起坐下动作的过去比较时,容易进行“比以前更有把握地前倾”、“姿势稳定”等的确认。另外,也可以在各静态图像G1~G4中,在特征性的动作场景中写入标记进行显示。
在显示部103的下部配置有印刷按钮BT11、印章按钮BT12、记录浏览按钮BT13、动态图像确认按钮BT14、角度测定按钮BT15、尺寸测定按钮BT16、结束按钮BT17。当按下印刷按钮BT11时,可以将显示于显示部103的内容印刷在纸上而输出。当按下印章按钮BT12时,显示箭头等记号,通过将该记号移动到显示部103内的任意部位,可以显示重要的部位等。当按下记录按钮BT13时,转移到显示记录的动态图像的浏览画面。当按下动态图像确认按钮BT14时,转移到所选择的动态图像的再生画面。当按下角度测定按钮BT15时,可以在画面内绘制两条线,从而可以测量其内角的角度。由此,例如,可以简单地测量抬高手臂的角度、躯干的倾斜角度等。当按下尺寸测定按钮BT16时,通过输入照在静态图像上的部分的基准尺寸,可以根据基准尺寸简单地测量静态图像内的尺寸。所谓基准尺寸是预先测量长度的部分的长度。例如,通过选择静态图像中的手臂部分,输入预先测量的手臂的长度,可以以该长度为基准测定静态图像内的尺寸。当按下结束按钮BT17时,结束应用程序。此外,在该例中,也可以代替印刷按钮BT11,或者除此之外进一步配置将显示内容作为数据输出并保存的按钮。
这样,通过从拍摄康复的动作的动态图像中提取规定数量的静态图像并显示,可以浏览并确认动作的变化,能够提高康复动作的确认效率。特别是在康复的现场,作为信息传递的装置,多使用纸质媒体病历。目前,也有时在一张资料中剪切动态图像的图像,一张一张地实施粘贴,但作业很费事,效率差。在本变形例的康复支持系统S1中,通过按下自动OUTPUT按钮BT7,可以从动态图像中提取规定张数的静态图像并显示,进一步通过按下印刷按钮BT11,可以用一张纸张输出。由此,通过使用与病历一并输出的纸张,可以容易地进行在现场的确认工作。另外,通过作为数据输出,还可以容易地进行后续的资料制作等。
图14是表示在本变形例中显示于平板终端10的显示部103的自动OUTPUT画面的一例的第二示意图。显示部103被分割为上段和下段,在上段中并排显示由显示控制部1022从记录了康复动作的动态图像提取的静态图像G1~G4。在下段显示由显示控制部1022从与上段不同的动态图像提取的静态图像G5~G8。通过在一个画面上显示上下的各静态图像,能够容易地比较从多张动态图像提取的动作。此外,提取源的动态图像是相同的,也可以提取再生范围不同的静态图像并显示。另外,比较不限于上下两段,也可以将显示部103左右分割,也可以分割成3个以上,显示3个以上的静态图像组。另外,笔记栏、评语栏等可以与图13的例子同样地配置,也可以适当地变更布局进行配置。
这样,通过从拍摄了康复的动作的多个动态图像中提取规定张数的静态图像,在显示部103显示提取的各个规定张数的静态图像,由此可以浏览多个动作并进行比较,可以更容易地掌握康复动作的改善情况。
[第二实施方式]
接着,对第二实施方式进行说明。图15是表示本实施方式的康复支持系统S2(动态图像记录系统)的系统构成的立体图。康复支持系统S2是对康复的目标人EP支持康复的实施的系统。康复支持系统S2具备平板终端10、站20A、传感器100、输出装置200及康复支持装置300。
传感器100在该传感器100的检测范围800内(图15的虚线所包围的范围)检测目标人EP。传感器100例如是图像传感器、红外线传感器、激光传感器、热传感器等不必在目标人EP上安装标记就可以检测目标人EP的动作的传感器。在本实施方式中,作为这样的传感器的例子,以在传感器100中使用将距离传感器和图像传感器组合而成的Kinect(注册商标)的情况为例进行说明。
传感器100例如具备图像传感器(未图示)。所述图像传感器具有:(1)实时拍摄自己的正面方向且取得连续的多张二维图像(帧图像)的作为动态图像摄像头的功能;(2)取得从传感器100到与上述二维图像(帧图像)内的各位置对应的实际位置的距离的信息(表示距离信息的图像)的作为距离传感器(深度传感器)的功能。通过上述距离传感器具有的功能,取得拍摄了目标人EP的图像和该图像所拍摄的目标人EP的身体的各部位的三维空间中的坐标信息即距离图像信息。传感器100检测的三维空间是由图15所示的XYZ正交坐标系表示的空间。
目标人EP的身体的各部位是指为了识别目标人EP的动作而要求进行检测的身体的部位。具体而言,目标人EP的身体的各部位例如是目标人EP的头、肩、臂、手、腰、脚以及各关节部等位置。
传感器100将表示检测的结果的信息(以下称为“检测结果信息”)。输出到康复支持装置300。检测结果信息例如是目标人EP的身体的一部分的位置信息。
此外,传感器100也可以是在目标人EP上安装标记,通过该标记的检测来检测目标人EP的传感器。
输出装置200输出与对目标人EP进行的康复相关的图像。输出装置200例如是投影仪等图像投影装置。输出装置200投影支持康复的图像并在输出区域900显示。作为输出图像的示例,可以举出包含目标人EP的身体的一部分位置的移动历史及目标人EP的身体的一部分的移动目标位置的图像。例如,在步行的康复的情况下,输出装置200也可以显示目标人EP的脚的位置的移动历史及目标人EP使脚动作而移动的目标位置中的任一方或双方。另外,如果是手的移动的康复的情况,输出装置200也可以显示目标人EP的手的位置的移动历史及目标人EP活动手而移动的目标位置中的任一方或双方。在以下的说明中,将表示目标人EP的身体的一部分位置的移动历史的图像称为历史图像。另外,将表示目标人EP的身体的一部分的移动目标位置的图像称为目标图像。
康复支持装置300使用信息处理装置构成。即,康复支持装置300具备由总线连接的CPU、存储器及支持存储装置。康复支持装置300通过执行康复支持程序而动作。康复支持装置300执行对目标人实施的康复的应用程序。
平板终端10是平板型的可移动的信息处理装置。平板终端10可以安装在站20A上,并且可以脱离站20A。
站20A是可装卸平板终端10的站。站20A在将平板终端10立起的状态下面朝向正面保持。在安装有平板终端10时,站20A设置在平板终端10能够拍摄目标人EP的位置(例如,康复支持装置300的上部)。另外,在安装有平板终端10时,站20A与平板终端10连接,收发数据。另外,站20A与电源连接,当安装平板终端10时,自动地向平板终端10供电。
传感器100等由腿部310支承。腿310能够向上下方向伸缩,能够调节传感器100、输出装置200的高度位置。由此,能够调节传感器100的检测范围的宽度。另外,在输出装置200为投影装置的情况下,能够调节输出区域900的宽度。另外,腿部310具备脚轮311、312、313、314。因为脚轮311~314可转动,所以通过手按等,能够在地板上自由移动康复支持系统S2。
图16是表示康复支持系统S2所具备的康复支持装置300的功能构成例的概略框图。康复支持装置300具备输入部31、输出部32、存储部33、控制部334、操作部35、显示部36以及连接部37。
输入部31是输入来自外部的信息的接口。例如,输入部31从传感器100取得表示检测结果的信息(检测结果信息)。
输出部32是将由控制部34生成的图像对输出装置200输出的接口。
存储部33使用磁硬盘装置或半导体存储装置等存储装置构成。存储部33包含校准信息存储部331、判定条件信息存储部332、检测历史信息存储部333、参数信息存储部334、程序信息存储部335。
校准信息存储部331存储校准信息。校准信息是使表示传感器100的检测结果的坐标系和输出装置200投影的图像面的坐标系对应的信息。因此,康复支持装置300中的校准是掌握传感器100的检测范围800和输出装置200的图像的输出区域900的位置关系并设定两者共同的坐标系的处理。此外,传感器100能够检测的检测范围也可以比图示的检测范围800宽。本实施方式中的检测范围800是指在输出区域900上进行的目标人EP的动作中,取得作为目标人EP的检测目标的身体的一部分的位置信息所需的检测范围。此外,输出区域900上不仅包含在输出区域900中规定的平面区域,还包含在该区域中直至以输出区域900为基准的规定高度的空间。例如,校准信息可以通过事先实施校准来获得。
当输出装置200投影标记图像时,传感器100利用传感器100的坐标系(用于传感器100表示检测位置的坐标系)中的坐标向康复支持装置300输出各标记图像的位置。由此,康复支持装置300(控制部34)通过传感器100的坐标系中的坐标及输出装置200的坐标系中的坐标两者取得各标记的位置。另外,康复支持装置300(控制部34)通过投影到四角等的标记图像,掌握表示输出装置200的坐标系中的输出区域900的范围的坐标。由此,后述的目标决定部345能够计算输出区域900中的输出装置200的坐标系中的目标位置。
康复支持装置300(控制部34)基于获得的坐标,取得用于修正传感器100的坐标系的信息作为校准信息。在传感器100具有坐标系调节功能的情况下,康复支持装置300(控制部34)利用该功能生成用于使传感器100的坐标系与输出装置200的坐标系一致的校准信息。或者,在输出装置200具有坐标系调节功能的情况下,康复支持装置300(控制部34)也可以利用该功能生成用于使输出装置200的坐标系与传感器100的坐标系一致的校准信息。
在地面使光散射而使标记图像模糊的情况下等难以通过传感器100检测标记图像的情况下,也可以代替使用标记图像的位置检测而由助手SP手动进行位置检测。在输出装置200向输出区域900的整体投影图像的状态下,传感器100利用图像传感器对包含投影图像整体的区域进行拍摄。康复支持装置300在显示画面上显示由传感器100拍摄的拍摄图像。然后,助手SP通过触摸操作指定显示在监视器画面上的输出区域900的四角中的每个角。
显示在监视器画面上的图像是传感器100拍摄的图像,因此,可以通过传感器100的坐标系中的坐标来取得助手SP指定的位置。康复支持装置300(控制部34)基于该坐标和输出装置200的坐标系中的输出区域900的四角的坐标,取得校准信息。此外,作为高度方向的坐标,使用地板的坐标。或者,助手SP也可以将例如圆锥等物理标记置于图像面的四角位置。在这种情况下,传感器100检测所放置的标记,并输出各标记的坐标。
在输出装置200将图像投影到地面上的情况下,如果在康复支持系统1的首次使用时进行校准,则无需在第二次使用之后执行校准。由于传感器100和地面的位置关系及输出装置200和地面的位置关系均不变,所以即使在第二次以后的使用时也可以使用初次使用时得到的校准信息。
判定条件信息存储部332存储用于判定动作区域的条件。在后文对动作区域进行叙述。
检测历史信息存储部333存储与识别部341识别的目标人EP的身体的一部分相关的位置信息(检测结果信息)的历史。例如,在进行步行的康复的情况下,检测历史信息存储部333存储目标人EP的脚的位置的检测结果信息的历史。另外,在进行手移动的康复的情况下,检测历史信息存储部333存储目标人EP的手的位置的检测结果信息的历史。
参数信息存储部334存储后述的脚用显示参数设定部347设定的脚用显示参数、后述的手用显示参数设定部348设定的手用显示参数、后述的干扰用显示参数设定部349设定的干扰用显示参数。
程序信息存储部335存储康复支持程序。
控制部34使用CPU构成。控制部34通过执行康复支持程序,作为识别部341、显示控制部342、动作区域判定部343、记录部344、目标决定部345、评价部346、脚用显示参数设定部347、手用显示参数设定部348、干扰用显示参数设定部349、收发控制部3410发挥功能。
识别部341取得输入部31取得的检测结果信息,识别检测结果信息表示的对象物。例如,识别部341基于检测结果信息,识别存在于检测范围800的人、桌子、地、墙等。例如,当使用Kinect(注册商标)时,则能够识别目标人EP的人体上的多个部位的位置。例如,当识别部341识别桌子上的长条状的检测对象的前端部时,检测其前端部的每单位时间的位置信息。通过传感器100时间检测的这些特征点的位置信息,识别部341识别目标人EP的身体的一部分位置的动作。例如,在检测到长条状的对象物的情况下,识别部341识别该对象物的前端位置的动作。该前端位置的动作例如也可以作为目标人EP的手的位置来处理。
另外,识别部341也可以具有:在进行检测结果信息表示的对象物的形状与人的骨骼模型的比较而可以将对象物识别为人的情况下识别各部位的位置的功能。根据该功能,识别部341能够与该部位对应地识别人体的各部位的位置信息。例如,目标人EP在传感器100前直立。于是,识别部341进行在该状态下检测出的检测结果信息与人的骨骼模型的比较,根据对象物是人的形状,识别出对象物是人。另外,识别部341例如将如左脚尖和其位置信息、右脚跟和其位置信息、左右手腕和各自的位置信息那样各部位的位置信息与各自的部位相关联地进行识别。
当使用骨骼模型识别各部位的位置的功能(以下称为“骨骼追踪功能”。)时,识别部341能够识别目标人EP的各部位的位置的动作。这样,识别部341通过对形成检测结果信息中包含的规定形状的对象物的规定的位置进行跟踪,或者通过骨骼追踪功能,识别目标人EP的身体的一部分位置及其动作。另外,当使用Kinect(注册商标)时,能够得到存在于检测范围800的物体的坐标信息(包含存在于检测范围800的物体的每规定间隔的坐标信息的点云数据)。识别部341分析检测结果信息(点云数据),将具有规定的宽度以上的面积、Z坐标的值不变化的面(总之,Z坐标的值大致固定的点云的集合)识别为与墙、地板、桌子等的平面。另外,识别部341识别检测结果信息中的哪一数据是与后述的动作区域判定部343判定的动作区域相关联的目标人EP的身体的一部分(检测对象部位)的检测数据,并选择该数据(检测对象信息)。
在此,动作区域是进行以目标人EP的康复为目的的动作的区域。更具体而言,是与以通过康复恢复为目的的动作密切关联的部位动作的空间内的规定的区域。另外,例如,动作区域是目标人EP在康复中使其部位接近的区域。另外,例如,动作区域是在目标人EP的康复中,包含成为该动作的目标(到达点)的位置的区域。另外,动作区域是目标人EP在康复中进行目的动作的场所。作为动作区域的具体例,在二维区域的情况下,可以举出地板、桌子等。例如,如果是地板,则与以通过康复来恢复为目的的动作密切相关的部位是脚,在桌子的情况下,该部位是手。
另外,目标人EP在步行动作的康复中使脚靠近地板,在手移动的康复中使手靠近桌子。另外,例如,在步行动作的康复中,地板是包含成为步行动作的到达点的位置(目标图像的显示位置)的区域,桌子是包含成为手移动的康复中的手的到达点的位置(目标图像的显示位置)的区域。另外,地板、桌子分别是进行步行动作的康复、手移动的康复中成为目的的动作的场所。
此外,作为动作区域是三维的情况的具体例,可以举出以桌子上的桌表面为基准的规定高度的范围的空间(以下称为“三维动作区域”)。例如,输出装置200在桌子上显示意味着“10cm”的目标图像。例如,也可以在桌子上的某位置显示“10cm”。这是指桌子的显示该目标图像的位置的正上方的空间的以桌子表面为基准的高度10cm的位置是成为手的到达点的位置的目标图像。该目标图像表示的位置包含在三维动作区域。在该例的情况下,例如,三维动作区域是与以通过康复恢复为目的的动作密切相关的部位(手)动作的区域。
另外,三维动作区域是在手移动的康复中使手接近的区域。另外,三维动作区域是包含成为手移动的到达点的位置(目标图像所示的位置)的区域。另外,三维动作区域是目标人EP在手移动的康复中进行成为目的的动作的场所。此外,作为动作区域为三维的情况的其它例,可以举出输出区域900上的空间。例如,在动作区域为输出区域900上的空间的情况下,也可以在该空间投影目标图像,进行目标人EP用手触摸该目标图像等的康复。
显示控制部342生成输出装置200输出的图像。例如,显示控制部342生成在动作区域显示并引导目标人EP的动作的目标图像、包含康复的评价结果的信息的图像、表示在康复中进行的目标人EP的检测对象部位的动作的轨迹的图像等。
动作区域判定部343基于识别部341的识别结果判定动作区域。如后所述,动作区域的判定方法也可以是各种方法。动作区域判定部343基于规定的判定条件,例如判定动作区域为地板。另外,例如,动作区域判定部343判断动作区域是桌子。
动作区域判定部343在判定动作区域时,决定成为与目标人EP的动作区域关联的检测对象的部位(检测对象部位)。检测对象部位是与成为康复的目的的动作的关联紧密的身体的一部分。例如,动作区域判定部343在判定动作区域为地板的情况下,将目标人EP的脚踝决定为检测对象部位。或者,动作区域判定部343也可以将目标人EP的脚尖决定为检测对象部位。另外,例如,动作区域判定部343在判定动作区域为桌子的情况下,将目标人EP的手背决定为检测对象部位。或者,动作区域判定部343也可以将目标人EP的指尖决定为检测对象部位。
此外,与动作区域关联的检测对象部位预先设定在存储部33中,动作区域判定部343基于该信息和自己判定的动作区域来决定检测对象部位。例如在设为康复的目标的动作中,可以将动作范围大的部位设定为检测对象部位。例如,如果是步行动作的康复,则动作范围大的部位是目标人EP的脚(脚踝、脚尖、脚后跟等)。如果是手移动的康复,则动作范围大的部位是目标人EP的手(手腕、指尖、手背等)。
或者,也可以在检测对象部位设定接近显示控制部342生成的目标图像的显示位置的部位。例如,当进行步行动作的康复时,在本实施方式中,目标人EP在步行动作中应迈出脚步的位置显示模仿脚型等的目标图像,但在这种情况下,接近目标图像的显示位置的部位是指目标人EP的脚(脚踝、脚尖、脚后跟等)。另外,当进行手移动的康复的情况下,在目标人EP应触摸的位置显示目标图像,但在这种情况下,接近目标图像的显示位置的部位是目标人EP的手(手腕、指尖、手背等)。
此外,识别部341经由记录部344将检测结果信息中包含的动作区域判定部343决定的检测对象部位的数据(身体的一部分的位置信息)记录到检测历史信息存储部333。
记录部344将检测结果信息写入检测历史信息存储部333中进行记录。
目标决定部345基于识别部341识别的目标人EP身体的一部分(检测对象部位)的位置决定目标人EP的身体的一部分的目标位置。例如,在步行康复的情况下,目标决定部345基于目标人EP的当前的脚的位置及目标人EP的脚的位置的历史中的至少一个来决定目标人EP的脚的移动目标位置。特别是,目标决定部345也可以基于目标人EP的脚的位置的历史来判定目标人EP的行进方向,且根据所判定的行进方向来决定移动目标位置。或者,目标决定部345也可以基于目标人EP的脚的方向来判定目标人EP的行进方向,且根据所判定的行进方向决定目标位置。或者,目标决定部345也可以不考虑目标人EP的行进方向而朝向例如随机的方向或者规定的目标位置决定移动目标位置。
目标决定部345也可以计算目标人EP的身体的检测对象部位的移动量,并根据计算出的移动量决定移动目标位置。例如,在识别部341识别目标人EP的脚的位置的情况下,目标决定部345基于目标人EP的脚的位置的历史来计算目标人EP的步幅。而且,目标决定部345将移动目标位置设定在从目标人EP的脚的当前位置移动了步幅的位置。目标人EP的步幅表示目标人EP的脚的移动量,相当于目标人EP的身体的检测对象部位的移动量的例子。
在识别部341识别目标人EP的脚的位置的动作的情况下,目标决定部345也可以将目标人EP的脚移动的间隔作为步幅进行检测。或者,也可以在识别部341识别目标人EP的脚站在地面上的位置的情况下,目标决定部345检测从目标人EP的脚站在地面的位置到下一步站在地面上的脚的位置的间隔作为步幅。
评价部346评价目标人EP的身体的检测对象部位的位置和移动目标位置的位置关系。例如,评价部346计算识别部341识别的目标人EP的身体的部位的位置和目标决定部345决定的移动目标位置的距离。而且,评价部346判定计算出的距离是否为规定的阈值以下。在判定为目标人EP的身体的检测对象部位和移动目标位置的距离为阈值以下的情况下,评价部346评价为到达目标位置。另一方面,在判定为目标人EP的身体的检测对象部位和移动目标位置的距离大于阈值的情况下,评价部346评价为未到达目标位置。
评价部346使用的距离的阈值也可以是对多个目标人EP共同预先设定的常数。或者,评价部346也可以将目标人EP的步幅的1/10设定为阈值等按每个目标人EP设定阈值。另外,评价部346使用的距离的阈值也可以对多种类型的康复共同设定,也可以按每个康复的种类设定。另外,阈值的大小也可以设定为使脚移动的康复比使手移动的康复更大。
另外,评价部346评价目标人EP的身体的一部分的位置(检测对象部位)和移动目标位置的相对位置关系的阶段数不限于上述的到达目标位置或未到达目标位置这两个阶段,也可以是三个阶段以上的多阶段。例如,评价部346除使用是否到达目标位置的判定阈值之外,还可以使用未到达目标位置时的偏差的大小的判定阈值,分为到达目标位置、偏差小、偏差大这三个阶段进行评价。
另外,评价部346评价目标人EP的身体的检测对象部位的位置和移动目标位置的位置关系的方法不限于使用阈值的方法。例如,评价部346也可以判定目标人EP的身体的检测对象部位的位置和移动目标位置有无重叠,在判定为有重叠的情况下,评价部346可以评价为到达目标位置。
而且,例如在步行康复的情况下,目标决定部345也可以在面积的一定范围内在地面上决定移动目标位置,识别部341在目标人EP的脚形状的范围内识别目标人EP的脚的位置。而且,评价部346也可以判定被决定为移动目标位置的范围和被检测为目标人EP的脚的位置的范围有无重叠。
脚用显示参数设定部347在步行等使脚移动的康复中,设定脚用显示参数。脚用显示参数是用于目标人EP使脚移动时的目标图像的显示的参数。
手用显示参数设定部348在使手动作的康复中设定手用显示参数。手用显示参数是用于目标人EP活动手时的目标图像的显示的参数。
干扰用显示参数设定部349设定干扰用显示参数。干扰用显示参数是用于在康复的目标人EP使脚或者手移动到规定的目标图像时,妨碍目标人EP使脚或者手移动到目标图像的干扰的显示的参数。或者,干扰用显示参数是用于在康复的目标人EP将脚或手从成为回避目标的目标图像回避时,妨碍目标人EP从目标图像回避脚或手的干扰的显示的参数。
收发控制部3410经由连接部37向站20A收发数据。
操作部35使用键盘、指点设备(鼠标、平板等)、按钮、触摸面板等现有的输入装置构成。操作部35在将指示输入到康复支持装置300时由助手SP等进行操作。操作部35也可以是用于将输入装置连接到康复支持装置300的接口。在这种情况下,操作部35将在输入装置中根据助手SP等的输入生成的输入信号输入到康复支持装置300。操作部35也可以与显示部36构成为一体的触摸面板。
显示部36是CRT(Cathode Ray Tube:阴极射线管)显示器、液晶显示器、有机EL显示器等图像显示装置。显示部36显示图像及文字。显示部36也可以是用于将图像显示装置连接到康复支持装置300的接口。这种情况下,显示部36生成用于显示图像、文字的视频信号,向连接到自身的图像显示装置输出视频信号。
连接部37是与站20A连接而收发数据的接口。
图17是表示康复支持系统S2所具备的平板终端10及站20A各自的功能构成例的概略框图。
本实施方式中的平板终端10的构成与第一实施方式相同,因此省略其说明。
本实施方式中的站20A具备第二连接部210代替第一实施方式中的站20的配对读取部201。第二连接部210是与康复支持装置300连接而收发数据的接口。第二连接部210是从康复支持装置300接收并取得识别目标人EP的患者编号及康复的动作类别(应用程序的名称)的取得部。站20A的其它结构与第一实施方式中的站20的结构相同,因此省略其说明。
图18是表示平板终端10的存储部104存储的对应表的数据构成及数据例的概略图。如图所示,对应表具有目标人、应用名、日期时间、动态图像数据各项目。应用名是对目标人EP实施的康复的应用程序的名称。结果图像是结果图像的数据名。其它项目与第一实施方式中的对应表相同,因此省略其说明。
接着,参照图19及图20对本实施方式的康复支持系统S2的动作进行说明。图19是表示在康复支持系统S2中目标人EP进行康复的情况的立体图。图20是表示康复支持系统S2中的处理的示例的时序图。在康复支持系统S2中,通过平板终端10用动态图像记录康复支持装置300实施的目标人EP的康复的情况,在平板终端10中再生并确认所记录的动态图像。
首先,根据助手SP今后要进行的康复内容,使康复支持系统S2移动到目标人EP进行康复的环境中。另外,适当地调节腿部310的高度。接着,在检测范围800中,目标人EP采取与接下来进行的康复内容对应的姿势。例如,如果是进行在桌子上的手臂的康复的情况,则目标人EP采取坐在椅子上将手放在桌子上的姿势。另外,例如,在进行步行动作的康复的情况下,目标人EP采取站立的姿势。
图19表示目标人EP在桌子T上进行手移动的康复的情况。例如,目标人EP基于输出装置200向桌子T(输出区域900)输出的目标图像M1,进行与手的移动相关的康复。更具体而言,目标人EP通过用自己的双手追踪由输出装置200显示的目标图像M1的位置,进行手和手臂的康复。
目标图像M1的内容、显示的位置、定时等根据康复内容而不同。与各康复分别对应的应用程序预先安装在康复支持装置300中。而且,康复支持装置300通过执行与之后目标人EP进行的康复对应的应用程序,使输出装置200显示目标图像M1。
当目标人EP取得开始康复的姿势时,目标人EP将准备开始指示信息与目标人EP的患者编号、姓名、性别、身高等个人信息一起输入康复支持装置300(步骤S301)。准备开始指示信息包含指定与之后进行的康复对应的应用程序的信息。当操作部35取得准备开始指示信息时,康复支持装置300的控制部34判定动作区域并设定用于显示目标图像的参数,并且执行指定的应用程序(步骤S302)。另外,控制部34的收发控制部3410将指定的应用程序的名称(以下称为“应用名称”)及目标人EP的个人信息(输入的患者编号、姓名、性别、身高等)从连接部37发送到站20A(步骤S303)。
当第二连接部210接收到应用名及个人信息时,站20A的控制器203从第一连接部204向平板终端10发送接收到的应用名及个人信息(步骤S304)。当连接部107接收到应用名及个人信息时,平板终端10的控制部102启动拍摄部101,且在显示部103上显示用于记录动态图像的动态图像记录画面(步骤S305)。在动态图像记录画面上显示拍摄部101拍摄的图像。另外,在动态图像记录画面上显示接收到的个人信息和应用名。
然后,助手SP将指示开始康复的康复开始指示信息输入到康复支持装置300(步骤S306)。当操作部35取得康复开始指示信息时,康复支持装置300的控制部34通过执行指定的应用程序,使目标图像M1显示在输出装置200,并开始目标人EP的康复(步骤S307~S309)。另外,控制部34的收发控制部3410在开始康复时,从连接部37向站20A发送表示康复开始的启动信息(步骤S310)。当第二连接部210接收到启动信息时,站20A的控制部203从第一连接部204向平板终端10发送接收到的启动信息(步骤S311)。当连接部107接收到启动信息时,平板终端10的控制部102开始记录拍摄部101拍摄的动态图像(步骤S312)。
传感器100继续检测目标人EP的动作,并向康复支持装置300输出(步骤S313、S314)。在康复支持装置300中,输入部31取得检测结果信息,并向控制部34输出检测结果信息。当识别部341取得检测结果信息时,控制部34从其中选择检测目标部位的数据(步骤S315)。例如,识别部341从检测结果信息中选择手(例如,手背)的位置信息。识别部341将所选择的检测对象部位和其位置信息输出到记录部344。记录部344将检测对象部位的检测结果信息记录到检测历史信息存储部333(步骤S316)。
然后,当康复支持装置300结束康复时,结束控制部34中的生成并输出目标图像M1的处理、检测检测对象部位并记录数据的处理。例如,在助手SP输入了康复结束指示信息的情况下(步骤S317),控制部34经由操作部35取得该信息,判断为结束康复(步骤S318)。另外,在目标人EP已超出检测范围800的情况或目标人EP的手已超出检测范围800的情况或者经过了预先设定的康复的实施时间的情况下,控制部34判断为结束康复。
另外,控制部34的收发控制部3410在康复结束后,从连接部37向站20A发送表示康复结束的停止信息(步骤S319)。当第二连接部210接收到停止信息时,站20A的控制部203将接收到的停止信息从第一连接部204发送到平板终端10(步骤S320)。在连接部107接收到停止信息时,平板终端10的控制部102结束拍摄部101拍摄的动态图像的记录(步骤S321),将动态图像数据写入并保存在存储部104(步骤S322)。此时,控制部102将从站20A接收到的个人信息中包含的患者编号、应用名、结束动态图像的记录的日期时间(拍摄日期时间)以及动态图像相关联地存储。具体而言,控制部102将患者编号、应用名、拍摄日期时间以及动态图像相关联地写入存储部104存储的对应表中。即,目标人、应用名以及拍摄日期时间自动与动态图像对应。即,如果向康复支持装置300输入目标人的个人信息及执行的应用程序,则自动地将这些信息输入到平板终端10,并与动态图像相关联。因此,没有耗费助手SP将这些信息输入到平板终端10的工夫,操作性提高。由此,可以减轻助手SP的业务负担。
另外,康复支持装置300的显示控制部342根据记录于检测历史信息存储部333的目标人EP的检测对象部位的数据(检测对象信息),生成显示在本次的康复中的目标人EP的动作结果(例如,检测对象部位动作的轨迹)的结果图像(步骤S323),且在输出装置200上显示结果图像。另外,收发控制部3410将显示控制部342生成的结果图像从连接部37发送到站点20A(步骤S324)。当第二连接部210接收到结果图像时,站20A的控制部203将接收到的结果图像从第一连接部204发送到平板终端10(步骤S325)。在连接部107接收到结果图像时,平板终端10的控制部102将该结果图像与动态图像相关联地写入并保存在存储部104(步骤S326)。具体而言,控制部102将结果图像的图像数据写入存储部104,并且将结果图像的图像数据名与该动态图像相关联地写入存储部104存储的对应表中。由此,可以关联存储动态图像和结果图像。
另外,所记录的动态图像能够在该场景下即时再生。例如,助手SP可以从站20A取下平板终端10,确认目标人EP和所记录的动态图像。由于平板终端10可以从站20A装卸,因此目标人EP不需要去到站20A的某个位置。由于目标人EP所在的位置是拍摄点,所以大多远离站20A。在这种情况下,可以从站20A取下平板终端10,并将其拿到目标人EP跟前。由此,可以在拍摄的该场景下确认并共享助手SP和目标人EP记录的动态图像。
当动态图像的记录结束时,平板终端10的控制部102的显示控制部1022在显示部103显示用于再生所记录的动态图像的动态图像再生画面(步骤S327)。
此外,在上述的处理中,康复支持装置300和平板终端10也可以不经由站20A进行通信。即,也可以通过平板终端10的应用程序来实现站20A的一部分或全部功能。
图21是表示显示于平板终端10的显示部103的动态图像再生画面的一例的示意图。在本图所示的动态图像再生画面上配置有:显示结果图像的结果图像区域RE、用于再生动态图像的再生区域MV、用于再生动态图像的再生按钮BT1、用于将当前的再生位置复位到再生开始位置的复位按钮BT2、用于慢速再生动态图像的慢速ON按钮BT3、用于同时再生多个动态图像的同时再生ON按钮BT4、用于选择再生的动态图像的动态图像选择按钮BT5、用于结束动态图像再生画面并返回原画面的结束按钮BT6。按钮BT1~BT6的功能与第一实施方式相同。
另外,在动态图像再生画面上,再生部位条BR1、结束部位条BR2和当前位置条BR3配置在再生区域MV的下部。条BR1~BR3的功能与第一实施方式相同。
由于在动态图像再生画面上,可以在显示了对应的结果图像的状态下再生动态图像,所以能够与动态图像比较来考察康复的结果,变得更容易确认。
另外,平板终端10可以同时再生过去拍摄的动态图像和本次拍摄的动态图像,以便与过去的动作(康复的情况)比较。助手SP按下同时再生ON按钮BT4。在动态图像再生画面上按下动态图像选择按钮BT4而接受到输入时,平板终端10的控制部102的显示控制部1022在显示部103显示用于选择同时再生的过去的动态图像的动态图像选择画面。
图22是表示显示于平板终端10的显示部103的动态图像选择画面的一例的示意图。在本图所示的动态图像选择画面上,在左上部分显示目标人EP的患者编号及姓名,并且,可选择性地浏览显示表示目标人EP的动态图像的图标。各图标由表示在对应的动态图像中对目标人EP实施的应用程序的象形图及字符串构成。由此,能够容易地判别在各动态图像中对目标人EP实施的应用程序。通过使用象形图表示应用程序,可以直观地传达应用的内容而不受语言限制,从而实现面向全球对应的表现。
如图所示,图标按每拍摄动态图像的日期来显示。进而,在图标的下方显示拍摄的时间。另外,以能够容易识别在各日期中拍摄的时间是上午还是下午的方式显示图标。例如,也可以设定用红色区域包围上午的图标,用蓝色区域包围下午的图标等颜色区分。
此外,也可以在动态图像选择画面上仅浏览显示在动态图像再生画面上再生的动态图像的应用程序(即,康复支持装置300执行的应用程序)的动态图像。或者,在动态图像选择画面上也可以按每个应用程序分开显示图标。
助手SP在动态图像选择画面上选择并按下同时再生的动态图像的图标。平板终端10的控制部102的显示控制部1022从存储部104读出在动态图像选择画面上选择的图标的动态图像及对应的结果图像,并在显示部103上显示同时再生画面。
图23是表示显示于平板终端10的显示部103的同时再生画面的一例的示意图。在本图所示的同时再生画面上配置有:显示与本次的动态图像对应的结果图像的结果图像区域RE1、用于再生本次的动态图像的本次再生区域MV1、显示与过去的动态图像对应的结果图像的结果图像区域RE2、用于再生过去的动态图像的过去再生区域MV2、按钮BT1~BT6。本次的动态图像是在动态图像再生画面上再生的动态图像,例如,是最近拍摄的动态图像。另外,过去的动态图像是在动态图像选择画面上选择出的动态图像。另外,同时再生画面上的按钮BT1~BT6的功能与动态图像再生画面的按钮的功能相同。
当在同时再生画面上按下再生按钮BT1并接受输入时,控制部102的显示控制部1022同时在再生区域MV1再生本次的动态图像并在再生区域MV2再生过去的动态图像。即,平板终端10能够将本次的动态图像与过去的动态图像并排地同时再生。因此,由于能够在一个画面上并列同时再生两个动态图像,所以能够容易地在拍摄的该场景下进行与过去的动态图像的比较。因此,可以在该场景下容易地确认目标人EP的恢复状态(康复的效果)与过去(例如住院时)相比有多少改善。由此,在拍摄的该场景下可以由助手SP和目标人EP比较动态图像并共享课题,实施针对该课题的康复菜单。
另外,在同时再生画面上,与本次的动态图像对应的再生部位条BR31、结束部位条BR32及当前位置条BR33被配置在本次再生区域MV1的下部。另外,在同时再生画面上,与过去的动态图像对应的再生部位条BR41、结束部位条BR42以及当前位置条BR43配置在过去再生区域MV2的下部。条BR31~BR33的功能与第一实施方式中的条BR11~BR13的功能相同,条BR41~BR43的功能与第一实施方式中的条BR21~BR23的功能相同。再生部位条BR1、BR31、BR41及结束部位条BR2、BR32、BR42构成指定动态图像中的再生位置的再生位置指定部。显示控制部1022再生动态图像中在再生位置指定部指定的再生位置。
另外,与第一实施方式同样,平板终端10具备再生任意的动态图像的功能(包含同时再生任意的两个动态图像的功能)、将动态图像数据转移到其它设备的功能(包含自动地进行数据转移的功能)等。
图24是表示康复支持装置300进行的应用程序执行处理的一例的流程图。本图表示康复支持装置300执行康复的应用程序时的处理。助手SP将目标人EP的个人信息输入到康复支持装置300,并且选择执行的应用程序。
(步骤S401)控制部34接受操作部35中应用程序的选择输入。然后,进入步骤S402的处理。
(步骤S402)控制部34从连接部37向站20A发送所输入的个人信息及所选择的应用程序的应用名。然后,进入步骤S403的处理。
(步骤S403)控制部34执行所选择的应用程序,开始目标人EP的康复的播放。然后,进入步骤S404的处理。
(步骤S404)控制部34从连接部37向站20A发送启动信息。然后,进入步骤S405的处理。
(步骤S405)控制部34进行播放的显示及记录。具体而言,控制部34使输出装置200显示目标图像,并且通过传感器100检测目标人EP的检测对象部位,记录检测出的检测结果信息。然后,进入步骤S406的处理。
(步骤S406)控制部34判定康复的播放是否结束。当控制部34判定为结束的情况下,进入步骤S407的处理。在控制部34判定为尚未结束的情况下,返回步骤S405的处理。
(步骤S407)控制部34从连接部37向站20A发送停止信息。然后,进入步骤S408的处理。
(步骤S408)控制部34生成结果图像,将生成的结果图像显示在输出装置200上。然后,进入步骤S409的处理。
(步骤S409)
控制部34从连接部37向站20A发送所生成的结果图像。之后,结束处理。
图25是表示平板终端10进行的动态图像记录再生处理的一例的流程图。本图表示平板终端10拍摄目标人EP并记录动态图像,且再生记录的动态图像的处理。平板终端10在从站20A接收到个人信息和应用名时,执行本图所示的处理。
在上述的步骤S402中,当从康复支持装置300接收到个人信息及应用名时,站20A将接收到的个人信息和应用名输出到平板终端10。
(步骤S501)控制部102取得经由连接部107从站20A接收到的个人信息及应用名。然后,进入步骤S502的处理。
(步骤S502)控制部102启动拍摄部101,在显示部103显示动态图像拍摄画面。然后,进入步骤S503的处理。
(步骤S503)控制部102判定连接部107是否经由站20A接收到在上述步骤S404中康复支持装置300发送的启动信息。在控制部102判定为接收到时,进入步骤S504的处理。另外,在控制部102判定为没有接收的情况下,再次执行步骤S503的处理。
(步骤S504)控制部102开始记录拍摄部101拍摄的动态图像。然后,进入步骤S505的处理。
(步骤S505)控制部102判定连接部107是否经由站20A接收到在上述步骤S407中康复支持装置300发送的停止信息。在控制部102判定为接收到的情况下,进入步骤S506的处理。另外,在控制部102判定为没有接收的情况下,再次执行步骤S505的处理。
(步骤S506)控制部102结束动态图像的记录。然后,进入步骤S507的处理。
(步骤S507)连接部107经由站20A接收在上述步骤S409中康复支持装置300发送的结果图像。然后,进入步骤S508的处理。
(步骤S508)控制部102将记录的动态图像与在步骤S501中取得的个人信息及应用名、结束记录的日期时间和在步骤S507中接收到的结果图像相关联写入并保存在存储部104中。然后,进入步骤S509的处理。
(步骤S509)控制部102在显示部103显示再生所记录的动态图像的动态图像再生画面。然后,进入步骤S510的处理。
(步骤S510)控制部102判定在动态图像再生画面上是否按下同时再生ON按钮且接受了输入。在控制部102判定为接受输入的情况下,进入步骤S412的处理。另外,在控制部102判定为没有接受输入的情况下,进入步骤S511的处理。
(步骤S511)控制部102判定在动态图像再生画面上是否按下结束按钮并接受输入。在控制部102判定为接受输入的情况下,进入步骤S518的处理。另外,在控制部102判定为没有接受输入的情况下,返回步骤S509的处理。
(步骤S512)控制部102在显示部103显示动态图像选择画面。然后,进入步骤S513的处理。
(步骤S513)控制部102判断在动态图像选择画面上是否选择了同时再生的动态图像。在控制部102判定为已经选择的情况下,进入步骤S514的处理。另外,在控制部102判定为没有选择的情况下,返回步骤S509的处理。
(步骤S514)控制部102使显示部103显示用于同时再生在动态图像选择画面上所选择的动态图像和所记录的动态图像的同时再生画面。然后,进入步骤S515的处理。
(步骤S515)控制部102判定在同时再生画面上是否按下再生按钮并接受了输入。在控制部102判定为接受输入的情况下,进入步骤S516的处理。另外,在控制部102判定为没有接受输入的情况下,进入步骤S517的处理。
(步骤S516)控制部102同时再生所选择的动态图像和所记录的动态图像。然后,进入步骤S517的处理。
(步骤S517)控制部102判定在同时再生画面上是否按下结束按钮并接受了输入。在控制部102判定为接受输入的情况下,进入步骤S518的处理。另外,在控制部102判定为没有接受输入的情况下,返回步骤S514的处理。
(步骤S518)控制部102在显示部103显示菜单画面,执行对应的各处理。之后,结束处理。
如上所述,本实施例的康复支持系统S2具备便携式平板终端10和可装卸平板终端10的站20A。站20A具备:从执行目标人实施的康复的应用程序的康复支持装置300接收并取得识别康复的目标人的目标人识别信息的第二连接部210、在安装有平板终端10时与平板终端10连接并收发数据的第一连接部204、从第一连接部204向平板终端10发送第二连接部210取得的目标人识别信息的控制部203。平板终端10具备:在安装于站20A时与站20A连接而收发数据的连接部107、对目标人进行拍摄的拍摄部101、存储拍摄部101所拍摄的动态图像的存储部104、经由连接部107从站20A接收目标人识别信息且将接收到的目标人识别信息与拍摄部101拍摄目标人的动态图像相关联地写入存储部104的记录控制部1021。
根据上述构成,站20A从康复支持装置300接收到的目标人识别信息自动地与动态图像相关联地存储在平板终端10中。由此,仅对康复支持装置300输入目标人识别信息,就可以将拍摄到的动态图像分为按每个目标人进行存储。因此,助手SP在业务结束后,不需要进行确认动态图像并按每个对象进行分类的工作,从而,操作性提高。
另外,在本实施方式的康复支持系统S2中,第二连接部210将康复的动作类别(应用程序的名称)与目标人识别信息一同取得,控制部203将动作类别与目标人识别信息一同从第一连接部204发送到平板终端10,记录控制部1021将接收到的目标人识别信息及动作类别与动态图像相关联地写入存储部104。
根据上述结构,康复支持装置300执行的应用程序自动地与动态图像相关联地存储于平板终端10。由此,可以用简单操作将拍摄目标人的动态图像分成按每个目标人及动作类别进行存储。因此,助手SP无需在业务结束后进行确认动态图像并按每一动作类别进行分类的工作,从而,操作性提高。
另外,在本实施方式的康复支持系统S2中,平板终端10具备再生并显示存储部104存储的动态图像的显示部103和在显示部103并排同时再生目标人的多个动态图像的显示控制部1022。根据上述构成,可以并排地同时再生存储于平板终端10的多个动态图像。因此,例如,通过同时再生拍摄过去康复的情况的动态图像和拍摄当前康复的情况的动态图像并进行比较,可以容易地与过去的康复情况进行比较。由此,能够更直观地向目标人提示康复的效果及恢复状态等。
另外,在本实施方式的康复支持系统S2中,平板终端10具备指定动态图像中的再生位置的再生位置指定部(再生部位条BR31、BR41、BR51及结束部位条BR32、BR42、BR52),显示控制部1022再生动态图像中在再生位置指定部被指定的再生位置。根据上述结构,能够调节同时再生的动态图像的再生位置。因此,可以将动作的开始定时等一致地同时再生多个动态图像。由此,更易于比较多个动态图像。
以上,参照附图详细叙述了本发明的实施方式,但是,具体的结构并不限定于这个实施方式,也包含不脱离本发明的要旨的范围的设计等。
例如,在上述实施方式中,通过对应表将目标人和动作类别和日期时间与动态图像相关联,但不限于此,例如也可以通过对每个对象生成与各动作类别对应的文件夹,分配附加了日期的动态图像数据等其它方法使目标人、动作类别以及日期时间与动态图像相关联。
另外,在上述的实施方式中,在同时再生画面上同时再生两个动态图像,但同时再生的动态图像也可以是两个以上。
另外,在上述实施方式中,以平板终端10及站20、20A各一台的情况为例进行了说明,但不限于此,也可以是包含多台平板终端10及站20、20A的构成。另外,平板终端10的台数和站20、20A的台数也可以不同。例如,站20和20A的台数也可以多于平板终端10的台数。通过将多个站20、20A分别设置在不同的部位,能够在各种位置进行拍摄。另外,在存在多个平板终端10的情况下,例如也可以设置管理同步的服务器等,通过该服务器等定期地从各平板终端10提取来自上次更新量的差分数据,进行数据同步。另外,也可以通过该服务器等管理所有平板终端10的信息,集中地进行上述的动态图像的比较及各种输出。
另外,在上述实施方式中,将平板终端10设置在站20、20A上进行拍摄,但不限于此,也可以在输入了患者编号及动作类别后,从站20、20A取下平板终端10进行拍摄。由此,能够从任意部位进行拍摄。例如,也可以由助手SP、目标人EP直接手持平板终端10进行拍摄。
另外,在动态图像再生画面或同时再生画面上,通过对动作的特征的定时进行截图,可以够取得该场面的静态图像。通过印刷并输出截图取得的静态图像、由自动OUTPUT及手动OUTPUT取得的静态图像组,可以作为记录保留在护理记录或患者日志等中。
另外,也可以将在平板终端10中拍摄到的动态图像与电子化病历共享。由此,能够与所有医务人员共享将目标人EP的状态掌握。
另外,平板终端10也可以通过追加应用程序而从动态图像算出关节角度、移动轨迹及移动量等。由此,能够从动态图像进行更专业性的数据提取。进而,也可以在目标人EP的身体(例如关节)上贴上解析用的贴纸等,然后通过图像解析算出动态图像内的贴纸等的移动轨迹或移动量等。在这种情况下,能够进一步提高移动轨迹及移动量等的解析精度。
另外,平板终端10通过预先将其它设备和患者编号统一起来,可以登记与其它设备测量的目标人EP有关的数据。此外,数据的共享方法、通信方法可考虑各种方法。
另外,通过在站20上设置可动式的支架,可以容易地移动站20。由此,例如可以进行在病房中的吃饭场景、在病房中的动作等各种场景下的拍摄。更具体而言,可以进行职业疗法的拍摄、语言听觉师的发声练习的拍摄、语言治疗师进行的吃饭时的吞咽状态的拍摄、用于由护士进行的对床周边的动作安全确认的拍摄等。
另外,平板终端10也可以与网络摄像头联动,从两个以上的不同部位同时拍摄目标人EP。在记录康复中的动作的情况下,要求从前方和侧方等两个部位进行拍摄。因此,也可以将网络摄像头连接到平板终端10,从多个部位同时拍摄目标人EP。此外,因为也能够单独进行网络摄像头拍摄,所以从不同的部位进行拍摄也变得容易。
另外,在上述的实施方式中,对拍摄康复的动作的情况进行了说明,但拍摄动态图像的领域不限于此。与站20的配对读取部201相关联的动作类别能够进行定制,能够在护理的领域、看护的领域等各种领域使用。另外,配对读取部201的读取区域(即,动作类别)不限于5个,也可以少于5个,也可以多于5个。例如,也可以通过变更设置在配对读取部201的主板来变更动作类别。在主板上设置有与各读取区域对应的动作类别。也可以预先准备从开始就设定了各动作类别的主板,或者能够自由地设定动作类别。
另外,步行动作等多在宽范围拍摄。因此,也可以将鱼眼透镜设置在拍摄部101。通过宽范围地拍摄,即使在狭小的房间也能够有效地拍摄动态图像。
此外,也可以将用于实现作为上述平板终端10、站20、20A及康复支持装置300等的功能的程序记录在计算机可读的记录介质中,使记录于该记录介质的程序读入计算机系统并执行,由此进行作为上述的平板终端10、站20、20A及康复支持装置300等的处理。在此,“使记录于记录介质60的程序读入计算机系统并执行”包含在计算机系统中安装程序。在此所说的“计算机系统”包含OS、周边设备等硬件。另外,“计算机系统”也可以包含经由因特网、WAN、LAN、专用线路等包含通信线路的网络而连接的多个计算机装置。另外,“计算机可读的记录介质”是指软盘、磁光盘、ROM、CD-ROM等可移动介质、内置于计算机系统中的硬盘等存储装置。这样,存储有程序的记录介质也可以是CD-ROM等的非暂时性记录介质。
另外,为了发布该程序,记录介质还包含能够从发布服务器访问的设置于内部或外部的记录介质。存储于发布服务器的记录介质中的程序的代码也可以与终端装置中可执行的形式的程序的代码不同。即,在发布服务器中存储的格式不受限制,只要能够从发布服务器下载并以在终端装置可执行的形式安装即可。此外,也可以是将程序分割为多个,分别在不同的定时下载后由终端装置合并的构成、发布被分割的每个程序的发布服务器不同。另外,“计算机可读的记录介质”还包含像经由网络发送程序的情况下的服务器、成为客户端的计算机系统内部的易失性存储器(RAM)那样保持固定时间程序的记录介质。另外,上述程序也可以是用于实现上述功能的一部分的程序。而且,也可以是通过与计算机系统中已经记录的程序的组合来实现上述功能的所谓差分文件(差分程序)。
[附记1]
(1)一种动态图像记录方法,是具备信息处理装置和能够装卸上述信息处理装置的站的动态图像记录系统中的动态图像记录方法,其特征在于,具有如下步骤:所述站与所述信息处理装置连接而收发数据;取得识别拍摄的目标人的目标人识别信息;将所取得的所述目标人识别信息发送到所述信息处理装置;所述信息处理装置与所述站连接而收发数据;拍摄所述目标人;存储所拍摄的动态图像;以及从所述站接收所述目标人识别信息并将接收到的所述目标人识别信息与拍摄所述目标人的动态图像相关联地写入存储部。
(2)一种程序,在具备信息处理装置和能够装卸所述信息处理装置的站的动态图像记录系统中,用于使上述站的计算机执行下述过程:与所述信息处理装置连接而收发数据;取得识别拍摄的目标人的目标人识别信息;以及将所取得的所述目标人识别信息发送到所述信息处理装置,且用于使所述信息处理装置的计算机执行下述过程:与所述站连接而收发数据;拍摄所述目标人;存储拍摄的动态图像;以及从所述站接收所述目标人识别信息并将接收到的所述目标人识别信息与拍摄了所述目标人的动态图像对应地写入存储部。
(3)一种站,是具备信息处理装置和能够装卸所述信息处理装置的站的动态图像记录系统中的所述站,其特征在于,具备:与所述信息处理装置连接而收发数据的连接部、取得识别拍摄的目标人的目标人识别信息的取得部、从所述连接部向所述信息处理装置发送所述取得部取得的所述目标人识别信息的控制部。
(4)一种动态图像记录方法,该动态图像记录方法是在具备信息处理装置和能够装卸所述信息处理装置的站的动态图像记录系统中,所述站执行的动态图像记录方法,其特征在于,具有如下步骤:取得识别拍摄的目标人的目标人识别信息;以及从与所述信息处理装置连接而收发数据的连接部向所述信息处理装置发送所取得的所述目标人识别信息。
(5)一种程序,用于使具备信息处理装置和能够装卸所述信息处理装置的站的动态图像记录系统中的所述站的计算机执行下述过程:取得识别拍摄的目标人的目标人识别信息;以及从与所述信息处理装置连接而收发数据的连接部向所述信息处理装置发送所取得的所述目标人识别信息。
(6)一种信息处理装置,是具备信息处理装置和能够装卸所述信息处理装置的站的动态图像记录系统中的所述信息处理装置,其特征在于,具备:连接部,与所述站连接而收发数据;拍摄部,拍摄目标人;存储部,存储所述拍摄部拍摄的动态图像;以及记录控制部,经由所述连接部从所述站接收识别目标人的目标人识别信息并将接收到的所述目标人识别信息与所述拍摄部拍摄所述目标人的动态图像相关联地写入所述存储部。
(7)一种动态图像记录方法,该动态图像记录方法是在具备信息处理装置和能够装卸所述信息处理装置的站的动态图像记录系统中,所述信息处理装置执行的动态图像记录方法,其特征在于,具有如下步骤:经由与所述站连接而收发数据的连接部从所述站接收识别目标人的目标人识别信息;拍摄所述目标人;以及将接收到的所述目标人识别信息与拍摄到所述目标人的动态图像相关联地写入存储部。
(8)一种程序,用于使具备具备信息处理装置和能够装卸所述信息处理装置的站的动态图像记录系统中的所述信息处理装置的计算机执行下述过程:经由与所述站连接而收发数据的连接部从所述站接收识别目标人的目标人识别信息的;拍摄所述目标人;以及将接收到的所述目标人识别信息与拍摄所述目标人的动态图像相关联地写入存储部。
[附记2]
(1)一种动态图像记录系统,其具备对于站可装卸的信息处理装置,所述站具有:收发数据的连接部、取得识别拍摄的目标人的目标人识别信息的取得部、从所述连接部发送所述取得部取得的所述目标人识别信息的控制部,其中,
所述信息处理装置具备:
连接部,与所述站的所述连接部连接而收发数据;
拍摄部,拍摄所述目标人;
存储部,存储所述拍摄部拍摄的动态图像;
记录控制部,经由所述连接部从所述站接收所述目标人识别信息并将接收到的所述目标人识别信息与所述拍摄部拍摄所述目标人的动态图像相关联地写入所述存储部。
(2)根据上述(1)所述的动态图像记录系统,其中,具备:
再生并显示所述存储部存储的动态图像的显示部、
在所述显示部并排并同时再生所述目标人的多个所述动态图像的显示控制部。
(3)根据上述(2)所述的动态图像记录系统,其中,
具备指定所述动态图像中的再生位置的再生位置制定部,
所述显示控制部再生与在所述再生位置指定部指定的再生位置对应的所述动态图像。
(4)根据上述(3)所述的动态图像记录系统,其中,
所述信息处理装置具备:
再生并显示所述存储部存储的动态图像的显示部、
指定所述动态图像中的再生位置的再生位置指定部、从与在所述再生位置指定部指定的再生位置对应的所述动态图像中提取规定数量的静态图像并输出的显示控制部。
(5)根据上述(1)所述的动态图像记录系统,其中,
所述信息处理装置具备:
再生并显示所述存储部存储的动态图像的显示部、
指定所述动态图像中的再生位置的再生位置指定部、从与在所述再生位置指定部指定的再生位置对应的所述动态图像中提取规定数量的静态图像并输出的显示控制部。
(6)根据上述(1)所述的动态图像记录系统,其中,
所述信息处理装置具备:
再生并显示所述存储部存储的动态图像的显示部、
指定所述动态图像中的再生位置的再生位置指定部、从与在所述再生位置指定部指定的再生位置对应的所述动态图像中提取规定数量的静态图像并输出的显示控制部。
(7)根据上述(1)所述的动态图像记录系统,其中,
所述信息处理装置具备:
再生并显示所述存储部存储的动态图像的显示部、
在所述显示部并排显示所述目标人的所述动态图像及与所述动态图像对应且表示所述目标人的动作结果的结果图像的显示控制部。
(8)根据上述(7)所述的动态图像记录系统,其中,
所述显示控制部在所述显示部并排显示所述目标人的多个所述动态图像及所述结果图像。
(9)根据上述(8)所述的动态图像记录系统,其中,
所述信息处理装置具备指定所述动态图像中的再生位置的再生位置指定部,
所述显示控制部再生与在所述再生位置指定部指定的再生位置对应的所述动态图像。
(10)根据上述(8)所述的动态图像记录系统,其中,
所述信息处理装置具备指定所述动态图像中的再生位置的再生位置指定部,
所述显示控制部从与在所述再生位置指定部指定的再生位置对应的所述动态图像中提取规定数量的静态图像并输出。
在各实施方式的康复支持系统中,至少使用平板终端10和站20,但不限于此,例如也可以不使用站20而对平板终端10追加站20所具备的功能。这种情况下,如图26A及图26B的变形例所示,也可以由移动支承架台120而不是站20支承平板终端10。
移动支承架台120具备多个脚轮121、多个腿部122、杆123、支承台124、平板终端保持架125以及摄像头保持架126。
各脚轮121分别被安装在各腿部122上,能够在地板上行走。
杆123在由各腿部122支承的状态下沿垂直方向竖立,能够调节沿着其垂直方向的长度(高度)。杆123具有竖立设置在各腿部122上的管123a、下端部被同轴插入该管123a内的伸展部123b、固定或允许伸展部123b相对于管123a的上下位置及旋转位置的调节部123c。在松开调节部123c的情况下,因为能够进行伸展部123b相对于管123a的上下动作及旋转动作,所以可以将后述的外部摄像头EC的高度和旋转方向的朝向调节为最佳位置。调节后,通过将调节部123c拧紧,可以固定伸展部123b的高度及旋转位置即外部摄像头EC的高度及旋转位置。
支承台124被固定在沿着管123a的垂直方向的中途位置,可以在其上表面接受平板终端10。
平板终端保持架125与支承台124一起保持平板终端1660。在不使用外部摄像头而用平板终端10拍摄动态图像的情况下,如图26A所示,可以将平板终端10垂直地固定于支承台124的上表面。另外,在不进行拍摄而操作平板终端10的情况下,如图26B所示,通过将平板终端10相对于支承台124的上表面倾斜地立起来,易于看到画面,操作更容易。无论任何情况,都用平板终端保持架125支承平板终端10的背面。
摄像头保持架126可摆动地固定于伸展部123b的上端,且能够安装外部摄像头EC(网络摄像头等)。摄像头保持架126能够进行左右方向的摆头动作和垂直方向的倾斜动作。因此,在用外部摄像头EC拍摄代替用平板终端10拍摄的情况下,首先,以相对于平板终端10的画面朝向相反侧(虚线箭头的方向)的方式将外部摄像头EC固定到摄像头保持架126上。而且,操作上述调节部123c来调节伸展部123b的高度及旋转位置。另外,调节摄像头保持架126的上下方向的朝向。由此,可以使外部摄像头EC的拍摄方向朝向目标人EP。另外,即使在与目标人EP的距离较短的情况下,也可以通过改变外部摄像头EC的朝向来对应,因此,可以灵活地对应。例如,即使在进行康复的场所较窄且与目标人EP的距离较短的情况下,也可以通过提高外部摄像头EC的高度而将目标人EP的面部表情和表上的作业内容包含在一个画面内进行拍摄。
此外,外部摄像头EC与平板终端10之间的包含动态图像的发送的各种通信可以有线进行,或者也可以无线进行。
用户可以在平板终端10的画面上输入或选择识别目标人EP的个人信息。此外,也可以将目标人EP的姓名与个人信息一同预先注册在平板终端10,以供选择。或者,也可以将识别目标人EP的个人信息与目标人EP固有的识别号码相关联并预先注册到平板终端10中以供选择。
用户可以在平板终端10的画面上输入或选择康复的动作类别。例如,在平板终端10上显示动作类别“坐姿”、“立起”、“步行”等。
由此,用户能够不使用介质40(不必另行进行介质40的个人设定),而使用本康复支持系统。
这种情况下,对于图7的序列,删除介质40的步骤S101及站20的步骤S103,并且在平板终端10中进行站20的步骤S102。对于图20的序列,输入到站20A的各步骤(S303、S310、S319、S324)被输入到平板终端10。即,步骤S303和S304被整合成一个步骤,步骤S310和S311被整合成一个步骤,步骤S324和S325被整合成一个步骤。
产业上的可利用性
根据该动态图像记录系统,可以提高其操作性。
符号说明
S1、S2…康复支持系统(动态图像记录系统)
10…平板终端(信息处理装置)
20、20A…站
30遥控器
31…输入部
32...输出部
33...存储部
34…控制部
35...操作部
36…显示部
37…连接部
40、40-1、40-2…介质
100传感器
101…拍摄部
102...控制部
103…显示部
104...存储部
105…操作部
106…接收部
107...连接部
200…输出装置
201...配对读取部(取得部)
202…供电部
203…控制部
204...第一连接部(连接部)
205…对接部
210...第二连接部(取得部)
300…康复支持装置
301…操作部
302…发送部
310…腿部
311、312、313、314…脚轮
331…校准信息存储部
332...判定条件信息存储部
333…检测历史信息存储部
334...参数信息存储部
335...程序信息存储部
341…识别部
342…显示控制部
343...动作区域判定部
344…记录部
345…目标决定部
346…评价部
347…脚用显示参数设定部
348…手用显示参数设定部
349…干扰用显示参数设定部
401…存储部
1021...记录控制部
1022...显示控制部
2011、2012、2013、2014、2015…读取区域
3410…收发控制部
BR1、BR11、BR21…再生部位条(再生位置指定部)
BR2、BR12、BR22…结束部位条(再生位置指定部)
Claims (18)
1.一种动态图像记录系统,其具备信息处理装置和能够装卸所述信息处理装置的站,其特征在于,
所述站具备:
与所述信息处理装置连接而收发数据的连接部、
取得识别拍摄的目标人的目标人识别信息的取得部、
从所述连接部向所述信息处理装置发送所述取得部取得的所述目标人识别信息的控制部,
所述信息处理装置具备:
与所述站连接而收发数据的连接部;
拍摄所述目标人的拍摄部;
存储所述拍摄部拍摄到的动态图像的存储部;以及
经由所述连接部从所述站接收所述目标人识别信息将接收到的所述目标人识别信息与所述拍摄部拍摄所述目标人的动态图像相关联地写入所述存储部的记录控制部。
2.根据权利要求1所述的动态图像记录系统,其特征在于,
所述站的所述取得部随着所述目标人识别信息而一起取得动作类别,
所述站的所述控制部将所述动作类别与所述目标人识别信息一起从所述连接部发送到所述信息处理装置,
所述信息处理装置的所述记录控制部将接收到的所述目标人识别信息及所述动作类别与所述动态图像相关联地写入所述存储部。
3.根据权利要求2所述的动态图像记录系统,其特征在于,
所述站的所述取得部从存储目标人识别信息的介质读取所述目标人识别信息。
4.根据权利要求2所述的动态图像记录系统,其特征在于,
所述站的所述取得部按每一动作类别具备从存储目标人识别信息的介质读取所述目标人识别信息的读取区域,根据读取了所述目标人识别信息的读取区域取得所述动作类别。
5.根据权利要求2所述的动态图像记录系统,其特征在于,
所述站的所述取得部从执行对所述目标人实施的康复的应用程序的康复支持装置接收所述目标人识别信息。
6.根据权利要求1所述的动态图像记录系统,其特征在于,
所述站的所述取得部从存储目标人识别信息的介质读取所述目标人识别信息。
7.根据权利要求1所述的动态图像记录系统,其特征在于,
所述站的所述取得部从执行对所述目标人实施的康复的应用程序的康复支持装置接收所述目标人识别信息。
8.根据权利要求1~7中任一项所述的动态图像记录系统,其特征在于,
所述信息处理装置具备:
再生并显示所述存储部存储的动态图像的显示部、
在所述显示部并排同时再生所述目标人的多个所述动态图像的显示控制部。
9.根据权利要求8所述的动态图像记录系统,其特征在于,
所述信息处理装置具备再生位置指定部,其指定所述动态图像中的再生位置,
所述显示控制部再生与在所述再生位置指定部指定的再生位置对应的所述动态图像。
10.根据权利要求9所述的动态图像记录系统,其特征在于,
所述信息处理装置具备:
再生并显示所述存储部存储的动态图像的显示部;
指定所述动态图像中的再生位置的再生位置指定部;以及
从与在所述再生位置指定部指定的再生位置对应的所述动态图像提取规定数量的静态图像并输出的显示控制部。
11.根据权利要求8所述的动态图像记录系统,其特征在于,
所述信息处理装置具备:
再生并显示所述存储部存储的动态图像的显示部;
指定所述动态图像中的再生位置的再生位置指定部;以及
从与在所述再生位置指定部指定的再生位置对应的所述动态图像中提取规定数量的静态图像并输出的显示控制部。
12.根据权利要求1~7中任一项所述的动态图像记录系统,其特征在于,
所述信息处理装置具备:
再生并显示所述存储部存储的动态图像的显示部;
指定所述动态图像中的再生位置的再生位置指定部;以及
从与在所述再生位置指定部指定的再生位置对应的所述动态图像中提取规定数量的静态图像并输出的显示控制部。
13.根据权利要求1~7中任一项所述的动态图像记录系统,其特征在于,
所述信息处理装置具备:
显示部;以及
将所述存储部存储的所述目标人的所述动态图像和与所述动态图像对应且表示所述目标人的动作结果的结果图像并排显示在所述显示部的显示控制部。
14.根据权利要求13所述的动态图像记录系统,其特征在于,
所述信息处理装置具备指定所述动态图像中的再生位置的再生位置指定部,
所述显示控制部再生与在所述再生位置指定部指定的再生位置对应的所述动态图像。
15.根据权利要求13所述的动态图像记录系统,其特征在于,
所述信息处理装置具备指定所述动态图像中的再生位置的再生位置指定部,
所述显示控制部从与在所述再生位置指定部指定的再生位置对应的所述动态图像中提取规定数量的静态图像并输出。
16.根据权利要求13所述的动态图像记录系统,其特征在于,
所述显示控制部将所述目标人的多个所述动态图像及所述结果图像并排显示在所述显示部。
17.根据权利要求16所述的动态图像记录系统,其特征在于,
所述信息处理装置具备指定所述动态图像中的再生位置的再生位置指定部,
所述显示控制部再生与在所述再生位置指定部指定的再生位置对应的所述动态图像。
18.根据权利要求16所述的动态图像记录系统,其特征在于,
所述信息处理装置具备指定所述动态图像中的再生位置的再生位置指定部,
所述显示控制部从与在所述再生位置指定部指定的再生位置对应的所述动态图像中提取规定数量的静态图像并输出。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017-208304 | 2017-10-27 | ||
JP2017208304 | 2017-10-27 | ||
PCT/JP2018/037544 WO2019082635A1 (ja) | 2017-10-27 | 2018-10-09 | 動画像記録システム |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111226289A true CN111226289A (zh) | 2020-06-02 |
CN111226289B CN111226289B (zh) | 2023-09-26 |
Family
ID=66246934
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201880038885.0A Active CN111226289B (zh) | 2017-10-27 | 2018-10-09 | 动态图像记录系统 |
Country Status (4)
Country | Link |
---|---|
US (1) | US11648168B2 (zh) |
JP (1) | JP7010798B2 (zh) |
CN (1) | CN111226289B (zh) |
WO (1) | WO2019082635A1 (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7474568B2 (ja) | 2019-05-08 | 2024-04-25 | キヤノンメディカルシステムズ株式会社 | 医用情報表示装置、及び医用情報表示システム |
JP7435242B2 (ja) * | 2020-05-15 | 2024-02-21 | コニカミノルタ株式会社 | 動態画像解析装置、動態画像解析方法及びプログラム |
WO2023048287A1 (ja) * | 2021-09-27 | 2023-03-30 | テルモ株式会社 | 情報処理システム、プログラム及び情報処理方法 |
WO2023153453A1 (ja) * | 2022-02-08 | 2023-08-17 | ソニーグループ株式会社 | リハビリテーション支援システム、情報処理方法およびプログラム |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106233283A (zh) * | 2014-04-15 | 2016-12-14 | 奥林巴斯株式会社 | 图像处理装置、通信系统以及通信方法和摄像装置 |
US20170000386A1 (en) * | 2015-07-01 | 2017-01-05 | BaziFIT, Inc. | Method and system for monitoring and analyzing position, motion, and equilibrium of body parts |
CN107230229A (zh) * | 2016-03-25 | 2017-10-03 | 奥林巴斯株式会社 | 图像处理装置、图像处理方法和记录介质 |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004304653A (ja) * | 2003-03-31 | 2004-10-28 | Matsushita Electric Ind Co Ltd | 撮影システム |
JP2004310350A (ja) | 2003-04-04 | 2004-11-04 | Hitachi Building Systems Co Ltd | 動態管理システム |
JP4263180B2 (ja) | 2005-03-16 | 2009-05-13 | 日本電信電話株式会社 | 介護予防支援システム |
US20080119763A1 (en) * | 2006-11-21 | 2008-05-22 | Jay Wiener | Acquisition processing and reporting physical exercise data |
US20130165825A1 (en) * | 2010-02-12 | 2013-06-27 | Luis Enrique Sucar-Succar | Portable handle for upper limb rehabilitation |
US9360959B2 (en) * | 2010-10-12 | 2016-06-07 | Tactonic Technologies, Llc | Fusing depth and pressure imaging to provide object identification for multi-touch surfaces |
JP5925055B2 (ja) * | 2012-05-31 | 2016-05-25 | 株式会社Pfu | 情報処理装置、周辺装置制御システム、プログラムおよび周辺装置の制御方法 |
TWI484439B (zh) * | 2012-12-17 | 2015-05-11 | Preventive Medical Health Care Co Ltd | 復健回饋整合系統及其方法 |
US10430985B2 (en) * | 2014-03-14 | 2019-10-01 | Magic Leap, Inc. | Augmented reality systems and methods utilizing reflections |
WO2015142781A1 (en) * | 2014-03-21 | 2015-09-24 | Rmg, Inc. | Mobile based exercise and rehabilitation |
JP6540169B2 (ja) | 2015-04-03 | 2019-07-10 | 日本電気株式会社 | 分析システム、リハビリテーション支援システム、方法およびプログラム |
US20170188864A1 (en) * | 2016-01-06 | 2017-07-06 | Healmet, Inc. | Spherical handheld biosensor array device for physiological status monitoring |
CN118605029A (zh) * | 2016-01-19 | 2024-09-06 | 奇跃公司 | 利用映像的增强现实系统和方法 |
US20190147721A1 (en) * | 2016-03-30 | 2019-05-16 | Live Care Corp. | Personal emergency response system and method for improved signal initiation, transmission, notification/annunciation, and level of performance |
WO2018152322A1 (en) * | 2017-02-16 | 2018-08-23 | The Johns Hopkins University | System for hand rehabilitation |
US10070805B1 (en) * | 2017-03-13 | 2018-09-11 | General Electric Company | Patient monitoring system and method having location-specific contextual alarming |
-
2018
- 2018-10-09 JP JP2018191175A patent/JP7010798B2/ja active Active
- 2018-10-09 US US16/620,710 patent/US11648168B2/en active Active
- 2018-10-09 CN CN201880038885.0A patent/CN111226289B/zh active Active
- 2018-10-09 WO PCT/JP2018/037544 patent/WO2019082635A1/ja active Application Filing
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106233283A (zh) * | 2014-04-15 | 2016-12-14 | 奥林巴斯株式会社 | 图像处理装置、通信系统以及通信方法和摄像装置 |
US20170000386A1 (en) * | 2015-07-01 | 2017-01-05 | BaziFIT, Inc. | Method and system for monitoring and analyzing position, motion, and equilibrium of body parts |
CN107230229A (zh) * | 2016-03-25 | 2017-10-03 | 奥林巴斯株式会社 | 图像处理装置、图像处理方法和记录介质 |
Also Published As
Publication number | Publication date |
---|---|
JP7010798B2 (ja) | 2022-01-26 |
JP2019083519A (ja) | 2019-05-30 |
US20210137762A1 (en) | 2021-05-13 |
US11648168B2 (en) | 2023-05-16 |
WO2019082635A1 (ja) | 2019-05-02 |
CN111226289B (zh) | 2023-09-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111226289B (zh) | 动态图像记录系统 | |
JP5762892B2 (ja) | 情報表示システム、情報表示方法、及び情報表示用プログラム | |
US10241565B2 (en) | Apparatus, system, and method of controlling display, and recording medium | |
JP6842044B2 (ja) | 情報処理装置、情報処理方法、プログラム | |
TW201909058A (zh) | 活動支援方法、程式及活動支援系統 | |
JP2019058285A (ja) | 活動支援方法、プログラム、及び活動支援システム | |
JP2017080197A (ja) | 情報処理装置、情報処理方法、プログラム | |
CN106650217B (zh) | 信息处理装置以及信息处理方法 | |
JP5917999B2 (ja) | 情報提供システム、情報提供方法、および電子機器 | |
CN109238266A (zh) | 基于ar技术的仓储物管取存引导装置及显示方法 | |
JP6631594B2 (ja) | 情報処理装置、情報処理装置の制御方法、プログラム | |
WO2022176450A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
CN115904188A (zh) | 户型图的编辑方法、装置、电子设备及存储介质 | |
JP2011199800A (ja) | 情報提供装置、携帯端末、情報提供システム、情報提供方法、及び情報提供プログラム | |
JP2010176588A (ja) | 端末装置、画像処理方法及びプログラム | |
JP5796596B2 (ja) | 支援方法、支援システム、制御装置、画像形成装置、および支援プログラム | |
JP2017080203A (ja) | 情報処理装置、情報処理方法、プログラム | |
JP2017080198A (ja) | 情報処理装置、情報処理方法、プログラム | |
JP2015018485A (ja) | 電子制御装置、制御方法、及び制御プログラム | |
CN114979616A (zh) | 显示方法、信息处理装置以及记录介质 | |
JP2017085427A (ja) | 情報処理装置、情報処理方法、プログラム | |
JP2012065049A (ja) | 画像処理装置及び画像処理方法 | |
JP2017225722A (ja) | 情報処理装置、プログラム、画像表示システム | |
JP6320671B2 (ja) | 電子機器、制御方法およびプログラム | |
WO2022215313A1 (ja) | 情報処理方法、情報処理装置およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |