TWI603303B - 運用懷舊體驗之認知偵測及情緒抒發系統 - Google Patents
運用懷舊體驗之認知偵測及情緒抒發系統 Download PDFInfo
- Publication number
- TWI603303B TWI603303B TW105123900A TW105123900A TWI603303B TW I603303 B TWI603303 B TW I603303B TW 105123900 A TW105123900 A TW 105123900A TW 105123900 A TW105123900 A TW 105123900A TW I603303 B TWI603303 B TW I603303B
- Authority
- TW
- Taiwan
- Prior art keywords
- module
- player
- sub
- cognitive
- nostalgic
- Prior art date
Links
- 238000001514 detection method Methods 0.000 title claims description 68
- 230000001149 cognitive effect Effects 0.000 title claims description 57
- 230000002996 emotional effect Effects 0.000 title claims description 52
- 230000003920 cognitive function Effects 0.000 claims description 100
- 230000003238 somatosensory effect Effects 0.000 claims description 36
- 230000004044 response Effects 0.000 claims description 33
- 230000006872 improvement Effects 0.000 claims description 30
- 238000010219 correlation analysis Methods 0.000 claims description 29
- 230000008451 emotion Effects 0.000 claims description 29
- 230000009172 bursting Effects 0.000 claims description 28
- 238000006243 chemical reaction Methods 0.000 claims description 24
- 238000012545 processing Methods 0.000 claims description 19
- 230000009471 action Effects 0.000 claims description 18
- 239000000463 material Substances 0.000 claims description 18
- 238000013500 data storage Methods 0.000 claims description 16
- 230000033001 locomotion Effects 0.000 claims description 15
- 230000003930 cognitive ability Effects 0.000 claims description 14
- 230000000638 stimulation Effects 0.000 claims description 11
- 238000012360 testing method Methods 0.000 claims description 11
- 238000011156 evaluation Methods 0.000 claims description 10
- 238000013461 design Methods 0.000 claims description 9
- 230000035484 reaction time Effects 0.000 claims description 6
- 230000003931 cognitive performance Effects 0.000 claims description 4
- 230000036651 mood Effects 0.000 claims description 4
- 230000000295 complement effect Effects 0.000 claims description 3
- 239000004065 semiconductor Substances 0.000 claims description 3
- 238000010276 construction Methods 0.000 claims description 2
- 239000002184 metal Substances 0.000 claims description 2
- 206010012289 Dementia Diseases 0.000 description 20
- 208000024891 symptom Diseases 0.000 description 9
- 230000000694 effects Effects 0.000 description 7
- 208000010877 cognitive disease Diseases 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 238000000034 method Methods 0.000 description 6
- 230000008859 change Effects 0.000 description 5
- 230000002452 interceptive effect Effects 0.000 description 5
- 208000027061 mild cognitive impairment Diseases 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 230000003340 mental effect Effects 0.000 description 4
- 238000004088 simulation Methods 0.000 description 4
- 239000012634 fragment Substances 0.000 description 3
- 208000036574 Behavioural and psychiatric symptoms of dementia Diseases 0.000 description 2
- 230000003542 behavioural effect Effects 0.000 description 2
- 230000001934 delay Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- 230000006996 mental state Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000000750 progressive effect Effects 0.000 description 2
- 208000020016 psychiatric disease Diseases 0.000 description 2
- 238000012827 research and development Methods 0.000 description 2
- 230000004043 responsiveness Effects 0.000 description 2
- 238000007619 statistical method Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 208000028698 Cognitive impairment Diseases 0.000 description 1
- 206010012218 Delirium Diseases 0.000 description 1
- 241000282414 Homo sapiens Species 0.000 description 1
- 208000019022 Mood disease Diseases 0.000 description 1
- 206010029216 Nervousness Diseases 0.000 description 1
- 206010037180 Psychiatric symptoms Diseases 0.000 description 1
- 230000032683 aging Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000019771 cognition Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 230000001627 detrimental effect Effects 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000002427 irreversible effect Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 230000002035 prolonged effect Effects 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 238000005728 strengthening Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Landscapes
- User Interface Of Digital Computer (AREA)
Description
本發明係有關於一種運用懷舊體驗之認知偵測及情緒抒發系統，尤指一種利用簡便操作之體感裝置，進行懷舊遊戲，以於遊戲中瞭解該遊戲者失智狀況及改善其憂鬱情緒及延緩失智症狀之系統。
按，由於醫療進步及生活水準提高，人類平均壽命延長，因此，人口朝高齡化發展已為世界性趨勢，國家發展委員會統計1960年到2060年，各國老年人口比例逐年上升，另患有老年人心智障礙的比例也逐漸增加，常見的老年人心智障礙包括失智症(Dementia)、憂鬱症(Depression)及譫妄症(Delirium)等，這些疾病導致老年人身心功能迅速衰退。
尤其失智症在老年期更為常見，其特徵為在老年期發生漸進性的智能退化，這種漸進性的智能喪失，足以妨害病患的社會及職業功能，並危及日常生活自我照顧能力。根據研究，失智症患者中有70%以上合併行為與心理症狀〔Behavioral and Psychological Symptoms of Dementia，BPSD〕，這種並存現象易導致惡化失智症狀，BPSD症狀表現通常是多樣性，例如情緒障礙方面憂鬱症盛
行率約50%，但憂鬱症狀與失智症狀不易鑑別，因此，容易被忽視延遲治療，甚至造成不可逆性失能或死亡，因此，失智症早期檢測係極重要預防關鍵。
現於歐美國家，懷舊治療係被應用於老年人失智症之檢測與治療，我國也有相關懷舊治療研發，如：我國公開第200945221號之「記憶喚醒方法及其系統」及我國公告第M464785號之「懷舊互動裝置」等，該我國公開第200945221號之「記憶喚醒方法及其系統」係主要包含用戶該遊戲者資料、相關舊時資料及記憶模擬資料等，其係由相關舊時資料組成記憶模擬資料，並將相關舊時資料對應於該用戶該遊戲者資料，又將用戶該遊戲者資料、相關舊時資料及記憶模擬資料儲存於一資料庫，以連結至一遠端資料讀取裝置，以便傳輸該記憶模擬資料，建立患者療程查詢及歷程追蹤等；然，該公開第200945221號之「記憶喚醒方法及其系統」僅單純回憶舊時資料，缺乏有效認知評估基礎，且其係透過電腦或手機等介面操作進行測試，一般老年人對電腦或手機等介面操作並不熟悉，以致造成實施上不方便性。另我國公告第M464785號之「懷舊互動裝置」主要於驅動裝置上組設有速度感應器，以感測驅動裝置作動速度，並於其處理單元內載有多媒體互動程式，而於該多媒體互動程式內設複數個速度範圍值，當該遊戲者連結該驅動裝置作動時，該速度感應器係會將感測到速度值傳送至處理單元，以由處理單元內載之多媒體互動程式依設定之各速度範圍值連結顯示單元播放資料儲存單元內儲存之對應年代懷舊資料；然，該公告第M464785號之「懷舊互動裝置」僅單純為聲音及影片之舊時資料播放，缺乏無遊戲互動性，也難以於遊戲中進行認知行為等檢測評估。
緣是，本發明人有鑑於我國現有採用懷舊方式進行失智症檢測與治療之專利前案，於實施使用上都有其缺失處，乃藉其多年於相關領域的製造及設計經驗和知識的輔佐，並經多方巧思，研創出本發明。
本發明係有關於一種運用懷舊體驗之認知偵測及情緒抒發系統，其主要目的係為了提供一種利用簡便操作之體感裝置，進行懷舊遊戲，以於遊戲中瞭解該遊戲者失智狀況及改善其憂鬱情緒及延緩失智症狀之系統。
為了達到上述實施目的，本發明人乃研擬如下運用懷舊體驗之認知偵測及情緒抒發系統，係主要設有一體感裝置及一主控裝置，並使該體感裝置及主控裝置以有線或無線訊號連結，又使該主控裝置建置有一處理單元、一資料儲存單元及一影音播放單元，並使該資料儲存單元及影音播放單元與其處理單元相耦接，另於該資料儲存單元內儲存有一體感偵測及身分辨識模組、一個人化懷舊環境及關卡模組、一遊戲關卡成績模組與一認知功能及情緒改善分析模組，以由該主控裝置之處理單元驅使該體感裝置、資料儲存單元、影音播放單元與該體感偵測及身分辨識模組、個人化懷舊環境及關卡模組、遊戲關卡成績模組和認知功能及情緒改善分析模組連結作動。
如上所述之運用懷舊體驗之認知偵測及情緒抒發系統，其中，該體感偵測及身分辨識模組係進一步包含有一遊戲者姿態與手勢偵測子模組、一遊戲者位置與虛擬空間對應子模組、一遊戲者身分建立子模組及一遊戲者身分辨識子模組，又該遊戲者姿態與手勢偵測子模組係利用該體感裝置擷取一遊戲者身體姿態後，偵測該遊戲者其姿態動作反應參數，另該遊戲者位置與虛擬空間對應子模組係運算該遊戲者在該個人化懷舊環境及關卡模組建構之一虛擬3D懷舊空間中相對位置，又該遊戲者身分建立子模組係將該體感裝置傳送之該遊
戲者照片擷取其臉孔部位，並輸入該遊戲者姓名，以建立該遊戲者身分檔案，另該遊戲者身分辨識子模組係將該體感裝置傳送之該遊戲者影像與該遊戲者身分檔案內之該遊戲者臉孔照片，透過一顏面辨識程式運算比對，以辨識出該遊戲者身分。
如上所述之運用懷舊體驗之認知偵測及情緒抒發系統，其中，該遊戲者之姿態動作反應參數係包含該遊戲者身體姿態、動作速度、反應時間及手部角度之座標變化。
如上所述之運用懷舊體驗之認知偵測及情緒抒發系統，其中，該個人化懷舊環境及關卡模組係進一步包含有一遊戲者歷史及生活素材資料子模組、一個人化懷舊場景子模組、一認知功能偵測關卡子模組及一情緒刺激子模組，又該遊戲者歷史及生活素材資料子模組係提供與該遊戲者身分相對應之該遊戲者歷史及生活素材之懷舊資料之存取，另該個人化懷舊場景子模組係建構出與該遊戲者其家中擺設或其熟悉環境景象之虛擬懷舊場景，又該認知功能偵測關卡子模組係提供依據一認知功能評估問卷主題設計之複數遊戲關卡的存取，另該情緒刺激子模組係提供一融入該遊戲關卡，以刺激該遊戲者情緒之影音資料的存取。
如上所述之運用懷舊體驗之認知偵測及情緒抒發系統，其中，該遊戲關卡係依據該認知功能評估問卷主題設計出包含食、衣、住、行、樂及節日之主題。
如上所述之運用懷舊體驗之認知偵測及情緒抒發系統，其中，該懷舊資料型式係包含文字、聲音、照片及影片。
如上所述之運用懷舊體驗之認知偵測及情緒抒發系統，其中，該遊戲關卡成績模組係進一步包含有一遊戲反應參數紀錄子模組及一關卡成績紀錄子模組，又該遊戲反應參數紀錄子模組係於該遊戲者進行該遊戲關卡時，將
該遊戲者姿態與手勢偵測子模組偵測到之該遊戲者姿態動作反應參數進行紀錄，另該關卡成績紀錄子模組則係將該關卡成績紀錄子模組內載之標準姿態動作反應參數與該遊戲者進行遊戲關卡時之姿態動作反應參數相比對，以運算出該遊戲者答題時間及答題正確率。
如上所述之運用懷舊體驗之認知偵測及情緒抒發系統，其中，該認知功能及情緒改善分析模組係進一步包含有一智能認知評估問卷子模組、一遊戲關卡與認知功能相關性分析子模組、一反應參數與認知功能相關性分析子模組、一認知功能分析子模組、一認知功能歷程追蹤子模組、一情緒量表子模組及一情緒改善分析與關卡改善子模組，又該智能認知評估問卷子模組係主要提供一認知功能評估問卷資料之存取，以及運算該遊戲者答覆該問卷之結果分數，另該遊戲關卡與認知功能相關性分析子模組係將該關卡成績紀錄子模組紀錄之該遊戲者成績分數與該認知功能評估問卷之結果分數進行統計分析，以分析出該遊戲者於各關卡的闖關表現與認知力的相關性，又該反應參數與認知功能相關性分析子模組係將該遊戲反應參數紀錄子模組紀錄之該遊戲者於各關卡的姿態動作反應參數與該認知功能評估問卷之結果分數進行統計分析，以分析出該遊戲者其姿態動作反應參數與認知力的相關性，另該認知功能分析子模組係將該遊戲關卡與認知功能相關性分析子模組及反應參數與認知功能相關性分析子模組之分析結果進行統計分析，以分析出該遊戲者的認知力，又該認知功能歷程追蹤子模組係將該遊戲關卡與認知功能相關性分析子模組、反應參數與認知功能相關性分析子模組及認知功能分析子模組其每次分析結果資料建檔儲存，以建立該遊戲者認知功能歷史資料，另該情緒量表子模組係提供一情緒量表問卷資料之存取，及運算該遊戲者答覆該問卷之結果，復該情緒改善分析與關卡改善子模組係將該情緒量表問卷結果與該遊戲者於各遊戲關卡的認知力成
績進行比對，以篩檢出對該遊戲者有幫助遊戲關卡，並修正不具意義的遊戲關卡。
如上所述之運用懷舊體驗之認知偵測及情緒抒發系統，其中，該認知功能評估問卷係為蒙特利爾認知評估〔MoCA〕問卷或簡易智能量表〔MMSE〕問卷。
如上所述之運用懷舊體驗之認知偵測及情緒抒發系統，其中，該體感裝置係建置有一攝影單元、一動作感應單元、一收音單元及一運算單元，該攝影單元係為彩色攝影鏡頭、該動作感應單元係為互補性氧化金屬半導體攝影鏡頭及紅外線發射器之組合，又該收音單元係為陣列麥克風，另該運算單元係為單晶片。
藉此，當使用實施時，係利用體感裝置擷取該遊戲者的身體姿態及手勢動作，以進行本發明之操作使用，依此，以便利老年人之遊戲者使用，提高本操作便利性，另藉由布置該遊戲者熟悉懷舊場景及複數遊戲關卡設計，以供遊戲者回憶過去生活的片段、活動、事件與經驗，以在遊戲的過程中，輕鬆進行認知能力測試，並以蒙特利爾認知評估〔MoCA〕問卷作為評估其認知能力基準，以有效提高本發明測驗該遊戲者失智症的準確性，據此，俾達到改善該遊戲者憂鬱情緒及延緩失智症狀效果，並在遊戲過程中瞭解該遊戲者失智情況者。
(1)‧‧‧體感裝置
(11)‧‧‧攝影單元
(12)‧‧‧動作感應單元
(13)‧‧‧收音單元
(14)‧‧‧運算單元
(2)‧‧‧主控裝置
(21)‧‧‧處理單元
(22)‧‧‧資料儲存單元
(23)‧‧‧影音播放單元
(231)‧‧‧投影機
(232)‧‧‧投影螢幕
(24)‧‧‧體感偵測及身分辨識模組
(241)‧‧‧遊戲者姿態與手勢偵測子模組
(242)‧‧‧遊戲者位置與虛擬空間對應子模組
(243)‧‧‧遊戲者身分建立子模組
(244)‧‧‧遊戲者身分辨識子模組
(25)‧‧‧個人化懷舊環境及關卡模組
(251)‧‧‧遊戲者歷史及生活素材資料子模組
(252)‧‧‧個人化懷舊場景子模組
(253)‧‧‧認知功能偵測關卡子模組
(254)‧‧‧情緒刺激子模組
(26)‧‧‧遊戲關卡成績模組
(261)‧‧‧遊戲反應參數紀錄子模組
(262)‧‧‧關卡成績紀錄子模組
(27)‧‧‧認知功能及情緒改善分析模組
(271)‧‧‧智能認知評估問卷子模組
(272)‧‧‧遊戲關卡與認知功能相關性分析子模組
(273)‧‧‧反應參數與認知功能相關性分析子模組
(274)‧‧‧認知功能分析子模組
(275)‧‧‧認知功能歷程追蹤子模組
(276)‧‧‧情緒量表子模組
(277)‧‧‧情緒改善分析與關卡改善子模組
第一圖：本發明之立體圖
第二圖：本發明之架構圖
第三圖：本發明之流程圖
第四圖：本發明之遊戲者在主題「食」的遊戲表現散佈圖
第五圖：本發明之遊戲者在主題「衣」的遊戲表現散佈圖
第六圖：本發明之遊戲者在主題「住」的遊戲表現散佈圖
第七圖：本發明之遊戲者在主題「行」的遊戲表現散佈圖
第八圖：本發明之遊戲者在主題「節日」的遊戲表現散佈圖
而為令本發明之技術手段及其所能達成之效果，能夠有更完整且清楚的揭露，茲詳細說明如下，請一併參閱揭露之圖式及圖號：首先，請參閱第一、二圖所示，為本發明之運用懷舊體驗之認知偵測及情緒抒發系統，係主要設有一體感裝置(1)，該體感裝置(1)可為kinect，係於該體感裝置(1)建置有一攝影單元(11)、一動作感應單元(12)、一收音單元(13)及一運算單元(14)，該攝影單元(11)係為彩色攝影鏡頭、該動作感應單元(12)係為互補性氧化金屬半導體〔Complementary Metal-Oxide Semiconductor，CMOS〕攝影鏡頭及紅外線發射器之組合，該收音單元(13)係為陣列麥克風，該運算單元(14)係為單晶片等，並使該攝影單元(11)、動作感應單元(12)及收音單元(13)與該運算單元(14)相耦接，乃由該體感裝置(1)自動擷取該遊戲者的影像、身體姿態及手勢等動作；又設有一主控裝置(2)，該主控裝置(2)可為桌上型電腦、筆記型電腦、平板電腦或智慧型手機等，係於該主控裝置(2)建置有一處理單元(21)、一資料儲存單元(22)及一影音播放單元(23)，該處理單元(21)係為微處理器，該資料儲存單元(22)可為硬碟或記憶體，該影音播放單元(23)係為觸控螢幕或顯示螢幕及喇叭之組合，或為投影機(231)、投影螢幕(232)及喇叭之組合，並使該資料儲存單元(22)及影音播放單元(23)與該處理單元(21)相耦接，又使該主控裝置
(2)與該體感裝置(1)以有線或無線訊號連結，另於該資料儲存單元(22)內儲存有一體感偵測及身分辨識模組(24)、一個人化懷舊環境及關卡模組(25)、一遊戲關卡成績模組(26)及一認知功能及情緒改善分析模組(27)等程式模組，並由該處理單元(21)驅使該體感裝置(1)、資料儲存單元(22)、影音播放單元(23)與該體感偵測及身分辨識模組(24)、個人化懷舊環境及關卡模組(25)、遊戲關卡成績模組(26)和認知功能及情緒改善分析模組(27)連結作動；其中：該體感偵測及身分辨識模組(24)，係包含有一遊戲者姿態與手勢偵測子模組(241)、一遊戲者位置與虛擬空間對應子模組(242)、一遊戲者身分建立子模組(243)及一遊戲者身分辨識子模組(244)，該遊戲者姿態與手勢偵測子模組(241)係以該體感裝置(1)擷取之該遊戲者身體姿態等，以偵測該遊戲者進行遊戲時其姿態動作反應參數，該姿態動作反應參數係包含該遊戲者身體姿態、動作速度、反應時間及手部角度之座標變化等，又該遊戲者位置與虛擬空間對應子模組(242)係運算該遊戲者在該個人化懷舊環境及關卡模組(25)建構之虛擬3D懷舊空間中之相對位置，該遊戲者身分建立子模組(243)係將該體感裝置(1)傳送之該遊戲者照片擷取其臉孔部位，並輸入該遊戲者姓名，以建立該遊戲者身分檔案，該遊戲者身分辨識子模組(244)係將該體感裝置(1)傳送之該遊戲者影像與該遊戲者身分檔案內之該遊戲者臉孔照片，透過顏面辨識程式運算比對，以辨識出該遊戲者身分；該個人化懷舊環境及關卡模組(25)，係包含有一遊戲者歷史及生活素材資料子模組(251)、一個人化懷舊場景子模組(252)、一認知功能偵測關卡子模組(253)及一情緒刺激子模組(254)，該遊戲者歷史及生活素材資料子模組(251)係提供與該遊戲者身分相對應之該遊
戲者歷史及生活素材之懷舊資料之存取，該懷舊資料型式係為文字、聲音、照片及影片等，該懷舊資料涵蓋範圍包含食、衣、住、行、樂及節日等，如：該遊戲者喜好食物、衣著、交通工具、住家物品及喜歡參與節日等資料等，又該個人化懷舊場景子模組(252)係建構出與該遊戲者家中擺設或其熟悉環境景象之虛擬懷舊場景，另該認知功能偵測關卡子模組(253)係提供依據認知功能評估問卷主題設計之遊戲關卡的存取，該認知功能評估問卷係可為蒙特利爾認知評估〔Montreal Cognitive Assessment，MoCA〕問卷，或簡易智能量表(Mini-mental state examination，MMSE)問卷等，本發明係之遊戲關卡設計係以蒙特利爾認知評估〔MoCA〕問卷為依據，該蒙特利爾認知評估問卷〔MoCA〕題目，係畫分為記憶、專注、語言、抽象概念、延遲記憶、定向、視覺空間/執行及命名等八大項，而依據該八大項認知，本發明係規畫出食、衣、住、行、樂及節日等六大主題之遊戲關卡，以偵測該遊戲者認知功能，該情緒刺激子模組(254)係提供融入遊戲關卡，可供刺激該遊戲者情緒之懷舊文字、照片、影像及音效等資料之存取；該遊戲關卡成績模組(26)，係包含一遊戲反應參數紀錄子模組(261)及一關卡成績紀錄子模組(262)，該遊戲反應參數紀錄子模組(261)係將該遊戲者進行遊戲關卡時，將該遊戲者姿態與手勢偵測子模組(241)偵測到之該遊戲者姿態動作反應參數，包含該遊戲者身體姿態、動作速度、反應時間及手部角度之座標變化等進行紀錄，該關卡成績紀錄子模組(262)則係將該關卡成績紀錄子模組(262)內載之標準姿態動作反應參數與該遊戲者進行遊戲關卡時之姿態動作反應參數相比對，以運算出該遊戲者答題時間及答題正確率；該認知功能及情緒改善分析模組(27)，係包含有一智能認知評估問卷子模組(271)、一遊戲關卡與認知功能相關性分析子模組(27
2)、一反應參數與認知功能相關性分析子模組(273)、一認知功能分析子模組(274)、一認知功能歷程追蹤子模組(275)、一情緒量表子模組(276)及一情緒改善分析與關卡改善子模組(277)，該智能認知評估問卷子模組(271)係提供認知功能評估問卷資料之存取，以及運算該遊戲者答覆該問卷之結果分數，又該遊戲關卡與認知功能相關性分析子模組(272)係將該關卡成績紀錄子模組(262)紀錄之該遊戲者成績分數與該認知功能評估問卷之結果分數進行統計分析，以分析出該遊戲者於各關卡的闖關表現與認知力的相關性，該反應參數與認知功能相關性分析子模組(273)係將該遊戲反應參數紀錄子模組(261)紀錄之該遊戲者於各關卡的姿態動作反應參數與該認知功能評估問卷之結果分數進行統計分析，以分析出該遊戲者其姿態動作反應參數與認知力的相關性，該認知功能分析子模組(274)係將該遊戲關卡與認知功能相關性分析子模組(272)及反應參數與認知功能相關性分析子模組(273)之分析結果進行統計分析，以分析出該遊戲者的認知力，另該認知功能歷程追蹤子模組(275)係將該遊戲關卡與認知功能相關性分析子模組(272)、反應參數與認知功能相關性分析子模組(273)及認知功能分析子模組(274)其每次分析結果資料建檔儲存，以建立該遊戲者認知功能歷史資料，復該情緒量表子模組(276)係提供情緒量表問卷資料之存取，及運算該遊戲者答覆該問卷之結果，又該情緒改善分析與關卡改善子模組(277)係將該情緒量表問卷結果與該遊戲者於各遊戲關卡的認知力成績進行比對，以篩檢出對該遊戲者有幫助遊戲關卡，並修正不具意義的遊戲關卡。
據此，當本發明之運用懷舊體驗之認知偵測及情緒抒發系統於使用實施時，請一併參閱第三圖所示，係先進行該遊戲者資料登錄，乃使該遊戲者位於該體感裝置(1)相對位置，以由該體感裝置(1)擷取該遊戲者影像、
身體姿態及手勢動作等，再將其擷取的影像等資訊傳送至主控裝置(2)，繼驅使該遊戲者身分建立子模組(243)將該體感裝置(1)傳送而來之該遊戲者影像擷取其臉孔部位照片，並配合該遊戲者姓名之輸入，以建立該遊戲者身分檔案，續將與該遊戲者相關歷史及生活素材之懷舊資料儲存於該遊戲者歷史及生活素材資料子模組(251)中，並利用個人化懷舊場景子模組(252)建構出與該遊戲者家中擺設或其熟悉環境景象之虛擬懷舊場景，且將藉由該遊戲者其歷史及生活素材之懷舊資料設計之食、衣、住、行、樂及節日等六大主題之遊戲關卡儲存於該認知功能偵測關卡子模組(253)中，另將可刺激該遊戲者情緒之懷舊文字、照片、影像及音效等資料儲存於情緒刺激子模組(254)中，以配合遊戲關卡播放。
於此，當該遊戲者進行懷舊體驗及認知功能偵測時，係使該遊戲者與該體感裝置(1)相對，以由該體感裝置(1)擷取該遊戲者影像、身體姿態及手勢動作等，並傳送至主控裝置(2)，以由主控裝置(2)之處理單元(21)驅使該遊戲者身分辨識子模組(244)利用其顏面辨識程式，將該遊戲者影像與該遊戲者身分檔案內之該遊戲者照片相比對，以辨識出該遊戲者身分，並自動連結個人化懷舊場景子模組(252)，以播放該遊戲者其家中擺設或其熟悉環境景象之虛擬懷舊場景，隨之該虛擬懷舊場景係會透過與該主控裝置(2)之影音播放單元(23)其投影機(231)投射到投影螢幕(232)上，續由該遊戲者位置與虛擬空間對應子模組(242)將該體感裝置(1)擷取之該遊戲者影像融入該虛擬懷舊場景中。
繼之，主控裝置(2)之處理單元(21)係連結認知功能偵測關卡子模組(253)及情緒刺激子模組(254)播放其內儲存之認知功能測試遊戲關卡與情緒刺激影音等，以投射至該影音播放單元(23)之投影螢幕(232)上，此時，該遊戲者即可依照遊戲關卡之題目設計，回憶起其過
往生活經歷中熟悉之食物、相片、居住環境、老歌等過去生活的片段、活動、事件與經驗，以達到懷舊治療、延緩失智症狀及改善憂鬱情緒等效果，同時也可在遊戲過程中，瞭解該遊戲者失智情況，當該遊戲者以其身體姿態及手勢動作，對投影螢幕(232)上播放關卡題目進行答案之選取時，該體感裝置(1)係同步將擷取到的該遊戲者身體姿態及手勢動作傳送至主控裝置(2)，以由處理單元(21)連結其該遊戲者姿態與手勢偵測子模組(241)由該遊戲者之姿態與手勢動作運算出包含該遊戲者身體姿態、動作速度、反應時間及手部角度之座標變化等姿態動作反應參數，並由遊戲關卡成績模組(26)之遊戲反應參數紀錄子模組(261)將擷取到之該遊戲者身體姿態、動作速度、反應時間及手部角度之座標變化等進行紀錄，並由該遊戲反應參數紀錄子模組(261)將該遊戲者姿態與手勢偵測子模組(241)偵測到之姿態動作反應參數予以紀錄，當完成全部遊戲關卡測試後，該關卡成績紀錄子模組(262)係會將該遊戲者參與各遊戲關卡之姿態動作反應參數與標準姿態動作反應進行參數比對，以運算出該遊戲者答題時間及答題正確率等。
續之，由主控裝置(2)之處理單元(21)驅使該認知功能及情緒改善分析模組(27)之智能認知評估問卷子模組(271)顯示其儲存之蒙特利爾認知評估〔MoCA〕問卷，並投射於投影螢幕(232)上，同樣由體感裝置(1)擷取該遊戲者的身體姿態與手勢動作，以進行問卷答覆，當該遊戲者完成蒙特利爾認知評估問卷答覆後，隨即由該遊戲關卡與認知功能相關性分析子模組(272)將該蒙特利爾認知評估問卷結果分數與該關卡成績紀錄子模組(262)紀錄之該遊戲者成績與進行統計分析，以分析出該遊戲者闖關表現與認知力相關性，另由該反應參數與認知功能相關性分析子模組(273)將該遊戲反應參數紀錄子模組(261)紀錄之該遊戲者於各遊戲關卡之姿態動作反應參數與該蒙特利爾認知評估問卷結果分數進行統計分析，以獲
得該遊戲者姿態動作反應參數與認知力的相關性，而後由該認知功能分析子模組(274)將該遊戲關卡與認知功能相關性分析子模組(272)及反應參數與認知功能相關性分析子模組(273)之分析結果統計運算，以分析出該遊戲者認知力，另該認知功能歷程追蹤子模組(275)係會將該遊戲關卡與認知功能相關性分析子模組(272)、反應參數與認知功能相關性分析子模組(273)及認知功能分析子模組(274)每次分析結果資料自動建檔儲存，以建立該遊戲者認知功能歷史資料，復由主控裝置(2)之處理單元(21)驅使情緒量表子模組(276)顯示其儲存之情緒量表問卷，以投射於該投影螢幕(232)上，以供該遊戲者透過體感裝置(1)進行問卷答覆，並由情緒改善分析與關卡改善子模組(277)將該情緒量表問卷結果與該遊戲者於各遊戲關卡的認知力成績進行比對，以篩檢出對該遊戲者有幫助關卡，並修正不具意義的關卡，以達有效改善該遊戲者情緒目的。
另本發明係進行實際測試，找了五名年齡區間在64到81歲女性遊戲者，其基本資料如表一所示，在蒙特利爾認知評估問卷〔MoCA〕的分數計算上滿分為30分，認知功能程度正常為26分以上到30分，26分以下為有失智傾向，從表一之蒙特利爾認知評估問卷〔MoCA〕分數結果可看出，個案1失智程度已達中重程度，個案3和4失智程度為輕度認知障礙〔Mild Cognitive Impairment，MCI〕，個案2和5則為正常。
又本發明將該遊戲者在各個遊戲表現的完成度整理如下表二所示，依其教育程度，個案1完成遊戲的表現與其他該遊戲者有很大的落差，主題「衣」和「住」經過協助人員的解說，有完成一些部分，另個案2和5其大部分有完成遊戲，但個案5在主題「衣」和「行」的理解上有些不同，因此完成度有差異，個案3和4為輕度認知障礙，其中，個案4的情況較為良好有可能影響因子為此該遊戲者的教育程度，減緩其失智情況。
又本發明係將該遊戲者在各個遊戲表現的完成度利用散佈圖統整如圖四、五、六、七及八所示，該圖四為該遊戲者在主題「食」的遊戲表現，圖五為該遊戲者在主題「衣」遊戲的表現，圖六為該遊戲者在主題「住」的遊戲表現，圖七為該遊戲者在主題「行」的遊戲表現，圖八為該遊戲者在主題「節日」的遊戲表現，由各別主題遊戲看出該遊戲者失智程度情況，所有該遊戲者在各別主題中的表現都不盡相同，例如個案5雖沒失智情況，但可知其對於本發明題目的理解上有些許不一樣，也就是對於懷舊素材的通用性，應提供予該遊戲者所熟知的懷舊素材，而不是提供不屬於他們當代懷舊素材，個案4雖於蒙特利爾認知評估問卷〔MoCA〕測驗結果有輕度認知障礙，不過在本發明的完成度比另一位有輕度認知障礙的個案3來得好，但此該遊戲者本身教育程度為學士，教育程度或許為延遲失智程度的影響因素之一，另在主題「樂」的測驗為手繪形狀，可瞭解該遊戲者對視覺空間/執行的認知功能。本發明實施對象主要為輕
度認知障礙的老年人，利用體感裝置(1)之簡易操作，係可輔助懷舊治療分析及協助醫療人員定期追蹤老年人認知情況，另本發明也可建置在家中，以讓家人在旁陪伴老年人一起遊玩，可更緩和老年人緊張心情及降低其孤獨感，進而加強其自我認同與自信心，以獲得更佳懷舊治療分析效果。
前述之實施例或圖式並非限定本發明之運用懷舊體驗之認知偵測及情緒抒發系統實施態樣，凡所屬技術領域中具有通常知識者所為之適當變化或修飾，皆應視為不脫離本發明之運用懷舊體驗之認知偵測及情緒抒發系統專利範疇。
由上述結構及實施方式可知，本發明係具有如下優點：
1.本發明之運用懷舊體驗之認知偵測及情緒抒發系統係利用體感裝置擷取該遊戲者的身體姿態及手勢動作，以進行本發明系統使用，取代一般電腦之滑鼠及鍵盤使用介面，而降低本發明操作複雜度，以便利老年人之遊戲者使用。
2.本發明之運用懷舊體驗之認知偵測及情緒抒發系統係提供懷舊場景及音樂等與該遊戲者互動，以在遊戲的過程中，輕鬆進行認知能力測試，並以蒙特利爾認知評估〔MoCA〕問卷作為評估其認知能力基準，以有效提高本發明測驗該遊戲者失智症的準確性。
3.本發明之運用懷舊體驗之認知偵測及情緒抒發系統係布置該遊戲者熟悉懷舊場景，並藉由複數遊戲關卡，以供該遊戲者回憶過去生活的片段、活動、事件與經驗，據此，俾達到改善該遊戲者憂鬱情緒及延緩失智症狀效果，並在遊戲過程中瞭解該遊戲者失智情況者。
綜上所述，本發明之實施例確能達到所預期功效，又其所揭露之具體構造，不僅未曾見諸於同類產品中，亦未曾公開於申請前，誠已完全符合
專利法之規定與要求，爰依法提出發明專利之申請，懇請惠予審查，並賜准專利，則實感德便。
(1)‧‧‧體感裝置
(11)‧‧‧攝影單元
(12)‧‧‧動作感應單元
(13)‧‧‧收音單元
(14)‧‧‧運算單元
(2)‧‧‧主控裝置
(21)‧‧‧處理單元
(22)‧‧‧資料儲存單元
(23)‧‧‧影音播放單元
(231)‧‧‧投影機
(232)‧‧‧投影螢幕
(24)‧‧‧體感偵測及身分辨識模組
(241)‧‧‧遊戲者姿態與手勢偵測子模組
(242)‧‧‧遊戲者位置與虛擬空間對應子模組
(243)‧‧‧遊戲者身分建立子模組
(244)‧‧‧遊戲者身分辨識子模組
(25)‧‧‧個人化懷舊環境及關卡模組
(251)‧‧‧遊戲者歷史及生活素材資料子模組
(252)‧‧‧個人化懷舊場景子模組
(253)‧‧‧認知功能偵測關卡子模組
(254)‧‧‧情緒刺激子模組
(26)‧‧‧遊戲關卡成績模組
(261)‧‧‧遊戲反應參數紀錄子模組
(262)‧‧‧關卡成績紀錄子模組
(27)‧‧‧認知功能及情緒改善分析模組
(271)‧‧‧智能認知評估問卷子模組
(272)‧‧‧遊戲關卡與認知功能相關性分析子模組
(273)‧‧‧反應參數與認知功能相關性分析子模組
(274)‧‧‧認知功能分析子模組
(275)‧‧‧認知功能歷程追蹤子模組
(276)‧‧‧情緒量表子模組
(277)‧‧‧情緒改善分析與關卡改善子模組
Claims (10)
- 一種運用懷舊體驗之認知偵測及情緒抒發系統，係主要設有一體感裝置及一主控裝置，並使該體感裝置及主控裝置以有線或無線訊號連結，又使該主控裝置建置有一處理單元、一資料儲存單元及一影音播放單元，並使該資料儲存單元及影音播放單元與其處理單元相耦接，另於該資料儲存單元內儲存有一體感偵測及身分辨識模組、一個人化懷舊環境及關卡模組、一遊戲關卡成績模組與一認知功能及情緒改善分析模組，以由該主控裝置之處理單元驅使該體感裝置、資料儲存單元、影音播放單元與該體感偵測及身分辨識模組、個人化懷舊環境及關卡模組、遊戲關卡成績模組和認知功能及情緒改善分析模組連結作動；其中，該體感偵測及身分辨識模組係進一步包含有一遊戲者姿態與手勢偵測子模組、一遊戲者位置與虛擬空間對應子模組、一遊戲者身分建立子模組及一遊戲者身分辨識子模組；該個人化懷舊環境及關卡模組係進一步包含有一遊戲者歷史及生活素材資料子模組、一個人化懷舊場景子模組、一認知功能偵測關卡子模組及一情緒刺激子模組；該遊戲關卡成績模組係進一步包含有一遊戲反應參數紀錄子模組及一關卡成績紀錄子模組；該認知功能及情緒改善分析模組係進一步包含有一智能認知評估問卷子模組、一遊戲關卡與認知功能相關性分析子模組、一反應參數與認知功能相關性分析子模組、一認知功能分析子模組、一認知功能歷程追蹤子模組、一情緒量表子模組及一情緒改善分析與關卡改善子模組。
- 如申請專利範圍第1項所述運用懷舊體驗之認知偵測及情緒抒發系統，其中，該遊戲者姿態與手勢偵測子模組係利用該體感裝置擷取一遊戲者身體姿態後，偵測該遊戲者其姿態動作反應參數，另該遊戲者位 置與虛擬空間對應子模組係運算該遊戲者在該個人化懷舊環境及關卡模組建構之一虛擬3D懷舊空間中相對位置，又該遊戲者身分建立子模組係將該體感裝置傳送之該遊戲者照片擷取其臉孔部位，並輸入該遊戲者姓名，以建立該遊戲者身分檔案，另該遊戲者身分辨識子模組係將該體感裝置傳送之該遊戲者影像與該遊戲者身分檔案內之該遊戲者臉孔照片，透過一顏面辨識程式運算比對，以辨識出該遊戲者身分。
- 如申請專利範圍第2項所述運用懷舊體驗之認知偵測及情緒抒發系統，其中，該遊戲者之姿態動作反應參數係包含該遊戲者身體姿態、動作速度、反應時間及手部角度之座標變化。
- 如申請專利範圍第1項所述運用懷舊體驗之認知偵測及情緒抒發系統，其中，該遊戲者歷史及生活素材資料子模組係提供與該遊戲者身分相對應之該遊戲者歷史及生活素材之懷舊資料之存取，另該個人化懷舊場景子模組係建構出與該遊戲者其家中擺設或其熟悉環境景象之虛擬懷舊場景，又該認知功能偵測關卡子模組係提供依據一認知功能評估問卷主題設計之複數遊戲關卡的存取，另該情緒刺激子模組係提供一融入該遊戲關卡，以刺激該遊戲者情緒之影音資料的存取。
- 如申請專利範圍第4項所述運用懷舊體驗之認知偵測及情緒抒發系統，其中，該遊戲關卡係依據該認知功能評估問卷主題設計出包含食、衣、住、行、樂及節日之主題。
- 如申請專利範圍第4項所述運用懷舊體驗之認知偵測及情緒抒發系統，其中，該懷舊資料型式係包含文字、聲音、照片及影片。
- 如申請專利範圍第1項所述運用懷舊體驗之認知偵測及情緒抒發系統，其中，該遊戲反應參數紀錄子模組係於該遊戲者進行該遊戲關卡時，將該遊戲者姿態與手勢偵測子模組偵測到之該遊戲者姿態動作反應 參數進行紀錄，另該關卡成績紀錄子模組則係將該關卡成績紀錄子模組內載之標準姿態動作反應參數與該遊戲者進行遊戲關卡時之姿態動作反應參數相比對，以運算出該遊戲者答題時間及答題正確率。
- 如申請專利範圍第1項所述運用懷舊體驗之認知偵測及情緒抒發系統，其中，該智能認知評估問卷子模組係主要提供一認知功能評估問卷資料之存取，以及運算該遊戲者答覆該問卷之結果分數，另該遊戲關卡與認知功能相關性分析子模組係將該關卡成績紀錄子模組紀錄之該遊戲者成績分數與該認知功能評估問卷之結果分數進行統計分析，以分析出該遊戲者於各關卡的闖關表現與認知力的相關性，又該反應參數與認知功能相關性分析子模組係將該遊戲反應參數紀錄子模組紀錄之該遊戲者於各關卡的姿態動作反應參數與該認知功能評估問卷之結果分數進行統計分析，以分析出該遊戲者其姿態動作反應參數與認知力的相關性，另該認知功能分析子模組係將該遊戲關卡與認知功能相關性分析子模組及反應參數與認知功能相關性分析子模組之分析結果進行統計分析，以分析出該遊戲者的認知力，又該認知功能歷程追蹤子模組係將該遊戲關卡與認知功能相關性分析子模組、反應參數與認知功能相關性分析子模組及認知功能分析子模組其每次分析結果資料建檔儲存，以建立該遊戲者認知功能歷史資料，另該情緒量表子模組係提供一情緒量表問卷資料之存取，及運算該遊戲者答覆該問卷之結果，復該情緒改善分析與關卡改善子模組係將該情緒量表問卷結果與該遊戲者於各遊戲關卡的認知力成績進行比對，以篩檢出對該遊戲者有幫助遊戲關卡，並修正不具意義的遊戲關卡。
- 如申請專利範圍第8項所述運用懷舊體驗之認知偵測及情緒抒發系統，其中，該認知功能評估問卷係為蒙特利爾認知評估〔MoCA〕問卷或簡易智能量表〔MMSE〕問卷。
- 如申請專利範圍第1項所述運用懷舊體驗之認知偵測及情緒抒發系統，其中，該體感裝置係建置有一攝影單元、一動作感應單元、一收音單元及一運算單元，該攝影單元係為彩色攝影鏡頭、該動作感應單元係為互補性氧化金屬半導體攝影鏡頭及紅外線發射器之組合，又該收音單元係為陣列麥克風，另該運算單元係為單晶片。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| TW105123900A TWI603303B (zh) | 2016-07-28 | 2016-07-28 | 運用懷舊體驗之認知偵測及情緒抒發系統 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| TW105123900A TWI603303B (zh) | 2016-07-28 | 2016-07-28 | 運用懷舊體驗之認知偵測及情緒抒發系統 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| TWI603303B true TWI603303B (zh) | 2017-10-21 |
| TW201804448A TW201804448A (zh) | 2018-02-01 |
Family
ID=61011072
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| TW105123900A TWI603303B (zh) | 2016-07-28 | 2016-07-28 | 運用懷舊體驗之認知偵測及情緒抒發系統 |
Country Status (1)
| Country | Link |
|---|---|
| TW (1) | TWI603303B (zh) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| TWI791323B (zh) * | 2021-11-11 | 2023-02-01 | 朝陽科技大學 | 以人機互動遊戲預測簡易心智量表（ｍｍｓｅ）分數的方法及電腦程式產品 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| TW200906377A (en) * | 2007-08-10 | 2009-02-16 | Ind Tech Res Inst | Interactive rehabilitation method and system for upper and lower extremities |
| TW200919210A (en) * | 2007-07-18 | 2009-05-01 | Steven Kays | Adaptive electronic design |
| TWM464785U (zh) * | 2013-06-11 | 2013-11-01 | Univ Southern Taiwan Sci & Tec | 懷舊互動裝置 |
| US20150195426A1 (en) * | 2014-01-08 | 2015-07-09 | Adobe Systems Incorporated | Audio and Video Synchronizing Perceptual Model |
-
2016
- 2016-07-28 TW TW105123900A patent/TWI603303B/zh not_active IP Right Cessation
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| TW200919210A (en) * | 2007-07-18 | 2009-05-01 | Steven Kays | Adaptive electronic design |
| TW200906377A (en) * | 2007-08-10 | 2009-02-16 | Ind Tech Res Inst | Interactive rehabilitation method and system for upper and lower extremities |
| TWM464785U (zh) * | 2013-06-11 | 2013-11-01 | Univ Southern Taiwan Sci & Tec | 懷舊互動裝置 |
| US20150195426A1 (en) * | 2014-01-08 | 2015-07-09 | Adobe Systems Incorporated | Audio and Video Synchronizing Perceptual Model |
Also Published As
| Publication number | Publication date |
|---|---|
| TW201804448A (zh) | 2018-02-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Quiroz et al. | Emotion recognition using smart watch sensor data: Mixed-design study | |
| Bull | Posture & Gesture: Posture & Gesture | |
| Stoffregen et al. | The senses considered as one perceptual system | |
| Schulte et al. | Homes for life: a design fiction probe | |
| US20170188930A1 (en) | Animation-based autism spectrum disorder assessment | |
| Jaiswal et al. | Muse: a multimodal dataset of stressed emotion | |
| Delaherche et al. | Multimodal coordination: exploring relevant features and measures | |
| Stara et al. | Usability and acceptance of the embodied conversational agent Anne by people with dementia and their caregivers: exploratory study in home environment settings | |
| Castro et al. | LifeQA: A real-life dataset for video question answering | |
| Avril et al. | Social signal processing for studying parent–infant interaction | |
| López Pérez et al. | Combining recurrence analysis and automatic movement extraction from video recordings to study behavioral coupling in face-to-face parent-child interactions | |
| Chen et al. | Dyadic affect in parent-child multimodal interaction: Introducing the dami-p2c dataset and its preliminary analysis | |
| Mukherjee et al. | Digital tools for direct assessment of autism risk during early childhood: A systematic review | |
| Antonio Gomez Jauregui et al. | Design and evaluation of postural interactions between users and a listening virtual agent during a simulated job interview | |
| Al-Azani et al. | A comprehensive literature review on children’s databases for machine learning applications | |
| Papadopoulos et al. | A visit with Viv: Empathising with a digital human character embodying the lived experiences of dementia | |
| Khosla et al. | Enhancing emotional well being of elderly using assistive social robots in Australia | |
| TWI603303B (zh) | 運用懷舊體驗之認知偵測及情緒抒發系統 | |
| Heath et al. | spatiotemporal aspects of engagement during Dialogic storytelling child–robot interaction | |
| Ligthart et al. | It Takes Two: Using Co-creation to Facilitate Child-Robot Co-regulation | |
| TWI605862B (zh) | 可偵測認知功能的個人化遊戲系統 | |
| Prince et al. | Taking synchrony seriously: A perceptual-level model of infant synchrony detection | |
| Janssen | Connecting people through physiosocial technology | |
| Kümm | Feasibility of a smartphone application to identify young children at risk for Autism Spectrum Disorder in a low-income community setting in South Africa | |
| Dawson | A discussion of immersion in human computer interaction: the immersion model of user experience |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| MM4A | Annulment or lapse of patent due to non-payment of fees |