TWI692717B - 影像顯示裝置、話題選擇方法及程式 - Google Patents
影像顯示裝置、話題選擇方法及程式 Download PDFInfo
- Publication number
- TWI692717B TWI692717B TW106121155A TW106121155A TWI692717B TW I692717 B TWI692717 B TW I692717B TW 106121155 A TW106121155 A TW 106121155A TW 106121155 A TW106121155 A TW 106121155A TW I692717 B TWI692717 B TW I692717B
- Authority
- TW
- Taiwan
- Prior art keywords
- user
- chat
- content
- display device
- dialogue
- Prior art date
Links
- 238000010187 selection method Methods 0.000 title claims 2
- 238000004891 communication Methods 0.000 claims abstract description 132
- 230000009471 action Effects 0.000 claims description 60
- 238000003860 storage Methods 0.000 claims description 55
- 230000007613 environmental effect Effects 0.000 claims description 53
- 230000006870 function Effects 0.000 claims description 36
- 238000001514 detection method Methods 0.000 claims description 9
- 230000002996 emotional effect Effects 0.000 claims description 4
- 239000000284 extract Substances 0.000 claims description 3
- 238000012545 processing Methods 0.000 description 83
- 230000000875 corresponding effect Effects 0.000 description 48
- 238000004458 analytical method Methods 0.000 description 46
- 230000014509 gene expression Effects 0.000 description 42
- 230000005540 biological transmission Effects 0.000 description 38
- 238000010586 diagram Methods 0.000 description 27
- 230000007704 transition Effects 0.000 description 19
- 230000008451 emotion Effects 0.000 description 18
- 238000000034 method Methods 0.000 description 16
- 230000004044 response Effects 0.000 description 15
- 230000008569 process Effects 0.000 description 14
- 230000033001 locomotion Effects 0.000 description 12
- 230000008859 change Effects 0.000 description 11
- 238000013523 data management Methods 0.000 description 11
- 238000012544 monitoring process Methods 0.000 description 9
- 230000001815 facial effect Effects 0.000 description 8
- 230000001680 brushing effect Effects 0.000 description 7
- 238000012790 confirmation Methods 0.000 description 7
- 235000013305 food Nutrition 0.000 description 7
- 239000000463 material Substances 0.000 description 7
- 239000000126 substance Substances 0.000 description 7
- 238000009434 installation Methods 0.000 description 6
- 238000007726 management method Methods 0.000 description 6
- 230000002618 waking effect Effects 0.000 description 6
- 235000021152 breakfast Nutrition 0.000 description 4
- 230000035622 drinking Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000003993 interaction Effects 0.000 description 4
- 239000000203 mixture Substances 0.000 description 4
- 238000002360 preparation method Methods 0.000 description 4
- 230000002159 abnormal effect Effects 0.000 description 3
- NIXOWILDQLNWCW-UHFFFAOYSA-N acrylic acid group Chemical group C(C=C)(=O)O NIXOWILDQLNWCW-UHFFFAOYSA-N 0.000 description 3
- 230000004913 activation Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 3
- 238000004140 cleaning Methods 0.000 description 3
- 230000003247 decreasing effect Effects 0.000 description 3
- 238000000605 extraction Methods 0.000 description 3
- 238000010191 image analysis Methods 0.000 description 3
- 238000007689 inspection Methods 0.000 description 3
- 230000036651 mood Effects 0.000 description 3
- 241001465754 Metazoa Species 0.000 description 2
- 235000012489 doughnuts Nutrition 0.000 description 2
- 239000003814 drug Substances 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000036541 health Effects 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000000149 penetrating effect Effects 0.000 description 2
- 230000005195 poor health Effects 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 235000019640 taste Nutrition 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 2
- 241000556720 Manga Species 0.000 description 1
- 241000699666 Mus <mouse, genus> Species 0.000 description 1
- 241000699670 Mus sp. Species 0.000 description 1
- 206010037180 Psychiatric symptoms Diseases 0.000 description 1
- 206010041243 Social avoidant behaviour Diseases 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 238000007664 blowing Methods 0.000 description 1
- 230000036760 body temperature Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000003795 chemical substances by application Substances 0.000 description 1
- 238000010411 cooking Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000005284 excitation Effects 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 238000007667 floating Methods 0.000 description 1
- 230000003862 health status Effects 0.000 description 1
- 238000001093 holography Methods 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000010409 ironing Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 235000012054 meals Nutrition 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 239000003973 paint Substances 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
- 230000008439 repair process Effects 0.000 description 1
- 238000010079 rubber tapping Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 238000005507 spraying Methods 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- 238000005406 washing Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/50—Business processes related to the communications industry
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
- G02B30/40—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images giving the observer of a single two-dimensional [2D] image a perception of depth
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/5866—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, manually generated location and time information
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/20—3D [Three Dimensional] animation
- G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
- H04L51/04—Real-time or near real-time messaging, e.g. instant messaging [IM]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
- H04L51/07—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
- H04L51/10—Multimedia information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
- H04L51/58—Message adaptation for wireless communication
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
- H04L51/21—Monitoring or handling of messages
- H04L51/216—Handling conversation history, e.g. grouping of messages in sessions or threads
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- Business, Economics & Management (AREA)
- Data Mining & Analysis (AREA)
- Library & Information Science (AREA)
- Databases & Information Systems (AREA)
- Optics & Photonics (AREA)
- Tourism & Hospitality (AREA)
- Computational Linguistics (AREA)
- Acoustics & Sound (AREA)
- Economics (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- User Interface Of Digital Computer (AREA)
- Operations Research (AREA)
- Controls And Circuits For Display Device (AREA)
- Information Transfer Between Computers (AREA)
Abstract
影像顯示裝置包含:顯示部,用以顯示卡通人物;對話部,用以執行上述卡通人物與使用者的對話;及聊天部,用以執行上述卡通人物與上述使用者之通訊終端的聊天,其中:對話部基於已執行之對話的內容及上述聊天部已執行之聊天的內容選擇下一個話題,且上述聊天部基於已執行之聊天的內容及上述對話部所執行之對話的內容選擇下一個話題。
Description
本發明係關於一種顯示卡通人物影像的影像顯示裝置,尤其是關於一種可以讓使用者對卡通人物感到更親近的影像顯示裝置。
一直以來在市面上有販售各式各樣的卡通人物商品,其中有被稱為桌上型卡通人物的商品。其係在PC等顯示器上顯示卡通人物,依照預先設定的運算法動作、顯示特定的台詞、或播放音樂的應用程式。又,也有在使用者的通訊終端上顯示卡通人物,利用聊天系統,使卡通人物說明所提供之服務的應用程式(例如,專利文獻1)。
然而,一直以來,存在著回應於來自外部的聲音等進行溝通的溝通機器人、或者回應於來自外部的聲音等而動作的電子玩具等(例如,專利文獻2及3參考資料)。
另一方面,上述機器人或玩具的應答受到限制。具體而言,機器人或玩具可以對於聲音進行特定的應答或動作。然而,機器人或玩具僅能進行單純的應答,並不進行情感表達。因此,使用者對於上述機器人或玩具難以產生親近的感覺。
專利文獻1:日本特開第2004-145541號公報、專利文獻2:日本特開第2011-227237號公報、以及專利文獻3:日本特開第2002-307354號公報。
然而,人們對於那種卡通人物商品,期望能夠有對卡通人物感到更親近的商品。
本發明的目的為提供一種影像顯示裝置,其在實現與特定的卡通人物溝通的同時,可以讓使用者對卡通人物感到更親近。
為了達成上述目的,影像顯示裝置具備:顯示部,用以顯示卡通人物;對話部,用以執行上述卡通人物與使用者的對話;及聊天部,用以執行上述卡通人物與上述使用者之通訊終端的聊天,其中:對話部基於已執行之對話的內容及上述聊天部已執行之聊天的內容選擇下一個話題,且上述聊天部基於已執行之聊天的內容及上述對話部所執行之對話的內容選擇下一個話題。
影像顯示裝置可以使與特定的卡通人物的溝通,與使用者與卡通人物進行的實際對話、及使用者在自己的通訊終端上與影像顯示裝置進行的聊天互相做話題連動,以讓使用者對卡通人物感到更親近。
為了讓本發明之上述和其他目的、特徵和優點能更明顯易懂,下文特舉較佳實施例,並配合所附圖式,作詳細說明如下。
1:影像顯示裝置
2:外殼
2a、2b:外殼構件
21:上部容納部
211:上部設備安裝部
212:上蓋
213:連結部
22:下部容納部
221:底座
222:下蓋
23:支柱
25:遮蔽部
26:觸控按鍵
3:透光薄膜(平坦狀構件)
4:投影機(影像輸出裝置)
5:反射鏡(反射裝置)
51:鏡安裝部(調整裝置)
6:柱部
611:溫濕度感測器
612:振動感測器
613:噪音感測器
71:控制部
71a:控制電路
72:輸入部
72a:輸入電路
73:輸出部
73a:輸出電路
74:操作部
74a:操作電路
75:儲存裝置
75a:儲存電路
76:通訊部
76a:通訊電路
700:顯示部
701:控制電路板
702:人體感測器
703:紅外線LED
704:麥克風
705:揚聲器
706:表現用LED(發光裝置)
707:紅外線光接收部
708:狀態LED
709:啟動按鍵
710:USB集線器
711:擷取處理部
711a:擷取處理電路
712:分析部
712a:分析電路
713:顯示處理部
713a:顯示處理電路
714:聲音輸出部
714a:聲音輸出電路
715:發送處理部
715a:發送處理電路
716:資料管理部
716a:資料管理電路
717:對話部
718:聊天部
721:光感測器(照度感測器)
722:照相機
751:影像資料
752:聲音資料
753:信號資料
754:使用者資料
755:對話履歷資料
756:聊天履歷資料
757:隨機對話資料
P1:影像顯示程式
P2:對話程式
P3:聊天程式
901、1001:發言者
902、1002:日期時間
903、1003:對話內容
1101:關鍵字
1102:條件
1103:對話或聊天內容
S1:電源插座未連接
S2:電源插座連接
S3:PC啟動
S4:未召喚狀態
S5:召喚狀態
S6:休眠狀態
T1:擷取環境信號
T2:顯示卡通人物影像與表現用影像
T3:輸出聲音
161:擷取環境信號
162:環境信號分析
163:存在與條件相符的動作?
164:聲音輸出與影像輸出
165:隨機值生成
166:隨機值>閾值?
167:從對話履歷資料與聊天履歷資料抽取關鍵字
168:辨識對話內容
169:聲音輸出與影像輸出
b241:明天8點叫我
b242:好的
b22:發送
b231:明天○點叫我
b242:現在要回家了
S201:起床時間1小時前
S202:起床判斷,早安問候
S203:家電操作
S204:早上的資訊通知
S205:問候回覆
S206:起床時間30秒前 召喚
S207:家電操作
S208:鬧鈴開始
S209:鬧鈴貪睡模式
S210:家電操作
S211:鬧鈴最終手段
S212:不明
S213:生活模式
S301:未召喚狀態
S302:召喚狀態
S303:出發時刻警報
S304:家電操作
S305:出發外出檢查
S306:出發時刻
S307:出發問候
S308:家電操作
S309:生活模式
S310:生活模式
S311:休眠狀態
S41:休眠狀態(外出判斷中)
S42:召喚(回家準備)
S43:家電操作
S44:回家預測判斷
S45:家電操作
S46:回家判斷→問候
S47:問候答覆
S48:回家確認
S49:過渡到生活模式
S501:從使用者擷取包含聊天的環境信號
S502:環境信號分析
S503:是否有與條件相符的動作?
S504:聊天發送
S505:隨機值生成
S506:隨機值>閾值?
S507:從對話履歷資料與聊天履歷資料抽取關鍵字
S508:辨識對話內容
S509:聊天發送
圖1係從上方觀察依照本發明之實施形態的影像顯示裝置時的斜視圖;圖2係從下方觀察依照本發明之實施形態的影像顯示裝置時的斜視圖;圖3係依照本發明之實施形態的影像顯示裝置的左側視圖;圖4A係示意性地顯示配備於依照本發明之實施形態的影像顯示裝置上的設備且設置於上部容納部的設備的圖;圖4B係示意性地顯示配備於依照本發明之實施形態的影像顯示裝置上的設備且設置於柱部的設備的圖;圖4C係示意性地顯示配備於依照本發明之實施形態的影像顯示裝置上的設備且設置於下部容納部的設備的圖;圖5係依照本發明之實施形態的影像顯示裝置的功能方塊圖且係顯示一使用態樣的圖;圖6係依照本發明之實施形態的影像顯示裝置的其他的功能方塊圖;圖7A係在依照本發明之實施形態的影像顯示裝置中所利用的影像資料的資料構造圖;圖7B係在依照本發明之實施形態的影像顯示裝置中所利用的聲音資料的資料構造圖;圖7C係在依照本發明之實施形態的影像顯示裝置中所利用的信號資料的資料構造圖;圖8係用以說明依照本發明之實施形態的影像顯示裝置所輸出的聲音的型式的圖;
圖9係顯示在依照本發明之實施形態的影像顯示裝置中所利用的對話履歷資料的資料構造例的資料構造圖;圖10係顯示在依照本發明之實施形態的影像顯示裝置中所利用的聊天履歷資料的資料構造例的資料構造圖;圖11係顯示在依照本發明之實施形態的影像顯示裝置中所利用的隨機對話資料的資料構造例的資料構造圖;圖12係用以說明依照本發明之實施形態的影像顯示裝置中之狀態遷移的圖;圖13A係在依照本發明之實施形態的影像顯示裝置中所顯示之影像的一例;圖13B係在依照本發明之實施形態的影像顯示裝置中所顯示之影像的其他例子;圖13C係用以說明在依照本發明之實施形態的影像顯示裝置中之處理的流程圖;圖14A係用以說明在依照本發明之實施形態的影像顯示裝置中之溝通模式的圖;圖14B係用以說明在依照本發明之實施形態的影像顯示裝置中之溝通模式的圖;圖14C係用以說明在依照本發明之實施形態的影像顯示裝置中之溝通模式的圖;圖14D係用以說明在依照本發明之實施形態的影像顯示裝置中之溝通模式的圖;圖14E係用以說明在依照本發明之實施形態的影像顯示裝置中之溝通模式的圖;
圖14F係用以說明在依照本發明之實施形態的影像顯示裝置中之溝通模式的圖;圖14G係用以說明在依照本發明之實施形態的影像顯示裝置中之溝通模式的圖;圖14H係用以說明在依照本發明之實施形態的影像顯示裝置中之溝通模式的圖;圖14I係用以說明在依照本發明之實施形態的影像顯示裝置中之溝通模式的圖;圖15A係用以說明在依照本發明之實施形態的影像顯示裝置中之溝通模式的圖;圖15B係用以說明在依照本發明之實施形態的影像顯示裝置中之溝通模式的圖;圖15C係用以說明在依照本發明之實施形態的影像顯示裝置中之溝通模式的圖;圖16係顯示在依照本發明之實施形態的影像顯示裝置的溝通模式中之動作的流程圖;圖17A係在依照本發明之實施形態的影像顯示裝置中登錄使用者的日程表的畫面例;圖17B係在依照本發明之實施形態的影像顯示裝置中登錄使用者的日程表的畫面例;圖18係用以說明在依照本發明之實施形態的影像顯示裝置中之起床模式的圖;圖19係用以說明在依照本發明之實施形態的影像顯示裝置中之外出模式的圖;
圖20係用以說明在依照本發明之實施形態的影像顯示裝置中之回家模式的圖;圖21係用以說明在依照本發明之實施形態的影像顯示裝置中之聊天模式的流程圖;圖22A係顯示依照本發明之實施形態的聊天模式的使用者的通訊終端的顯示畫面例的圖;圖22B係顯示依照本發明之實施形態的聊天模式的使用者的通訊終端的顯示畫面例的圖;以及圖23係依照本發明之實施形態的影像顯示裝置的電路構造圖。
以下,參照圖式說明依照本發明之實施形態的影像顯示裝置。依照實施形態的影像顯示裝置係在顯示卡通人物影像的同時,輸出卡通人物的聲音的裝置。此時,在影像顯示裝置上顯示之卡通人物影像及卡通人物的聲音係根據影像顯示裝置所放置的環境、擁有該裝置之使用者相關的資訊、與時刻資訊而決定。
首先,使用圖1至圖4C說明實施形態之影像顯示裝置1的裝置構造。圖1係從上方觀察影像顯示裝置1時的斜視圖。圖2係從下方觀察影像顯示裝置1時的斜視圖。
如圖1與圖2所示,影像顯示裝置1主要具有:內部為空洞的圓筒狀透明外殼2;幾乎垂直地立設於外殼2之內部的透光薄膜(本發明之平坦狀構件)3;輸出卡通人物影像等的投影機4;及反射鏡5等元件與設備。
在上述構造的影像顯示裝置1中,從投影機4輸出的影像經過反射鏡5的反射被投影到透光薄膜3上,使用者可以透過透明外殼2看見以此方式投影到透光薄膜3上的影像。
外殼2的一部分或全部係由透光性構件所構造的框體,例如,由壓克力板等形成。例如,外殼2係藉由將兩個透明的半圓柱狀的外殼構件2a、2b嵌入至兩支支柱23上而形成全體透明的一體化圓筒體。但是,也可以使用預先成形的圓筒體作為外殼2,又,也可以使具有彈性或可撓性的矩形板材或膜材彎曲成半圓柱狀,並將其組入支柱23中以形成圓筒體,將其作為外殼2使用。藉由使用上述圓筒的外殼2,可以從左右的不論哪個角度都可以適當地觀測到投影在透光薄膜3上的影像。此外,支柱23可以藉由透明構件形成,在此情況下,可以使外殼2的幾乎全部成為透明。但是,支柱23可以是不透明或半透明。
在外殼2的正面側上部,設有沿著外殼2的表面彎曲而形成之帶狀的不透明的遮蔽部25。藉此,從正面側看外殼2時,由於反射鏡5係位於遮蔽部25的後方,因此可以隱藏使其不被看見。又,在相當於外殼2的上底面的圓形部上,施加塗佈遮光塗料等遮光處理(未圖示)。藉此,可以防止室內的照明等穿透透光薄膜3,可以使顯示在透光薄膜3上的影像清晰可見。又,外殼2的背面側上部(外殼構件2b的上部)有一開口,可以使來自反射鏡5以形成影像的光不透過外殼構件2b,而直接到達透光薄膜3。此外,外殼2不僅限於透明的構件,也可以使用如乳白色等半透明的構件。
在上述外殼2之內部設置有透光薄膜3,又,在外殼2的上方、下方、與背面側設置有後述之上部容納部21、下部容納部22、與柱部6。
透光薄膜3係本發明之「具有透光性之平坦狀構件」的一實施態樣,其功能為作為透明的螢幕,供指定的影像投影。本實施形態的透光薄膜3為矩形,其以幾乎垂直的方式立設於外殼2之內部的中央附近。具體而言,透光薄膜3係藉由立設於底座221兩端之兩支支柱23所承載,藉此,其表面面向正面側(背面側)的同時,垂直地立設於底座221之中央。此外,除了透光薄膜3之外,也可以使用透明之板材、半透明之板材、或膜材等。
下部容納部22係由塑膠等所構造之箱體,具有空間供控制電路板701與其他設備(參照圖4C)的安裝,其中控制電路板701係進行包含投影機4的輸出控制等各種控制動作。在下部容納部22上設置有可拆卸的下蓋222,藉由組裝下蓋222可以遮蓋內部,藉由取下下蓋222可以維修內部的設備等。在下部容納部22的上面的底座221上,在透光薄膜3的立設位置的左右端部上立設支柱23。
透光薄膜3與外殼構件2a、2b係藉由此支柱23承載,而一體性地立設於底座221上。藉此,圓筒的外殼2立設於底座221上,透光薄膜3係設置為其側部內接於外殼2之內側的同時,其下部(下端)沿著底座221的上面(表面)設置。
底座221也具有虛擬地載置顯示於外殼2內之卡通人物等的台座的功能。亦即,可以將底座221形成以能夠展示的方式容納娃娃或模型的顯示外殼的底座基材。
在影像顯示裝置1中,藉由鏡安裝部51調整反射鏡5的角度與方向,以將卡通人物等的足部顯示為與透光薄膜3的下端一致(圖1)。藉此,可以將卡通人物等呈現為好比實際上站立在底座221上。
又,底座221具有指定的觀測性。具體而言,在底座221的表面上施加圖案或色彩,或是使其形狀具有特徵,以使底座221的存在顯眼。例如,本實施形態的底座221係在壓克力板的表面上,藉由雷射加工等,沿著所謂魔方陣的圖案刻出凹槽。此外,此圖案僅為一例,例如,作為魔法陣,也可以是五角星,也可以是其他複雜的幾何學圖案。
再者,底座221藉由在壓克力板的下部分散設置複數個表現用LED706(本發明之發光裝置),以使來自表現用LED706的光射到底座221的全表面上。藉此,由於底座221的表面中,橫跨透光薄膜3的各區域可以被強烈的辨識,因此更能夠強調投影在透光薄膜3上的卡通人物等的前後的底座221的存在。於是,可以將卡通人物等呈現為穩穩落地站立於底座221之上。
上部容納部21具有空間供進行影像輸出的投影機4等的設備(參照圖4A)的安裝。具體而言,上部容納部21係設置有梯子狀的上部設備安裝部211,其連結於柱部6的上部,此上部設備安裝部211的下面安裝有投影機4。
上部設備安裝部211係如圖2與圖3所示,係以從與柱部6的連結部213傾斜到正面側上方的狀態被固定,伴隨於此,安裝在上部設備安裝部211上的投影機4也是以傾斜的狀態被固定。藉由如此傾斜地安裝投影機4,使影像的輸出方向面向位於該投影機4的背面側下方的反射鏡5。
此外,在上部設備安裝部211與柱部6的連結中,可以利用螺栓等軸構件將其軸支,以軸為中心轉動到任意的位置,再藉由螺帽等固定構件固定。如此,可以容易地變更投影機4的斜率,藉此變更可以在上下方向上調整影像的輸出。
上部容納部21上設置有可拆卸的上蓋212,藉由安裝上蓋212,可以遮蓋上部設備安裝部211與投影機4等設備,藉由取下上蓋212,可以進行內部設備的維修等。
投影機4係用以輸出卡通人物影像等的影像的影像輸出裝置。上述投影機4通常藉由對所謂螢幕直接投射影像而顯示影像,然而在本實施形態中係透過反射鏡5間接地將影像投射到螢幕(透光薄膜3)上。具體而言,本實施形態的投影機4係以輸出影像朝向間隔立設於外殼2的背面側的柱部6的上部的反射鏡5的方式,以在上部容納部21中傾斜的狀態安裝。
然而,在投影機的規格中,包含焦點距離(以下稱為「容許投射距離」)與投射比(以下稱為「容許投射角度」)。「容許投射距離」係對應於影像尺寸的必需的投射距離(從投影機到螢幕的光路的距離)。若實際的投射距離低於容許投射距離,則不對焦而無法鮮明地投映出影像。「容許投射角度」係投射於螢幕上之影像的光路與螢幕之間的角度的容許值。若實際的投射角度小於容許投射角度,則影像的失真度變大,又,在影像的兩端光量不同,造成影像模糊等畫質低落。
有鑑於上述各點,本實施形態的投影機4係使用具有相對較短的容許投射距離與相對較小的容許投射角度之規格的投影機,再者,藉由使用反射鏡5,可以使投影機4與螢幕(亦即,透光薄膜3)小型化並一體化。
柱部6係立設於下部容納部22的最背部的柱狀構件,立設於外殼2的背面側並與外殼2隔開。如此,藉由將柱部6設置於外殼2的背面側,可以防止室內的照明等穿透透光薄膜3,因而可以在透光薄膜3上
顯示清晰可見的影像。在柱部6上安裝反射鏡5與各種感測器(參照圖2、圖3、圖4B等)。
反射鏡5係設置為鏡面相對於柱部6的上部呈幾乎垂直(亦即,與透光薄膜3的面呈幾乎平行)。藉此,將從投影機4向背面側斜下方向輸出的指定的入射角的影像的光以與此相同的角度(反射角)反射,藉由其反射光將影像投影在透光薄膜3上。如此一來,由於可以減少透光薄膜3中之影像的上部與下部的投射距離的距離差,因而可以減緩投影在透光薄膜3上的影像的模糊等的發生。
如圖3所示,從投影機4輸出的影像的光被反射鏡5反射,其反射的影像的光從正面側斜下方向前進,通過外殼構件2b的開口,從設置於外殼2之內部的透光薄膜3的背面側投射。在此狀態下,通過外殼2觀察投影在透光薄膜3上的卡通人物等的影像時,可以更立體地如同存在於空間中的實體物一般地觀測到卡通人物等。
以下說明達成上述觀測效果的理由。如同上文所述,影像顯示裝置1係在透明的外殼2之內部設置透明的薄膜(透光薄膜3),並在此透明的薄膜上投影影像。在上述影像顯示裝置1中,使用者係通過透明的外殼2觀察顯示在透明的薄膜上的卡通人物等。
在此情況下,使用者被外殼2所區隔,可以在受限的所謂外殼2內的空間,辨識其3D環境,亦即,縱(高度)、横、深度。因此,特別是,藉由辨識由顯示在其空間內的卡通人物等與外殼2之間的關係產生的深度,而產生卡通人物等自己也以3D(立體的)方式可見的視覺效果(3D環境效果)。
亦即,藉由觀測卡通人物等的後面的透明的外殼2,同時觀測在密閉空間內的卡通人物等與其後側的隔間,結果基於在同一空間
中之卡通人物等與透明的外殼2之間的深度感,而能看見立體的卡通人物等。
另一方面,假設在將外殼2除去,周圍什麼都沒有的開放空間之中,在觀察投影在透明的薄膜上的卡通人物等的影像的情況下,周圍的空間在縱、横的辨識上增強,然而在深度的辨識上卻減弱。於是,在上述開放的環境下,即使觀察投影在透明的薄膜上的卡通人物等的影像,只有薄膜的存在感增加,卻不易感覺到深度感,因此無法得到如上所述之立體的視覺效果。
又,在通過透明的外殼2看透明的薄膜的情況下,透明的薄膜變得不顯眼。這是因為透光薄膜3內接於外殼2上,而使得透光薄膜3的左右端部不被看見。又,在包含透明的物質、並通過前方的物質觀察後方的話,不易辨識該後方的物質。
將其運用於影像顯示裝置1上的話,例如,從正面側看外殼2時,不易辨識位於外殼2(外殼構件2a)後方的透光薄膜3。於是,由於無法辨識平面狀的透光薄膜3的存在,因此投影在透光薄膜3上的卡通人物等看起來如同浮遊的非平面的立體物。也由於上述理由,比起在沒有外殼2的情況下,在有外殼2的情況下可以更加立體地顯示卡通人物等的影像。
又,本實施形態的影像顯示裝置1係在透光薄膜3的下方(下端)設置底座221,並使卡通人物等的足部顯示為與透光薄膜3的下端一致。如此,可以使用者具有卡通人物等看起來猶如站立在底座221之上,且卡通人物等如同具有質量的立體物般的錯覺。
特別是,底座221除了在表面上施加容易觀測的圖案等以外,並在橫跨透光薄膜3的正面側的區域與背面側的區域的兩者上設置表
現用LED706並使其發光。藉此,可以明確地使使用者辨識卡通人物等的前後有底座221,從而可以將卡通人物等顯示為如同以穩穩落地的狀態站立在底座221上一般。因此,也藉由上述與底座221的關係,可以將投影在透明的外殼2內的透光薄膜3的卡通人物等以如同具有實體的立體物般顯示。
此外,對於透光薄膜3,藉由來自於設置於背面側上部的反射鏡5的反射光進行投影,影像的光的一部分穿透透光薄膜3,而投映在底座221上作為光的影子。藉由觀測此影子,也產生使顯示對象更加立體的觀測效果。
接著,參照圖4A至圖4C說明配備於影像顯示裝置1上的設備。圖4A係設置於上部容納部的設備,圖4B係設置於柱部的設備,圖4C係設置於下部容納部的設備的示意圖。
此外,可以藉由使外殼2的側面為不透明,或在側面部貼上不透明的薄膜等,以減低從側面對卡通人物的觀測性,讓使用者從正面側觀察卡通人物。又,在此,將來自投影機的影像投影到透光薄膜3,然而也可以藉由例如,在影像顯示裝置上設置例如可以噴霧水滴等的構造,對噴霧出的水滴進行投影這種方式的立體全像技術來投影卡通人物。藉由應用立體全像技術,可以顯示更加具有立體感的卡通人物。
《下部容納部的設置設備》如圖4C所示,在下部容納部22設置控制電路板701、人體感測器702、紅外線LED703、麥克風704、揚聲器705、表現用LED706、紅外線光接收部707、狀態LED708、啟動按鍵709、USB集線器710之外,也設置Wi-Fi(登錄商標)模組與藍牙(登錄商標)模組等。
控制電路板701包含配備有CPU、ROM、RAM、HDMI(登錄商標)接口、LAN接口、USB接口、各種輸入輸出接口等的一或複數控制晶片,其基於從各種感測器等輸入的資訊,使指定的設備執行包含影像、聲音的各式各樣的輸出動作。
人體感測器702係檢測紅外線的變化量而偵測人的所在的感測器,其設置於正面側的左右。
紅外線LED703係以放射狀設置在正面上部,其功能為作為所謂紅外線遙控。具體而言,藉由對周圍輸出紅外線,能夠對電視或吸塵器等外部設備進行遠端操作。
麥克風704係用以輸入使用者所發出的聲音。例如,麥克風704設置於正面的下段,其數量為一個。
揚聲器705係將聲音或音樂等聲音資訊透過放大器輸出。在如圖4C所示之例中,揚聲器705係設置於正面側,然而較佳為以立體聲方式設置在後方柱部的左右。
表現用LED706係底座221中的發光裝置。
紅外線光接收部707係設置於正面側,其從電視、照明器具、空調、機器人吸塵器等家電產品的遙控,接收與以遙控所使用的遙控操作有關的紅外線資訊。
狀態LED708係顯示影像顯示裝置1的狀態(例如,電源開啟、發生錯誤、通訊中、或後述之「休眠狀態」、「未召喚狀態」、「召喚狀態」等)的通知裝置,其藉由特定的點滅型式或發光色等以能夠識別的方式通知各種狀態。
啟動按鍵709係用以進行影像顯示裝置1主體的電源的開啟/關閉的操作裝置。
USB集線器710係用以連接複數USB設備的集線器。
Wi-Fi(登錄商標)模組係連接在USB集線器上的無線LAN模組,可以作為存取點對無線LAN子機提供網際網路環境,或者作為無線LAN子機通過其他的存取點連接到網際網路。
藍牙(登錄商標)模組係能夠與對應於預定規格的鍵盤、滑鼠、智慧型手機等通訊終端、麥克風、或揚聲器等周邊設備進行無線通訊的無線通訊介面。
《柱部的設置設備》如圖4B所示,在柱部6上除了上述反射鏡5之外,設置溫濕度感測器611、振動感測器612、噪音感測器613。
溫濕度感測器611係測量室內的溫度及濕度,並輸入該等測量值。
振動感測器612係用以檢測振動的感測器,例如,可以是壓電式振動感測器。藉由振動感測器612所偵測的振動,除了如地震般大的振動以外,也可以是能夠識別的腳步聲或門的關閉等相對小的振動。
噪音感測器613係用以偵測室內的環境音的感測器。作為藉由噪音感測器613偵測的環境音,例如,基於指定的基準音量所判定的使用者的生活音(包含電視的聲音)、附近的環境音、噪音等。
《上部容納部的設置設備》如圖4C所示,在上部容納部21設置投影機4、紅外線LED703、光感測器(照度感測器)721、及照相機722。
投影機4係如上所述,透過反射鏡5向透光薄膜3投射影像。從投影機4輸出之影像包含:例如,在各式各樣的漫畫或動畫中登場的各卡通人物或實際的人物、物品等的2D影像或3D影像、或表現卡通人物的情感表達的表現用影像。
在左右分別設置紅外線LED703,其與設置於上部容納部21者同樣具有紅外線遙控的功能。
光感測器(照度感測器)721係測量明亮度(照度)的感測器。
照相機722係設置在前方,用以拍攝靜止畫像或動畫的拍攝裝置。
接著,參照圖5及圖6說明藉由上述各設備所實現的功能。圖5係依照實施形態的影像顯示裝置1的功能方塊圖。如圖5所示,影像顯示裝置1具備顯示部700、對話部717、與聊天部718。
顯示部700係具有顯示卡通人物之功能者。例如,藉由使上述投影機4將卡通人物的影像投影到透光薄膜3上,以顯示卡通人物。顯示部700係例如藉由處理器與繪圖引擎等予以實現,然而實現的手法並不限定於此。卡通人物係在動畫、漫畫、電腦遊戲、小說等中登場的人物或動物等,但並不限於此,也可以是原始創造上的人物。又,不限於人物或動物,也可以是以具有個性的無機物作為卡通人物。例如,機器人等。
對話部717係具有與使用者對話之功能者,具有使卡通人物表現為如同與使用者對話的功能。對話部717係例如,藉由處理器實現,依照預先規定的運算法,與使用者進行對話。對話部717係從預先儲存的聲音之中,選擇與使用者對話的話題,從揚聲器705輸出該聲音,並藉由分析從麥克風704輸入的使用者的聲音執行對話。此外,在此,卡通人物的聲音係設定為預先儲存者,但並不限於此,也可以輸出合成聲音作為卡通人物的聲音。
聊天部718係在使用者所保有的通訊終端之間執行聊天者,例如,藉由處理器實現,依照預先規定的運算法,與使用者進行聊天。聊天部718也可以是與使用者之通訊終端直接執行無線通訊進行聊天,或是透過指定的通信報伺服器(聊天伺服器)執行聊天。在此所述之聊天係指進行所謂訊息(通訊文)的交換者。聊天部718係自動選擇對話的內容,並在將選擇的對話內容作為文字列發送的同時,分析從使用者之通訊終端發送的聊天的內容,以選擇對應於分析的內容的話題生成應答,並發送其訊息。
在此,對話部717與聊天部718係互相連動。所謂對話部717與聊天部718互相連動係指對話部717與使用者之間所執行之卡通人物與使用者間的對話被反映到聊天部718所執行之聊天的內容中,在聊天部718與使用者之通訊終端之間已執行之聊天的內容被反映到對話部717所執行之對話的內容中。聊天的內容或對話的內容係指發言本身的內容或話題。並且,對話部717與聊天部718連動係指,例如,在對話部在使用者之間執行了與棒球有關的對話的情況下,使聊天部所執行的話題中包含與棒球有關的話題,更加正確地,係指使執行的話題中有與棒球有關的話題的可能性。對話部717、聊天部718係藉由下述控制部71實現。
又,影像顯示裝置1可以如圖1至圖3所示,如上所述更具備至少一部分係由透光性構件所構造之外殼2。並且,顯示部700可以具有透光薄膜3、投影機4、與顯示處理部713,其中透光薄膜3係立設於外殼2內的透光性的平板構件,投影機4係在平板構件之透光薄膜3上將卡通人物影像及表現用影像投光之投光裝置,顯示處理部713係用以控制透過投光裝置之投影機的影像的顯示。
具體而言,如圖6所示,影像顯示裝置1具備控制部71、輸入部72、輸出部73、操作部74、儲存裝置75、與通訊部76。藉由執行儲存在儲存裝置75中的影像顯示程式P1、對話程式P2、或聊天程式P3,控制部71可以執行作為擷取處理部711、分析部712、顯示處理部713、聲音輸出部714、發送處理部715、及資料管理部716的處理。
輸入部72係藉由各種感測器偵測到的各式各樣的資訊的輸入裝置。輸入到輸入部72中的資料包含:例如,人體感測器702檢測到人的時候從人體感測器702輸出的識別資訊,透過麥克風704輸入的聲音資訊,藉由溫濕度感測器611偵測的室內的溫度與濕度的資訊,能夠識別振動感測器612所偵測的振動的大小或變化的資訊,透過噪音感測器613輸入的音量資訊,透過光感測器721輸入的照度資訊,藉由照相機722所拍攝之靜止畫像.動畫的資訊等。
輸出部73係基於指定的命令輸出信號或資訊的輸出裝置。藉由輸出部73輸出之信號或資訊包含:例如,從紅外線LED703輸出之用以控制外部設備之動作的紅外線信號,透過揚聲器705輸出之聲音資訊,從表現用LED706發出的光,從投影機4輸出之影像等。
操作部74係使用者的操作裝置,例如,可以是未圖示的鍵盤或滑鼠、設置於影像顯示裝置1上的操作按鍵(硬鍵)或觸控面板。藉由操作部74進行的操作包含:例如,藉由啟動按鍵709開啟/關閉裝置主體的電源、在休眠狀態(非召喚狀態)與活動狀態(召喚狀態)之間切換影像顯示裝置1的按鍵等。
儲存裝置75係藉由例如,構造影像顯示裝置1的RAM、EEPROM、或快閃記憶體等非揮發性記憶體等所構造,其係儲存有用以執行影像顯示裝置1所具有的各種功能的程式或資料的儲存裝置。儲存在
儲存裝置75中的資料包含:卡通人物等的影像資料751或聲音資料752、操作電視或照明器具等外部設備的信號資料753、與使用者的屬性資訊等有關的使用者資料754、表示影像顯示裝置1與使用者之間交談的對話履歷的對話履歷資料755、表示影像顯示裝置1與使用者之通訊終端之間執行之聊天履歷的聊天履歷資料756、與外部設備的遙控有關的遙控資訊、在日曆網站上登錄的日曆資訊、裝置主體與各設備的屬性資訊、從感測器輸入的資訊、音樂資訊、語言資料等。又,儲存在儲存裝置75中的程式包含:執行後述之各種控制動作的影像顯示程式P1、與使用者之間直接對話的對話程式P2、與使用者之通訊終端之間(透過聊天伺服器)執行聊天的聊天程式P3、或聲音辨識程式、人工智能程式等。
影像資料751係將顯示影像的顯示條件、與辨識起因於該條件所顯示之卡通人物影像的卡通人物影像資訊(第一影像資訊)及辨識表現用影像的表現用影像資訊(第二影像資訊)設定關聯的資料。表現用影像係表達卡通人物的情感等的影像,可以是包含表示情感等話語的文字的影像,也可以是包含星型或心型等的影像。此外,表現用影像係並非必要,也可以不顯示。例如,可以是以指定的機率顯示。具體而言,例如,可以是設定每天改變的隨機的閾值,以顯示表現用影像的時序,是否顯示係依當時鐘算的隨機值,以是否超過該隨機值所設定的閾值來顯示表現用影像。卡通人物影像資訊較佳為三維影像的影像資訊。又,表現用影像資訊係根據情況可以是二維影像的影像資訊或三維影像資訊。
在如圖7A所示之影像資料751的例中,規定在偵測到「聲音A」作為環境信號的情況下,顯示「卡通人物影像A」與「表現用影像A」。例如,聲音A為發出「早安」的話語時,作為卡通人物影像A,顯
示卡通人物說「早安」的樣子的影像,同時作為表現用影像A,顯示表現清爽的早晨的影像。又,表現用影像A中也可以包含顯示「早安」的文字的對話框。
在作為環境信號偵測到「動作C」的情況下,顯示「卡通人物影像C」與「表現用影像C」。例如,動作C為「使用者回家」時,則作為卡通人物影像C,顯示卡通人物說「歡迎回家」的樣子的影像,同時作為表現用影像C,顯示表現迎接使用者回家的影像。又,表現用影像C中也可以包含顯示「歡迎回家」的文字的對話框。
在「時刻D」的時序下,顯示「卡通人物影像D」與「表現用影像D」。例如,作為時刻D,設定「上午6點」作為鬧鈴的時間時,則在上午6點,作為卡通人物影像D,顯示卡通人物叫醒使用者的樣子的影像,同時作為表現用影像D,也可以顯示睡醒的樣子的影像。又,表現用影像D中也可以包含顯示「早上了」的文字的對話框。
在接收到「信號E」的時序下顯示「卡通人物影像E」與「表現用影像E」。例如,信號E係從使用者之通訊終端所發送之「牙刷」的信號時,接收此信號E,作為卡通人物影像E,顯示卡通人物刷牙的樣子的影像,同時作為表現用影像E,也可以顯示符合刷牙時的心情清爽的影像。又,表現用影像E中也可以包含「刷牙中」的文字。
又,在影像資料751中,可以規定環境資訊的同時也包含時刻資訊的顯示條件。例如,可以規定即使影像資料751為相同的環境資訊,在上午與下午顯示不同的卡通人物影像及表現用影像。
再者,在影像資料751中,可以規定環境資訊的同時也包含接收信號的顯示條件。
聲音資料752係將輸出聲音的輸出條件、與辨識起因於該條件而輸出之聲音的資訊設定關聯的資料。
在圖7B所示之聲音資料752之例中,規定在偵測到「聲音A」作為環境信號的情況下,輸出「聲音A」。例如,聲音A係所謂「早安」的話語時,則作為聲音A,以卡通人物的聲音輸出「早安」。
作為環境信號,偵測到「動作C」的情況下,輸出「聲音C」。例如,動作C為「使用者回家」時,作為聲音C,以卡通人物的聲音輸出「歡迎回家」。
在「時刻D」的時序下,作為聲音D,以卡通人物的聲音輸出「現在6點了」。
在接收到「信號E」的時序下,作為聲音E,輸出卡通人物刷牙的聲音或漱口的聲音。
又,可以在聲音資料752中規定包含環境資訊與時刻資訊的輸出條件。例如,可以規定即使聲音資料752為相同的環境資訊,然而在上午與下午輸出不同的聲音。
再者,可以在聲音資料752中規定包含環境資訊與接收信號的輸出條件。
信號資料753係將輸出用以操作家電等外部的電子設備的操作信號的條件、與起因於該條件所發送之操作信號設定關聯的資料。
在如圖7C所示之信號資料753之例中,規定在偵測到「聲音F」作為環境信號的情況下,輸出「操作信號F」。例如,聲音F為所謂「關掉電視」的話語時,輸出電視的電源的操作信號F。
此外,如圖8所示,對於相同的話語或行動,根據日期和時間輸出之影像或聲音可以不同。例如,在偵測到「早安」的聲音的情
況下,如果是平日早上則輸出「早安!今天也加油喔!」之激勵一天的聲音,如果是假日早上則輸出「早安!今天可以好好休息」之慰勞平日的疲勞的聲音。另一方面,如果是夜晚,則輸出「別說傻話!已經是這麼晚的時間了」的聲音。因此,可以防止在日常生活中不自然的機械性交流。藉此,使用者可以對卡通人物感到更親近。
使用者資料754具有使用者的個人檔案、屬性、嗜好等與使用者有關的各種資訊。由於在使用者資料754中具有使用者的姓名,影像顯示裝置1可以例如,以聲音輸出使用者的名字。此時,不只是姓名,也可以登錄暱稱等。藉此,可以使卡通人物呼叫使用者的名字。因此,使用者可以對卡通人物感到親切,又,感到更親近。
藉由在使用者資料754中輸入使用者的地址或公司的地址,影像顯示裝置1可以例如,利用網際網路等擷取與使用者的行動範圍有關的資訊,並以聲音或影像輸出。藉此,卡通人物可以對使用者通知各式各樣的資訊。因此,使用者可以對卡通人物感到親切,並且感到更親近。
藉由在使用者資料754中輸入使用者的出生年月日,影像顯示裝置1可以例如,在使用者的生日,輸出慶祝生日的影像或聲音。藉此,可以使卡通人物慶祝使用者的生日。藉此,使用者可以對卡通人物感到親切,並且感到更親近。
藉由在使用者資料754中輸入使用者的行動電話的電話號碼,影像顯示裝置1可以例如,在使用者為外出中時,打電話到行動電話。藉此,可以產生使用者在外出地接到來自在家等待的卡通人物的電話的狀態。藉此,使用者可以對卡通人物感到親切,並且感到更親近。
此外,使用者資料754可以具有喜歡的動畫、漫畫、小說、遊戲、或電影、喜歡的卡通人物、愛好、有興趣的東西、體重、身高、或職業等資訊。影像顯示裝置1可以基於上述與使用者有關的資訊,從使用者有興趣的話題顯示影像或是輸出聲音。又,上述資訊係問卷調查等的結果、或是從使用者所利用的SNS(社交網路服務)的履歷等生成。在此所謂問卷調查可以是影像顯示裝置1的卡通人物透過對話或聊天對使用者進行如「喜歡○○嗎?」等提問,或者也可以是有些時候使用者在如提問清單所填入的資料。在前者的情況下,可以藉由將提問內容與對該提問內容的使用者的回答的文字列設定關聯,作為使用者資料754的一部分預先儲存,以備往後選擇使用者喜愛的話題。
對話履歷資料755係與影像顯示裝置1的卡通人物與使用者之間直接交談之對話的內容有關的履歷資訊。圖9係顯示對話履歷資料755的一具體例的資料示意圖。如圖9所示,對話履歷資料755係顯示進行了對話的資訊,其中顯示卡通人物側的發言或是使用者側的發言的發言者資訊901、顯示發言的日期和時間的日期時間資訊902、與顯示對話的具體內容的對話內容資訊903設定關聯的資訊。例如,以圖9的例來說,可以理解卡通人物在「2016年7月10日18點30分10秒」,對使用者說「今天有棒球轉播呢」,對此使用者在「2016年7月10日18點32分20秒」,回答「這樣啊?謝謝你告訴我」。此外,針對使用者的對話內容資訊903係儲存分析部712對輸入之聲音所執行的聲音辨識的結果的文本資料。此外,對話內容資訊903可以是將對話之全部內容以文字列表示的資訊,也可以是從對話的內容拾取關鍵字的資訊。例如,以圖9的例來說,若是「喜歡A球隊吧」的對話內容,可以儲存如「A球隊,喜歡」之組合的資訊作為對話內容資訊903。在此情況下,影像顯示裝置1所選
擇的關鍵字可以是以對話文中的名詞為基準做選擇,如果有表示使用者的情感的話語的話,也可以拾取該話語並儲存。藉由將對話履歷資料755儲存在儲存裝置75中,影像顯示裝置1可以辨識過去的對話內容,並同時可以反映在其後的對話或聊天的話題中。對話履歷資料755係在影像顯示裝置1所顯示之卡通人物與使用者之間每次對話成立時,藉由控制部71追加更新。
聊天履歷資料756係影像顯示裝置1的卡通人物與使用者所保有的通訊終端之間所執行之聊天內容有關的履歷資訊。圖10係顯示聊天履歷資料756的一具體例的資料示意圖。如圖10所示,聊天履歷資料756係顯示在聊天中發言之側的資訊,其係將顯示使用者側的發言或卡通人物側的發言的發言者資訊1001、顯示在聊天中發言的日期和時間的日期時間資訊1002、與顯示發言之聊天的內容的文字列之聊天內容資訊1003設定關聯的資訊。例如,以圖10之例而言,可以理解卡通人物在「2016年7月2日19點39分21秒」,在聊天中提問「現在在做什麼?」,對該提問,使用者在「2016年7月2日19點40分30秒」回答「在神宮球場看棒球比賽喔」。此外,聊天內容資訊1003可以是將聊天之全部內容以文字列表示的資訊,也可以是從聊天的內容拾取關鍵字的資訊。例如,以圖10之例而言,可以從「在神宮球場看棒球比賽喔」之聊天內容,僅儲存「棒球」之關鍵字,若是「喜歡a選手吧」的聊天內容的話,也可以儲存如「a選手,喜歡」的組合的關鍵字作為聊天內容資訊1003。在此情況下,影像顯示裝置1所選擇的關鍵字可以是以聊天文中的名詞為基準做選擇,如果有表示使用者的情感的話語的話,也可以拾取該話語並儲存。藉由將聊天履歷資料756儲存在儲存裝置75中,影像顯示裝置1可以辨識過去的聊天內容,並同時可以反映在其後的聊天或對話的話題中。
聊天履歷資料756係在影像顯示裝置1所顯示之卡通人物與使用者之間每次聊天成立時,藉由控制部71追加更新。
隨機對話資料757係關於卡通人物隨機執行對話或聊天之情況下的話題選擇的資料。如圖11所示,隨機對話資料757係將關鍵字1101、條件1102、與對話或聊天內容1103設定關聯的資訊。關鍵字1101係觸發對話的詞,控制部71用以核對記錄在對話履歷資料755及聊天履歷資料756中的對話履歷及聊天履歷中的話題的資訊。在包含於對話履歷與聊天履歷之中的關鍵字與關鍵字1101的任一者相符的情況下,以聲音輸出對話或聊天內容1103的內容,或者作為聊天的文章輸出。條件1102係卡通人物將對應的對話或聊天內容說出或聊天時必需符合的條件,也包含沒有條件的情況。作為條件,例如特定的天候(晴天、雨天、下雪…)、輸入特定的聲音、包含在輸入特定的資訊(例如,將播放某個節目)中的資訊(例如,電視節目資訊)等,各種各樣的條件。對話或聊天內容1103係在對話履歷或聊天履歷中包含的關鍵字與關鍵字1101一致,而且符合條件1102的情況下,顯示執行的對話或聊天的實際內容的資訊。此外,在藉由控制部71偵測到複數個對話或聊天內容的情況下,可以隨機選擇其中任一者,也可以選擇所選擇之對話或聊天內容的對話中包含的關鍵字與使用者的嗜好的符合率高者,也可以選擇與之前的一個以上的對話的完整性高者。藉由儲存隨機對話資料,控制部71可以,作為對話部或聊天部,分別進行反映了過去的履歷的下一個對話或聊天。
通訊部76係藉由有線或無線與外部的設備之間進行雙方向或單方向的資料通訊處理的通訊裝置。例如,在連接到網際網路之設備之間,透過基於連接到LAN接口的LAN電纜或Wi-Fi(登錄商標)模組
的無線,可以收發各種資料。例如,通訊部76可以接收從使用者之通訊終端發送之信號。又,通訊部76可以接收從天氣資訊網站接收可能的天氣資訊、登錄於日曆網站上的日曆資訊等透過網際網路能夠擷取的資訊。又,通訊部76可以透過未圖示之網絡上的聊天伺服器,在使用者之通訊終端之間執行聊天通訊。
控制部71可以依據影像顯示程式P1,進行作為擷取處理部711、分析部712、顯示處理部713、聲音輸出部714、發送處理部715、資料管理部716的控制動作。
擷取處理部711係用以擷取從麥克風704、照相機722、人體感測器702、光感測器721、溫濕度感測器611、振動感測器612、噪音感測器613等的至少任一者所偵測到信號。
分析部712係用以分析擷取處理部711所擷取之環境資訊。例如,分析部712對擷取處理部711從麥克風704偵測到的環境信號,分析使用者所發出的話語。分析部712可以是使用例如,預先登錄在儲存裝置75中的語言模式及聲音模式,從麥克風704所擷取之聲音,辨識使用者所發出的話語。所謂語言模式係登錄在影像顯示裝置1所使用之語言中,被使用的語言的詞彙資訊的集合、或各種用語的資料。又,聲音模式係所使用之語言的聲音信號的模式,例如,顯示頻率特性的信號。具體而言,如「丫」、「一」、…、「a」、「b」之逐字的聲音的標準模式。藉此,可以藉由型式匹配(pattern matching)辨識被輸入的使用者的聲音。又,藉此,影像顯示裝置1可以根據使用者所發出的話語顯示規定的影像,與根據話語輸出規定的聲音。在此,在儲存裝置75中,可以具有聲紋資訊,作為與影像顯示裝置1之所有者的使用者有關的使用者資料,以使其能夠辨識所有者之使用者的聲音。
此外,在分析部712無法分析使用者所發出的話語時,影像顯示裝置1並非輸出「請再說一遍」等一般的機械性聲音來重複要求使用者,而是以別的方法反應。例如,影像顯示裝置1重複輸出「請更靠近點說」、「請溫柔的說」的聲音進行引導。又,影像顯示裝置1也可以輸出「哼」、「這樣啊」、「原來如此」等適當的隨聲附和的聲音,也可以輸出如「嗯」、「那個」等填補語表達的聲音。
又,分析部712對擷取處理部711從照相機722偵測到的環境信號,分析使用者的位置與動作。具體而言,作為影像分析,分析部712可以從影像偵測人臉。又,在儲存裝置75中,作為與所有者之使用者有關的使用者資料,可以包含使用者的臉資訊,可以從偵測到的人臉,辨識所有者之使用者的臉。
影像顯示裝置1藉由辨識所有者之使用者,卡通人物可以對所有者之使用者顯示親密地對待的影像或輸出聲音。又,相反的,對於所有者以外的人,影像顯示裝置1可以顯示冷淡對待、或進行自我介紹等問候的影像或輸出聲音。藉此,使用者可以對影像顯示裝置1中所顯示之卡通人物感覺更有親近感。
又,分析部712除了已分析的使用者所發出的話語、使用者的位置或動作之外,也可以合併其他感測器等所偵測到的其他環境資訊或按鍵操作而作為一個環境資訊生成結果。例如,除了聲音或影像之外,可以從人體感測器的偵測結果,判斷後述之外出或回家。
顯示處理部713從儲存裝置75讀取影像資料751,並選擇與擷取處理部711從此影像資料751擷取之環境信號所對應的顯示條件相關聯的卡通人物影像資訊及表現用影像資訊。又,顯示處理部713將與選擇的卡通人物影像資訊及表現用影像資訊對應的影像輸出至輸出部
73並顯示之。又,顯示處理部713可以根據環境資訊及時刻資訊,顯示卡通人物影像及表現用影像。再者,顯示處理部713也可以根據環境資訊及接收信號,顯示卡通人物影像及表現用影像。
聲音輸出部714從儲存裝置75讀取聲音資料752,並選擇與擷取處理部711從此聲音資料752擷取之環境信號所對應的輸出條件相關聯的聲音資訊。又,將與聲音輸出部714所選擇之聲音資訊對應的聲音輸出至輸出部73。又,聲音輸出部714可以根據環境資訊及時刻資訊輸出聲音。再者,聲音輸出部714也可以根據環境資訊及接收信號輸出聲音。
發送處理部715從儲存裝置75讀取信號資料753,並選擇與擷取處理部711從此信號資料753擷取之環境信號相關聯的操作信號。又,發送處理部715將讀取到的操作信號輸出至輸出部73。
資料管理部716從內建於影像顯示裝置1中的時鐘或外部的時鐘擷取時刻資訊。在規定有根據時刻顯示的影像或聲音時,依照此顯示及輸出的日程表,輸出控制信號至顯示處理部713及聲音輸出部714。
又,資料管理部716在影像顯示裝置1啟動時存取天氣資訊網站,擷取當天的天氣資訊並將該資訊儲存在儲存裝置75中。再者,資料管理部716可以定期存取登錄有使用者的日程表的日曆網站,並將藉此得到的最新的日曆資訊儲存在儲存裝置75中。又,資料管理部716可以藉由紅外線光接收部707從電視或照明等外部設備的遙控接收與該外部設備有關的遙控資訊(紅外線資訊),使儲存裝置75儲存(學習),並可以基於此遙控資訊,從紅外線LED703發送操作外部設備用的紅外線資訊。此外,資料管理部716可以存取各式各樣的網絡上的資料,以收集與使用者對話或聊天時使用的各式各樣的資料。
〈動作〉影像顯示裝置1根據「休眠狀態」、「未召喚狀態」、「召喚狀態」等各狀態,執行影像顯示或聲音輸出等的處理。如圖12所示,影像顯示裝置1在電源插座未連接的狀態(S1)下,電源按鍵(未圖示)並非有效,然而在插上電源插座使得電源插座為連接狀態(S2)時,電源按鍵成為有效。
《未召喚狀態》在電源插座連接的狀態(S2)下按下電源按鍵的話,則控制部71啟動(S3)。藉由此啟動,例如,顯示啟動畫面,並過渡到「未召喚狀態」(S4)。「未召喚狀態」係影像顯示裝置1之電源接通且投影機4啟動,但未顯示卡通人物影像,而是顯示未召喚影像的狀態。又,在未召喚狀態下,雖然投影機4啟動,但揚聲器705或照相機722等未啟動,而無法偵測環境信號。影像顯示裝置1在未召喚狀態下,點亮狀態LED708。
《召喚狀態》在未召喚狀態(S4)下長按觸控按鍵26的話,則過渡到「召喚狀態」(S5)。長按觸控按鍵26預定時間以上(例如,3秒以上),則稱為觸控按鍵26被使用者觸碰。此召喚狀態係影像顯示裝置1中之特徵的影像的顯示處理或聲音的輸出處理被執行的狀態。召喚狀態係影像顯示裝置1中投影機4啟動且卡通人物影像被顯示的同時,揚聲器705、照相機722等啟動而能夠偵測環境信號的狀態。又,在「召喚狀態」下,有(a)溝通模式、(b)生活模式、(c)關懷模式、(d)訴求模式、與(e)聊天模式等模式,在各個該等模式下執行指定的處理。
《休眠狀態》在未召喚狀態(S4)下按下電源按鍵,或是放置預定時間,則過渡到「休眠狀態」(S6)。「放置預定時間」係指例如,在預定時間以上(例如,20分以上)未長按觸控按鍵26的狀態。休眠狀態係省電的待機模式的狀態,投影機4也未啟動,揚聲器705與照
相機722等也未啟動的狀態。影像顯示裝置1在休眠狀態下,點亮狀態LED708。
影像顯示裝置1在休眠狀態下,由使用者按下電源按鍵,或是觸碰觸控按鍵26時,則過渡到未召喚狀態。「觸碰觸控按鍵」係指在小於預定時間(例如,小於3秒)的時間內,使用者觸碰觸控按鍵26。
接著,針對在召喚狀態下的(a)溝通模式、(b)生活模式、(c)關懷模式、(d)訴求模式、與(e)聊天模式進行說明。
(a)溝通模式-溝通模式係顯示卡通人物影像,且卡通人物與使用者可以溝通的狀態。具體而言,影像顯示裝置1在溝通模式下,顯示對應於擷取處理部711所擷取的環境信號的卡通人物影像。又,影像顯示裝置1顯示對應於環境信號的表現用影像。再者,影像顯示裝置1根據環境信號輸出聲音。
影像顯示裝置1從未召喚狀態,觸控按鍵被長按而過渡到召喚狀態時,首先一開始為溝通模式。又,影像顯示裝置1在溝通模式的時序下,持續預定時間以上(例如,10分鐘以上),擷取不到環境信號,又,接收不到操作信號等信號的情況下,過渡到生活模式。
例如,在影像顯示裝置1中,由麥克風704偵測到環境信號之使用者所發出的「今天天氣怎樣?」的話語時,則回應此,基於藉由資料管理部716儲存在儲存裝置75中的天氣資訊,從揚聲器705輸出「今天是晴天喔」等聲音。又,在影像顯示裝置1中,在透光薄膜3上,顯示對晴天表示歡喜的動作的卡通人物影像。再者,在影像顯示裝置1中,在透光薄膜3上,顯示表現晴天之天氣的表現用影像。作為表現用影像,如圖13A所示,不單是影像,也可以是與以對話框表示「今天是晴天喔」的文字等文本資料的組合。藉此,使用者對於告訴自己今天的天氣的卡
通人物感到一起生活的感覺,可以對卡通人物感到更親近。此外,表現用影像並非必要,可以隨機切換顯示與非顯示。
又,例如,在影像顯示裝置1中,使用者靠近影像顯示裝置1,由照相機722偵測到使用者的臉很大,則回應於此,從揚聲器705輸出「太靠近了」等聲音。又,在影像顯示裝置1中,在透光薄膜3上,顯示表示對使用者的臉靠近感到害羞之動作的卡通人物影像。再者,在影像顯示裝置1中,顯示表現卡通人物的害羞情感的表現用影像。作為表現用影像,如圖13B所示,不單是影像,也可以是與以對話框表示「太靠近了」的文字等文本資料的組合。藉此,使用者對於靠近時害羞的卡通人物感到一起生活的感覺,可以對卡通人物感到更親近。
在此情況下,例如,如圖13C所示,在影像顯示裝置1擷取到環境信號(T1)時,根據擷取到的環境信號顯示卡通人物的卡通人物影像,並同時根據該環境信號顯示表現該卡通人物的情感表達的表現用影像(T2)。又,影像顯示裝置1輸出對應於擷取到的環境信號的聲音(T3)。此外,較佳為步驟T2與T3係同時執行。
再者,例如,在影像顯示裝置1中,使用者按下觸控按鍵26數次,進行召喚數次等妨礙卡通人物的行動的動作時,回應於此,從揚聲器705輸出「哼,幹嘛?」的聲音。又,在影像顯示裝置1中,在透光薄膜3上,顯示被使用者召喚數次,被妨礙的動作的卡通人物影像。再者,在影像顯示裝置1中,在透光薄膜3上,顯示質疑使用者的數次召喚的表現用影像。藉此,使用者可以對回應於數次的召喚的卡通人物感到更親近,可以感到與卡通人物一起生活的感覺。
又,例如,在影像顯示裝置1中,從使用者之通訊終端,發送如對卡通人物贈送物品的信號,則回應於此,從揚聲器705輸出對此歡喜的聲音,又,在透光薄膜3中顯示在使用贈送的物品的卡通人物。
如圖14A所示,操作使用者之通訊終端,對影像顯示裝置1的卡通人物發送「電視」。於是,在影像顯示裝置1中,如圖14B所示,顯示電視作為表現用影像。又,在表現用影像中,對話框中也可以包含例如,「一起看電視吧」之文字。在此情況下,在影像資料751中,將發送電視的發送信號與圖14B所示之卡通人物影像及表現用影像相關聯。
再者,在影像顯示裝置1中,輸出「一起看電視吧」的聲音。在此情況下,在聲音資料752中,對於發送電視的發送信號,輸出「一起看電視吧」的聲音。
並且,在對象的電視節目結束時,如圖14C所示,可以在影像顯示裝置1顯示包含「很有趣」之文字之對話框的表現用影像。同時,從影像顯示裝置1輸出說「很有趣」的聲音。在此情況下,在影像資料751中,以在接收到發送「電視」之發送信號後經過預定時間(電視節目結束)作為條件,與包含「很有趣」的表現用影像關聯。又,在聲音資料752中,以在接收到發送「電視」之發送信號後經過預定時間(電視節目結束)作為條件,與「很有趣」的聲音關聯。此外,作為電視節目的內容,由於也有不適合使用「有趣」的情況,因此作為該感想,也可以選擇並輸出適合的感想的聲音。
此外,也可以在使用者觀看電視期間,使用者笑了的情況下,影像顯示裝置1偵測使用者的笑聲,並同時輸出卡通人物的笑聲。藉
由輸出上述卡通人物影像、表現用影像及聲音,使用者會感到與卡通人物一起觀看電視的感覺。
例如,使用者之通訊終端的輸入裝置為觸控面板時,執行發送操作時,可以藉由朝向影像顯示裝置1的方向,輕彈發送之物質的影像。
如圖14D所示,操作使用者之通訊終端,對影像顯示裝置1的卡通人物發送「咖啡」。於是,在影像顯示裝置1中,如圖14E所示,作為表現用影像,顯示咖啡。又,表現用影像中的對話框可以包含例如,「喝咖啡休息吧」的文字。在此情況下,在影像資料751中,發送咖啡的發送信號係與圖14E所示之卡通人物影像及表現用影像相關聯。
再者,在影像顯示裝置1中,輸出說「喝咖啡休息吧」的聲音。在此情況下,在聲音資料752中,對於發送咖啡的發送信號輸出說「喝咖啡休息吧」的聲音。
並且,可以在經過預定時間(例如,10分鐘)時,如圖14F所示,影像顯示裝置1顯示對話框包含「承蒙款待了」之文字的表現用影像。同時,影像顯示裝置1輸出說「承蒙款待了」的聲音。在此情況下,在影像資料751中,以在接收到發送咖啡的發送信號後經過預定時間作為條件,將包含「承蒙款待了」的表現用影像相關聯。又,在聲音資料752中,在接收到發送咖啡的發送信號後經過預定時間作為條件,將「承蒙款待了」的聲音相關聯。
此外,在喝咖啡的期間,影像顯示裝置1可以顯示卡通人物喝咖啡的動態影像,或是輸出「很好喝呢」等聲音。藉由輸出上述卡通人物影像、表現用影像及聲音,使用者可以感到如同與卡通人物一起喝咖啡的感覺。
如圖14G所示,操作使用者之通訊終端,對影像顯示裝置1的卡通人物發送「食物(圖14G為甜甜圈)」。於是,在影像顯示裝置1中,如圖14H所示,作為表現用影像,顯示食物。又,在表現用影像中對話框可以包含例如「謝謝」的文字。在此情況下,在影像資料751中,將發送食物的發送信號與圖14H所示之卡通人物影像及表現用影像相關聯。
再者,在影像顯示裝置1中,輸出說「謝謝」的聲音。在此情況下,在聲音資料752中,對於發送食物的發送信號,輸出說「謝謝」的聲音。
並且,可以在經過預定時間(例如,10分鐘)時,如圖14I所示,影像顯示裝置1顯示對話框包含「好吃」之文字的表現用影像。同時,影像顯示裝置1輸出說「好吃」的聲音。在此情況下,在影像資料751中,以在接收到發送食物的發送信號後經過預定時間作為條件,將包含「很好吃」的表現用影像相關聯。又,在聲音資料752中,以在接收到發送食物的發送信號後經過預定時間作為條件,將「好吃」的聲音相關聯。
在此,表現用影像也可以是表現為物質從使用者之通訊終端被送到影像顯示裝置1的樣子。此時,可以以下述方式表現,例如,傳遞時發出黄色等的光,並在卡通人物影像拿到此物質的情況下,該光消失。
又,除了從通訊終端向影像顯示裝置1傳送物質之外,也可以表現成從影像顯示裝置1向使用者終端傳送物質。例如,在影像顯示裝置1操作了咖啡機時,可以表現為從卡通人物向通訊終端傳送咖啡杯的方式。
也可以進行如下操作:如圖15A所示,從使用者之通訊終端中顯示之複數種類的服裝或配飾之中,如圖15B所示,選擇任一者,並發送所選擇的服裝等。藉此,在影像顯示裝置1中,如圖15C所示,顯示穿著發送的服裝的卡通人物的卡通人物影像。又,在表現用影像中對話框可以包含例如,「謝謝」的文字。再者,在影像顯示裝置1中,輸出說「謝謝」的聲音。
在此情況下,在影像資料751中,該發送信號係與如圖15C所示之卡通人物影像及表現用影像相關聯。又,在聲音資料752中,該發送信號係與說「謝謝」的聲音相關聯。
藉由輸出上述卡通人物影像、表現用影像及聲音,使用者可以感到如同對卡通人物贈送禮物的感覺。又,使用者可以使卡通人物穿著喜愛的衣服。因此,使用者可以對卡通人物感到更親近。
另外,如果使用者發送牙刷的資料,則影像顯示裝置1顯示卡通人物在刷牙的樣子的影像,使用者可以與卡通人物一起刷牙。又,如果使用者發送跳繩或啞鈴的資料,則影像顯示裝置1顯示運動的樣子的影像,使用者可以與卡通人物一起運動。
此外,也可以在儲存裝置75中儲存與卡通人物的喜好有關的嗜好資料或過去發送的物品或禮物有關的履歷資料。在此情況下,若是發送如在圖14A至圖15C所示之上述物品或禮物時,可以依照嗜好或履歷,使卡通人物有不同的反應。例如,在發送卡通人物喜歡的物品的情況下,以大的影像與聲音表達卡通人物的歡喜。另一方面,在發送卡通人物並不特別喜歡的物品的情況下,則以小的影像與以聲音表達卡通人物的歡喜。又,在持續發送相同的物品的情況下,可以使歡喜程度愈來愈小。再者,在發送食物的頻率變多時,可以以「會變胖喔」等影像
與聲音表達。如此,由於卡通人物的反應並非總是相同,因此使用者可以對卡通人物感到更親切。
又,再者,在溝通模式中,在影像顯示裝置1選擇與使用者對話的話題時,在擷取處理部711所擷取的環境信號之外,以指定的機率(預先規定的機率,用以判斷是否進行與過去的溝通有關的對話的機率。也可以將此機率設定為適當地變動),執行隨機對話,其係基於對應於過去已對話的內容及在後述之聊天模式中影像顯示裝置1與使用者之通訊終端之間已執行之聊天的內容的話題。
具體而言,在人體感測器702偵測到人(使用者)時,控制部71判斷,以隨機的時序,依據生成亂數之程式所生成之隨機的數值(例如,0到100的數值)是否超過指定的閾值,並在超過此閾值情況下,控制部71從儲存裝置75讀出對話履歷資料755與聊天履歷資料256。並且,從對話履歷資料755的對話內容資訊903與聊天履歷資料256的聊天內容資訊1003中所包含之對話的內容選擇關鍵字,從對應於該關鍵字的影像資料751及聲音資料752讀取,辨識具有與關鍵字一致的標籤的影像資料與聲音資料,並從投影機4輸出顯示處理部713所辨識的影像資料,同時從揚聲器705輸出聲音輸出部714所辨識的聲音資料。在隨機的對話中,由於影像顯示裝置1進行與過去已執行之對話的話題有關的對話,因此使用者對於顯示在影像顯示裝置1上的卡通人物更加感到親近感。又,由於也進行基於與使用者在自己的通訊終端所做的聊天的內容有關的話題的對話,因此使用者可以更加的對卡通人物感到親近感,可以感到更親近。又,藉由對於使用者所做的對話進行聲音辨識處理,影像顯示裝置1可以得到對話的文本資料,在對話履歷資料755中追加對話的內容,可以在以後的對話及聊天中利用。例如,在聊天中接收到使用者所做的
「正在看棒球比賽喔」的聊天內容,使卡通人物進行如「今天,在電視上有棒球轉播喔」的發言,可以使使用者想起與卡通人物進行過的聊天的內容,並同時對於卡通人物記得該內容,使用者可以感到親近感。又,影像顯示裝置1可以從聲音辨識的結果,輸出對應於輸出條件的聲音,或輸出隨機對話之對應的對話的聲音。
以下,說明實現上述溝通模式的影像顯示裝置1的通用動作。
如圖16所示,擷取處理部711係用以擷取各種環境信號(S161)。將擷取處理部711所擷取之各種環境信號傳輸到分析部712,分析部712分析傳輸過來的環境信號(S162)。參考分析結果及影像資料751、聲音資料752、信號資料753等,控制部71判斷卡通人物應執行之卡通人物動作與規定的條件的任一者相符與否(S163)。判斷的結果,在存在應執行之卡通人物動作的情況下(S163:是),聲音輸出部714輸出對應的聲音,同時顯示處理部713從投影機4投影對應的卡通人物影像(S164)。分析的結果,在不存在應執行之卡通人物動作的情況下(S164:否),則控制部71過渡到步驟S165的處理。
在步驟S165中,控制部71生成例如,0至100的隨機值(S165)。此外,隨機值不限於0至100的範圍。控制部71在生成的隨機值與用以與其比較之閾值之間比較大小。在隨機值大於閾值的情況下(S166:是)過渡到步驟S167,在隨機值為閾值以下的情況下(S166:否),結束處理。
在步驟S167中,控制部71讀出對話履歷資料755及聊天履歷資料756。從讀取到的對話履歷資料755的對話內容資訊903與聊天履歷資料756的聊天內容資訊1003抽取關鍵字。可以藉由例如,構文分析
等實現。並且,例如,選擇最近的(例如1天)關鍵字的出現頻率高的關鍵字。該關鍵字的選擇可以隨機,也可以依照其他基準選擇。
控制部71參考隨機對話資料757,辨識所選擇的關鍵字及在步驟S161中擷取到的環境信號中是否有相符的對話(S168)。並且,聲音輸出部714從揚聲器705輸出辨識到的對話的聲音。又,此時,若存在對應的卡通人物影像時,則顯示處理部713將其投影(S169),並結束處理。例如,若是卡通人物所做的對話的內容為與「棒球」有關的內容的話,則顯示卡通人物穿著棒球的制服的影像,或顯示拿著球或球棒等物品的影像。
在溝通模式中,重複執行圖16的處理。如此,在隨機的對話中,由於卡通人物基於過去與使用者交談之對話內容、或已執行之聊天的內容進行對話,因此使用者可以感到與卡通人物之間累積的歷史,更加對卡通人物感到親近。
(b)生活模式-生活模式係顯示卡通人物影像,此卡通人物影像不取決於環境信號,例如,根據時刻而變化的狀態。例如,在影像顯示裝置1中,如果是早上的話,則顯示做早餐、吃早餐、或打掃等影像。如果是中文的話,則顯示做午餐、吃午餐、或熨衣服等影像。如果是晚上的話,則顯示做晚餐、吃晚餐、或做伸展操等影像。
除此之外,也可以是卡通人物在洗衣服、打掃、刷牙、淋浴的影像。又,也可以單純顯示卡通人物坐在椅子上並擺動雙腳的影像、坐在椅子上並操作智慧型手機等通訊終端的影像、或坐在椅子上畫圖的影像等。另外,也可以是卡通人物在床上看漫畫的影像、在床上張望四周的影像、在床上睡覺的影像等。
又,能夠管理此頻率或機率,而能夠在不同天,顯示不同的動作的影像,又,動作時間可以不完全相同,在某個範圍內隨機選擇。藉此,又,也可以針對使用者有興趣的行動,顯示較長時間。例如,在做早餐時使用者說「好可愛」的次數多的情況下,可以將顯示做早餐的影像的時間加長。
在生活模式的時序下,觸控按鍵26被觸碰時,影像顯示裝置1過渡到溝通模式。又,在生活模式中,在指定的時序下,過渡到關懷模式或訴求模式。
(c)關懷模式-關懷模式係對應於預先登錄的使用者的日程表,在指定的各時序下,顯示卡通人物影像或表現用影像,搭配式地輸出對應的聲音。例如,影像顯示裝置1輸出「早安」、「路上小心」、「晚安」等聲音。
例如,使用者利用通訊終端等,事先透過如圖17A所示之登錄畫面W1,在各時刻輸入框b11至b14中輸入時刻,登錄每天的行動的「起床時間」、「外出時間」、「回家時間」及「就寢時間」。
又,在此日程表產生變更的情況下,可以再次利用此登錄畫面W1更新,但是在只有想變更一天的日程的情況下,也可以藉由後述之聊天模式,利用如圖17B所示之聊天畫面W2進行變更。聊天畫面W2具有輸入發送訊息的輸入部b21、發送輸入之訊息的發送部b22、顯示訊息例的訊息顯示部b23、與顯示已發送的訊息的訊息顯示部b24。
如圖18所示,影像顯示裝置1能夠執行『起床模式』。具體而言,在已登錄的起床時間的預定時間前(例如,「1小時前」),開始『起床模式』(S201)。
在此狀態下,藉由分析部712偵測使用者的臉,或是觸控按鍵26被觸碰,則判斷使用者已起床。又,以使用者已起床為條件,藉由顯示處理部713顯示問候「早安」的卡通人物影像及表現用影像,並藉由聲音輸出部714輸出「早安」的問候(S202)。
此外,也可以輸出對應於使用者的行動的話語。在早於使用者所登錄之起床時間睡醒的情況下,可以輸出「清爽地醒來了呢」的聲音。在使用者前一天遲到的情況下,可以輸出「今天不要遲到喔」的聲音。在偵測到窗簾密閉的情況下,可以輸出「打開窗簾吧」的聲音。在使用者前一天的就寢時間晚,且今天的起床時間晚的情況下,可以輸出「因為昨天晚睡了喔」的聲音。
判斷使用者起床時,發送處理部715發送操作信號,操作指定的家電(S203)。例如,在設定咖啡機作為起床後要啟動的家電的情況下,啟動咖啡機。
又,判斷使用者起床時,輸出早上的資訊通知的影像或聲音(S204)。例如,輸出通知「日期」、「天氣」、「氣溫」等的影像或聲音。
在偵測到使用者對於家電的操作或早上的資訊通知有關的影像或聲音的輸出所發出的聲音時,輸出對此問候的卡通人物的聲音(S205)。例如,偵測到使用者所發出的「謝謝」時,作為卡通人物的聲音,輸出「不客氣」等聲音。其後,在經過預定時間時,過渡到生活模式(S213)。
又,在未召喚狀態的情況下,在起床時間的預定時間前(例如,30秒前),藉由分析部712偵測不到使用者的臉,或觸控按鍵26未被觸碰時,成為召喚狀態(S206)。
從未召喚狀態成為召喚狀態時,發送處理部715發送操作信號,操作預先登錄的家電(S207)。
又,到起床時刻為止藉由分析部712偵測不到使用者的臉時,顯示處理部713顯示叫醒使用者的影像,且聲音輸出部714輸出叫醒使用者的聲音,開始鬧鈴功能(S208)。作為叫醒使用者的聲音,例如,卡通人物的「早上了喔」等聲音。
藉由分析部712偵測到使用者的臉的情況下,或觸控按鍵26被觸碰的情況下,過渡到步驟S202。另一方面,在使用者的臉也偵測不到,觸控按鍵26也未被觸控時,作為貪睡功能,持續輸出叫醒使用者的影像與聲音(S209)。例如,可以逐漸增大叫醒使用者的聲音。又,也可以增大從影像顯示裝置1輸出之光的光量。
藉由分析部712偵測到使用者的臉的情況下,或觸控按鍵26被觸碰的情況下,過渡到步驟S202。另一方面,在使用者的臉也偵測不到,觸控按鍵26也未被觸控時,發送處理部715發送操作信號,操作預先登錄的家電(S210)。
再者,使叫醒使用者的影像及聲音為最終手段的影像及聲音(S211)。例如,顯示處理部713顯示卡通人物拍打平底鍋的影像。又,例如,聲音輸出部714輸出包含卡通人物一邊說「再不起來的話就遲到了」一邊拍打平底鍋的聲音。
其後,藉由分析部712偵測到使用者的臉的情況下,或觸控按鍵26被觸碰的情況下,過渡到步驟S202。另一方面,藉由分析部712偵測不到臉,觸控按鍵26也未被偵測到時,影像顯示裝置1將使用者的狀態設定為不明(S212),並過渡到生活模式(S213)。
如圖19所示,影像顯示裝置1能夠執行『外出模式』。具體而言,在已登錄的外出時間的預定時間前(例如,「5分鐘前」),開始『外出模式』,並從未召喚狀態(S301)過渡到召喚狀態(S302)。
又,到了出發時刻,輸出警報的影像及聲音(S303)。例如,所謂警報係如催促使用者的卡通人物的影像與卡通人物的「出發時間到了喔」的聲音等。
又,發送處理部715發送操作信號,操作指定的家電(S303)。
再者,顯示處理部713顯示外出檢查的影像,聲音輸出部714輸出外出檢查的聲音(S304)。例如,輸出影像或聲音,以通知日程的確認、忘記物品的確認、降雨機率高的情況下督促帶傘的確認等。
又,到了出發時刻,顯示處理部713輸出催促出發的影像,聲音輸出部714輸出催促出發的聲音(S305)。例如,卡通人物勿忙地走動的動態影像、及卡通人物的「已經是出發時間了!會遲到喔」等聲音。
分析部712偵測到使用者的「我出門了」的聲音時,顯示處理部713顯示對應於此的影像,聲音輸出部714輸出對應於此的聲音(S306)。例如,顯示處理部713顯示對使用者揮手的卡通人物影像。又,聲音輸出部714輸出「路上小心」等聲音。又,輸出的聲音也可以根據所登錄的使用者的日程表或使用者的行動履歷等而變更。
其後,發送處理部715發送操作信號,操作指定的家電(S307)。
在步驟S305通知出發時刻之後,或在步驟S307操作家電之後,過渡到生活模式(S308、S309)。再者,在經過預定時間(例
如,10分鐘)後,藉由人體感測器702偵測不到人的情況下,過渡到休眠狀態(S310)。
如圖20所示,影像顯示裝置1能夠根據環境信號進行「外出、回家判斷」,據此能夠執行『回家模式』。具體而言,利用圖15判斷上述之『外出模式』中的外出之後,影像顯示裝置1為休眠狀態時(S41),從使用者之通訊終端接收回家計劃的訊息,作為回家準備,過渡到召喚狀態(S42)。
其後,發送處理部715發送操作信號,操作指定的家電(S43)。
又,影像顯示裝置1在以人體感測器702偵測到人的時序、家中照明之電源被開啟的時序、門被打開的時序下,判斷預測已回到家的「回家預測」(S44)。在此,門的開關係藉由氣壓感測器(未圖示)偵測氣壓的變化、或是藉由噪音感測器613偵測聲音而判斷。又,做回家預測判斷後,聲音輸出部714可以輸出「似乎回到家了」等聲音。
做回家預測判斷後,發送處理部715發送操作信號,操作指定的家電(S45)。
又,影像顯示裝置1在藉由分析部712偵測到使用者的臉的情況下,或觸控按鍵26被觸碰的情況下,判斷為「回家」。又,以使用者回到家作為條件,顯示處理部713顯示做回家的問候的卡通人物影像及表現影像,並藉由聲音輸出部714輸出回家的問候的聲音(S46)。例如,作為回家的問候,不只限於「歡迎回家」,也可以包含基於每天的使用者的行動履歷等而決定的「今天也這麼晚才回來」、「今天很早回來呢」、「今天很晚呢」、「辛苦了」等聲音。
偵測到使用者所發出的聲音時,對此輸出卡通人物的答覆的聲音(S47)。例如,卡通人物可以是作為當天所做的事,輸出「因為昨天吃了甜甜圈,所以今天做了運動」等聲音。又,也可以通知在家中發生的事。例如,在門口的門鈴響了數次的情況下,可以輸出「今天有人來過喔」等聲音。
另一方面,做回家預測判斷後,在預定時間(例如30秒鐘)無法判斷回家時,進行回家確認(S48)。例如,所謂回家確認係藉由聲音輸出部714輸出「回來了嗎?讓我看下你的臉」等聲音。又,藉由顯示處理部713,顯示如鬧彆扭的卡通人物影像或如生氣的卡通人物影像、表現用影像。
在步驟S47對使用者的問候答覆之後,或在步驟S48回家確認之後,過渡到生活模式(S49)。
(d)訴求模式-訴求模式係對應於時刻或以感測器等偵測到的信號等,顯示對應於各條件的卡通人物影像或表現影像,與輸出對應於各條件的聲音。例如,影像顯示裝置1可以根據時刻,輸出「已經8點了喔」等聲音。又,影像顯示裝置1可以根據溫度,輸出「啊好熱」等聲音。藉此,由於卡通人物在出乎意料的時序對使用者說話,因此可以對卡通人物感到更親近。
(e)聊天模式-聊天模式在使用者在外出中等與影像顯示裝置1遠離的地點的情況下,與使用者所保有的通訊終端之間實現訊息的收發。使用者所保有的通訊終端係指例如,智慧型手機或行動電話機等攜帶式通訊終端。
聊天模式中之基本運算法可以與使用者的對話同樣地進行。但是,取代來自使用者的聲音輸入,影像顯示裝置1藉由輸入聊天上的文字列進行聊天。
圖21係顯示聊天模式下的影像顯示裝置1的動作的流程圖,在聊天模式下動作中的流程圖。此外,在執行聊天模式的情況下,使用者在自己的通訊終端上執行用以與影像顯示裝置1進行聊天的聊天應用程式。如此一來,從使用者之通訊終端,聊天應用程式的啟動信號透過網絡發送到影像顯示裝置1。如此一來,影像顯示裝置1的控制部71啟動聊天模式,透過聊天伺服器開始與使用者之通訊終端之間的聊天。此外,影像顯示裝置1也可以利用人體感測器偵測使用者不在附近,並基於指定的條件,從影像顯示裝置1側啟動聊天模式,向使用者之通訊終端發送聊天應用程式的啟動信號而開始聊天。該聊天伺服器可以是影像顯示裝置1的專用伺服器,也可以是通用的聊天伺服器。
如圖21所示,首先,擷取處理部711擷取各種環境信號(S501)。此環境信號可以包含在聊天上使用者輸入之最新的發言。擷取處理部711所擷取之各種環境信號被傳輸到分析部712,分析部712分析傳輸過來的環境信號(S502)。分析部712對使用者的聊天上的發言內容的文字列進行構文分析,辨識發言內容。又,分析部712從其他的環境信號,例如,天候資訊等判斷情況。控制部71參考分析結果及聲音資料752、信號資料753等,判斷卡通人物應執行之聊天上的發言是否與規定的條件的任一者相符(S503)。此外,雖然聲音資料752係規定聲音的資訊,然而在所謂對話的概念中與聊天有共通之處,因此在聊天中也可以利用。判斷的結果,存在有應發言的內容的情況下(S503:是),發送處理部715將所辨識的發言內容的訊息透過聊天應用程式,發送至
使用者的通訊終端(S504)。分析的結果,在沒有應執行之卡通人物發言的情況下(S504:否),則控制部71過渡到步驟S505的處理。
在步驟S505中,控制部71生成例如,0至100的隨機值(S505)。此外,隨機值不限於0至100的範圍。控制部71比較生成的隨機值、與用以與其比較的閾值之間的大小。在隨機值大於閾值的情況下(S506:是)過渡到步驟S507,在隨機值為閾值以下的情況下(S506:否),結束處理。
在步驟S507中,控制部71讀出對話履歷資料755及聊天履歷資料756。從讀取到的對話履歷資料755的對話內容資訊903與聊天履歷資料756的聊天內容資訊1003抽取關鍵字(S507)。其可以藉由例如,構文分析等予以實現。並且選擇,例如,最近的(例如1天)關鍵字的登場頻率高的關鍵字。該關鍵字的選擇可以是隨機的,也可以是基於其他的基準做選擇。
控制部71參考隨機對話資料757,辨識選擇的關鍵字及步驟S501中擷取的環境信號中是否有相符的對話(S508)。並且,發送處理部715將表示已辨識的發言的內容的訊息,透過聊天應用程式,發送至使用者之通訊終端(S509)。又,此時,發送處理部715在存在有對應的卡通人物影像時,將其影像在聊天上顯示用的影像資料透過聊天應用程式發送,完成處理。例如,卡通人物所說的對話的內容為與「棒球」有關的內容的話,發送卡通人物穿著棒球的制服的影像,或發送拿著球或球棒等物品的影像。
在聊天模式中重複執行圖21的處理。如此,在聊天中之隨機的對話中,由於卡通人物係基於與使用者過去交談之對話內容、或已執行之聊天的內容進行發言,因此使用者感到與卡通人物之間累積的歷
史,更加對卡通人物感到親近。並且,影像顯示裝置1藉由圖16的處理與圖21的處理,實現對話的內容與聊天的內容互相連動的構造。此外,如果以聊天的內容被反映到以後的對話的內容中,並且對話的內容也被反映到以後的聊天的內容中的方式構造的話,顯然影像顯示裝置1也可以依據本實施形態所示之運算法以外的運算法動作,實現同樣的構造。
藉由上述的構造,可以進行例如,如圖22A所示之聊天。圖22A顯示使用者之通訊終端中之聊天畫面的表意例。在聊天畫面W3中,顯示使用者與卡通人物的發言內容。使用者利用通訊終端的觸控面板(未圖示),在輸入部b21輸入訊息,觸碰發送部b22發送訊息。
又,在此聊天中,如圖22B的聊天畫面W4所示,與一般的聊天不同,從卡通人物,發出提問,作為對該提問的回答,也可以顯示選項b220。這可以藉由在使用者之通訊終端上安裝與影像顯示裝置1之間專用的聊天應用程式予以實現。又,在此情況下,聊天伺服器具有將實現此控制用的從影像顯示裝置1來的指令中繼到使用者之通訊終端的功能。在此指令中也包含使用者所選擇的回答的指令。藉由上述構造,可以給使用者與卡通人物玩遊戲的感覺。因此,使用者可以以玩遊戲的感覺與卡通人物享受聊天。
此外,本實施形態中將利用對話履歷資料755及聊天履歷資料756的對話或聊天設定為以隨機方式執行,然而並不限於此,顯然也可以設定為在滿足預先規定的條件的情況下必然執行的方式。
《與聲音有關的動作》例如,使用者向著麥克風704呼叫卡通人物的名字時,可以使影像顯示裝置1顯示對應於該名字的卡通人物的影像。又,使用者對所顯示的卡通人物說出特定的話題時,可以使影像顯示裝置1輸出對使用者應答的聲音。
因此,使用者可以在任何時候召喚喜歡的卡通人物,並將此卡通人物等顯示在可以看起來更立體的透明的外殼2之中。又,使用者朝著卡通人物等說話時,可以使卡通人物等的動作好比是對應於使用者的話做舉動。因此,可以給使用者有與卡通人物等在相同的空間下一起生活般的感覺。
又,可以根據聲音輸入,控制照明之點亮/關掉。例如,從麥克風704輸入「關燈」或「晚安」的聲音時,控制部71從儲存裝置75取出預先與上述文字列設定關聯並儲存在儲存裝置75中的與照明之關掉有關的遙控資訊,並從紅外線LED703發送對應的紅外線資訊。藉此,可以將室內的照明關掉。又,同樣的,可以根據「歡迎回家」或「早安」點亮照明。此外,在此利用的信號也可以是紅外線資訊以外的信號。
再者,將上述聲音輸入與藉由人體感測器702的人體檢測組合的控制動作也是可能的。例如,從麥克風704輸入由使用者所說的「我出門了」的聲音時,控制部71過渡到對應於從此聲音得到的文字列的監視模式。此外,也可以對應於卡通人物等說的「路上小心」而過渡到監視模式。
監視模式係使用者不存在於室內的狀態下的模式。因此,監視模式可以在輸入使用者所說的「我回來了」的聲音,且偵測從此聲音得到的文字列時解除。此外,也可以對應於卡通人物等所說的「歡迎回家」而解除監視模式。
在監視模式中,例如,藉由人體感測器702檢測到人時,控制部71可以判斷此為異常,並進行通知。具體而言,可以從揚聲器705輸出指定的警報音或警告訊息,或是透過通訊部76對預先登錄的收信人發送指定的訊息。又,此時,控制部71可以使照相機722對室內攝影,
並將影像儲存在儲存裝置75中,或是透過通訊部76對預先登錄的收信人發送影像。
此外,在監視模式中藉由人體感測器702檢測到人之後,可以立刻判斷為異常並進行通知,又,也可以在一定時間內監視模式未解除的情況下判斷為異常並進行通知。
《與紅外線LED有關的控制動作》作為利用紅外線LED703的控制動作,可以進行以下的動作。具體而言,控制部71在到了藉由計時器程式預先設定的起床時刻時,基於與該時刻資訊設定關聯的行動資訊,控制對應的設備的動作。
例如,在登錄了在起床時(7:00)「照明點亮」,在就寢時(23:00)「照明關掉」之計時器程式的情況下,控制部71到了7:00,從儲存裝置75取出「照明點亮」的遙控資訊,並從紅外線LED703發送對應的紅外線資訊,到了23:00,則從儲存裝置75取出「照明關掉」的遙控資訊,並從紅外線LED703發送對應的紅外線資訊。如此一來,可以在指定的日期和時間自動地使指定的設備動作。
此外,也可以根據藉由溫濕度感測器611檢測到的溫濕度進行空調等的開啟/關閉控制,或根據時間帶進行電視的開啟/關閉控制。
《與感測器有關的控制動作》使用光感測器721,例如,儘管是白天卻檢測到沒有開窗簾,可以提醒使用者打開窗簾。
具體而言,作為日曆資訊將日出的時刻預先儲存在儲存裝置75中,在過了該時刻,從光感測器721輸入的照度仍未滿足指定的照度的情況下,控制部71從揚聲器705輸出預先儲存在儲存裝置75中的聲音資料(「開窗簾吧」)。
《與噪音感測器有關的控制動作》可以使用噪音感測器613,例如,在電視持續打開長時間時提醒使用者。具體而言,控制部71基於藉由噪音感測器613輸入的聲音的音量、頻率等,判斷電視被打開,從判斷時開始計時,並在該狀態的時間超過預定時間的情況下,取出預先儲存在儲存裝置75中的聲音資料(「關掉電視吧」),並從揚聲器705輸出。藉此,除了在節能上產生貢獻之外,可以給使用者好比被妻子提醒般的感覺。
《與振動感測器有關的控制動作》可以使用振動感測器612,進行地震的偵測或其通知動作。
例如,在藉由人體感測器702沒有檢測到人的狀態時,藉由振動感測器612檢測到指定的大小的振動的情況下,判斷為地震發生,控制部71可以從揚聲器705輸出指定的警報音或警告訊息,或透過通訊部76向預先登錄的收信人發送指定的訊息。
另一方面,在藉由人體感測器702檢測到有人的狀態時,藉由振動感測器612檢測到指定的大小的振動的情況下,判斷其為來自使用者等人為的行為,而不進行通知。此外,在此情況下,例如,可以從揚聲器705輸出聲音訊息(「不能搖動!」)。如此一來,可以高精度區別地震與生活振動,並分別進行對應的動作。
《與溫濕度感測器有關的控制動作》可以對應於溫濕度感測器611進行指定的聲音輸出控制。例如,在藉由溫濕度感測器611偵測到的溫度小於10℃的情況下,控制部71可以在指定的時序從揚聲器705輸出「今天好冷呢」的聲音。
又,在藉由溫濕度感測器611偵測到的濕度小於40%的情況下,可以在指定的時序從揚聲器705輸出「現在很乾燥!不要感冒了喔」的聲音。
《與影像有關的動作》可以對應於以照相機722攝影到的影像進行影像顯示及聲音輸出控制。例如,可以利用以照相機722擷取的影像執行臉部追踪或表情偵測,而變更卡通人物的影像。
具體而言,在使用者移動時,可以顯示如同卡通人物看著使用者的卡通人物影像。又,也可以顯示卡通人物有時背對有時看著使用者的卡通人物影像。再者,使用者笑的時候,可以顯示跟著笑的卡通人物影像。又,使用者在看著不同方向之後與卡通人物四目相交,可以在四目相交的時序顯示微笑的卡通人物影像。再者,可以在使用者使用已登錄在影像顯示裝置1中的杯子喝飲料時,輸出「我也要喝」的聲音,並顯示以相同的杯子喝飲料的卡通人物影像。再者,可以在使用者穿著已登錄在影像顯示裝置1中的衣服時,輸出「好酷!」的聲音。
此外,也可以做各式各樣的輸入輸出控制。
例如,可以基於溫濕度或天氣資訊的輸入資訊,輸出「最好帶傘喔」的聲音,對於從使用者輸入的「穿什麼呢」的聲音,顯示對應於溫濕度、天氣資訊、日曆資訊等的建議的服裝。
《對應於好感度的動作》影像顯示裝置1所顯示的卡通人物可以根據卡通人物對使用者的好感度改變動作。例如,作為卡通人物的設定資訊,預先設定喜歡的話語、臉部色等嗜好、或喜愛的動作、喜歡別人對自己做的事等卡通人物資訊,同時預先設定卡通人物對使用者的好感度。並且,可以在使用者做了與卡通人物的嗜好相符的對話或聊
天、行動的情況下,使卡通人物的好感度值上升,並在使用者做了不相符的對話或聊天、行動時,使卡通人物的好感度下降。
並且,更可以在儲存裝置75中儲存規定對應於好感度值的卡通人物的行動的資訊。例如,在使用者接近卡通人物的情況下,卡通人物說「太近了喔」的發言時,可以在好感度低的情況下輸出生氣的語調的聲音,而在好感度高的情況下輸出害羞的語調的聲音。因此,可以在儲存裝置75中儲存複數種對應於好感度的相同內容的台詞的聲音。如此一來,可以使影像顯示裝置1的卡通人物更具有人情味,而讓使用者感到更有親近感。
又,影像顯示裝置1也可以實現如下所述之處理。
《起床判斷系統》控制部71可以利用例如,包含以日曆網站登錄在儲存裝置75中的使用者的起床時刻的日曆資訊、與資料管理部716所擷取的時刻,進行鬧鈴的呼喚。其後,例如,使用者從床上起來,在分析部712偵測到的臉達到一定程度以上的大小時,控制部71判斷為起床,並執行使用者起床後的處理。例如,也可以是使用者將自己的通訊終端的日程表資訊發送至影像顯示裝置1,影像顯示裝置1依據接收到的日程表資訊中所示的內容,進行動作。例如,在日程表資訊中有「23日6點起床」的情況下,控制部71可以在23日的6點,使卡通人物做叫醒使用者的動作。
《外出判斷系統》控制部71可以在例如,分析部712偵測的使用者的「我出門了」的聲音,加上在擷取處理部711所擷取的使用者之通訊終端的位置資訊為在家的外面的情況下,判斷使用者已外出。又例如,可以在以人體感測器702偵測不到使用者的存在,加上在擷取
處理部711所擷取的使用者之通訊終端的位置資訊為在家的外面的情況下,判斷使用者已外出。
《回家判斷系統》控制部71例如,可以在上述的外出判斷中判斷使用者已外出之後,以人體感測器702偵測到使用者的存在的情況下,判斷使用者已回家。該偵測也可以是以人體感測器702偵測人,並從以照相機722拍攝的影像,判斷使用者的臉。
《陷入睡眠狀態判斷系統》控制部71在使用者在家裡時,例如,藉由人體感測器702,1小時偵測不到使用者的動作,且,分析部712分析藉由光感測器721偵測到的照度為未關掉照明的程度的明亮度時,判斷使用者陷入睡眠狀態。在此所謂「陷入睡眠狀態」係指使用者在看電視或玩遊戲等什麼的作業中,沒有關掉照明就睡著的狀態。影像顯示裝置1可以在判斷使用者陷入睡眠狀態的情況下,且房間的照明未關掉的情況下,控制照明,以將房間的照明關掉。
《起床時刻確認系統》控制部71可以在,例如,第二天早上的外出時間比平時早上更早的情況下,為了確保平時早上的準備時間,提議將第二天早上的鬧鈴時刻提前。具體而言,在第二天的鬧鈴時刻與第二天的外出預定時刻的時間差比起以平均的起床時刻與外出時刻的時間差求算的外出準備時間更短的情況下,提議將第二天早上的鬧鈴時刻提前更早。例如,控制部71從聲音資料752選擇並輸出「明天的出發時刻好像很早,要不要把鬧鈴時刻提前?」的聲音。又,控制部71在使用者答覆「好」的情況下,變更登錄在儲存裝置75中的鬧鈴時刻。
又例如,控制部71可以在今天早上遲到的情況下,提議將第二天早上的鬧鈴時刻提前。具體而言,控制部71在今天早上的外出時刻比外出預定時刻晚了預定時間(例如,10分鐘)的情況下,可以提議
將鬧鈴時間設成早於預定時刻。例如,控制部71從聲音資料752,選擇並輸出「今天又遲到了吧!明天要不要早10分鐘起床看看?」的聲音。又,控制部71在使用者答覆「好」的情況下,變更登錄在儲存裝置75中的鬧鈴時刻。
《蹲立運動判斷功能》控制部71例如,可以具備算蹲立運動的次數的系統,其由分析部712偵測臉部辨識的上下運動。又,控制部71不只伏地挺身,也可以應用到算仰臥起坐的次數或伏地挺身的次數的系統。藉此,顯示處理部713可以顯示在激勵使用者的卡通人物影像與表現用影像。又,聲音輸出部714可以輸出卡通人物在計算的聲音或激勵的聲音。
《照相機自拍系統》控制部71可以設定為例如,使用者可以與卡通人物做自拍攝影。此時,使用者移動照相機722拍攝可能的範圍內,以照相機722拍攝使用者的影像,則控制部71將卡通人物影像與拍攝影像合成。又,控制部71可以將卡通人物影像合成的攝影影像,透過網際網路等上傳至SNS(社交網路服務)等的提供伺服器。
《喝咖啡休息時間系統》控制部71可以使卡通人物對使用者提議喝咖啡休息。例如,在資料管理部716所管理的時刻為預定時刻的情況下,發送處理部715對咖啡機發送操作信號。又,顯示處理部713選擇並顯示對使用者提醒喝咖啡休息的影像,聲音輸出部714選擇並輸出提醒使用者喝咖啡休息的聲音。再者,分析部712從影像或聲音,偵測使用者喝完咖啡時,控制部71結束喝咖啡休息。例如,控制部71可以藉由分析部712偵測使用者的「很好喝」或「承蒙款待了」的聲音,來做結束。
《呼叫與回應系統》控制部71可以使使用者與卡通人物互相叫名字。聲音輸出部713可以輸出呼叫使用者資料754中所登錄的名字或暱稱的卡通人物的聲音。又,藉由分析部712偵測到使用者所發出的卡通人物的名字或暱稱的聲音時,則聲音輸出部713可以輸出呼叫使用者的名字或暱稱的卡通人物的聲音。
《更衣建議系統》控制部71可以對使用者的服裝搭配做建議。例如,藉由分析部712,從照相機722所拍攝的影像判斷「臉部上方的正方形的帽子」、「臉部下方的長的長方形的領帶」等使用者配戴在身上的東西的形狀或臉部色。又,控制部71可以綜合地判斷從擷取處理部711所擷取的環境資訊分析的使用者的表情或心情、登錄在儲存裝置75中的使用者的日程表、天氣資訊、或季節等,而建議臉部色。
《操作請求》控制部71可以透過通訊終端等資訊處理裝置,從使用者接收設備的操作、日程表管理的請求。例如,在設備的操作被請求的情況下,發送處理部715根據請求的信號,輸出操作信號。又,在日程表的登錄或變更被請求的情況下,資料管理部716根據此信號,登錄或更新資料。具體而言,如參照圖13B說明如上者,可以利用聊天功能、或使用如備忘錄或留言板等,操作控制部71。由於使用者可以感到拜託卡通人物做自己希望卡通人物做的事,因此可以感到好像拜託人一樣。
《賭氣怒睡模式》控制部71在滿足指定的條件的情況下,可以顯示賭氣怒睡的卡通人物影像。例如,在影像顯示裝置1未連接外部的網絡的情況下,或,影像顯示裝置1與使用者之通訊終端之間沒被網絡連接的情況下,選擇並顯示賭氣怒睡的的影像。藉此,由於影像顯示裝
置1顯示對使用者做訴求的卡通人物影像,因此可以更加像一個人,更真實的表達。
《興趣的變遷運算法》在使用者資料754中登錄有複數種類的興趣或愛好嗜好時,控制部71可以隨機地從複數之中選擇任一者,並反映於輸出的影像或聲音中。例如,此時,在使用者資料754中針對使用者的嗜好資訊分別設定權重值,控制部71可以考慮其權重值,選擇輸出的影像或聲音。又,可以使該等愛好嗜好的權重值隨著時間的經過增加或衰減。再者,也可以在權重值成為指定的值以下,且其他的嗜好的權重值變大時,選擇別的愛好嗜好的話題。
《生活模式的運算法》控制部71可以在生活模式中,基於「使用者的嗜好資訊」或「卡通人物內部的嗜好資訊」,選擇顯示的影像或輸出的聲音。例如,若是使用者喜歡漫畫的話,則控制部71可以在生活模式中,顯示看漫畫的卡通人物影像,並輸出對應的聲音。又,若是使用者喜歡烹飪的話,則控制部71可以顯示在空閒時間烹飪的卡通人物影像,並輸出對應的聲音。
《興趣談話》控制部71在與使用者發生互動的一定時間之後,可以輸出與該互動關聯的話題的影像及聲音。控制部71將與使用者發生互動的時刻儲存起來,並判斷從那開始是否已經過預定時間,來實現該控制。
《使用者行動分析估測系統》作為控制部71用以判斷使用者的行動的資料,可以參考作為教師資料預先給定的複數型式的資料而導出。具體而言,利用影像顯示裝置1中具備的各種感測器,擷取使用者做了指定的行動時的感測資料,與顯示當時的指定的行動的資訊設定關聯並儲存起來,作為教師資料。並且,藉由將從影像顯示裝置1中具備的
各種感測器所輸入的資料,與教師資料比較,可以分析並估測使用者的行動。藉此,控制部71可以使卡通人物進行對應於使用者的行動的動作。又,控制部71可以根據使用者的行動逐次更新此教師資料。
《人情感追蹤系統》又,影像顯示裝置1可以估測使用者的情感,使卡通人物執行對應於使用者情感的動作。具體而言,執行以下所述處理。
控制部71可以從以照相機722拍攝到的使用者的臉部影像進行表情辨識處理,估測使用者的情感。此係將對應於各種情感的臉部影像的特徵量的資訊預先儲存在儲存裝置75中,藉由與拍攝到的影像進行型式匹配,辨識估測為最接近的臉部影像,以辨識對應的情感。又,也可以藉由從麥克風704輸入的聲紋估測使用者的情感。此亦與臉部影像的情況同樣的,將對應於各種情感的聲音資訊(例如,頻率或音量等)的資訊預先儲存在儲存裝置75中,根據被輸入的聲紋的特徵量,估測使用者的情感。又,或者,控制部71從與使用者之間的對話或聊天的內容,估測使用者的情感。例如,從對話中的「很開心」或「真火大」等表示情感的話語,估測使用者的情感。
並且,影像顯示裝置1的控制部71可以根據儲存並設定在影像顯示裝置1中的卡通人物的個性,使卡通人物做迎合或鼓勵使用者的行動。例如,在判斷使用者的情感的結果,估測使用者感到寂寞的話,可以從聲音輸出部714輸出「嗯,很寂寞。不過,有我在呀?」或是「不需要為了那種事感到寂寞!沒事沒事!」等台詞的聲音。又,例如,也可以在估測到使用者情緒低落的情況下,說「加油!」鼓勵他。此外,該等卡通人物的行動僅為一例係毋庸置疑。
《謝謝學習系統》影像顯示裝置1的控制部71儲存在對話或聊天上從使用者傳輸的謝謝等表達感謝的話語的內容。並且,儲存當時的條件。亦即,控制部71(卡通人物)儲存使用者在「何時」、「做什麼」時說謝謝。亦即,將被使用者感謝時的「時序」與「卡通人物的行動」設定關聯並儲存在儲存裝置75中。並且,控制部71可以在「何時」之時序中,使卡通人物再現被感謝的行動。
《臉部學習系統》影像顯示裝置1的控制部71在判斷以照相機722拍攝到的影像中,包含與使用者不同的人物的臉部影像的情況下,可以將該臉部影像附加在聊天中,並詢問「這人是誰?」。對此,使用者回答說「是我母親」時,影像顯示裝置1將拍攝該人物得到的臉部影像與「母親」的話語設定關聯並儲存。又,影像顯示裝置1的控制部71對於使用者說的「是我母親」的回答,例如,回覆說「是母親呀。記住了」等訊息。又,在別的時序下,在拍攝得到儲存的人物的臉部影像的情況下,影像顯示裝置1可以將「您母親來了喔」的訊息發送至使用者的通訊終端。又,在可以估測那時該人物的行動的情況下,也可以包含該內容並發送。又,上述構造在影像顯示裝置1所拍攝到的臉部影像為使用者不知道的人物的臉的情況下,在防犯上也能派上用場。
《愛擔心系統》影像顯示裝置1可以在偵測到使用者外出之後(在人體感測器702偵測不到人經過預定時間之後),晚了一定程度以上的情況下(例如,現在的時刻為過了夜晚22點的情況下),藉由twitter(登錄商標)、郵件、聊天、電話等裝置連絡使用者。例如,控制部71可以發送「很晚了,沒事吧?」等訊息,也可以打電話。此外,在打電話的情況下,需要在影像顯示裝置1預先做與電話線路連接的設定。又,可以預先規定是否進行該行動的閾值,以隨機值是否超過此閾
值,判斷是否進行擔心使用者的行動。又,影像顯示裝置1可以以時間愈晚閾值愈高的方式控制。又,也可以根據當天早上的使用者的樣子,變更此閾值。例如,在估測使用者的健康狀況不好的情況下,將閾值設為低於通常的值予以控制。
《紅外線資訊監視系統》影像顯示裝置1更具備紅外線感測器,其可以擷取周圍的紅外線資訊,並使卡通人物進行對應於擷取到的紅外線資訊的行動。例如,在使用者操作了電視的遙控時,可以擷取並偵測從遙控輸出的紅外線資訊,並儲存開啟電視的時間、星期幾、與頻道。並且,改天,在相同的星期幾的相同的時間時,可以控制影像顯示裝置1操作電視並切到相同的頻道。
又,從紅外線感測器監控使用者的體溫或房間的溫度,在偵測到溫度變高時,影像顯示裝置1的控制部71使卡通人物對使用者進行提議「要開窗?」、「開風扇嗎?」、「要開空調嗎?」等的對話。
《觀看節目監視系統》影像顯示裝置1可以具備擷取並儲存與使用者所觀看的電視或收音機節目有關的資訊的構造。具體而言,從網絡上擷取電視節目資訊,對從電視發出的聲音,進行聲音人氣處理,以估測使用者觀看的節目。或者,影像顯示裝置1與各種家電連接,以擷取電視的開/關資訊或頻道資訊,並辨識使用者看過的節目。並且,可以從與儲存的節目有關的節目表擷取關鍵字,做為對話的材料。
例如,在雲端伺服器中,針對各播放局的節目,對進行什麼樣的對話進行聲音辨識,將各播放局的節目內容文本化,擷取雲端文本資訊。另一方面,在影像顯示裝置1中,從麥克風704擷取使用者觀看的節目的聲音資訊。並且,對擷取到的聲音進行聲音辨識,變換成使用者文本資訊。並且,藉由將雲端文本資訊與使用者文本資訊做比較與核
對,影像顯示裝置1可以辨識使用者在觀看哪個節目。並且,控制部71可以辨識使用者觀看的節目,將其節目名結合,例如,推薦「早上是A電視吧!」,並控制電視的遙控。
《察言觀色系統》影像顯示裝置1的控制部71可以設定為判斷使用者是否似乎很忙碌,並對應於所判斷的狀態進行行動,所謂察言觀色的行動。根據影像顯示裝置1的控制部71(擷取處理部711)所擷取之各種環境信號,判斷使用者的忙碌程度。例如,使用者的起床時刻晚,人體感測器702所偵測到使用者的位置,在預定時間內(例如,5分鐘以內)偵測到左右移動達預定次數以上(例如,10次以上)的情況下,則判斷使用者很忙碌,並控制影像顯示裝置1的控制部71使卡通人物不對使用者說話。又,在使用者不太移動,亦即,人體感測器702所偵測的使用者位置停止在預定範圍內的情況下,則控制控制部71使卡通人物對使用者說話。如此,影像顯示裝置1的控制部71可以使卡通人物視使用者的狀態,亦即,察言觀色,來判斷是否做出行動。
《臉部與眼睛跟踪系統》影像顯示裝置1的控制部71可以基於照相機722所擷取的使用者的臉部影像與眼睛的影像,偵測使用者的視線。例如,偵測使用者的臉部影像是否朝向影像顯示裝置1的方向,偵測眼睛的瞳孔是否兩者都朝向影像顯示裝置1的方向。並且,控制部71在使用者的視線朝向卡通人物的方向的情況下,可以使卡通人物害羞,或與使用者相對凝視。
《虛擬風系統》影像顯示裝置1的控制部71偵測到使用者對麥克風704吹氣時,可以使影像顯示裝置1內的世界發生吹風的效果。例如,可以是表現成卡通人物的衣服飄動。該構造除了麥克風704以外,也可以透過在影像顯示裝置1上設置風壓感測器予以實現。
《健康狀況管理系統》影像顯示裝置1可以透過通訊部76,從使用者所保有的體重計或運動量計等可以偵測使用者的狀態的設備,擷取使用者的狀態資訊。例如,在從體重計偵測到的使用者的體重在預定期間內減少了預定以上的情況下,控制部71可以使卡通人物說「有正常吃飯嗎?」,而在相對於身高使用者的體重比平均體重多了預定以上的情況下,可以推薦「得做點運動了!」。又,在使用者重複運動的情況下,控制部71可以參考以照相機722拍攝到的影像,使卡通人物輸出算重複運動的次數的聲音。例如,可以是算伏地挺身或蹲立運動的次數等。
《即時動作發行系統》影像顯示裝置1的控制部71可以透過通訊部76接收特殊的信號以做特殊的動作。具體而言,在開發經營側的人物的身體上穿著動作捕捉感測器,將人物的動作發送到全部的使用者的影像顯示裝置1上。影像顯示裝置1顯示與發送過來的動作進行相同動作的卡通人物,可以實現節目發行。例如,在作為特殊的信號接收到地震速報等的情況下,可以使聲音輸出部714輸出「在○○發生震度4的地震。請冷靜行動喔」的聲音。又,在特殊的信號內包含應顯示的影像資料的情況下,也可以顯示其影像資料。作為此影像資料,例如可以是真實存在的人物,例如,可以顯示名人的記者會,並輸出其聲音。藉此,例如,可以實現全像的節目發行。又,影像顯示裝置1可以藉由擷取真實存在的人物的影像資料,與擷取該人物的聲音資料,而可以顯示真實存在的人物的卡通人物。
《全像虛擬化身電話系統》在影像顯示裝置1上連接電話機,或影像顯示裝置1中具備電話功能的情況下,影像顯示裝置1也可以具備以下的功能。此時,影像顯示裝置1可以具備以下構造,其基於從照
相機722擷取到的影像,辨識使用者的表情,生成與所辨識的表情相同的表情的虛擬化身資訊,並向電話對手發送該虛擬化身資訊,使電話對手的顯示畫面顯示該虛擬化身影像。
《報告系統》影像顯示裝置1的控制部71偵測到使用者回家,可以使卡通人物對使用者報告卡通人物的一天。例如,分析部712在人體感測器702偵測不到使用者預定時間以上的狀態下,又重新檢測到使用者的情況下,判斷使用者回家了。如此一來,控制部71可以使卡通人物對使用者報告在周邊發生的事情(基於可以藉由各種感測器擷取的資訊,估測該現象發生的內容)。例如,溫濕度感測器611偵測到預定以上溫度達預定時間以上的情況下,使卡通人物報告說「今天很熱耶」,在溫濕度感測器611偵測到預定以上的溫度與濕度達預定時間以上的情況下,報告說「今天很悶熱喔」,在接收到地震速報的情況下,報告說「今天發生地震了。您那沒事吧?」、或使卡通人物報告說「您不在時,誰誰來了喔」。
《健康狀況不良連絡電話系統》影像顯示裝置1的控制部71在影像顯示裝置1中配備有電話功能的情況下,在使用者的健康狀況差的情況下,依據來自使用者的指示,代替使用者對使用者的辦公室或學校等預先設定的電話號碼,打電話連絡「由於健康狀況不良今天休息」。
《藉由特定裝置的手勢控制系統》影像顯示裝置1的控制部71可以依據來自使用者所穿著或持有的特定的物品的信號,控制卡通人物。例如,在特定的物品為戒指的情況下,藉由影像分析偵測到使用者在搓揉戒指的情況下,使卡通人物做看似尷尬的動作。又,或者,作為特定的物品,在使用者拿著筆形電筒左右搖動的情況下,控制部71可以顯示卡通人物拿著筆形電筒的影像,並投影使其手左右搖動的影像。
《卡通人物更衣系統》影像顯示裝置1的控制部71可以適當地變更卡通人物穿著的服裝或物品等。為此,控制部71將各種服裝或物品的顯示資料儲存在儲存裝置75中,或者,從外部的伺服器下載並擷取。並且,控制部71可以顯示穿著對應於來自影像顯示裝置1中配備的計時部(未圖示。用以偵測現在的日期和時間的時鐘)的包含日期和時間的季節、天氣、氣溫、或時間帶的服裝的卡通人物。
《瞬間移動系統》在使用者持有複數台依照上述實施形態的影像顯示裝置1的情況下,可以使各影像顯示裝置1連動,並僅在其中之使用者能夠確認的位置上顯示卡通人物。在此情況下,控制部701可以在使用者移動了的目的地上的影像顯示裝置1上,表現成如同卡通人物也移動過來的樣子。
《打掃系統》影像顯示裝置1的控制部71可以與家電的機器人吸塵器進行通訊,並控制機器人吸塵器,打掃使用者的室內。又,此時,控制部71可以辨識使用者平時有打掃的地方與沒有打掃的地方。
《刷牙聲援系統》影像顯示裝置1的控制部71藉由影像分析偵測到使用者在刷牙時,使卡通人物進行對使用者的刷牙聲援的行動,或是在偵測到使用者吃藥或在患部上塗藥時,使卡通人物對其行動進行聲援。
《運動選手動作捕捉系統》影像顯示裝置1可以擷取運動轉播等的影像,使卡通人物執行與運動轉播中登場的運動選手的動作相同的動作並投影影像。又,此時,使用者可以藉由使用者之通訊終端、影像顯示裝置1中具備的操作面板、或聲音等,指示卡通人物所面向的方向,並使影像顯示裝置1顯示依照該指示的影像。又,此時,可以不是卡通人物,而是顯示運動選手本身的影像。
《實況錄影聲援系統》影像顯示裝置1在使用者觀看某些偶像等的實況錄影等的情況下,控制部71顯示卡通人物如同也在觀看該實況錄影的影像,並同時使卡通人物似乎在參加實況錄影般,發出喊聲、或做搖動螢光棒的動作。又,或者,在控制部71使卡通人物作為虛擬歌手,如同偶像般,做唱歌跳舞的動作的情況下,根據來自使用者的手打拍子或聲援,連動其動作。例如,可以偵測使用者的手打拍子的時序,並配合該時序輸出踏舞步的影像,或是配合使用者的聲援的音量變化行動。
《多代理系統》影像顯示裝置1可以在儲存裝置75中預先儲存與複數個卡通人物有關的資訊。並且,控制部71可以根據使用者的情況,選擇並投影使用的卡通人物。又,在影像顯示裝置1中配備多個核心,並以一個核心控制一個卡通人物的情況下,影像顯示裝置1可以同時投影複數個卡通人物。
《年齡經過系統》影像顯示裝置1在顯示卡通人物時,可以在一定時間使卡通人物增長年齡的方式顯示影像。例如,影像顯示裝置1可以在首次召喚卡通人物的情況下顯示嬰兒的狀態,從那時起,在每經過預定期間(例如,每經過一個月)時,改變卡通人物的影像,以如同卡通人物成長的方式顯示。
《各種語言對應系統系統》可以使聲音辨識的運算法或對話系統配備有對應於各國的各話語的模式,使影像顯示裝置1可以對應於各種語言。
《原始卡通人物系統》影像顯示裝置1顯示的卡通人物可以是使用者所原始製作者。影像顯示裝置1的構造可以是準備製作時必要的各種資料的格式,並讓使用者可以編輯,或是編輯本身為利用使用者
的PC等製作並傳送到影像顯示裝置1中者。又,使用者所製作的卡通人物資料也可以透過網絡發行。
《各種卡通人物召喚系統》作為影像顯示裝置1顯示的卡通人物,可以使用虛擬實境(Virtual Reality,VR)內容的卡通人物的資料。例如,可以將使用者利用頭戴式顯示器(Head Mounted Display,HMD)玩的遊戲等的卡通人物作為顯示在影像顯示裝置1的卡通人物。又,不限於VR內容,也可以下載各種遊戲(例如,智慧型手機遊戲等)的卡通人物作為顯示的卡通人物使用。
《聊天功能的外部安裝》雖然在上述中使影像顯示裝置1具有聊天功能,然而聊天功能也可以是由外部的裝置執行。亦即,使用者利用通訊終端,與影像顯示裝置1的卡通人物作訊息交換時,實際上可以是與外部伺服器進行交換的構造。在此情況下,外部的伺服器除了持有作為卡通人物的應答運算法之外,有事先從影像顯示裝置1擷取與使用者有關的對話履歷資料755、聊天履歷資料756的必要。因此,外部的裝置可以具有在從使用者輸入聊天的情況下,存取影像顯示裝置1並擷取該等資訊的構造。又,外部的裝置與使用者之通訊終端的聊天結束後,可以使外部的裝置將聊天履歷資料756發送至影像顯示裝置1,且影像顯示裝置1將接收的聊天履歷資料756覆寫到儲存裝置75。藉由上述實施方式,可以實現在影像顯示裝置1的外部設置具有聊天功能之裝置的系統。
如上所述,依照本發明之第一實施形態的影像顯示裝置1,可以將顯示對象的卡通人物等顯示成如同存在於相同的空間的實體物般。又,在影像顯示裝置1中,使卡通人物等進行對應於使用者的聲音等環境資訊的舉動。再者,在影像顯示裝置1中,可以與卡通人物影像一起顯示用以表達卡通人物的心情等的表現影像。再者,針對與使用者進行
過的對話或聊天的內容,由於在最新的對話或聊天中反映出過去的內容,因此使用者更加對卡通人物感到親近感,湧出感情。
藉此,可以讓使用者感到與好比實際存在的卡通人物等存在於相同的空間般的感覺。又,可以讓使用者對卡通人物感到更親近。以上說明了上述實施形態中的各處理係藉由影像顯示裝置1的控制部71執行影像顯示程式、對話程式、聊天程式等所實現者。另一方面,影像顯示裝置1中,取代CPU,也可以藉由積體電路(Integrated Circuit,IC)晶片、大型積體電路(Large Scale Integration,LSI)、場可程式閘陣列(Field Programmable gate array,FPGA)、複雜可程式邏輯元件(Complex Programmable Logic Device,CPLD)等形成的邏輯電路(硬體)或專用電路實現各處理。又,該等電路可以藉由一或複數個積體電路予以實現,上述實施形態中所示之複數個功能部的功能可以藉由一個積體電路予以實現。LSI由於整合度的不同,也被稱為VLSI、極大型LSI、超大型LSI等。
亦即,如圖23所示,影像顯示裝置1可以由控制電路71a、輸入電路72a、輸出電路73a、操作電路74a、儲存電路75a、通訊電路76a所構造。控制電路71a所包含的擷取控制電路711a、分析電路712a、顯示處理電路713a、聲音輸出電路714a、發送處理電路715a及資料管理電路716a係藉由影像顯示程式P1、對話程式P2、聊天程式P3等進行控制。與上述實施形態中所示各部分具有相同名稱者係分別具有相同功能。
又,作為上述儲存裝置75,可以使用「非暫時性有形的媒介」,例如,磁帶、磁碟、插卡、半導體記憶體、可程式化的邏輯電路等。又,上述影像顯示程式P1、對話程式P2、聊天程式P3也可以是透過能夠傳送該影像顯示程式P1、對話程式P2、聊天程式P3的任意的傳送媒
介(通訊網絡或廣播波形等)供應給上述處理器。本發明也可以是藉由電子性的傳送將上述影像顯示程式具體化,並以嵌入於載波中的資料信號的形態予以實現。又,不僅限於該等程式,與卡通人物有關的聲音資料與影像資料也可以是從儲存有該等資料的伺服器下載並在影像顯示裝置1中使用者。藉此,可以在影像顯示裝置1中享受各式各樣的卡通人物。又,也可以是使同一卡通人物的新的聲音資料與影像資料能夠下載並使用的構造。又,儲存在儲存裝置75中的各種資料可以不必是儲存裝置75,也可以儲存在影像顯示裝置1能夠存取網絡上的伺服器等外部裝置。並且,也可以是影像顯示裝置1的控制部71透過通訊部76,在每次必需的時序下存取外部伺服器並擷取必需的資訊。例如,可以將上述實施形態中之語言模式與聲音模式等資訊預先儲存在網絡上。
此外,上述影像顯示程式P1、對話程式P2、聊天程式P #可以使用例如,ActionScript、JavaScript(登錄商標)、Python、Ruby等描述語言、C語言、C++、C #、Objective-C、Java(登錄商標)等編譯器語言、組合語言、暫存器傳送語言(Register Transfer Language,RTL)等實施。
(產業利用性)本發明可以適合地利用在影像顯示裝置中,該影像顯示裝置係可以顯示卡通人物影像,並將其與使用者進行的對話及與使用者之通訊終端之間交換的聊天的內容互相連動者。
以上所揭露的僅為本發明的優選實施例而已,當然不能以此來限定本發明之權利範圍,因此依本發明申請專利範圍所作的等同變化,仍屬本發明所涵蓋的範圍。應當理解,以上的描述意圖在於說明而非限制。例如,上述實施例(和/或其方面)可以彼此組合使用。此外,根據本發明的啟示可以做出很多改型以適於具體的情形或材料而沒有偏離
本發明的範圍。通過閱讀上述描述,權利要求的範圍和精神內的很多其它的實施例和改型對本領域技術人員是顯而易見的。
1‧‧‧影像顯示裝置
700‧‧‧顯示部
717‧‧‧對話部
718‧‧‧聊天部
Claims (19)
- 一種影像顯示裝置,包含:一顯示部,用以顯示卡通人物;一對話部,用以執行上述卡通人物與使用者的對話;以及一聊天部,用以執行上述卡通人物與上述使用者之通訊終端的根據內容的聊天,其中上述根據內容的聊天是上述聊天部基於上述聊天部已執行之與上述使用者之通訊終端的聊天的內容,以及上述對話部已執行之與上述使用者的對話的內容,選擇對上述使用者之通訊終端執行之聊天的內容,上述對話部基於上述對話部已執行之與上述使用者的對話的內容,以及上述聊天部已執行之與上述使用者之通訊終端的聊天的內容,選擇對上述使用者執行之對話的內容,上述顯示部基於從上述對話部與上述使用者的對話的內容以及上述聊天部與上述使用者之通訊終端的聊天的內容中抽取的與體育運動相關的關鍵字,顯示上述卡通人物穿著該體育運動的制服的影像或顯示上述卡通人物拿著該體育運動的所用器材的影像。
- 如申請專利範圍第1項所述之影像顯示裝置,其中:上述對話部選擇和與上述使用者之通訊終端的聊天的內容相關的對話的內容。
- 如申請專利範圍第1項所述之影像顯示裝置,其中:上述顯示部基於上述對話部與上述使用者的對話的內容,以及上述聊天部與上述使用者之通訊終端的聊天的內容,以變更顯示上述卡通人物的顯示態樣。
- 如申請專利範圍第1項所述之影像顯示裝置,更包含:一偵測部,用以偵測附近,上述聊天部基於偵測部的偵測,並透過一通訊部將聊天發送到上述使用者之通訊終端。
- 如申請專利範圍第1項所述之影像顯示裝置,其中:將聊天的內容在上述使用者之通訊終端的畫面顯示為訊息,上述訊息與上述卡通人物相關的影像結合顯示在上述使用者之通訊終端的畫面。
- 如申請專利範圍第1項所述之影像顯示裝置,其中:聊天的內容在上述使用者之通訊終端的畫面作為訊息顯示,上述聊天部基於上述聊天部與上述使用者之通訊終端的聊天的內容,以及上述對話部與上述使用者的對話的內容,選擇在上述使用者之通訊終端的畫面顯示的訊息。
- 如申請專利範圍第1項所述之影像顯示裝置,其中:上述對話部基於上述對話部與上述使用者的對話的內容,以及上述聊天部與上述使用者之通訊終端的聊天的內容,選擇基於估測上述使用者的情感的對話的內容。
- 如申請專利範圍第1項所述之影像顯示裝置,更包含:一擷取部,用以擷取包含使用者的位置、使用者的動作以及外部環境情報至少其中之一的環境信號,其中:上述對話部辨識上述擷取部擷取的上述環境信號相關的對話,參考對話資料,基於參考的上述對話資料選擇對上述使用者執行之對話的內容。
- 如申請專利範圍第1項所述之影像顯示裝置,更包含: 一外殼,其一部分或全部係由透光性構件所構造;以及一螢幕,其設於上述外殼之內部,並具有透光性,其中:上述顯示部在上述螢幕上投影上述卡通人物,並顯示上述卡通人物。
- 如申請專利範圍第1項之影像顯示裝置,更包含:一第一儲存部,用以儲存上述對話部所執行之與上述使用者之對話有關的資訊;以及一第二儲存部,用以儲存上述聊天部所執行之與上述聊天有關的資訊,其中:上述對話部基於儲存在上述第一儲存部與上述第二儲存部中的資訊,選擇對上述使用者執行之對話的內容。
- 如申請專利範圍第10項之影像顯示裝置,其中:上述聊天部基於儲存於上述第一儲存部與上述第二儲存部中的資訊,選擇對上述使用者之通訊終端執行之聊天的內容。
- 如申請專利範圍第1項之影像顯示裝置,其中:上述顯示部顯示上述卡通人物,並顯示基於上述對話部的對話的內容的影像。
- 如申請專利範圍第1項之影像顯示裝置,更包含一揚聲器,其中:上述對話部係從上述揚聲器輸出上述卡通人物的聲音。
- 如申請專利範圍第13項之影像顯示裝置,更包含一麥克風,其中:上述對話部分析輸入到上述麥克風的上述使用者的聲音,並從上述揚聲器輸出基於上述使用者的聲音的上述卡通人物的聲音。
- 如申請專利範圍第14項之影像顯示裝置,其中:上述對話部將上述使用者的聲音文本資料化,並將分析上述文本資料所得到的名詞儲存於上述第一儲存部中,作為上述對話的內容。
- 如申請專利範圍第1項之影像顯示裝置,更包含:一通訊部,用以與影像顯示裝置外部的聊天伺服器通訊,其中:上述聊天部透過上述通訊部,分析從上述聊天伺服器接收的來自上述使用者之通訊終端的文本資料,而選擇對上述使用者之通訊終端執行之聊天的內容,將選擇的基於聊天的內容的上述文本資料發送到上述影像顯示裝置外部的上述聊天伺服器。
- 如申請專利範圍第10或11項之影像顯示裝置,其中:上述聊天部將分析文本資料所得到的名詞儲存在上述第二儲存部中,作為上述聊天的內容。
- 一種話題選擇方法,包含以下各步驟:一顯示步驟,用以顯示卡通人物;一對話步驟,用以執行上述卡通人物與使用者的對話;一聊天步驟,用以執行上述卡通人物與上述使用者之通訊終端的根據內容的聊天;一第一話題選擇步驟,用以基於以前已執行之與上述使用者的對話的內容及上述聊天步驟中已執行之與上述使用者之通訊終端的聊天的內容,選擇上述對話步驟中接著要對上述使用者執行的對話的內容;以及一第二話題選擇步驟,用以基於以前已執行之與上述使用者之通訊終端的聊天的內容及上述對話步驟中已執行之與上述使用者的對話的內容,選擇上述聊天步驟中接著要對上述使用者之通訊終端執行之聊天的內容, 上述顯示步驟基於從上述對話步驟與上述使用者的對話的內容以及上述聊天步驟與上述使用者之通訊終端的聊天的內容中抽取的與體育運動相關的關鍵字,顯示上述卡通人物穿著該體育運動的制服的影像或顯示上述卡通人物拿著該體育運動的所用器材的影像。
- 一種話題選擇程式,用以使電腦實現以下功能:一顯示功能,用以顯示卡通人物;一對話功能,用以執行上述卡通人物與使用者的對話;一聊天功能,用以執行上述卡通人物與上述使用者之通訊終端的根據內容的聊天;一第一話題選擇功能,用以基於以前已執行之與上述使用者的對話的內容及上述聊天功能所執行之與上述使用者之通訊終端的聊天的內容,選擇上述對話功能接著要對上述使用者執行的對話的內容;以及一第二話題選擇功能,用以基於以前已執行之與上述使用者之通訊終端的聊天的內容及上述對話功能中已執行之與上述使用者的對話的內容,選擇上述聊天功能中接著要對上述使用者之通訊終端執行之聊天的內容,上述顯示功能基於從上述對話功能與上述使用者的對話的內容以及上述聊天功能與上述使用者之通訊終端的聊天的內容中抽取的與體育運動相關的關鍵字,顯示上述卡通人物穿著該體育運動的制服的影像或顯示上述卡通人物拿著該體育運動的所用器材的影像。
Applications Claiming Priority (7)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016141930A JP2018014575A (ja) | 2016-07-19 | 2016-07-19 | 画像表示装置、画像表示方法及び画像表示プログラム |
JP2016141931A JP6165302B1 (ja) | 2016-07-19 | 2016-07-19 | 画像表示装置、話題選択方法、話題選択プログラム |
JP2016-141931 | 2016-07-19 | ||
JP2016-141930 | 2016-07-19 | ||
WOPCT/JP2016/078073 | 2016-09-23 | ||
??PCT/JP2016/078073 | 2016-09-23 | ||
PCT/JP2016/078073 WO2018016095A1 (ja) | 2016-07-19 | 2016-09-23 | 画像表示装置、話題選択方法、話題選択プログラム、画像表示方法及び画像表示プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
TW201802663A TW201802663A (zh) | 2018-01-16 |
TWI692717B true TWI692717B (zh) | 2020-05-01 |
Family
ID=60992172
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW106121155A TWI692717B (zh) | 2016-07-19 | 2017-06-23 | 影像顯示裝置、話題選擇方法及程式 |
Country Status (6)
Country | Link |
---|---|
US (1) | US10713006B2 (zh) |
KR (2) | KR20190100428A (zh) |
CN (1) | CN108140383A (zh) |
HK (1) | HK1252060A1 (zh) |
TW (1) | TWI692717B (zh) |
WO (1) | WO2018016095A1 (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI776643B (zh) * | 2021-08-19 | 2022-09-01 | 崑山科技大學 | 影像顯示裝置 |
Families Citing this family (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20190025534A (ko) * | 2016-07-15 | 2019-03-11 | 게이트박스 가부시키가이샤 | 입체 영상 표시장치 |
US11256460B2 (en) * | 2018-02-05 | 2022-02-22 | Disney Enterprises, Inc. | Digital companion device with display |
TWI647612B (zh) * | 2018-03-19 | 2019-01-11 | 技嘉科技股份有限公司 | 影像投射裝置 |
CN109144610B (zh) * | 2018-08-31 | 2020-11-10 | 腾讯科技(深圳)有限公司 | 音频播放方法、装置、电子装置及计算机可读存储介质 |
KR102663888B1 (ko) | 2018-09-18 | 2024-05-08 | 삼성전자주식회사 | 냉장고 및 그의 제어방법 |
US11353259B2 (en) | 2018-09-18 | 2022-06-07 | Samsung Electronics Co., Ltd. | Augmented-reality refrigerator and method of controlling thereof |
US20220051669A1 (en) * | 2018-09-25 | 2022-02-17 | Sony Corporation | Information processing device, information processing method, computer program, and interaction system |
WO2020071403A1 (ja) * | 2018-10-02 | 2020-04-09 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 情報提供方法 |
US11288733B2 (en) * | 2018-11-14 | 2022-03-29 | Mastercard International Incorporated | Interactive 3D image projection systems and methods |
KR102153922B1 (ko) * | 2018-12-20 | 2020-09-09 | 주식회사 원더풀플랫폼 | 가상 캐릭터를 이용한 엔터테인먼트 시스템 |
KR102667064B1 (ko) * | 2019-02-19 | 2024-05-20 | 삼성전자 주식회사 | 전자 장치 및 이를 이용한 카메라 기능과 연동하여 이모지 편집을 위한 사용자 인터페이스를 제공하는 방법 |
KR20220037466A (ko) * | 2019-07-19 | 2022-03-24 | 엘지전자 주식회사 | 영상표시장치 및 영상표시장치의 모션감지방법 |
JP2021071754A (ja) | 2019-10-29 | 2021-05-06 | ソニー株式会社 | 画像表示装置 |
JP2021071944A (ja) | 2019-10-31 | 2021-05-06 | ソニー株式会社 | 画像表示装置 |
US11212494B2 (en) * | 2019-12-30 | 2021-12-28 | Ray Yanez | Holographic Christmas tree projector assembly |
KR102279991B1 (ko) * | 2020-02-06 | 2021-07-21 | 동서대학교 산학협력단 | 소형 홀로그램 기반의 인공지능 헬퍼 시스템 |
CN111459451A (zh) * | 2020-03-31 | 2020-07-28 | 北京市商汤科技开发有限公司 | 交互对象的驱动方法、装置、设备以及存储介质 |
CN111526244A (zh) * | 2020-04-02 | 2020-08-11 | 维沃移动通信有限公司 | 一种闹钟处理方法以及电子设备 |
TWI758960B (zh) * | 2020-11-19 | 2022-03-21 | 友達光電股份有限公司 | 電子裝置 |
KR102619836B1 (ko) * | 2021-01-04 | 2023-12-29 | 주식회사 카카오 | 말풍선 배치 기법 |
KR102622621B1 (ko) * | 2021-01-04 | 2024-01-08 | 주식회사 카카오 | 대화형 게임을 제공하는 방법 |
KR102548641B1 (ko) * | 2021-01-04 | 2023-06-27 | 주식회사 카카오 | 대화형 게임에서 대화셋을 제공하는 방법 |
CN113010138B (zh) * | 2021-03-04 | 2023-04-07 | 腾讯科技(深圳)有限公司 | 文章的语音播放方法、装置、设备及计算机可读存储介质 |
JP7461654B2 (ja) | 2021-06-28 | 2024-04-04 | グリー株式会社 | 情報処理システム、情報処理方法、情報処理プログラム |
US11520217B1 (en) * | 2021-08-03 | 2022-12-06 | Sony Interactive Entertainment Inc. | Four-sided projection for augmented reality |
US20230351142A1 (en) * | 2022-04-28 | 2023-11-02 | Theai, Inc. | Relationship graphs for artificial intelligence character models |
TWI822267B (zh) * | 2022-08-22 | 2023-11-11 | 淡江大學學校財團法人淡江大學 | 沉浸式生態屋互動學習系統 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TW200601808A (en) * | 2004-06-28 | 2006-01-01 | Delta Electronics Inc | Integrated dialogue system and method thereof |
US20140307064A1 (en) * | 2011-10-14 | 2014-10-16 | National University Corporation Toyohashi University Of Technology | Three-dimensional image projector, three-dimensional image projection method, and three-dimensional image projection system |
TWI476449B (zh) * | 2012-04-24 | 2015-03-11 | Univ Minghsin Sci & Tech | 裸眼三維背投影顯示裝置 |
TWM504275U (zh) * | 2015-04-01 | 2015-07-01 | Kings Metal Fiber Technologies | 具情境化模擬系統 |
CN105141587A (zh) * | 2015-08-04 | 2015-12-09 | 广东小天才科技有限公司 | 一种虚拟玩偶互动方法及装置 |
Family Cites Families (35)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3381648B2 (ja) | 1998-12-11 | 2003-03-04 | カシオ計算機株式会社 | キャラクター表示制御装置、キャラクター表示制御システム、及び記録媒体 |
JP2001188787A (ja) * | 1999-12-28 | 2001-07-10 | Sony Corp | 会話処理装置および方法、並びに記録媒体 |
JP2002307354A (ja) | 2000-11-07 | 2002-10-23 | Sega Toys:Kk | 電子玩具 |
JP3450823B2 (ja) * | 2000-12-01 | 2003-09-29 | 株式会社ナムコ | 模擬会話システム、模擬会話方法、および情報記憶媒体 |
JP2002351489A (ja) | 2001-05-29 | 2002-12-06 | Namco Ltd | ゲーム情報、情報記憶媒体、及びゲーム装置 |
JP2004145541A (ja) | 2002-10-23 | 2004-05-20 | Inosu:Kk | チャットシステム |
JP2005010691A (ja) | 2003-06-20 | 2005-01-13 | P To Pa:Kk | 音声認識装置、音声認識方法、会話制御装置、会話制御方法及びこれらのためのプログラム |
JP4652190B2 (ja) | 2005-09-22 | 2011-03-16 | 株式会社バンダイナムコゲームス | プログラム、情報記憶媒体及び電子機器 |
US9823737B2 (en) * | 2008-04-07 | 2017-11-21 | Mohammad A Mazed | Augmented reality personal assistant apparatus |
US7427140B1 (en) * | 2007-04-19 | 2008-09-23 | Yao-Dong Ma | Sunlight readable direct-view and projection-view computing device |
KR101224660B1 (ko) * | 2008-07-09 | 2013-01-21 | 고려대학교 산학협력단 | 유사 문장 검색 장치, 검색 방법, 저장 매체, 자동 대화서비스 시스템 및 서비스 방법 |
US9202171B2 (en) | 2008-11-11 | 2015-12-01 | Digideal Corporation | Virtual game assistant based on artificial intelligence |
US20110055309A1 (en) * | 2009-08-30 | 2011-03-03 | David Gibor | Communication in Context of Content |
JP5411789B2 (ja) | 2010-04-19 | 2014-02-12 | 本田技研工業株式会社 | コミュニケーションロボット |
CN102750125A (zh) * | 2011-04-19 | 2012-10-24 | 无锡天堂软件技术有限公司 | 基于语音的控制方法与控制系统 |
CN103534696B (zh) * | 2011-05-13 | 2018-02-16 | 微软技术许可有限责任公司 | 针对口语语言理解中的域检测利用查询点击记录 |
KR20130136630A (ko) | 2012-06-05 | 2013-12-13 | 이범호 | 스마트폰을 활용한 유명인의 캐릭터 서비스 시스템 및 그 운용방법 |
US9973457B2 (en) * | 2012-06-26 | 2018-05-15 | Nuance Communications, Inc. | Method and apparatus for live chat integration |
TW201408052A (zh) * | 2012-08-14 | 2014-02-16 | Kentec Inc | 電視裝置及其虛擬主持人顯示方法 |
US10346542B2 (en) * | 2012-08-31 | 2019-07-09 | Verint Americas Inc. | Human-to-human conversation analysis |
KR20140054493A (ko) * | 2012-10-26 | 2014-05-09 | 심심이(주) | 대화 서비스 제공 방법 및 장치 |
KR102202332B1 (ko) | 2013-02-28 | 2021-01-13 | 엘지전자 주식회사 | 멀티미디어 커머스 서비스 처리 장치 및 방법 |
US20140278403A1 (en) * | 2013-03-14 | 2014-09-18 | Toytalk, Inc. | Systems and methods for interactive synthetic character dialogue |
US20140279239A1 (en) * | 2013-03-15 | 2014-09-18 | Kuyam Companies, Inc. | Computer Implemented Search System |
KR101532327B1 (ko) | 2013-11-26 | 2015-06-30 | 유영진 | 플로팅방식 홀로그램 플레이어 |
KR20150068609A (ko) * | 2013-12-12 | 2015-06-22 | 삼성전자주식회사 | 이미지 정보 표시 방법 및 장치 |
US20150207765A1 (en) * | 2014-01-17 | 2015-07-23 | Nathaniel Brantingham | Messaging Service with Conversation Suggestions |
KR102305117B1 (ko) * | 2014-04-30 | 2021-09-27 | 삼성전자주식회사 | 텍스트 입력 제어 방법 및 그 전자 장치 |
KR102248474B1 (ko) * | 2014-04-30 | 2021-05-07 | 삼성전자 주식회사 | 음성 명령 제공 방법 및 장치 |
US10726831B2 (en) * | 2014-05-20 | 2020-07-28 | Amazon Technologies, Inc. | Context interpretation in natural language processing using previous dialog acts |
KR101645992B1 (ko) * | 2014-05-28 | 2016-08-05 | 삼성생명보험주식회사 | 고객 불만을 모니터링 하기 위한 장치 및 컴퓨터-판독가능 매체 |
WO2015194773A1 (ko) * | 2014-06-20 | 2015-12-23 | 엘지전자(주) | 디스플레이 장치 및 그 구동 방법 |
US10354256B1 (en) * | 2014-12-23 | 2019-07-16 | Amazon Technologies, Inc. | Avatar based customer service interface with human support agent |
CN204406271U (zh) * | 2014-12-30 | 2015-06-17 | 吴建伟 | 一种自助查询机 |
KR20180070659A (ko) * | 2015-12-21 | 2018-06-26 | 구글 엘엘씨 | 메시징 애플리케이션들을 위한 자동적인 제안들 및 다른 콘텐츠 |
-
2016
- 2016-09-23 US US15/538,760 patent/US10713006B2/en not_active Expired - Fee Related
- 2016-09-23 KR KR1020197024082A patent/KR20190100428A/ko not_active Application Discontinuation
- 2016-09-23 KR KR1020177017320A patent/KR102014623B1/ko active IP Right Grant
- 2016-09-23 WO PCT/JP2016/078073 patent/WO2018016095A1/ja active Application Filing
- 2016-09-23 CN CN201680004506.7A patent/CN108140383A/zh active Pending
-
2017
- 2017-06-23 TW TW106121155A patent/TWI692717B/zh not_active IP Right Cessation
-
2018
- 2018-09-05 HK HK18111392.1A patent/HK1252060A1/zh unknown
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TW200601808A (en) * | 2004-06-28 | 2006-01-01 | Delta Electronics Inc | Integrated dialogue system and method thereof |
US20140307064A1 (en) * | 2011-10-14 | 2014-10-16 | National University Corporation Toyohashi University Of Technology | Three-dimensional image projector, three-dimensional image projection method, and three-dimensional image projection system |
TWI476449B (zh) * | 2012-04-24 | 2015-03-11 | Univ Minghsin Sci & Tech | 裸眼三維背投影顯示裝置 |
TWM504275U (zh) * | 2015-04-01 | 2015-07-01 | Kings Metal Fiber Technologies | 具情境化模擬系統 |
CN105141587A (zh) * | 2015-08-04 | 2015-12-09 | 广东小天才科技有限公司 | 一种虚拟玩偶互动方法及装置 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI776643B (zh) * | 2021-08-19 | 2022-09-01 | 崑山科技大學 | 影像顯示裝置 |
Also Published As
Publication number | Publication date |
---|---|
TW201802663A (zh) | 2018-01-16 |
CN108140383A (zh) | 2018-06-08 |
US20190138266A1 (en) | 2019-05-09 |
KR102014623B1 (ko) | 2019-08-26 |
HK1252060A1 (zh) | 2019-05-10 |
KR20190100428A (ko) | 2019-08-28 |
WO2018016095A1 (ja) | 2018-01-25 |
US10713006B2 (en) | 2020-07-14 |
KR20180030767A (ko) | 2018-03-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI692717B (zh) | 影像顯示裝置、話題選擇方法及程式 | |
JP6165302B1 (ja) | 画像表示装置、話題選択方法、話題選択プログラム | |
US10357881B2 (en) | Multi-segment social robot | |
AU2014236686B2 (en) | Apparatus and methods for providing a persistent companion device | |
JP2018014575A (ja) | 画像表示装置、画像表示方法及び画像表示プログラム | |
JP6682475B2 (ja) | 画像表示装置、話題選択方法、話題選択プログラム | |
KR102306624B1 (ko) | 지속적 컴패니언 디바이스 구성 및 전개 플랫폼 | |
US20170206064A1 (en) | Persistent companion device configuration and deployment platform | |
JP2019139170A (ja) | 画像表示装置、画像表示方法および画像表示プログラム | |
CN107000210A (zh) | 用于提供持久伙伴装置的设备和方法 | |
JP2021117479A (ja) | 表示装置等 | |
JP2019139169A (ja) | 画像表示装置、画像表示方法および画像表示プログラム | |
JP2023035270A (ja) | 表示装置等 | |
WO2018183812A1 (en) | Persistent companion device configuration and deployment platform | |
WO2024214793A1 (ja) | 行動制御システム、制御システム、及び情報処理システム | |
WO2024219336A1 (ja) | 行動制御システム及びロボット | |
WO2024214708A1 (ja) | 行動制御システム | |
WO2017152167A1 (en) | Interactive toy device, and systems and methods of communication between the same and network devices |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
MM4A | Annulment or lapse of patent due to non-payment of fees |