TW201403501A - 虛擬社群建立系統及方法 - Google Patents
虛擬社群建立系統及方法 Download PDFInfo
- Publication number
- TW201403501A TW201403501A TW101124359A TW101124359A TW201403501A TW 201403501 A TW201403501 A TW 201403501A TW 101124359 A TW101124359 A TW 101124359A TW 101124359 A TW101124359 A TW 101124359A TW 201403501 A TW201403501 A TW 201403501A
- Authority
- TW
- Taiwan
- Prior art keywords
- video
- user
- virtual community
- users
- community
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims description 28
- 230000008451 emotion Effects 0.000 claims abstract description 27
- 230000002996 emotional effect Effects 0.000 claims description 22
- 230000000694 effects Effects 0.000 claims description 13
- 230000006397 emotional response Effects 0.000 claims description 5
- 208000027534 Emotional disease Diseases 0.000 claims description 4
- 230000000007 visual effect Effects 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 14
- 238000001514 detection method Methods 0.000 description 11
- 230000008921 facial expression Effects 0.000 description 9
- 230000006399 behavior Effects 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 7
- 238000004458 analytical method Methods 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000014509 gene expression Effects 0.000 description 3
- 230000036651 mood Effects 0.000 description 3
- 238000003058 natural language processing Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 238000007418 data mining Methods 0.000 description 2
- 206010012374 Depressed mood Diseases 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000007123 defense Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000001404 mediated effect Effects 0.000 description 1
- 238000005065 mining Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 238000010422 painting Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/01—Social networking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/953—Querying, e.g. by the use of web search engines
- G06F16/9535—Search customisation based on user profiles and personalisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N5/00—Computing arrangements using knowledge-based models
- G06N5/02—Knowledge representation; Symbolic representation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/10—Office automation; Time management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/01—Indexing scheme relating to G06F3/01
- G06F2203/011—Emotion or mood input determined on the basis of sensed human body parameters such as pulse, heart rate or beat, temperature of skin, facial expressions, iris, voice pitch, brain activity patterns
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- General Engineering & Computer Science (AREA)
- Computing Systems (AREA)
- Human Resources & Organizations (AREA)
- Strategic Management (AREA)
- Data Mining & Analysis (AREA)
- Marketing (AREA)
- General Business, Economics & Management (AREA)
- Tourism & Hospitality (AREA)
- Economics (AREA)
- Health & Medical Sciences (AREA)
- Primary Health Care (AREA)
- General Health & Medical Sciences (AREA)
- Databases & Information Systems (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Computational Linguistics (AREA)
- Human Computer Interaction (AREA)
- Entrepreneurship & Innovation (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Information Transfer Between Computers (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
一種由情緒偵測裝置與處理模組所組成之虛擬社群建立系統。情緒偵測裝置係用以偵測使用者於觀看影片或電視節目時的情緒反應以產生感測訊號。處理模組係用以分析感測訊號以取得對應於影片或電視節目之時間索引之情緒資料，分析影片或電視節目之內容以取得對應於時間索引之元資料，以及根據情緒資料與元資料將使用者進行社群群組分類。
Description
本發明主要關於虛擬社群之管理技術，特別係有關於一種虛擬社群建立系統及方法，能夠以使用者情緒作為其喜好依據，從而進行社群群組分類並根據群組分類進行活動推薦。
隨著電腦與網際網路的普及，由電腦輔助的溝通方式(Computer Mediated Communication，CMC)改變了人際互動的模式。相較於傳統社群的區分，由電腦輔助的溝通方式產生了一種新的社會關係-「虛擬社群」，或者也可稱為「網路社群」，包括：非同步互動的電子郵件(email)、電子佈告欄(Bulletin Board System，BBS)、新聞討論群組(Newsgroup)、同步互動的網路聊天系統(Internet Relay Chat，IRC)、連線網路遊戲、以及社群網站(Social Network)等。透過虛擬社群，使用者可彼此進行交流，例如：商業交易、興趣分享、以及建立關係等，皆藉由網際網路的開放與便利之特性加速實現了虛擬社群之各種互動。
然而，目前虛擬社群之建立係由虛擬群組管理者所定義、或使用者自行定義，因此相對耗費人力。以電子佈告欄為例，係由具有特定權限之使用者開立不同討論區，以討論區進行簡易之社群群組分類，例如：加入A討論區的使用者可分類為一社群群組，加入B討論區的使用者可分類為另一社群群組。另外，以一般社群網站為例，使用者
可先選擇將哪些人加入聯絡人清單，再進一步自行定義出多重微社交圈，然後把聯絡人各別分類到微社交圈中，以便針對不同微社交圈發佈訊息或交流資訊。
因此，亟需有一種虛擬社群建立方法，能夠依據偵測到的使用者情緒提供自動化的社群群組分類，並以分類好的群組進行活動推薦。
本發明之一實施例提供了一種虛擬社群建立系統，包括至少一情緒偵測裝置、以及一處理模組。上述情緒偵測裝置係用以偵測複數使用者於觀看一視訊時的情緒反應以產生複數感測訊號。上述處理模組係用以分析上述感測訊號以取得對應於上述視訊之複數時間索引之情緒資料，分析上述視訊之內容以取得對應於上述時間索引之元資料(metadata)，以及根據上述情緒資料與上述元資料將上述使用者進行社群群組分類。
本發明之另一實施例提供了一種虛擬社群建立方法，包括以下步驟：透過至少一情緒偵測裝置偵測複數使用者於觀看一視訊時的情緒反應以產生複數感測訊號；分析上述感測訊號以取得對應於上述視訊之複數時間索引之情緒資料；分析上述視訊之內容以取得對應於上述時間索引之元資料；以及根據上述情緒資料與上述元資料將上述使用者進行社群群組分類。
關於本發明其他附加的特徵與優點，此領域之熟習技
術人士，在不脫離本發明之精神和範圍內，當可根據本案實施方法中所揭露之虛擬社群建立系統及方法做些許的更動與潤飾而得到。
本章節所敘述的是實施本發明之最佳方式，目的在於說明本發明之精神而非用以限定本發明之保護範圍，本發明之保護範圍當視後附之申請專利範圍所界定者為準。
第1圖係根據本發明一實施例所述之虛擬社群建立系統之示意圖。虛擬社群建立系統100包括多媒體電子裝置10、20、30、40、50以及虛擬社群管理伺服器60，多媒體電子裝置10(例如筆記型電腦)、20(例如一體成型之桌上型電腦)、30(例如傳統型之桌上型電腦)、40(例如智慧型手機)、50(例如平板電腦)係可透過網際網路與虛擬社群管理伺服器60連結。多媒體電子裝置之數量並非限定上述5個。
多媒體電子裝置10、20、30、40、50可透過有線或無線的方式連接至網際網路，且可透過網際網路下載/播放使用者欲觀看之視訊，如影片或電視節目。特別是，本發明之多媒體電子裝置10、20、30、40、50可於使用者觀看影片或電視節目時分別偵測使用者的情緒(詳下述)。虛擬社群管理伺服器60可為架設於網際網路上的電腦主機，用以根據使用者資訊建立社群群組關係。明確來說，虛擬社群管理伺服器60係透過網際網路連接至多媒體電子裝置
10、20、30、40、50，以自多媒體電子裝置10、20、30、40、50分別接收不同使用者觀看之影片或電視節目之資訊、以及偵測到的使用者情緒，並據以將使用者進行社群群組分類。
第2圖係根據本發明一實施例所述之多媒體電子裝置之架構示意圖。多媒體電子裝置10、20、30、40、50包括顯示裝置210、儲存模組220、網路模組230、情緒偵測裝置240以及處理模組250。顯示裝置210可包括螢幕或觸控面板等具備顯示功能之裝置。儲存模組220可為揮發性記憶體，例如：隨機存取記憶體(Random Access Memory，RAM)，或非揮發性記憶體，例如：快閃記憶體(Flash Memory)，或硬碟、光碟，或上述媒體之任意組合。儲存模組220並儲存處理模組250可執行之程式碼，配合虛擬社群管理伺服器60以實現本發明之虛擬社群建立方法。網路模組230係用以提供有線或無線網路連線，例如：乙太網(Ethernet)、無線區網(WiFi)、行動通訊技術(如GSM、WCDMA、WiMAX、LTE)、非對稱數位用戶線路(ADSL)及纜線數據機(Cable Modem)等。情緒偵測裝置240可包括視訊鏡頭、麥克風、壓力偵測器、以及/或其它可偵測使用者情緒反應之感測器以產生感測訊號。明確來說，感測訊號包括視訊鏡頭可用以擷取使用者的面部表情以產生對應之影像訊號，麥克風可用以擷取使用者所說的話或發出的聲音以產生語音訊號，壓力偵測器可用以偵測使用者握持多媒體電子裝置表面所產生的表面壓力訊
號。情緒偵測裝置240所偵測產生之感測訊號可進一步連同時序資訊(意即，感測訊號產生時對應於影片或電視節目之時間索引(time index))儲存於儲存模組220，而後即時地或於影片或電視節目結束時，透過網路模組230傳送至虛擬社群管理伺服器60。處理模組250可為通用處理器或微控制單元(Micro-Control Unit，MCU)，用以執行電腦可執行之指令，以控制顯示裝置210、儲存模組220、網路模組230、以及情緒偵測裝置240之運作。
第3圖係根據本發明一實施例所述之虛擬社群管理伺服器之架構示意圖。虛擬社群管理伺服器60包括網路模組310、儲存模組320以及處理模組330。網路模組310係用以提供有線或無線網路連線。儲存模組320可為揮發性記憶體、非揮發性記憶體、硬碟、光碟、或上述媒體之任意組合，用以儲存數位資料，例如：透過網路模組310從多媒體電子裝置10、20、30、40、50所接收之資訊/感測訊號、以及進行社群群組分類所需之分析資料等。處理模組330可為通用處理器或微控制單元，用以執行電腦可執行之指令，以控制網路模組310與儲存模組320可之運作。另外，儲存模組320並儲存處理模組330可執行之程式碼，以配合多媒體電子裝置10、20、30、40、50實現本發明之虛擬社群建立方法。
第4A~4D圖係根據本發明一實施例所述之虛擬社群建立方法在多媒體電子裝置端所呈現之示意圖。在此實施例，多媒體電子裝置10、20、30係分別由使用者A、B、
C使用於觀賞一段視訊，例如於同一時間觀看同一場直播的NBA籃球賽。在其它實施例，使用者A、B、C可使用同一多媒體電子裝置觀看該球賽，且本發明不在此限。需說明的是，該段視訊(球賽)可透過虛擬社群管理伺服器60內部之影音資料庫或透過視訊分享網站(如YouTube)所取得。若所觀賞之視訊係從虛擬社群管理伺服器60內部之影音資料庫所取得，則虛擬社群管理伺服器60可自行連結該視訊與多媒體電子裝置之關連，並執行以下之行為；若所觀賞之視訊係從視訊分享網站所取得，則多媒體電子裝置需傳送相關視訊資訊及分享網站資訊至虛擬社群管理伺服器60，從而使虛擬社群管理伺服器60亦得取得該視訊並執行以下之行為。於一具體實施例中，多媒體電子裝置10、20、30、40、50可於虛擬社群管理伺服器60註冊時一併安裝程式碼，並於登錄後自動執行上述以及下述之行為。
首先，第4A圖顯示在第一時間索引T1時，球賽直播的畫面係由紅隊球員(網點狀運動衣)進攻，球賽直播的背景聲音係主播的即時賽況播報：「紅隊突破防守，運球上籃！」，同時，多媒體電子裝置10偵測到使用者A的臉部表情(面帶微笑)及所說的話語：「衝啊！~」，而多媒體電子裝置20偵測到使用者B的臉部表情(面帶愁容)及所說的話語：「不！~」。並且，多媒體電子裝置10、20分別將偵測所產生之感測訊號傳送至虛擬社群管理伺服器60。
在虛擬社群管理伺服器60端，由於使用者A、B、C在觀看球賽之前，即已透過多媒體電子裝置10、20、30登錄(或註冊)至虛擬社群管理伺服器60，虛擬社群管理伺服器60得知悉使用者A、B、C在觀看的球賽資訊。虛擬社群管理伺服器60可在第一時間索引T1時分析該球賽之內容以取得對應之元資料(metadata)。明確來說，虛擬社群管理伺服器60可分析在球賽直播的背景聲音中主播的即時賽況播報語音、或者分析在球賽直播的字幕中主播的即時賽況播報對應文字，得知目前是由紅隊佔優勢，也就是說，元資料可指示在第一時間索引T1時紅隊佔優勢。之後，當接收到多媒體電子裝置10、20所傳送的感測訊號時，虛擬社群管理伺服器60再分析感測訊號以取得對應於第一時間索引T1之情緒資料，根據元資料與情緒資料則得知使用者A應偏好紅隊，而使用者B應偏好白隊。明確來說，在此實施例，從使用者A的影像訊號可分析得知使用者A面帶微笑(可利用臉部偵測及微笑偵測技術)，且從使用者A的語音訊號可分析得知：「衝啊！~」的語調中帶有高興的情緒(可利用平均音高、瞬間音高、語音週期、語音辨識與字義的判斷)，代表使用者A的情緒資料指示了使用者A是高興的，因此可判定使用者A偏好紅隊；反之，從使用者B的影像訊號可分析得知使用者B面帶愁容，且從使用者B的語音訊號可分析得知：「不！~」的語調中帶有難過或沮喪的情緒，代表使用者B的情緒資料指示了使用者B是難過或沮喪的，因此可判定使用者B
偏好白隊。於一具體實施例中，分析感測訊號以取得對應於第一時間索引T1之情緒資料除可由虛擬社群管理伺服器60執行(例如透過處理模組330)外，亦可由多媒體電子裝置執行(例如透過處理模組250)，亦即由多媒體電子裝置分析出情緒資料後，再將情緒資料傳送至虛擬社群管理伺服器60。
第4B圖顯示在第二時間索引T2時，球賽直播的畫面係由紅隊球員犯規，球賽直播的背景聲音係主播的即時賽況播報：「紅隊13號阻擋犯規！」，同時，多媒體電子裝置10、30分別偵測到使用者A、C的臉部表情(面帶愁容)及所說的話語：「別這麼做啊！~」。並且，多媒體電子裝置10、30分別將偵測所產生之感測訊號傳送至虛擬社群管理伺服器60。在虛擬社群管理伺服器60端，同樣在第二時間索引T2時分析該球賽之內容以取得對應之元資料。如同上述分析該球賽之內容，元資料可指示在第二時間索引T2時紅隊佔劣勢。之後，當接收到多媒體電子裝置10、30所傳送的感測訊號時，虛擬社群管理伺服器60再分析感測訊號以取得對應於第二時間索引T2之情緒資料，根據元資料與情緒資料則得知使用者A、C應同樣偏好紅隊。明確來說，從使用者A、C的影像訊號可分析得知使用者A、C皆面帶愁容，且從使用者A、C的語音訊號可分析得知：「別這麼做啊！~」的語調中帶有難過或沮喪的情緒，代表使用者A、C的情緒資料指示了使用者A、C是難過或沮喪的，因此可判定使用者A、C同樣偏好
紅隊。
隨著球賽的進行，虛擬社群管理伺服器60得收集更多的元資料與情緒資料，如第4C圖所示，在第三時間索引T3所出現的播報：「白隊13號投籃！」、使用者A：「拜託...」及使用者B：「太好了！」；第四時間索引T4所出現的播報：「白隊23號傳球失誤！」、使用者A與C：「耶！~」及使用者B：「噢...」等主播語音、文字字幕及感測訊號，藉由上述的判定流程，虛擬社群管理伺服器60最終可將使用者A、C分類為喜好紅隊的社群群組、以及將使用者B分類為喜好白隊的社群群組。
第5圖係根據本發明另一實施例所述之虛擬社群建立方法在多媒體電子裝置端所呈現之示意圖。在此實施例，多媒體電子裝置40、50係分別由使用者D、E使用於不同時間觀看與第4A~4C圖所示範例中同一場NBA籃球賽的重播。首先，第5圖顯示在第一時間索引T1、第三時間索引T3、以及第四時間索引T4時，多媒體電子裝置40偵測到使用者D的臉部表情；在第三時間索引T3時，多媒體電子裝置50偵測到使用者E的臉部表情，並且將偵測所產生之感測訊號傳送至虛擬社群管理伺服器60。在虛擬社群管理伺服器60端，由於使用者D、E在觀看球賽之前，即已透過多媒體電子裝置40、50登錄(或註冊)至虛擬社群管理伺服器60，所以虛擬社群管理伺服器60得知悉使用者D、E所觀看的球賽與使用者A、B、C先前所觀看的實況球賽是同一場，因此可將所有觀看過該球賽的使用者
A、B、C、D、E執行社群群組的分類。虛擬社群管理伺服器60分別在第一時間索引T1、第三時間索引T3、以及第四時間索引T4時分析該球賽之內容以取得對應之元資料，得知在第一時間索引T1時白隊佔劣勢、在第三時間索引T3時白隊佔優勢、以及在第四時間索引T4時白隊佔劣勢。之後，當接收到多媒體電子裝置40、50所傳送的感測訊號時，虛擬社群管理伺服器60再分析感測訊號以取得分別對應於第一時間索引T1、第三時間索引T3、以及第四時間索引T4之情緒資料。最後則根據元資料與情緒資料判定使用者D、E應偏好白隊。
至此，虛擬社群管理伺服器60可將上述分析結果進行社群群組分類之動作，例如：偏好紅隊之社群：使用者A、C；以及偏好紅隊之社群：使用者B、D、E。
完成上述社群群組分類之後，虛擬社群管理伺服器60可進一步根據一使用者之活動事件資訊對相同社群群組之其它使用者發送通知行為，例如推薦行為。上述通知行為於實作中同樣可透過多媒體電子裝置10、20、30、40、50註冊時所安裝的程式碼執行，例如安裝一插件(plugin)或客製化瀏覽器，用以擷取使用者所進行之活動事件之資訊，然後傳送給虛擬社群管理伺服器60進行處理以瞭解是什麼活動，進而挑選與該活動相關之社群群組進行通知行為。於一具體實施例中，通知行為可為推薦行為，當使用者A日後透過註冊過的多媒體電子裝置10並於登錄後觀看紅隊之其它球賽時，多媒體電子裝置10將傳送此活動事
件至虛擬社群管理伺服器60，虛擬社群管理伺服器60處理並瞭解該活動事件係與紅隊相關之球賽時，挑選具有偏好紅隊之社群群組，進而將該球賽之資訊通知給該社群群組之使用者C，使用者C即可透過該通知進一步進行連結而觀賞或分享給其他好友。於一具體實施例中，當使用者A於電子行事曆中輸入了要於日後某天觀看紅隊之其它球賽時，虛擬社群管理伺服器60可將該球賽之資訊推薦給使用者C，使用者C即可了解某天紅隊將有場球賽，甚至透過該推薦而自動於使用者C的電子行事曆中輸入該球賽的日期、地點等。於一具體實施例中，當使用者A於日後上網購買了與紅隊相關之球賽門票時，虛擬社群管理伺服器60可將該球賽之售票資訊推薦給使用者C。於一具體實施例中，當使用者A於日後上網購買了與紅隊相關的紀念商品時，虛擬社群管理伺服器60可將該商品資訊推薦給使用者C。於一具體實施例中，當使用者A於日後上網瀏覽了與紅隊相關之文章或新聞時，虛擬社群管理伺服器60可透過自然語言處理(Natural Language Processing，NLP)、資料探勘(Data Mining，DM)與文字探勘(Text Mining，TM)等技術，分析出使用者A所閱讀的文章係與紅隊相關，而可將該文章或新聞之資訊推薦給使用者C。
雖然在第4A~4C與第5圖所示之範例中，僅依籃球賽性質將使用者分為兩類社群群組，但本發明之虛擬社群建立方法亦可適用於其它多重群組分類之電視節目，例如：針對高爾夫球賽、或撞球賽的直播/重播節目，可依每個球
員劃分社群群組；或者，針對影片類型的觀看內容，可依出現在影片中的視覺物件(包括：地標、演員等)、或場景切換事件劃分社群群組，如文後於第6圖所示。
第6圖係根據本發明又一實施例所述之虛擬社群建立方法在多媒體電子裝置端所呈現之示意圖。在此實施例，多媒體電子裝置10、20、30、40、50係分別由使用者A、B、C、D、E使用於同一時間觀看同一影片。首先，在時間區間t1~t2(對應至時間索引T5)，影片畫面為演員X的特寫畫面，同時，多媒體電子裝置10、20、30偵測到使用者A、B、C的臉部表情(面帶笑容)。稍後，在時間t3之前，影片畫面僅出現演員Y，到了時間t3，影片畫面突然出現演員Z，到時間t4(時間區間t3~t4對應至時間索引T6)，演員Z消失影片畫面。也就是說，在時間t3及時間t4發生場景切換事件。同時在時間t3，多媒體電子裝置40、50偵測到使用者D、E的臉部表情變化(從面無表情到面帶笑容)，直到時間t4再次偵測到使用者D、E的臉部表情變化(從面帶笑容到面無表情)。接著，在時間區間t5~t6(對應至時間索引T7)，影片畫面出現倫敦的著名地標-大笨鐘，同時，多媒體電子裝置20、40偵測到使用者B、D的臉部表情(面帶笑容)。虛擬社群管理伺服器60除了分析該影片內容以取得對應之元資料之外，亦分析從多媒體電子裝置10~50所接收到的感測訊號，以分析取得對應於時間索引T5~T7之情緒資料。在此實施例，虛擬社群管理伺服器60可針對影片畫面進行影像分析，以得知影片畫
面中出現的演員X、Y、Z、以及大笨鐘。根據元資料與情緒資料，虛擬社群管理伺服器60可將使用者A、B、C分類為喜好演員X的社群群組、將使用者D、E分類為喜好演員Z的社群群組、以及將使用者B、D分類為喜好大笨鐘的社群群組。
第7圖係根據本發明一實施例所述之虛擬社群建立方法之簡要流程圖。首先，透過情緒偵測裝置偵測使用者於觀看一視訊(例如影片或電視節目)時的情緒反應以產生感測訊號(步驟S710)。上述感測訊號可為影像訊號、語音訊號、以及表面壓力訊號之任意組合。接著，分析上述感測訊號以取得對應於上述影片或電視節目之時間索引之情緒資料(步驟S720)，以及分析上述影片或電視節目之內容以取得其對應於上述時間索引之元資料(步驟S730)。上述影片或電視節目之內容可包括出現在影片或電視節目中的視覺物件、語音、文字(例如字幕)、以及/或場景變換事件。然後，再根據上述情緒資料與上述元資料將上述使用者進行社群群組分類(步驟S740)，即完成虛擬社群建立。在此實施例中，虛擬社群建立方法可適用於第1圖所示的多媒體電子裝置10~50以及虛擬社群管理伺服器60之協同運作。舉例來說，步驟S710可由具有情緒偵測裝置之任一多媒體電子裝置10~50所執行，而步驟S720~S740則可由虛擬社群管理伺服器60所執行。
透過上述社群群組分類，可將觀看上述影片或電視節目時具有相似情緒反應之使用者分類為同一社群群組，之
後，便可再根據上述任一使用者之活動事件資訊對同一社群群組之其它使用者發送通知。上述活動事件資訊可包括使用者之行事曆資訊、網頁瀏覽資訊、網路購物資訊、以及任何使用者在多媒體電子裝置上的操作資訊。
第8圖係根據本發明一實施例所述之虛擬社群建立方法之細部流程圖。在此實施例，使用者A~E係分別使用多媒體電子裝置10~50同時或先後觀看同一部影片或電視節目之直播或重播。首先，在使用者A~E觀看影片或電視節目之前，已先透過多媒體電子裝置10~50登錄至虛擬社群管理伺服器60，因此虛擬社群管理伺服器60可知悉使用者A~E在觀看的影片或電視節目的資訊。當使用者A~E開始觀看影片或電視節目後，多媒體電子裝置10偵測到使用者A~E的情緒反應(步驟S801)，並將偵測所產生之感測訊號傳送至虛擬社群管理伺服器60，由虛擬社群管理伺服器60分析感測訊號以取得對應於影片或電視節目之時間索引之情緒資料(步驟S802)。在使用者A~E觀看影片或電視節目之同時，虛擬社群管理伺服器60會分析影片或電視節目之內容以取得其對應於時間索引之元資料(步驟S803)。然後，虛擬社群管理伺服器60再根據分析取得之情緒資料與元資料將使用者A~E進行社群群組分類(步驟S804)。以第4A~4C圖為例，由使用者A、C所組成的社群群組具有群組標籤-「紅隊」，而由使用者B、D、E所組成的社群群組則具有群組標籤-「白隊」。
之後，當使用者A日後操作多媒體電子裝置10以安排
個人活動時，多媒體電子裝置10將擷取活動事件資訊(步驟S805)，並將活動事件資訊傳送至虛擬社群管理伺服器60。活動事件資訊可包括使用者的網頁瀏覽資訊、網路購物資訊、以及/或行事曆資訊。虛擬社群管理伺服器則使用自然語言處理技術、資料探勘技術或文字探勘技術對活動事件資訊進行處理(步驟S806)以瞭解使用者A正在進行或預計進行的是什麼活動，然後挑選與該活動相關之社群群組(步驟S807)，對該社群群組中的其它使用者傳送推薦通知(步驟S808)。在挑選出的社群群組中，除了使用者A之外，其餘的使用者皆會在其所使用的多媒體電子裝置上收到推薦通知(步驟S809)，再由使用者自行決定如何使用該通知，如加入該活動、分享該活動等。以第4A~4C圖為例，當使用者A在步驟S805所安排個人活動與紅隊有關時，虛擬社群管理伺服器60會在步驟S807挑選標記有「紅隊」的社群群組，由於該社群群組包括了使用者A、C，所以在步驟S808會將推薦通知傳送給使用者C。
本發明雖以各種實施例揭露如上，然而其僅為範例參考而非用以限定本發明的範圍，任何熟習此項技藝者，在不脫離本發明之精神和範圍內，當可做些許的更動與潤飾。因此上述實施例並非用以限定本發明之範圍，本發明之保護範圍當視後附之申請專利範圍所界定者為準。
100‧‧‧虛擬社群建立系統
10、20、30、40、50‧‧‧多媒體電子裝置
60‧‧‧虛擬社群管理伺服器
210‧‧‧顯示裝置
220、320‧‧‧儲存模組
230、310‧‧‧網路模組
240‧‧‧情緒偵測裝置
250、330‧‧‧處理模組
A、B、C、D、E‧‧‧使用者
T1、T2、T3、T4、T5、T6、T7‧‧‧時間索引
t1、t2、t3、t4、t5、t6‧‧‧時間點
X、Y、Z‧‧‧演員
第1圖係根據本發明一實施例所述之虛擬社群建立系統之示意圖。
第2圖係根據本發明一實施例所述之多媒體電子裝置之架構示意圖。
第3圖係根據本發明一實施例所述之虛擬社群管理伺服器之架構示意圖。
第4A~4C圖係根據本發明一實施例所述之虛擬社群建立方法在多媒體電子裝置端所呈現之示意圖。
第5圖係根據本發明另一實施例所述之虛擬社群建立方法在多媒體電子裝置端所呈現之示意圖。
第6圖係根據本發明又一實施例所述之虛擬社群建立方法在多媒體電子裝置端所呈現之示意圖。
第7圖係根據本發明一實施例所述之虛擬社群建立方法之簡要流程圖。
第8圖係根據本發明一實施例所述之虛擬社群建立方法之細部流程圖。
100‧‧‧虛擬社群建立系統
10、20、30、40、50‧‧‧多媒體電子裝置
60‧‧‧虛擬社群管理伺服器
Claims (11)
- 一種虛擬社群建立系統，包括：至少一情緒偵測裝置，用以偵測複數使用者於觀看一視訊時的情緒反應以產生複數感測訊號；以及一處理模組，用以分析上述感測訊號以取得對應於上述視訊之複數時間索引之情緒資料，分析上述視訊之內容以取得對應於上述時間索引之元資料(metadata)，以及根據上述情緒資料與上述元資料將上述使用者進行社群群組分類。
- 如申請專利範圍第1項所述之虛擬社群建立系統，其中上述感測訊號包括以下之任意組合：上述使用者之複數影像訊號；上述使用者之複數語音訊號；以及上述情緒偵測裝置之一表面壓力訊號。
- 如申請專利範圍第1項所述之虛擬社群建立系統，其中上述視訊之內容包括以下之任意組合：上述視訊之複數視覺物件；上述視訊之語音；上述視訊之文字；以及上述視訊之複數場景變換事件。
- 如申請專利範圍第1項所述之虛擬社群建立系統，其中上述處理模組更用以根據上述一使用者之活動事件資訊對同一社群群組之其它使用者發送通知。
- 如申請專利範圍第4項所述之虛擬社群建立系統， 其中上述活動事件資訊包括以下之任意組合：上述一使用者之行事曆資訊；上述一使用者之網頁瀏覽資訊；以及上述一使用者之網路購物資訊。
- 一種虛擬社群建立方法，包括：透過至少一情緒偵測裝置偵測複數使用者於觀看一視訊時的情緒反應以產生複數感測訊號；分析上述感測訊號以取得對應於上述視訊之複數時間索引之情緒資料；分析上述視訊之內容以取得對應於上述時間索引之元資料(metadata)；以及根據上述情緒資料與上述元資料將上述使用者進行社群群組分類。
- 如申請專利範圍第6項所述之虛擬社群建立方法，其中上述感測訊號包括以下之任意組合：上述使用者之複數影像訊號；上述使用者之複數語音訊號；以及上述情緒偵測裝置之一表面壓力訊號。
- 如申請專利範圍第6項所述之虛擬社群建立方法，其中上述視訊之內容包括以下之任意組合：上述視訊之複數視覺物件；上述視訊之語音；上述視訊之文字；以及上述視訊之複數場景變換事件。
- 如申請專利範圍第6項所述之虛擬社群建立方法，更包括：根據上述一使用者之活動事件資訊對同一社群群組之其它使用者發送通知。
- 一種虛擬社群建立系統，包括一處理模組，上述處理模組分析複數感測訊號以取得對應一視訊之複數時間索引之情緒資料，分析上述視訊之內容以取得對應於上述複數時間索引之元資料(metadata)，以及根據上述情緒資料與上述元資料進行社群群組分類。
- 如申請專利範圍第10項所述之虛擬社群建立系統，其中上述複數感測訊號係從一情緒偵測裝置偵測至少一使用者於觀看上述視訊時的情緒反應以產生。
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| TW101124359A TWI570639B (zh) | 2012-07-06 | 2012-07-06 | 虛擬社群建立系統及方法 |
| CN201210264564.7A CN103530301A (zh) | 2012-07-06 | 2012-07-27 | 虚拟社群建立系统及方法 |
| US13/736,280 US20140012792A1 (en) | 2012-07-06 | 2013-01-08 | Systems and methods for building a virtual social network |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| TW101124359A TWI570639B (zh) | 2012-07-06 | 2012-07-06 | 虛擬社群建立系統及方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| TW201403501A true TW201403501A (zh) | 2014-01-16 |
| TWI570639B TWI570639B (zh) | 2017-02-11 |
Family
ID=49879290
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| TW101124359A TWI570639B (zh) | 2012-07-06 | 2012-07-06 | 虛擬社群建立系統及方法 |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US20140012792A1 (zh) |
| CN (1) | CN103530301A (zh) |
| TW (1) | TWI570639B (zh) |
Families Citing this family (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US11030708B2 (en) | 2014-02-28 | 2021-06-08 | Christine E. Akutagawa | Method of and device for implementing contagious illness analysis and tracking |
| US9704205B2 (en) | 2014-02-28 | 2017-07-11 | Christine E. Akutagawa | Device for implementing body fluid analysis and social networking event planning |
| GB201411912D0 (en) * | 2014-07-03 | 2014-08-20 | Realeyes O | Method of collecting computer user data |
| US9723149B2 (en) * | 2015-08-21 | 2017-08-01 | Samsung Electronics Co., Ltd. | Assistant redirection for customer service agent processing |
| JPWO2019234879A1 (ja) * | 2018-06-07 | 2021-06-24 | 株式会社ソニー・インタラクティブエンタテインメント | 情報処理システム、情報処理方法およびコンピュータプログラム |
| JP7074800B2 (ja) * | 2020-06-05 | 2022-05-24 | エヌ・ティ・ティ・コミュニケーションズ株式会社 | 情報提供システム及び情報提供方法 |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6879709B2 (en) * | 2002-01-17 | 2005-04-12 | International Business Machines Corporation | System and method for automatically detecting neutral expressionless faces in digital images |
| US20090133047A1 (en) * | 2007-10-31 | 2009-05-21 | Lee Hans C | Systems and Methods Providing Distributed Collection and Centralized Processing of Physiological Responses from Viewers |
| US7889073B2 (en) * | 2008-01-31 | 2011-02-15 | Sony Computer Entertainment America Llc | Laugh detector and system and method for tracking an emotional response to a media presentation |
| WO2010029472A1 (en) * | 2008-09-11 | 2010-03-18 | Koninklijke Philips Electronics N.V. | Inserting advertisements in connection with user-created content |
| US20100088148A1 (en) * | 2008-10-02 | 2010-04-08 | Presswala Irfan | System and methodology for recommending purchases for a shopping intent |
| TW201030634A (en) * | 2009-02-06 | 2010-08-16 | Ren-Liang Wu | Genuine recognition system combining image and sound analysis, and its method |
-
2012
- 2012-07-06 TW TW101124359A patent/TWI570639B/zh not_active IP Right Cessation
- 2012-07-27 CN CN201210264564.7A patent/CN103530301A/zh active Pending
-
2013
- 2013-01-08 US US13/736,280 patent/US20140012792A1/en not_active Abandoned
Also Published As
| Publication number | Publication date |
|---|---|
| TWI570639B (zh) | 2017-02-11 |
| US20140012792A1 (en) | 2014-01-09 |
| CN103530301A (zh) | 2014-01-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109118290B (zh) | 方法、系统和计算机可读非暂时性存储介质 | |
| US10623783B2 (en) | Targeted content during media downtimes | |
| TWI570639B (zh) | 虛擬社群建立系統及方法 | |
| US10440435B1 (en) | Performing searches while viewing video content | |
| EP3316204A1 (en) | Targeted content during media downtimes | |
| EP3193300A1 (en) | Method and system for analyzing a media signal |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| MM4A | Annulment or lapse of patent due to non-payment of fees |