TWI516106B - 多形式附加富媒體評論系統及方法 - Google Patents

多形式附加富媒體評論系統及方法 Download PDF

Info

Publication number
TWI516106B
TWI516106B TW100120261A TW100120261A TWI516106B TW I516106 B TWI516106 B TW I516106B TW 100120261 A TW100120261 A TW 100120261A TW 100120261 A TW100120261 A TW 100120261A TW I516106 B TWI516106 B TW I516106B
Authority
TW
Taiwan
Prior art keywords
media
server
rich media
form additional
additional rich
Prior art date
Application number
TW100120261A
Other languages
English (en)
Other versions
TW201251432A (en
Inventor
張嘉淵
黃亭瀚
林貫文
黃俊一
吳佳頤
黃宇辰
朱慶凡
Original Assignee
廣達電腦股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 廣達電腦股份有限公司 filed Critical 廣達電腦股份有限公司
Priority to TW100120261A priority Critical patent/TWI516106B/zh
Priority to CN201110174531.9A priority patent/CN102821121B/zh
Priority to US13/194,334 priority patent/US8935385B2/en
Publication of TW201251432A publication Critical patent/TW201251432A/zh
Application granted granted Critical
Publication of TWI516106B publication Critical patent/TWI516106B/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/435Filtering based on additional data, e.g. user or group profiles
    • G06F16/436Filtering based on additional data, e.g. user or group profiles using biological or physiological data of a human being, e.g. blood pressure, facial expression, gestures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04QSELECTING
    • H04Q9/00Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04QSELECTING
    • H04Q2209/00Arrangements in telecontrol or telemetry systems
    • H04Q2209/10Arrangements in telecontrol or telemetry systems using a centralized architecture

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Biophysics (AREA)
  • Physiology (AREA)
  • Multimedia (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Molecular Biology (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Information Transfer Between Computers (AREA)
  • User Interface Of Digital Computer (AREA)

Description

多形式附加富媒體評論系統及方法
本發明是有關於一種多形式附加(multimodality-appended)富媒體評論(rich media comment)系統及方法。
多媒體技術是一種迅速發展的綜合性電子信息技術,其被充分應用於各種領域,諸如廣告、藝術、教育、娛樂、工程、商業或科學研究等。多媒體技術使用的媒體包括文字、圖片、照片、聲音、動畫和影片等。然而,現今的多媒體技術較偏向人機互動式訊息交流,對於不同使用者間的訊息交流技術並未發展成熟,使得不同使用者之間無法便利地藉由各種多媒體內容進行互動而交換彼此之間不同的意見。
本揭露是有關於一種多形式附加(multimodality-appended)富媒體評論(rich media comment)系統及方法,藉由多種形式附加的富媒體評論以提供不同使用者間具便利性的意見交換。
根據本揭露之第一方面,提出一種多形式附加富媒體評論系統,包括一伺服器以及一電子裝置。電子裝置包括一網路存取模組、至少一感應器及一處理單元。網路存取模組用以溝通伺服器。至少一感應器用以在一記錄模式下檢測一使用者行為而得到一感應資料。處理單元用以執行一應用程式以提供一來源媒體,其中應用程式之一富媒體評論功能可被激活以提供多個互動物件作為選擇並進而觸發記錄模式。應用程式在記錄模式結束後將感應資料上傳至伺服器。其中,伺服器分析感應資料並據以修改被選擇的互動物件,且結合來源媒體與修改後的互動物件為一繪製媒體,然後傳送繪製媒體至應用程式或儲存於伺服器的資料庫中。
根據本揭露之第二方面,提出一種多形式附加富媒體評論方法,應用於一多形式附加富媒體系統,多形式附加富媒體系統包括一伺服器以及一電子裝置。電子裝置包括一網路存取模組、至少一感應器及一處理單元。網路存取模組溝通伺服器。多形式附加富媒體評論方法包括下列步驟。處理單元執行一應用程式以提供一來源媒體。激活應用程式之一富媒體評論功能以提供多個互動物件作為選擇。觸發一記錄模式,使得至少此感應器檢測一使用者行為而得到一感應資料。應用程式在記錄模式結束後將感應資料上傳至伺服器。伺服器分析感應資料並據以修改被選擇的互動物件,且結合來源媒體與修改後的互動物件為一繪製媒體。伺服器傳送繪製媒體至應用程式或儲存於伺服器的資料庫中。
為了對本揭露之上述及其他方面有更佳的瞭解,下文特舉一實施例,並配合所附圖式,作詳細說明如下:
本揭露所提出之多形式附加(multimodality-appended)富媒體評論(rich media comment)系統及方法,藉由感測並分析使用者行為而以多種形式將相關於使用者行為的富媒體評論附加至來源媒體(source media)上,故得以提供不同使用者間具便利性的意見交換,並使得多媒體系統的內容更具豐富性。
請參照第1圖,其繪示依照一實施例之多形式附加富媒體評論系統之示意圖。多形式附加富媒體評論系統100包括一伺服器110以及一電子裝置120。電子裝置120例如為一手持式行動裝置,然不限於此。電子裝置120包括一網路存取模組122、一處理單元124及至少一感應器126。網路存取模組122用以經由網路溝通伺服器110。感應器126例如為一移動(motion)感應器、一位置(location)感應器、一影像感應器或一聲音感應器等,並不限制。
請同時參照第2圖及第3A圖~第3E圖,第2圖繪示依照一實施例之多形式附加富媒體評論方法之流程圖,第3A圖~第3E圖繪示依照一實施例之多形式附加富媒體論評過程之示意圖。需注意的是,第3A圖~第3E圖所示範例僅為用以說明,並不限於此。於步驟S200中,處理單元124執行一應用程式(application)以提供一來源媒體,此來源媒體例如為一視頻媒體、一音頻媒體、一文件(particles)媒體或一網頁(webpages)媒體等。如第3A圖所示,一手持式行動裝置執行一瀏覽器以顯示例如來自Youtube網站之一影片為來源媒體。
於步驟S210中,激活(activate)應用程式之一富媒體評論功能以提供多個互動物件(interactive object)作為選擇。如第3B圖所示,使用者例如覺得影片之某片段很精采而想賦予註記則激活富媒體評論功能以選擇多個互動物件之一,此互動物件例如為第3C圖所示之巫巫茲拉(Vuvuzela)。於步驟S220中,觸發一記錄模式,使得感應器126檢測一使用者行為(user’s behavior)而得到一感應資料。於第3C圖中,係設定當互動物件被使用者拖曳(drag)至來源媒體上時會觸發記錄模式,但不限於此,端視設計需求而定。
於第3D圖中,使用者行為例如為搖動電子裝置120,感測器126例如將搖動的起始時間點及時間長度、搖動的振幅程度或搖動的頻率等記錄為感應資料。之後,於步驟S230中,應用程式在記錄模式結束後將感應資料經由網路存取模組122上傳至伺服器110。於步驟S240中,伺服器110分析感應資料並據以修改被選擇的互動物件,且結合來源媒體與修改後的互動物件為一繪製媒體(rendered media)。於步驟S250中,伺服器110傳送繪製媒體至應用程式或儲存於伺服器的資料庫中。如第3E圖所示,繪製媒體實質上由修改後的互動物件覆蓋內嵌於來源媒體上所形成,其中修改後的互動物件並不影響來源媒體的原始內容。
於步驟S240中,伺服器110實質上依據一特定的演算法分析所接收到的感應資料而得到相關於使用者之一環境背景(environmental context),並解譯(interpret)環境背景以決定一情境因子(situation factor),此情境因子例如為情緒上(emotional)或語義上(semantic)的表述或分數。若為情緒上的表述,則情境因子可能為一情緒顏色或一情緒強度(intensity)。伺服器110依據情境因子修改被選擇的互動物件的大小(size)、規模(scale)、頻率(frequency)、聲音、移動(motion)或顏色等性質(attributes)。之後,伺服器110將修改後的互動物件覆蓋內嵌於來源媒體上而得到繪製媒體。
以第3C圖中的巫巫茲拉為例,當其他使用者執行應用程式欲從伺服器110瀏覽繪製媒體時,在對應感應資料所記錄的起始時間點處,繪製媒體會呈現出巫巫茲拉。若感應資料記錄的搖動的頻率高,則可能繪製媒體呈現出的巫巫茲拉的大小較大、其聲音頻率較高或是顏色為讓人興奮的紅色等。實質上,伺服器110將被選擇的互動物件之辨識碼(identifier,ID)、記錄模式之時間長度(duration)、情境因子及感應資料收集並儲存為一記錄資訊,此記錄資訊例如用一XML格式或其他開放標準格式作記錄。如此一來,伺服器110即可傳輸繪製媒體至各式操作平臺或軟體而不會受限於特定的作業系統。
此外,對應於現今流行的社群功能,應用程式更可依據一使用者偏好設定過濾繪製媒體。例如,可設定應用程式只向伺服器110接收內嵌某一特定群組使用者所激活的互動物件的繪製媒體而忽略相關於其他使用者的繪製媒體。如此一來,不僅可以完整地瀏覽原來的來源媒體及特定群組使用者想表述的評論,亦不會受到太多干擾。
另外,伺服器110更可將情境因子以一圖形型式與該繪製媒體結合。請參照表1及第4圖,表1為依照一實施例之環境背景與情境因子之對映表,第4圖繪示依一實施例之附加情境因子之繪製媒體之示意圖。
如第4圖所示,伺服器110可將情境因子例如以一情緒顏色及時間條(bar)400的圖形型式附加於繪製媒體上,但不限於此。於第4圖中,伺服器110依據情緒分類及情緒強度將對應的情緒顏色分別標示對應到不同的時間點。如此一來,使用者透過情緒顏色及時間條即可以輕易地掌握到其他使用者對於繪製媒體的富媒體評論,進而可以自行選擇瀏覽感興趣的部分。
本揭露上述實施例所揭露之多形式附加富媒體評論系統及方法,藉由感測並分析使用者行為而以多種形式將相關於使用者行為的富媒體評論附加至來源媒體上,故得以創造獨特格式的互動評論,並結合使用者的動作及互動物件的性質提供更多實際的回饋,提供不同使用者間具便利性的意見交換,使得多媒體系統的內容更具豐富性。
綜上所述,雖然本發明已以多個實施例揭露如上,然其並非用以限定本發明。本發明所屬技術領域中具有通常知識者,在不脫離本發明之精神和範圍內,當可作各種之更動與潤飾。因此,本發明之保護範圍當視後附之申請專利範圍所界定者為準。
100...多形式附加富媒體評論系統
110...伺服器
120...電子裝置
122...網路存取模組
124...處理單元
126...感應器
400...情緒顏色及時間條
第1圖繪示依照一實施例之多形式附加富媒體評論系統之示意圖。
第2圖繪示依照一實施例之多形式附加富媒體評論方法之流程圖。
第3A圖~第3E圖繪示依照一實施例之多形式附加富媒體論評過程之示意圖。
第4圖繪示依一實施例之附加情境因子之繪製媒體之示意圖。

Claims (14)

  1. 一種多形式附加富媒體評論系統,包括:一伺服器;以及一電子裝置,包括:一網路存取模組,用以溝通該伺服器;至少一感應器,用以在一記錄模式下檢測一使用者行為而得到一感應資料;及一處理單元,用以執行一應用程式以提供一來源媒體,其中該應用程式之一富媒體評論功能可被激活以提供複數個互動物件作為選擇並進而觸發該記錄模式,該應用程式在該記錄模式結束後將該感應資料上傳至該伺服器;其中,該伺服器分析該感應資料並據以修改被選擇的該互動物件,且結合該來源媒體與修改後的該互動物件為一繪製媒體,然後傳送該繪製媒體至該應用程式或儲存於該伺服器的一資料庫中;其中,該伺服器根據該感應資料得到一情境因子,將該情緒因子以一情緒顏色標示到一時間條上的複數個時間點,並將該時間條以一圖形型式附加於該繪製媒體上。
  2. 如申請專利範圍第1項所述之多形式附加富媒體評論系統,其中該來源媒體為一視頻媒體、一音頻媒體、一文件媒體或一網頁媒體等。
  3. 如申請專利範圍第1項所述之多形式附加富媒體評論系統,其中該伺服器分析該感應資料得到一環境背景,並解譯該環境背景以決定該情境因子,該伺服器依據該情境因子對被選擇的該互動物件進行修改。
  4. 如申請專利範圍第3項所述之多形式附加富媒體評論系統,其中該伺服器依據該情境因子修改被選擇的該互動物件的大小、規模、頻率、聲音、移動或顏色等性質。
  5. 如申請專利範圍第3項所述之多形式附加富媒體評論系統,其中該伺服器將被選擇的該互動物件之辨識碼、該記錄模式之時間長度、該情境因子及該感應資料收集為一記錄資訊。
  6. 如申請專利範圍第3項所述之多形式附加富媒體評論系統,其中該情境因子包括該情緒顏色或一情緒強度。
  7. 如申請專利範圍第1項所述之多形式附加富媒體評論系統,其中該應用程式更依據一使用者偏好設定過濾該繪製媒體。
  8. 一種多形式附加富媒體評論方法,應用於一多形式附加富媒體系統,該多形式附加富媒體系統包括一伺服器以及一電子裝置,該電子裝置包括一網路存取模組、至少一感應器及一處理單元,該網路存取模組溝通該伺服器,該多形式附加富媒體評論方法包括:該處理單元執行一應用程式以提供一來源媒體;激活該應用程式之一富媒體評論功能以提供複數個互動物件作為選擇;觸發一記錄模式,使得至少該感應器檢測一使用者行為而得到一感應資料;該應用程式在該記錄模式結束後將該感應資料上傳至該伺服器; 該伺服器分析該感應資料並據以修改被選擇的該互動物件,且結合該來源媒體與修改後的該互動物件為一繪製媒體;該伺服器傳送該繪製媒體至該應用程式或儲存於該伺服器的一資料庫中;以及該伺服器根據該感應資料得到一情境因子,將該情緒因子以一情緒顏色標示到一時間條上的複數個時間點,並將該時間條以一圖形型式附加於該繪製媒體上。
  9. 如申請專利範圍第8項所述之多形式附加富媒體評論方法,其中該來源媒體為一視頻媒體、一音頻媒體、一文件媒體或一網頁媒體等。
  10. 如申請專利範圍第8項所述之多形式附加富媒體評論方法,更包括:該伺服器分析該感應資料得到一環境背景,並解譯該環境背景以決定該情境因子;以及該伺服器依據該情境因子對被選擇的該互動物件進行修改。
  11. 如申請專利範圍第10項所述之多形式附加富媒體評論方法,更包括:該伺服器依據該情境因子修改被選擇的該互動物件的大小、規模、頻率、聲音、移動或顏色等性質。
  12. 如申請專利範圍第10項所述之多形式附加富媒體評論方法,更包括:該伺服器將被選擇的該互動物件之辨識碼、該記錄模式之時間長度、該情境因子及該感應資料收集為一記錄資 訊。
  13. 如申請專利範圍第10項所述之多形式附加富媒體評論方法,其中該情境因子包括該情緒顏色或一情緒強度。
  14. 如申請專利範圍第8項所述之多形式附加富媒體評論方法,更包括:該應用程式更依據一使用者偏好設定過濾該繪製媒體。
TW100120261A 2011-06-09 2011-06-09 多形式附加富媒體評論系統及方法 TWI516106B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
TW100120261A TWI516106B (zh) 2011-06-09 2011-06-09 多形式附加富媒體評論系統及方法
CN201110174531.9A CN102821121B (zh) 2011-06-09 2011-06-27 多形式附加富媒体评论系统及方法
US13/194,334 US8935385B2 (en) 2011-06-09 2011-07-29 System and method of multimodality-appended rich media comments

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW100120261A TWI516106B (zh) 2011-06-09 2011-06-09 多形式附加富媒體評論系統及方法

Publications (2)

Publication Number Publication Date
TW201251432A TW201251432A (en) 2012-12-16
TWI516106B true TWI516106B (zh) 2016-01-01

Family

ID=47294062

Family Applications (1)

Application Number Title Priority Date Filing Date
TW100120261A TWI516106B (zh) 2011-06-09 2011-06-09 多形式附加富媒體評論系統及方法

Country Status (3)

Country Link
US (1) US8935385B2 (zh)
CN (1) CN102821121B (zh)
TW (1) TWI516106B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI490827B (zh) * 2013-05-13 2015-07-01 Univ Nat Cheng Kung 即時影片註記學習系統及其方法
CN113784169B (zh) * 2021-09-10 2023-06-27 湖南快乐阳光互动娱乐传媒有限公司 一种带弹幕的视频录制方法及装置
CN114286155A (zh) * 2021-12-07 2022-04-05 咪咕音乐有限公司 基于弹幕的画面元素修改方法、装置、设备和存储介质

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6119147A (en) 1998-07-28 2000-09-12 Fuji Xerox Co., Ltd. Method and system for computer-mediated, multi-modal, asynchronous meetings in a virtual space
AU2001255787A1 (en) * 2000-05-01 2001-11-12 Lifef/X Networks, Inc. Virtual representatives for use as communications tools
JP4766294B2 (ja) * 2001-09-11 2011-09-07 ソニー株式会社 情報処理装置および方法、並びにプログラム
US7636365B2 (en) * 2004-05-13 2009-12-22 Korea Advanced Institute Of Science And Technology (Kaist) Smart digital modules and smart digital wall surfaces combining the same, and context aware interactive multimedia system using the same and operation method thereof
US20070203911A1 (en) * 2006-02-07 2007-08-30 Fu-Sheng Chiu Video weblog
US8782043B2 (en) 2007-07-10 2014-07-15 Nbc Universal, Inc. Multi-sided media viewer and technique for media association
CN101369381A (zh) * 2007-07-10 2009-02-18 Nbc环宇公司 多面媒体观看器和用于媒体关联的技术
CN101740082A (zh) * 2009-11-30 2010-06-16 孟智平 一种基于浏览器的视频剪辑方法及系统

Also Published As

Publication number Publication date
CN102821121B (zh) 2015-07-15
TW201251432A (en) 2012-12-16
US20120317173A1 (en) 2012-12-13
CN102821121A (zh) 2012-12-12
US8935385B2 (en) 2015-01-13

Similar Documents

Publication Publication Date Title
US10721194B2 (en) User terminal device for recommending response to a multimedia message based on age or gender, and method therefor
CN105474207B (zh) 用于搜索多媒体内容的用户界面方法和设备
JP6898965B2 (ja) インタラクティブな動画生成
KR102010221B1 (ko) 스마트폰 기반 방법들 및 시스템들
KR102008495B1 (ko) 데이터 공유 방법 및 이를 위한 이동 단말기
CN103336659B (zh) 捕获内容的方法及其移动终端
CN102460412B (zh) 用于在网络中管理及/或再现因特网多媒体内容的系统及方法
US20190235740A1 (en) Rotatable Object System For Visual Communication And Analysis
TWI490773B (zh) 使用者介面操控方法及具有使用者介面的電子裝置以及內儲操控使用者介面的程式之程式產品
EP3005055B1 (en) Apparatus and method for representing and manipulating metadata
TW201404127A (zh) 多媒體評價系統、其裝置以及其方法
US20200153768A1 (en) Apparatus and method for message image reference management
CN106358092B (zh) 信息处理方法及装置
CN104410911A (zh) 基于视频情感标注辅助识别面部表情的方法
CN106575300A (zh) 用于识别文档中的对象的基于图像的搜索
US20120151413A1 (en) Method and apparatus for providing a mechanism for presentation of relevant content
WO2005124557A1 (ja) 電子文書閲覧システム
TWI516106B (zh) 多形式附加富媒體評論系統及方法
Goularte et al. Interactive multimedia annotations: enriching and extending content
US20120250934A1 (en) Information processing apparatus, playlist creation method, and playlist creation program
TW201523421A (zh) 決定用於擷取的文章之圖像