CN103559256A - 通过头戴式设备管理多媒体日志的方法、装置和系统 - Google Patents

通过头戴式设备管理多媒体日志的方法、装置和系统 Download PDF

Info

Publication number
CN103559256A
CN103559256A CN201310535180.9A CN201310535180A CN103559256A CN 103559256 A CN103559256 A CN 103559256A CN 201310535180 A CN201310535180 A CN 201310535180A CN 103559256 A CN103559256 A CN 103559256A
Authority
CN
China
Prior art keywords
multimedia
information
user
daily record
audio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201310535180.9A
Other languages
English (en)
Other versions
CN103559256B (zh
Inventor
吴先超
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Baidu Netcom Science and Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Priority to CN201310535180.9A priority Critical patent/CN103559256B/zh
Publication of CN103559256A publication Critical patent/CN103559256A/zh
Application granted granted Critical
Publication of CN103559256B publication Critical patent/CN103559256B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/18File system types
    • G06F16/1805Append-only file systems, e.g. using logs or journals to store data
    • G06F16/1815Journaling file systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提出一种通过头戴式设备管理多媒体日志的方法、装置和系统,其中该方法包括以下步骤:获取用户的眼球动作;当眼球动作与预设眼球动作一致时,从用户所在周边场景采集多媒体信息,并记录相应的采集时间;获取多媒体信息的描述性信息;以及根据采集时间、多媒体信息和描述性信息生成多媒体日志。根据本发明实施例方法,通过头戴式显示设备采集多媒体信息并按照采集时间排序生成多媒体日志,实时记录用户每时每刻的精彩瞬间,无需用户手动采集多媒体信息,且自动生成多媒体信息的描述性信息,操作方便,趣味性强,提升用户体验。

Description

通过头戴式设备管理多媒体日志的方法、装置和系统
技术领域
本发明涉及智能设备技术领域,尤其涉及一种通过头戴式设备管理多媒体日志的方法、装置和系统。
背景技术
随着技术的发展,用户日常生活中使用的多媒体信息越来越多,如何快捷地采集多媒体信息并建立日志、对用户的多媒体日志进行科学有效的管理变得越来越重要。目前,大多数多媒体日志生成方法,需要用户通过图像或音频采集设备(如相机、录音设备等)采集多媒体信息,并使用相应软件进行编辑以建立多媒体日志。
在实现本发明过程中,发明人发现现有技术至少存在以下问题:通过目前的图像或音频采集设备采集多媒体信息时,需要执行设备开启以及设备控制等繁复的操作步骤,随着用户生活中需要采集的信息量越来越大,使用现有的设备手动采集多媒体信息已十分不便,从而导致多媒体信息的流失,且目前建立多媒体日志的方法,使用户的工作量越来越大,浪费时间和精力,用户体验差。
发明内容
本发明旨在至少解决上述技术问题之一。
为此,本发明的第一个目的在于提出一种通过头戴式设备管理多媒体日志的方法。该方法无需用户手动采集多媒体信息,且自动生成多媒体信息的描述性信息,操作方便,趣味性强,提升用户体验。
本发明的第二个目的在于提出一种多媒体日志管理装置。
本发明的第三个目的在于提出一种多媒体日志管理系统。
为了实现上述目的,本发明第一方面实施例的通过头戴式设备管理多媒体日志的方法包括以下步骤:获取用户的眼球动作;当所述眼球动作与预设眼球动作一致时,从用户所在周边场景采集多媒体信息,并记录相应的采集时间;获取所述多媒体信息的描述性信息;以及根据所述采集时间、所述多媒体信息和所述描述性信息生成多媒体日志。
根据本发明实施例的通过头戴式设备管理多媒体日志的方法,通过头戴式显示设备采集多媒体信息并按照采集时间排序生成多媒体日志,实时记录用户每时每刻的精彩瞬间,无需用户手动采集多媒体信息,且自动生成多媒体信息的描述性信息,操作方便,趣味性强,提升用户体验。
为了实现上述目的,本发明第二方面实施例的多媒体日志管理装置,包括:眼球跟踪模块,用于获取用户的眼球动作;采集模块,用于在所述眼球动作与预设眼球动作一致时,从用户所在周边场景采集多媒体信息;记录模块,用于记录相应的采集时间;获取模块,用于获取所述多媒体信息的描述性信息;以及生成模块,用于根据所述采集时间、所述多媒体信息和所述描述性信息生成多媒体日志。
根据本发明实施例的多媒体日志管理装置,通过采集多媒体信息并按照采集时间排序生成多媒体日志,实时记录用户每时每刻的精彩瞬间,无需用户手动采集多媒体信息,且自动生成多媒体信息的描述性信息,操作方便,趣味性强,提升用户体验。
为了实现上述目的,本发明第三方面实施例的多媒体日志管理系统,包括:本发明第二方面所述的任一项多媒体日志管理装置;以及云端服务器,用于接收所述装置发送的多媒体日志,以使用户通过终端设备登录所述云端服务器查询所述多媒体日志,以及接收所述用户通过终端设备对所述多媒体日志进行编辑操作。
根据本发明实施例的多媒体日志管理系统,通过采集多媒体信息并自动生成对应的描述性信息,按照采集时间排序生成多媒体日志,实时便捷地记录用户每时每刻的精彩瞬间,无需用户手动采集多媒体信息,且用户可以通过登录云端服务器,对多媒体日志进行查看、检索和编辑,操作简便,趣味性强,提升了用户体验。
本发明附加的方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中,
图1是根据本发明一个实施例的通过头戴式设备管理多媒体日志的方法的流程图;
图2是根据本发明又一个实施例的通过头戴式设备管理多媒体日志的方法的流程图;
图3是根据本发明一个具体实施例的多媒体日志查询界面示意图;
图4是根据本发明一个实施例的多媒体日志管理装置的结构框图;
图5是根据本发明又一个实施例的多媒体日志管理装置的结构框图;
图6是根据本发明一个实施例的多媒体日志管理系统的结构示意图。
具体实施方式
下面详细描述本发明的实施例,实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,仅用于解释本发明,而不能理解为对本发明的限制。相反,本发明的实施例包括落入所附加权利要求书的精神和内涵范围内的所有变化、修改和等同物。
在本发明的描述中,需要理解的是,术语“第一”、“第二”等仅用于描述目的,而不能理解为指示或暗示相对重要性。在本发明的描述中,需要说明的是,除非另有明确的规定和限定,术语“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连。对于本领域的普通技术人员而言,可以具体情况理解上述术语在本发明中的具体含义。此外,在本发明的描述中,除非另有说明,“多个”的含义是两个或两个以上。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本发明的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本发明的实施例所属技术领域的技术人员所理解。
下面参考附图描述根据本发明实施例的通过头戴式设备管理多媒体日志的方法、装置和系统。
一种通过头戴式设备管理多媒体日志的方法,包括以下步骤:
图1是根据本发明一个实施例的通过头戴式设备管理多媒体日志的方法的流程图。
如图1所示,通过头戴式设备管理多媒体日志的方法包括:
S101,获取用户的眼球动作。
具体地,头戴式设备通过眼球跟踪设备获取眼球动作。在本发明的一个实施例中,眼球跟踪设备包括红外光源和眼球跟踪摄像头,可用来捕捉头戴式设备使用者的眼球图像信息,以获取用户的眼球动作,如移动、凝视、旋转、瞳孔放大等。其中,眼球跟踪摄像头为红外摄像头,可以是一个可感知红外波长的可见光源摄像头。红外光源可以是一个或者多个红外发光二极管或者红外激光二极管,用于照亮用户的眼球,以方便眼球跟踪系统捕捉用户的眼球的瞳孔位置。
S102,当眼球动作与预设眼球动作一致时,从用户所在周边场景采集多媒体信息,并记录相应的采集时间。
其中,多媒体信息包括音频信息、图像信息和视频信息等;预设眼球动作为多个,分别用于控制采集音频信息、图像信息和视频信息,可由用户设定。例如,眼球的定向移动来控制拍照,眨眼控制摄像的开和关,且用户初次使用时,头戴式设备会提示用户设置用来拍照的眼球定向移动的方向和其他眼球动作指令。
在本发明的一个实施例中,头戴式设备具有图像获取单元和音频输入单元,其中,音频输入单元用于获取音频信息;图像获取单元用于获取图像信息;音频输入单元和图像获取单元同时获取信息时即可获取视频信息。
具体地,当眼球跟踪设备获取到的眼球动作与预设眼球动作一致时,头戴式设备根据预设眼球动作调用对应的信息采集单元,从用户所在周边场景采集多媒体信息,并记录相应的采集时间。
S103,获取多媒体信息的描述性信息。
具体地,为了方便用户使用文字信息自由检索,头戴式设备对音频信息进行语音识别,以获取音频信息的描述性信息;对图像信息进行图像识别,以获取图像信息的描述性信息;以及对视频信息进行视频识别,以获取视频信息的描述性信息,实现自动从图片生成文字,从声音识别出文字,以及从视频的连续帧中抽取事件描述文字,供用户综合参考。在本发明的一个实施例中,获取图片或根据视频的描述性信息的时候,把相关信息严格地按照5W1H(when,where,what,why,who以及how,即时间、地点、事件、原因、人物和状况)列出。这样,用户在查看的时候,文字信息清晰易懂,方便浏览编辑。
S104,根据采集时间、多媒体信息和描述性信息生成多媒体日志。
具体地,头戴式设备将描述性信息附着在对应的多媒体信息上,按照采集时间的先后顺序组织这些多媒体信息,并根据描述性信息使用自动摘要算法来自动生成一天多媒体日志的每日摘要,得到最终的多媒体日志。
根据本发明实施例的通过头戴式设备管理多媒体日志的方法,通过头戴式显示设备采集多媒体信息并按照采集时间排序生成多媒体日志,实时记录用户每时每刻的精彩瞬间,无需用户手动采集多媒体信息,且自动生成多媒体信息的描述性信息,操作方便,趣味性强,提升用户体验。
图2是根据本发明又一个实施例的通过头戴式设备管理多媒体日志的方法的流程图。
为了进一步提升用户体验,通过将多媒体日志上传到云端服务器,方便用户随时对过去的多媒体日志进行查看、检索和编辑,具体地,如图2所示,通过头戴式设备管理多媒体日志的方法包括:
S201,获取用户的眼球动作。
具体地,头戴式设备通过眼球跟踪设备获取眼球动作。在本发明的一个实施例中,眼球跟踪设备包括红外光源和眼球跟踪摄像头,可以用来捕捉头戴式设备使用者的眼球图像信息,以获取用户的眼球动作,如移动、凝视、旋转、瞳孔放大等。其中,眼球跟踪摄像头为红外摄像头,可以是一个可感知红外波长的可见光源摄像头。红外光源可以是一个或者多个红外发光二极管或者红外激光二极管,用于照亮用户的眼球,以方便眼球跟踪系统捕捉用户的眼球的瞳孔位置。
S202,当眼球动作与预设眼球动作一致时,从用户所在周边场景采集多媒体信息,并记录相应的采集时间。
其中,多媒体信息包括音频信息、图像信息和视频信息等;预设眼球动作为多个,分别用于控制采集音频信息、图像信息和视频信息,可由用户设定。例如,眼球的定向移动来控制拍照,眨眼控制摄像的开和关,且用户初次使用时,头戴式设备会提示用户设置用来拍照的眼球定向移动的方向和其他眼球动作指令。
在本发明的一个实施例中,头戴式设备具有图像获取单元和音频输入单元,其中,音频输入单元用于获取音频信息;图像获取单元用于获取图像信息;音频输入单元和图像获取单元同时获取信息时即可获取视频信息。
具体地,当眼球跟踪设备获取到的眼球动作与预设眼球动作一致时,头戴式设备根据预设眼球动作调用对应的信息采集单元,从用户所在周边场景采集多媒体信息,并记录相应的采集时间。
S203,获取多媒体信息的描述性信息。
具体地,为了方便用户使用文字信息自由检索,头戴式设备对音频信息进行语音识别,以获取音频信息的描述性信息;对图像信息进行图像识别,以获取图像信息的描述性信息;以及对视频信息进行视频识别,以获取视频信息的描述性信息,实现自动从图片生成文字,从声音识别出文字,以及从视频的连续帧中抽取事件描述文字,供用户综合参考。
在本发明的一个实施例中,获取图片或根据视频的描述性信息的时候,都严格地把相关信息按照5W1H(when,where,what,why,who以及how,即时间、地点、事件、原因、人物和状况)。这样,用户在查看的时候,文字信息清晰易懂,方便浏览编辑。
S204,根据采集时间、多媒体信息和描述性信息生成多媒体日志。
具体地,头戴式设备将描述性信息附着在对应的多媒体信息上,按照采集时间的先后顺序组织这些多媒体信息,并根据描述性信息使用自动摘要算法来自动生成一天多媒体日志的每日摘要,得到最终的多媒体日志。
S205,将多媒体日志上传至云端服务器,以使用户通过终端设备登录云端服务器查询多媒体日志。
具体地,头戴式设备将生成的多媒体日志上传至云端服务器,最终以文件的方式保存在云端服务器中,本地的头戴式设备中,只保留有限空间的缓存。用户可通过自身的或者其他的头戴式设备、笔记本电脑、平板电脑、手机等终端设备登录云端服务器查看多媒体日志。
在本发明的一个实施例中,头戴式设备根据多媒体文件的描述性信息生成一天内的摘要文本,用户可以选择按时间轴查看多媒体日志,也可输入相应信息对不同形式的多媒体文件进行检索。
例如,在本发明的一个实施例中,如图3所示,用户访问多媒体日志时会看到一个“月历”的界面,当用户点击其中的一天,如“6号”的时候,就显示一个时间轴组织起来的多媒体日志;这里的图片(缩略图)、文字、视频(截图缩略图)等信息会根据其采集时间组织起来;当用户点击“一日小结”的时候,右边的“文字信息”以及“一日摘要文本”会自动生成出来,供用户查看;例如,当用户点击图片缩略图时,会在新的界面中显示出来图片,并在右边显示出来自动生成的文字信息。当用户点击上图月历中的左下角的“检索”按钮的时候,出现新的界面,提示用户输入文字、图片或者音频等信息,系统根据用户输入的内容进行检索后,将按照关联度排序完毕的多媒体日志条目信息返回给用户。
S206,通过终端设备对多媒体日志进行编辑。
在本发明的一个实施例中,用户可以选择分享,也可以选择保密以及限制访问自己日记的其他用户的权限。具体地,用户可通过自身的或者其他的头戴式设备、笔记本电脑、平板电脑、手机等终端设备,登录云端服务器账号,验证身份权限后,对多媒体日志进行编辑。
根据本发明实施例的通过头戴式设备管理多媒体日志的方法,用户可以通过登录云端服务器,对多媒体日志进行查看和编辑,也可以根据日志内容进行检索,操作简便,浏览模式简洁直观,且易于检索,趣味性强,提升了用户体验。
为了实现上述实施例,本发明还提出一种多媒体日志管理装置。
一种多媒体日志管理装置,包括:眼球跟踪模块,用于获取用户的眼球动作;采集模块,用于在眼球动作与预设眼球动作一致时,从用户所在周边场景采集多媒体信息;记录模块,用于记录相应的采集时间;获取模块,用于获取多媒体信息的描述性信息;以及生成模块,用于根据采集时间、多媒体信息和描述性信息生成多媒体日志。
图4是根据本发明一个实施例的多媒体日志管理装置的结构框图。
如图4所示,多媒体日志管理装置包括:眼球跟踪模块110、采集模块120、记录模块130、获取模块140和生成模块150。
具体地,眼球跟踪模块110用于获取用户的眼球动作。在本发明的一个实施例中,眼球跟踪模块包括红外光源和眼球跟踪摄像头,可用来捕捉头戴式设备使用者的眼球图像信息,以获取用户的眼球动作,如移动、凝视、旋转、瞳孔放大等。其中,眼球跟踪摄像头为红外摄像头,可以是一个可感知红外波长的可见光源摄像头。红外光源可以是一个或者多个红外发光二极管或者红外激光二极管,用于照亮用户的眼球,以方便眼球跟踪模块110捕捉用户的眼球的瞳孔位置。
采集模块120用于在眼球动作与预设眼球动作一致时,从用户所在周边场景采集多媒体信息。其中,多媒体信息包括音频信息、图像信息和视频信息等;预设眼球动作为多个,分别用于控制采集音频信息、图像信息和视频信息,可由用户设定。例如,眼球的定向移动来控制拍照,眨眼控制摄像的开和关,且用户初次使用时,头戴式设备会提示用户设置用来拍照的眼球定向移动的方向和其他眼球动作指令。更具体地,当眼球跟踪设备获取到的眼球动作与预设眼球动作一致时,采集模块根据预设眼球动作开启相应的采集功能,从用户所在周边场景采集对应形式的多媒体信息。
记录模块130用于记录相应的采集时间。采集模块120根据用户指令采集到多媒体信息的同时,记录模块130记录相应的采集时间。
获取模块140用于获取多媒体信息的描述性信息。更具体地,为了方便用户使用文字信息自由检索,获取模块140获取多媒体信息中的描述性信息,供用户综合参考。在本发明的一个实施例中,获取模块140获取图片或根据视频的描述性信息时,把相关信息严格地按照5W1H(when,where,what,why,who以及how,即时间、地点、事件、原因、人物和状况)列出。这样,用户在查看的时候,文字信息清晰易懂,方便浏览编辑。
生成模块150用于根据采集时间、多媒体信息和描述性信息生成多媒体日志。更具体地,生成模块150将每个多媒体信息对应的描述性信息附着在对应的多媒体文件上,按照采集时间的先后顺序组织这些多媒体信息,并根据描述性信息使用自动摘要算法来自动生成一天多媒体日志的每日摘要,得到最终的多媒体日志。在本发明的一个实施例中,如图2所示,用户访问多媒体日志时会看到一个“月历”的界面,当用户点击其中的一天,如“6号”的时候,就显示一个时间轴组织起来的多媒体日志;这里的图片(缩略图)、文字、视频(截图缩略图)等信息会根据其采集时间组织起来;当用户点击“一日小结”的时候,右边的“文字信息”以及“一日摘要文本”会自动生成出来,供用户查看;例如,当用户点击图片缩略图时,会在新的界面中显示出来图片,并在右边显示出来自动生成的文字信息。
根据本发明实施例的多媒体日志管理装置,通过采集多媒体信息并按照采集时间排序生成多媒体日志,实时记录用户每时每刻的精彩瞬间,无需用户手动采集多媒体信息,且自动生成多媒体信息的描述性信息,操作方便,趣味性强,提升用户体验。
图5是根据本发明又一个实施例的多媒体日志管理装置的结构框图。
如图5所示,在图3的基础上还包括:上传模块160、音频输入单元121、图像获取单元122、语音识别模块141、图像识别模块142和视频识别模块143。
具体地,采集模块120具有音频输入单元121和图像获取单元122。音频输入单元121用于获取音频信息;图像获取单元122用于获取图像信息和视频信息。音频输入单元121和图像获取单元122同时获取信息时即可获取视频信息。
获取模块140具体包括语音识别模块141、图像识别模块142和视频识别模块143。语音识别模块141用于对音频信息进行语音识别,以获取音频信息的描述性信息;图像识别模块142用于对图像信息进行图像识别,以获取图像信息的描述性信息;以及视频识别模块143用于对视频信息进行视频识别,以获取视频信息的描述性信息,实现自动从图片生成文字,从声音识别出文字,以及从视频的连续帧中抽取事件描述文字,供用户参考。在本发明的一个实施例中,生成模块150可根据多媒体文件的描述性信息生成一天内的摘要文本,用户可以选择按时间顺序查看多媒体日志,也可输入相应信息对不同形式的多媒体文件进行检索,例如,如图3所示,当用户点击上图月历中的左下角的“检索”按钮的时候,出现新的界面,提示用户输入文字、图片或者音频等信息,系统根据用户输入的内容进行检索后,将按照关联度排序完毕的多媒体日志条目信息返回给用户。
上传模块160用于将多媒体日志上传至云端服务器,以使用户通过终端设备登录云端服务器查询多媒体日志。更具体地,上传模块160将生成的多媒体日志上传至云端服务器,最终以文件的方式保存在云端服务器中,本地的头戴式设备中,只保留有限空间的缓存。用户可通过自身的或者其他的头戴式设备、笔记本电脑、平板电脑、手机等终端设备登录云端服务器查看多媒体日志。
根据本发明实施例的多媒体日志管理装置,可通过分类采集多媒体文件的描述性信息建立多媒体日志,并将多媒体日志上传到云端服务器,用户可以随时通过终端设备登陆云端服务器,查看多媒体日志并对不同形式的多媒体信息进行检索,操作简便,浏览模式简洁直观,易于查询修改,趣味性强,提升了用户体验。
为了实现上述实施例,本发明又提出一种多媒体日志管理系统。
一种多媒体日志管理系统,包括:本发明第二方面任一项的多媒体日志管理装置;以及云端服务器,用于接收多媒体日志管理装置发送的多媒体日志,以使用户通过终端设备登录云端服务器查询多媒体日志,以及接收用户通过终端设备对多媒体日志进行编辑操作。
图6是根据本发明一个实施例的多媒体日志管理系统的结构示意图。
如图6所示,多媒体日志管理系统包括:多媒体日志管理装置100和云端服务器200。
根据本发明实施例的多媒体日志管理系统,通过采集多媒体信息并自动生成对应的描述性信息,按照采集时间排序生成多媒体日志,实时便捷地记录用户每时每刻的精彩瞬间,无需用户手动采集多媒体信息,且用户可以通过登录云端服务器,对多媒体日志进行查看、检索和编辑,操作简便,趣味性强,提升了用户体验。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
尽管已经示出和描述了本发明的实施例,本领域的普通技术人员可以理解:在不脱离本发明的原理和宗旨的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由权利要求及其等同物限定。

Claims (14)

1.一种通过头戴式设备管理多媒体日志的方法,其特征在于,包括以下步骤:
获取用户的眼球动作;
当所述眼球动作与预设眼球动作一致时,从用户所在周边场景采集多媒体信息,并记录相应的采集时间;
获取所述多媒体信息的描述性信息;以及
根据所述采集时间、所述多媒体信息和所述描述性信息生成多媒体日志。
2.如权利要求1所述的方法,其特征在于,还包括:
将所述多媒体日志上传至云端服务器,以使所述用户通过终端设备登录所述云端服务器查询所述多媒体日志。
3.如权利要求2所述的方法,其特征在于,还包括:
通过所述终端设备对所述多媒体日志进行编辑。
4.如权利要求1-3任一项所述的方法,其特征在于,通过眼球跟踪设备获取所述眼球动作,其中,所述眼球跟踪设备包括红外光源和眼球跟踪摄像头。
5.如权利要求1-3任一项所述的方法,其特征在于,所述多媒体信息包括音频信息、图像信息和视频信息,所述预设眼球动作为多个,分别用于控制采集所述音频信息、图像信息和视频信息。
6.如权利要求5所述的方法,其特征在于,所述头戴式设备具有图像获取单元和音频输入单元,其中,
所述音频输入单元用于获取所述音频信息;以及
所述图像获取单元用于获取所述图像信息和所述视频信息。
7.如权利要求6所述的方法,其特征在于所述获取描述所述多媒体信息的描述性信息的步骤进一步包括:
对所述音频信息进行语音识别,以获取所述音频信息的描述性信息;
对所述图像信息进行图像识别,以获取所述图像信息的描述性信息;以及
对所述视频信息进行视频识别,以获取所述视频信息的描述性信息。
8.一种多媒体日志管理装置,其特征在于,包括:
眼球跟踪模块,用于获取用户的眼球动作;
采集模块,用于在所述眼球动作与预设眼球动作一致时,从用户所在周边场景采集多媒体信息;
记录模块,用于记录相应的采集时间;
获取模块,用于获取所述多媒体信息的描述性信息;以及
生成模块,用于根据所述采集时间、所述多媒体信息和所述描述性信息生成多媒体日志。
9.如权利要求8所述的装置,其特征在于,还包括:
上传模块,用于将所述多媒体日志上传至云端服务器,以使所述用户通过终端设备登录所述云端服务器查询所述多媒体日志。
10.如权利要求8或9所述的装置,其特征在于,所述眼球跟踪模块包括红外光源和眼球跟踪摄像头。
11.如权利要求8或9所述的装置,其特征在于,所述多媒体信息包括音频信息、图像信息和视频信息,所述预设眼球动作为多个,分别用于控制采集所述音频信息、图像信息和视频信息。
12.如权利要求11所述的装置,其特征在于,所述采集模块具有图像获取单元和音频输入单元,其中,
音频输入单元,用于获取所述音频信息;以及
图像获取单元,用于获取所述图像信息和所述视频信息。
13.如权利要求12所述的装置,其特征在于,所述获取模块具体包括:
语音识别模块,用于对所述音频信息进行语音识别,以获取所述音频信息的描述性信息;
图像识别模块,用于对所述图像信息进行图像识别,以获取所述图像信息的描述性信息;以及
视频识别模块,用于对所述视频信息进行视频识别,以获取所述视频信息的描述性信息。
14.一种多媒体日志管理系统,其特征在于,包括:
如权利要求8-13任一项所述的多媒体日志管理装置;以及
云端服务器,用于接收所述装置发送的多媒体日志,以使用户通过终端设备登录所述云端服务器查询所述多媒体日志,以及接收所述用户通过终端设备对所述多媒体日志进行编辑操作。
CN201310535180.9A 2013-11-01 2013-11-01 通过头戴式设备管理多媒体日志的方法、装置和系统 Active CN103559256B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310535180.9A CN103559256B (zh) 2013-11-01 2013-11-01 通过头戴式设备管理多媒体日志的方法、装置和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310535180.9A CN103559256B (zh) 2013-11-01 2013-11-01 通过头戴式设备管理多媒体日志的方法、装置和系统

Publications (2)

Publication Number Publication Date
CN103559256A true CN103559256A (zh) 2014-02-05
CN103559256B CN103559256B (zh) 2017-10-31

Family

ID=50013503

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310535180.9A Active CN103559256B (zh) 2013-11-01 2013-11-01 通过头戴式设备管理多媒体日志的方法、装置和系统

Country Status (1)

Country Link
CN (1) CN103559256B (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104090973A (zh) * 2014-07-18 2014-10-08 百度在线网络技术(北京)有限公司 一种信息呈现方法及装置
CN105072478A (zh) * 2015-07-22 2015-11-18 深圳市万姓宗祠网络科技股份有限公司 一种基于可穿戴设备的人生记录系统及其方法
CN105590306A (zh) * 2014-10-20 2016-05-18 多媒体影像解决方案有限公司 相片日记
CN105611207A (zh) * 2015-12-15 2016-05-25 四川长虹电器股份有限公司 智能捕捉家庭温馨生活场景的设备及其处理方法
CN106446912A (zh) * 2016-09-14 2017-02-22 珠海市魅族科技有限公司 一种媒体处理的方法及媒体处理装置
CN106659932A (zh) * 2014-08-08 2017-05-10 索尼互动娱乐股份有限公司 头戴式显示器中的传感刺激管理
CN106723722A (zh) * 2016-12-26 2017-05-31 东莞理工学院 用于记日记的戒指、系统及使用方法
CN108351875A (zh) * 2015-08-21 2018-07-31 德穆可言有限公司 音乐检索系统、音乐检索方法、服务器装置和程序
CN109963073A (zh) * 2017-12-26 2019-07-02 浙江宇视科技有限公司 摄像机控制方法、装置、系统和云台摄像机
CN110610668A (zh) * 2018-06-15 2019-12-24 深圳富泰宏精密工业有限公司 智能眼镜
US20210192464A1 (en) * 2019-12-24 2021-06-24 Kevin Ta Hsiang Hsu Electronic dynamic calendar system and operation method thereof

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101866215A (zh) * 2010-04-20 2010-10-20 复旦大学 在视频监控中采用视线跟踪的人机交互装置和方法
CN102626304A (zh) * 2012-04-19 2012-08-08 重庆大学 一种头盔式无线视频眼动仪
CN102662473A (zh) * 2012-04-16 2012-09-12 广东步步高电子工业有限公司 基于眼部动作识别来实现人机信息交互的装置及方法
US20120290401A1 (en) * 2011-05-11 2012-11-15 Google Inc. Gaze tracking system
CN102906623A (zh) * 2010-02-28 2013-01-30 奥斯特豪特集团有限公司 交互式头戴目镜上的本地广告内容
CN102916987A (zh) * 2011-08-02 2013-02-06 天津中启创科技有限公司 基于云计算架构的数据采集管理系统
CN103177170A (zh) * 2011-12-21 2013-06-26 中国移动通信集团四川有限公司 一种采集用户眼动的热点分析方法和系统

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102906623A (zh) * 2010-02-28 2013-01-30 奥斯特豪特集团有限公司 交互式头戴目镜上的本地广告内容
CN101866215A (zh) * 2010-04-20 2010-10-20 复旦大学 在视频监控中采用视线跟踪的人机交互装置和方法
US20120290401A1 (en) * 2011-05-11 2012-11-15 Google Inc. Gaze tracking system
CN102916987A (zh) * 2011-08-02 2013-02-06 天津中启创科技有限公司 基于云计算架构的数据采集管理系统
CN103177170A (zh) * 2011-12-21 2013-06-26 中国移动通信集团四川有限公司 一种采集用户眼动的热点分析方法和系统
CN102662473A (zh) * 2012-04-16 2012-09-12 广东步步高电子工业有限公司 基于眼部动作识别来实现人机信息交互的装置及方法
CN102626304A (zh) * 2012-04-19 2012-08-08 重庆大学 一种头盔式无线视频眼动仪

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104090973B (zh) * 2014-07-18 2018-09-07 百度在线网络技术(北京)有限公司 一种信息呈现方法及装置
CN104090973A (zh) * 2014-07-18 2014-10-08 百度在线网络技术(北京)有限公司 一种信息呈现方法及装置
US11037371B2 (en) 2014-08-08 2021-06-15 Sony Interactive Entertainment Inc. Sensory stimulus management in head mounted display
CN106659932B (zh) * 2014-08-08 2020-02-11 索尼互动娱乐股份有限公司 头戴式显示器中的传感刺激管理
CN106659932A (zh) * 2014-08-08 2017-05-10 索尼互动娱乐股份有限公司 头戴式显示器中的传感刺激管理
US10489983B2 (en) 2014-08-08 2019-11-26 Sony Interactive Entertainment Inc. Sensory stimulus management in head mounted display
CN105590306A (zh) * 2014-10-20 2016-05-18 多媒体影像解决方案有限公司 相片日记
CN105590306B (zh) * 2014-10-20 2018-01-16 杭州登虹科技有限公司 相片日记
CN105072478A (zh) * 2015-07-22 2015-11-18 深圳市万姓宗祠网络科技股份有限公司 一种基于可穿戴设备的人生记录系统及其方法
CN108351875A (zh) * 2015-08-21 2018-07-31 德穆可言有限公司 音乐检索系统、音乐检索方法、服务器装置和程序
CN105611207A (zh) * 2015-12-15 2016-05-25 四川长虹电器股份有限公司 智能捕捉家庭温馨生活场景的设备及其处理方法
CN106446912A (zh) * 2016-09-14 2017-02-22 珠海市魅族科技有限公司 一种媒体处理的方法及媒体处理装置
CN106723722B (zh) * 2016-12-26 2018-08-07 东莞理工学院 用于记日记的戒指、系统及使用方法
CN106723722A (zh) * 2016-12-26 2017-05-31 东莞理工学院 用于记日记的戒指、系统及使用方法
CN109963073A (zh) * 2017-12-26 2019-07-02 浙江宇视科技有限公司 摄像机控制方法、装置、系统和云台摄像机
CN110610668A (zh) * 2018-06-15 2019-12-24 深圳富泰宏精密工业有限公司 智能眼镜
CN110610668B (zh) * 2018-06-15 2022-05-06 深圳富泰宏精密工业有限公司 智能眼镜
US20210192464A1 (en) * 2019-12-24 2021-06-24 Kevin Ta Hsiang Hsu Electronic dynamic calendar system and operation method thereof
US11636440B2 (en) * 2019-12-24 2023-04-25 Kevin Ta Hsiang Hsu Electronic dynamic calendar system and operation method thereof

Also Published As

Publication number Publication date
CN103559256B (zh) 2017-10-31

Similar Documents

Publication Publication Date Title
CN103559256A (zh) 通过头戴式设备管理多媒体日志的方法、装置和系统
US10067652B2 (en) Providing access to a cloud based content management system on a mobile device
US8005272B2 (en) Digital life recorder implementing enhanced facial recognition subsystem for acquiring face glossary data
US10044778B2 (en) Configuring channels for sharing media
US9105298B2 (en) Digital life recorder with selective playback of digital video
US9886173B2 (en) Content presentation and augmentation system and method
CN102089776A (zh) 通过多个装置管理个人数字资源
US20090177679A1 (en) Method and apparatus for digital life recording and playback
JP2006060820A (ja) 携帯通信デバイスにおいてコンテンツタイプを関連づけるシステムおよび方法
US20170300513A1 (en) Content Clustering System and Method
JP2014501956A (ja) 分散コンピューティング環境におけるデータの同期
TW201540115A (zh) 通訊事件歷史
US20150294634A1 (en) Life Experience Memorialization with Alternative Observational Opportunity Provisioning
US11283890B2 (en) Post-engagement metadata generation
WO2014101416A1 (zh) 一种文件展示方法及装置
CN101615206A (zh) 提供元数据的系统和方法
KR101317409B1 (ko) 소셜 미디어를 이용한 웹 기반 협업 저작 시스템 및 방법
US10402630B2 (en) Maintaining privacy for multiple users when serving media to a group
TWI329268B (en) Automatic file saving method for a digital home appliance system
US10817557B1 (en) System and displaying digital media
US20140181143A1 (en) File presentation method and apparatus
US20230260549A1 (en) Information processing apparatus, information processing method, and program
KR102492022B1 (ko) 다중 채널 네트워크의 컨텐츠 관리 방법, 장치 및 시스템
CN102375535B (zh) 一种视频监控中的人机交互方法和装置、视频监控系统
US10521693B1 (en) System for displaying digital media

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
EE01 Entry into force of recordation of patent licensing contract
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20140205

Assignee: Beijing Intellectual Property Management Co.,Ltd.

Assignor: BEIJING BAIDU NETCOM SCIENCE AND TECHNOLOGY Co.,Ltd.

Contract record no.: X2023110000098

Denomination of invention: Method, device, and system for managing multimedia logs through headworn devices

Granted publication date: 20171031

License type: Common License

Record date: 20230822