CN108632450A - 用于捕获内容的电子设备和方法 - Google Patents

用于捕获内容的电子设备和方法 Download PDF

Info

Publication number
CN108632450A
CN108632450A CN201810242613.4A CN201810242613A CN108632450A CN 108632450 A CN108632450 A CN 108632450A CN 201810242613 A CN201810242613 A CN 201810242613A CN 108632450 A CN108632450 A CN 108632450A
Authority
CN
China
Prior art keywords
electronic equipment
data
processor
media data
media
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810242613.4A
Other languages
English (en)
Inventor
许峻硕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN108632450A publication Critical patent/CN108632450A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024Detecting, measuring or recording pulse rate or heart rate
    • A61B5/02405Determining heart rate variability
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/015Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0015Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by features of the telemetry system
    • A61B5/002Monitoring the patient using a local or closed circuit, e.g. in a room or building
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/165Evaluating the state of mind, e.g. depression, anxiety
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6898Portable consumer electronic devices, e.g. music players, telephones, tablet computers
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235Details of waveform analysis
    • A61B5/7253Details of waveform analysis characterised by using transforms
    • A61B5/7257Details of waveform analysis characterised by using transforms using Fourier transforms
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7271Specific aspects of physiological measurement analysis
    • A61B5/7282Event detection, e.g. detecting unique waveforms indicative of a medical condition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/435Filtering based on additional data, e.g. user or group profiles
    • G06F16/436Filtering based on additional data, e.g. user or group profiles using biological or physiological data of a human being, e.g. blood pressure, facial expression, gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005Input arrangements through a video camera
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72439User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for image or video messaging
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2503/00Evaluating a particular growth phase or type of persons or animals
    • A61B2503/12Healthy persons not otherwise provided for, e.g. subjects of a marketing survey
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/011Emotion or mood input determined on the basis of sensed human body parameters such as pulse, heart rate or beat, temperature of skin, facial expressions, iris, voice pitch, brain activity patterns
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/12Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion

Abstract

公开了一种电子设备。根据实施例的电子设备包括存储器和与存储器电连接的处理器,其中处理器被配置为:在输出媒体数据的一部分时,获得媒体数据的该部分的标识以及电子设备的用户的心率(HR)数据的序列;以及当HR数据序列满足指定条件时,将媒体数据的该部分的标识存储在存储器中。

Description

用于捕获内容的电子设备和方法
相关申请的交叉引用
本申请要求于2017年3月24日在韩国知识产权局提交的韩国专利申请10-2017-0037962的优先权,其内容以全文引用的方式并入本文中。
技术领域
本公开涉及用于捕获电子设备上输出的内容的技术。
背景技术
近年来,诸如智能电话、平板PC、可穿戴设备等的电子设备已经包括多种功能。这些电子设备可以输出多种类型的内容,诸如照片、视频、声音源、网页等。电子设备可以根据电子设备的用户的操作来捕获内容的区段。
发明内容
电子设备可以捕获用户期望的内容区段并且可以将标签插入内容的捕获区段。然而,为了捕获用户期望的区段,电子设备的用户必须停止使用内容,然后选择要捕获的区段,或者必须在内容的使用完成之后搜索期望的区段。此外,为了将标签插入内容的捕获区段,电子设备的用户必须将标签输入到内容的捕获区段。
本公开的各个方面是为了至少解决上述问题和/或缺点,并且至少提供以下描述的优点。因此,本公开的一方面在于提供一种电子设备和方法,基于在输出内容期间所识别的电子设备的用户的情绪来自动捕获内容的一部分。
根据本公开的一个方面,一种电子设备包括:存储器,以及处理器,与所述存储器电连接,
其中,所述处理器被配置为:在输出媒体数据的一部分时,获得所述媒体数据的一部分的标识以及所述电子设备的用户的心率(HR)数据序列;以及当所述HR数据序列满足指定条件时,将所述媒体数据的所述部分的标识存储在存储器中。
根据本公开的另一方面,一种电子设备中提取媒体数据的一部分的方法包括:输出所述媒体数据;在输出所述媒体数据时,获得所述媒体数据的一部分的标识以及与所述媒体数据的所述部分相对应的HR数据序列;以及当所述HR数据序列满足指定条件时,存储媒体数据的与所述HR数据序列相对应的部分。
根据本公开的另一方面,一种电子设备包括:外壳;通过所述外壳的一部分暴露的显示器;通过所述外壳的一部分暴露的扬声器;包括在所述外壳中的通信电路;与所述显示器、所述扬声器和所述通信电路电连接的处理器;以及与所述处理器电连接的至少一个存储器。所述至少一个存储器存储当由所述处理器执行时使得所述处理器进行以下操作的指令:使用所述通信电路将所述电子设备无线连接到包括HR传感器的外部设备;在所述电子设备与所述外部设备无线连接时,使用所述显示器或所述扬声器中的至少一个播放存储在所述存储器中或者通过所述通信电路流传输的媒体数据;在输出所述媒体数据时通过所述通信电路接收由所述HR传感器获得的HR数据的至少一部分;在所述存储器中存储关于与所述媒体数据的播放区段相对应的HR数据的至少一部分的信息;以及通过所述通信电路向服务器发送存储的信息。
根据本公开的实施例,通过基于HR数据确定电子设备的用户的情绪,可以自动存储引起电子设备的用户情绪变化的部分内容序列。
另外,本公开可以提供直接或间接认识到的各种效果。
根据结合附图公开了本公开各种实施例的以下详细描述,本公开的其他方面、优点和突出特征对于本领域技术人员将变得清楚明白。
附图说明
根据结合附图所描述的以下描述,本公开的某些实施例的上述和其它方面、特征以及优点将更清楚,在附图中:
图1示出了根据各种实施例的网络环境中的电子设备;
图2是根据各种实施例的电子设备的框图;
图3是根据各种实施例的程序模块的框图;
图4示出了根据实施例的电子设备的操作环境;
图5是示出了根据实施例的电子设备的配置的框图;
图6是示出了根据实施例的存储在电子设备中的程序模块的框图;
图7是用于解释根据实施例在电子设备中存储内容和HR数据的方法的示图;
图8是示出了根据实施例的由电子设备获得的HR数据序列的能量相对于频率的曲线图;
图9是示出了根据实施例的由电子设备获得的根据时间的LF/HF值的曲线图;
图10示出了与多种外部设备连接的根据实施例的电子设备;
图11是示出了根据实施例的在电子设备中捕获内容的方法的流程图;以及
图12是示出了根据实施例的在电子设备中捕获内容的方法的流程图。
应注意,在整个附图中,相似的附图标记用于描述相同或相似的元件、特征和结构。
具体实施方式
在下文中,可以参考附图来描述本公开的各种实施例。因此,本领域的普通技术人员将认识到在不背离本公开的范围和精神的情况下可以对这里所述的各种实施例进行各种修改、等同和/或替换。关于附图的描述,相似的元件可以用相似的附图标记来标记。除非另有指定,否则单数形式的术语可以包括复数形式。在本公开中,表述“A或B”、“A和/或B中的至少一个”、或者“A和/或B中的一个或多个”等可包括相关列出项中一个或多个的任意组合以及所有组合。诸如“第一”、“第二”之类的术语可以用于指代各种元件而不管顺序和/或优先级,并且用于将相关元件与其它元件区分开,但是不限制该元件。当一个元件(例如,第一元件)被称为“(操作或通信地)耦接到”或“连接到”另一个元件(例如,第二元件)时,该一个元件可以直接耦接或连接到该另一元件,或者可以存在中间元件(例如,第三元件)。
在硬件或软件方面,根据情况,本公开所使用的表述“被配置为”可以用作例如表述“适用于”、“具有…的能力”、“适于”、“被制造为”、“能够”或者“被设计为”。表述“(被)配置为...的设备”可以意指该设备与另一设备或其它组件一起操作“能够...”。例如,“被配置(或设置)为执行A、B和C的处理器”可以表示用于执行对应操作的专用处理器(例如,嵌入式处理器)、或通过执行存储设备中存储的一个或多个软件程序来执行对应操作的通用处理器(例如,中央处理单元(CPU)或应用处理器)。
术语“媒体数据”应理解为是指顺序排列的数据的集合。例如,媒体数据可以包括图片,其中图片的像素在空间上排序。媒体数据可以包括视频数据,其中视频帧按时间排序。媒体数据可以包括音频数据,其中音频数据可以包括在时间上排序的信号的数字化幅度。媒体数据可以包括文档,其中数据按页面排序。需要注意的是,在某些情况下,媒体数据可以作为文件存储在输出媒体的设备上。备选地,媒体数据可以从将媒体数据存储为文件的其他设备流传输到上述设备。
用户在阅读、观看或收听各种媒体数据时会有不同的情绪反应。例如,用户在观看某个电影场景时可能会感到悲伤。或者,用户在阅读关于某个政治事件的文章时可能会生气。再如,用户在听某首歌曲的合唱时可能会感受到鼓舞。
本公开的某些实施例在用户阅读、观看和收听各种输出媒体数据的部分时捕获用户的情绪反应。电子设备(在图1-图3中描述)典型地输出媒体数据。输出装置可以包括例如显示器或扬声器。根据某些实施例,在用户阅读、观看或收听媒体数据时,外部电子设备(在图4的41、图5的51中描述)可以测量用户的生物数据,诸如他们的心率。外部设备可以发送用户的生物数据,并且输出媒体数据的电子设备可以接收用户的生物数据。生物数据和媒体数据都可以与共同时基相关联,尤其是在音频和视频数据的情况下。也就是说,生物数据和媒体数据可以表示为时间的函数。
电子设备可以检查和检测生物数据是否指示强烈的情绪反应。例如,生物数据的突然变化(诸如心率下降或心率增加)可能指示强烈的情绪反应。当在时间窗口期间检测到强烈的情绪反应时,可以存储在该时间窗口期间的生物数据和在该时间窗口期间输出的媒体数据部分。注意,在时间窗口期间输出的媒体部分可以是较大的媒体数据文件(例如较大的视频、音频或文档文件)的一部分。根据本公开的实施例,在时间窗口期间的媒体部分与整个媒体文件分开存储。此外,在某些实施例中,在时间窗口期间的媒体的存储可以不包括时间窗口之外的媒体。
电子设备
根据本公开的各种实施例的电子设备可以包括以下至少一项:例如智能电话、平板个人计算机(PC)、移动电话、视频电话、电子书阅读器、台式PC、膝上型PC、上网本计算机、工作站、服务器、个人数字助理(PDA)、便携式多媒体播放器(PMP)、运动图像专家组(MPEG-1或MPEG-2)音频层3(MP3)播放器、医疗设备、相机、或可穿戴设备。根据各种实施例,可穿戴设备可以包括配饰类型(例如,手表、戒指、手环、脚环、项链、眼镜、隐形眼镜或头戴式设备(HMD)、织物或衣服-集成类型(例如,电子服装)、身体附着类型(例如,皮肤垫或纹身)或生物可植入类型(例如,可植入电路)。根据各种实施例,电子设备可以包括例如以下至少一项:电视机(TV)、数字多功能光盘(DVD)播放机、音响、冰箱、空调、清洁器、烤箱、微波炉、洗衣机、空气净化器、机顶盒、家庭自动化控制面板、安全控制面板、媒体盒(例如SamsungHomeSyneTM、Apple TVTM或Google TVTM)、游戏控制台(例如XboxTM或PlayStationTM)、电子字典、电子钥匙、摄像机、电子相框等。
根据另一实施例,电子设备可以包括以下至少一项:各种医疗设备(例如,各种便携式医疗测量设备(例如,血糖监测设备、心率测量设备、血压测量设备、体温测量设备等)、磁共振血管造影(MRA)、磁共振成像(MRI)、计算断层扫描(CT)、扫描仪、和超声设备)、导航设备、全球导航卫星系统(GNSS)接收机、事件数据记录仪(EDR)、飞行数据记录仪(FDR)、车辆信息娱乐设备、船用电子设备(例如,导航系统和陀螺仪罗盘)、航空电子设备、安保设备、车头单元、工业或家用机器人、自动柜员机(ATM)、商店的销售点(POS)或物联网(例如,灯泡、各种传感器、洒水设备、火警、恒温器、街灯、烤面包机、运动器材、热水箱、加热器、锅炉等)等。根据实施例,电子设备可以包括家具或建筑物/结构的一部分、电子板、电子签名接收设备、投影仪或各种测量仪器(例如水表、电表、气表或波表等)。根据各种实施例,电子设备可以是柔性电子设备或两个或更多个上述设备的组合。此外,根据本公开的实施例的电子设备可以不限于上述电子设备。在本公开中,术语“用户”可以指代使用电子设备的人,或者可以指代使用电子设备的设备(例如,人工智能电子设备)。
参考图1,根据各种实施例,描述了网络环境中的电子设备101。电子设备101可以包括总线110、处理器120、存储器130、输入/输出接口150、显示器160和通信接口170。根据实施例,电子设备101可以不包括上述元件中的至少一个,或者还可以包括其他元件。总线110可以与上述元件110至170互连,并且可以包括用于在上述元件之间传送通信(例如,控制消息和/或数据)的电路。处理器120可包括中央处理单元(CPU)、应用处理器(AP)、或通信处理器(CP)中的一项或多项。例如,处理器120可以执行与电子设备101的至少其他元件的控制和/或通信相关联的算术运算或数据处理。
存储器130可以包括易失性和/或非易失性存储器。例如,存储器130可以存储与电子设备101的至少一个其他元件相关联的指令或数据。根据实施例,存储器130可以存储软件和/或程序140。程序140可以包括例如内核141、中间件143、应用编程接口(API)145和/或应用程序(或“应用”)147。内核141、中间件143或API 145的至少一部分可以被称为“操作系统(OS)”。例如,内核141可以控制或管理用于执行其他程序(例如,中间件143、API 145和应用程序147)的操作或功能的系统资源(例如,总线110、处理器120、存储器130等)。此外,内核141可以提供允许中间件143、API 145或应用程序147访问电子设备101的分立元件以便控制或管理系统资源的接口。
中间件143可以作为例如中介角色,使得API 145或应用程序147与内核141进行通信以交换数据。此外,中间件143可以根据优先级处理从应用程序147接收到的一个或多个任务请求。例如,中间件143可以向应用程序147中的至少一个指派使得可以使用电子设备101的系统资源(例如,总线110、处理器120、存储器130等)的优先级,并且可以处理一个或多个任务请求。API 145可以是应用程序147通过其来控制由内核141或中间件143提供的功能的接口,并且可以包括例如用于文件控制、窗口控制、图像处理、字符控制等的至少一个接口或功能(例如,命令或指令)。输入/输出接口150可以向电子设备101的其它元件发送从用户或另一外部设备输入的指令或数据,或者可以向用户或另一外部设备输出从电子设备101的其它元件接收到的指令或数据。
显示器160可以包括例如液晶显示器(LCD)、发光二极管(LED)显示器、有机LED(OLED)显示器、微机电系统(MEMS)显示器或电子纸显示器。显示器160可以向用户显示例如各种内容(例如,文本、图像、视频、图标、符号等)。显示器160可以包括触摸屏,并且可以接收例如使用电子笔或用户的身体部位进行的触摸、手势、接近或悬停输入。例如,通信接口170可以在电子设备101与外部设备(例如,第一电子设备102、第二电子设备104或服务器106)之间建立通信。例如,通信接口170可以通过无线通信或有线通信与网络162相连,用以与外部设备(例如,第二电子设备104或服务器106)通信。
例如,无线通信可以包括使用以下至少一项的蜂窝通信:长期演进(LTE)、高级LTE(LTE-A)、码分多址(CDMA)、宽带CDMA(WCDMA)、通用移动电信系统(UMTS)、无线宽带(WiBro)、全球移动通信系统(GSM)等。无线通信可以包括以下至少一项:无线保真(Wi-Fi)、蓝牙(BT)、蓝牙低能量(BLE)、Zigbee、近场通信(NFC)、磁安全传输(MST)、射频(RF)和体区域网(BAN)。根据实施例,无线通信可以包括GNSS。GNSS可以是以下项之一:例如,全球定位系统(GPS)、全球导航卫星系统(Glonass)、北斗导航卫星系统(下文中称为“北斗”)或欧洲基于全球卫星的导航系统(下文中称为“伽利略”)。在下文中,在本公开中,“GPS”和“GNSS”可以互换使用。有线通信可以包括以下至少一项:例如,通用串行总线(USB)、高清多媒体接口(HDMI)、推荐的标准-232(RS-232)、电力线通信、普通老式电话服务(POTS)等。网络162可以包括电信网络中的至少一项,例如,计算机网络(例如,LAN或WAN)、互联网或电话网络。
第一外部电子设备102和第二外部电子设备104中的每个可以是在类型上与电子设备101相同或不同的设备。根据各种实施例,可以由另一电子设备或多个电子设备(例如,第一电子设备102、第二电子设备104或服务器106)来执行电子设备101要执行的操作的全部或一部分。根据实施例,在电子设备101自动执行或响应于请求来执行任何功能或服务的情况下,电子设备101可以备选地或附加地向其它电子设备(例如,电子设备102或104、或服务器106)请求与电子设备101相关联的功能的至少一部分,而不是内在地执行所述功能或服务。其它电子设备(例如,电子设备102或104、或服务器106)可以执行所请求的功能或附加功能,并且可以向电子设备101发送执行结果。电子设备101可以使用接收到的结果来提供所请求的功能或服务,或者可以附加地处理接收到的结果以提供所请求的功能或服务。为此,可以使用例如云计算、分布式计算或客户端-服务器计算。
根据本公开的某些实施例,电子设备101可以通过例如显示器160输出媒体数据。在输出媒体数据时,通信接口170可以接收观看显示器的用户的心率(HR)数据序列。当输出媒体数据的一部分时,处理器120可以获得媒体数据的该部分的标识和电子设备101的用户的心率(HR)数据序列。于是,当HR数据序列满足指定条件时,存储器可以存储该媒体数据部分的标识。
图2示出了根据各种实施例的电子设备的框图。电子设备200可以包括例如图1中所示的电子设备101的整体或一部分。电子设备200可以包括一个或多个处理器(例如,应用处理器(AP))210、通信模块220、订户标识模块224、存储器230、传感器模块240、输入设备250、显示器260、接口270、音频模块280、相机模块291、电力管理模块295、电池296、指示器297和电机298。例如,处理器210可以实现为片上系统(SoC)。根据实施例,处理器210还可以包括图形处理单元(GPU)和/或图像信号处理器。处理器210可以包括图2所示的元件的至少一部分(例如,蜂窝模块221)。处理器210可以将从至少一个其它元件(例如,非易失性存储器)接收到的指令和数据加载到易失性存储器中,并且处理所加载的指令或数据。处理器210可以将结果数据存储在非易失性存储器中。
通信模块220可以被配置为与图1的通信接口170相同或相似。通信模块220可以包括蜂窝模块221、Wi-Fi模块223、蓝牙(BT)模块225、GNSS模块227、近场通信(NFC)模块228和射频(RF)模块229。蜂窝模块221可以通过通信网络提供例如语音通信、视频通信、特色服务、互联网服务等。根据实施例,蜂窝模块221可以通过使用订户标识模块(例如,SIM卡)224来执行在通信网络中对电子设备200进行区分和认证。根据实施例,蜂窝模块221可以至少执行处理器210提供的功能的一部分。根据实施例,蜂窝模块221可以包括通信处理器(CP)。根据实施例,蜂窝模块221、Wi-Fi模块223、BT模块225、GNNS模块227或NFC模块228中的至少一部分(例如,两个或更多个)可以包括在一个集成电路(IC)或IC封装中。例如,RF模块229可以发送并接收通信信号(例如,RF信号)。例如,RF模块229可以包括收发机、功率放大模块(PAM)、频率滤波器、低噪声放大器(LNA)、天线等。根据另一实施例,蜂窝模块221、Wi-Fi模块223、BT模块225、GNNS模块227或NFC模块228中的至少一个可以通过单独的RF模块来发送和接收RF信号。订户标识模块224可以包括例如包含订户标识模块的卡和/或嵌入式SIM,并且可以包括唯一识别信息(例如集成电路卡标识符(ICCID))或订户信息(例如国际移动订户身份(IMSI))。
存储器230(例如,存储器130)可以包括内部存储器232或外部存储器234。例如,内部存储器232可以包括以下至少一项:易失性存储器(例如,动态随机访问存储器(DRAM)、静态RAM(SRAM)、同步DRAM(SDRAM)等)、非易失性存储器(例如,一次性可编程只读存储器(OTPROM)、可编程ROM(PROM)、可擦除可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)、掩模ROM、闪存ROM、闪存)、硬盘或固态驱动(SSD)。外部存储器234可以包括闪存驱动器,例如,紧凑型闪存(CF)、安全数字(SD)、微型安全数字(Micro-SD)、迷你型安全数字(Mini-SD)、极限数字(xD)、多媒体卡(MMC)、存储棒等。外部存储器234可以通过各种接口与电子设备200操作地连接和/或物理地连接。
传感器模块240可以测量例如物理量或者可以检测电子设备200的操作状态。传感器模块240可以将测量到的或检测到的信息转换为电信号。例如,传感器模块240可以包括以下至少一项:手势传感器240A、陀螺仪传感器240B、气压传感器240C、磁传感器240D、加速度传感器240E、握持传感器240F、接近传感器240G、颜色传感器240H(例如,红、绿、蓝(RGB)传感器)、生物传感器240I、温度/湿度传感器240J、照度传感器240K或UV传感器240M。尽管未示出,但是附加地或通常地,传感器模块240还可以包括例如电子鼻传感器、肌电图(EMG)传感器、脑电图(EEG)传感器、心电图(ECG)传感器、红外(IR)传感器、虹膜传感器、和/或指纹传感器。传感器模块240还可以包括用于控制其中包括的至少一个或多个传感器的控制电路。根据实施例,电子设备200还可以包括作为处理器210的一部分或独立于处理器210且被配置为控制传感器模块240的处理器。所述处理器可以在处理器210保持睡眠状态期间控制传感器模块240。
输入设备250可以包括例如触摸面板252、(数字)笔传感器254、键256或超声输入单元258。例如,触摸面板252可以使用电容型、电阻型、红外型和超声型检测方法中的至少一个方法。此外,触摸面板252还可以包括控制电路。触摸面板252还可以包括触觉层,以便向用户提供触觉反应。(数字)笔传感器254可以是例如触摸面板的一部分或包括用于识别的附加片。键256可以包括例如物理按钮、光学键或键区。超声输入设备258可以通过麦克风(例如,麦克风288)来检测(或感测)超声信号(由输入设备产生),并且可以检查与所检测到的超声信号相对应的数据。
显示器260(例如,显示器160)可以包括面板262、全息设备264、投影仪266和/或用于控制面板262、全息设备264或投影仪266的控制电路。面板262可以例如被实现为柔性的、透明的或可穿戴的。面板262和触摸面板252可以集成在单个模块中。根据实施例,面板262可以包括测量用户的触摸压力强度的压力传感器(或力传感器)。压力传感器可以与触摸面板252相集成,或可以实现为与触摸面板252分离的至少一个传感器。全息设备264可以使用光的干涉现象在空中显示立体图像。投影仪266可以将光投射到屏幕上以显示图像。例如,屏幕可被布置在电子设备200的内部或外部。接口270可以包括例如高清多媒体接口(HDMI)272、通用串行总线(USB)274、光学接口276或D-超小型(D-sub)278。接口270可以包括在例如图1中示出的通信接口170中。附加地或通常地,接口270可以包括例如移动高清链路(MHL)接口、SD卡/多媒体卡(MMC)接口或红外数据协会(IrDA)标准接口。
音频模块280可以双向转换声音和电信号。音频模块280的至少一部分可以包括在例如图1所示的输入/输出接口150中。音频模块280可以处理例如通过扬声器282、受话器284、耳机286或麦克风288输入或输出的声音信息。例如,相机模块291可以拍摄静态图像或视频。根据实施例,相机模块291可以包括至少一个或多个图像传感器(例如,前置传感器或后置传感器)、镜头、图像信号处理器(ISP)或闪光灯(例如,LED或氙气灯)。电力管理模块295可以管理例如电子设备200的电力。根据实施例,电力管理集成电路(PMIC)、充电器IC、或电池表或电量表可以包括在电力管理模块295中。PMIC可以具有有线充电方法和/或无线充电方法。无线充电方法可以包括例如磁共振方法、磁感应方法或电磁方法,并且还可以包括附加电路,例如,线圈环路、共振电路、整流器等。例如,当对电池充电时,电池量表可以测量电池296的剩余容量及其电压、电流或温度。例如,电池296可以包括可再充电电池和/或太阳能电池。
指示器297可以显示电子设备200或其一部分(例如,处理器210)的特定状态(例如引导状态、消息状态、充电状态等)。电机298可以将电信号转换为机械振动,并且产生以下效果:振动、触觉等。电子设备200可以包括用于支持移动TV的处理设备(例如,GPU)。用于支持移动TV的处理设备可以根据数字多媒体广播(DMB)、数字视频广播(DVB)、MediaFLOTM等的标准来处理媒体数据。根据本公开各种实施例的电子设备的上述元件中的每一个元件可以被配置为一个或多个组件,且元件名称可以根据电子设备的类型而改变。在各种实施例中,电子设备(例如,电子设备200)的一些元件可以被省略,或者可以添加其它附加元件。此外,可以将电子设备的某些部件彼此组合,以便形成一个实体,使得仍执行与组合之前这些部件所执行的功能相同的功能。
根据本公开的某些实施例,电子设备200可以通过例如显示器260、扬声器282或耳机286来输出媒体数据。在一个实施例中,生物传感器240L可以测量和提供观看显示器或收听扬声器282或耳机286的用户的心率(HR)数据的序列。在另一个实施例中,在输出媒体数据时,通信模块220可以接收观看显示器或者收听扬声器282/耳机286的用户的心率(HR)数据的序列。在输出媒体数据的一部分时,处理器210可以获得媒体数据的该部分的标识和电子设备200的用户的心率(HR)数据序列。于是,当HR数据序列满足指定条件时,存储器可以存储该媒体数据部分的标识。
图3示出了根据各种实施例的程序模块的框图。根据实施例,程序模块310(例如,程序140)可以包括操作系统(OS),用于控制与电子设备(例如,电子设备101)相关联的资源和/或在OS上驱动的各种应用(例如,应用程序147)。OS可以是例如AndroidTM、iOSTM、WindowsTM、SymbianTM、TizenTM或BadaTM等。程序模块310可以包括内核320(例如内核141)、中间件330(例如,中间件143)、应用编程接口(API)360(例如,API 145)和/或应用370(例如,应用程序147)。程序模块310的至少一部分可以被预加载在电子设备上,或者可以从外部电子设备(例如,第一电子设备102、第二电子设备104、服务器106等)下载。
内核320(例如,内核141)可以包括例如系统资源管理器321或设备驱动器323。系统资源管理器321可以控制、分配或获取系统资源。根据实施例,系统资源管理器321可以包括进程管理单元、存储器管理单元、文件系统管理单元等。设备驱动器323可以包括例如显示器驱动器、相机驱动器、蓝牙驱动器、共享存储器驱动器、USB驱动器、键区驱动器、Wi-Fi驱动器、音频驱动器或进程间通信(IPC)驱动器。中间件330可以提供例如应用370通常所需的功能、或者可以通过API 360向应用370提供多种功能,以便允许应用370能够高效地使用电子设备的有限系统资源。根据实施例,中间件330可以包括以下至少一项:运行时间库335、应用管理器341、窗口管理器342、多媒体管理器343、资源管理器344、电力管理器345、数据库管理器346、数据包管理器347、连接管理器348、通知管理器349、位置管理器350、图形管理器351或安全管理器352。
运行时间库335可以包括例如由编译器使用的库模块,以便在执行应用370期间通过使用编程语言来添加新的功能。运行时间库335可执行输入/输出管理、存储器管理、或与算术功能相关的能力。应用管理器341可以管理例如应用370的至少一个应用的生命周期。窗口管理器342可以管理在屏幕中使用的图形用户界面(GUI)资源。多媒体管理器343可以识别用于播放多种媒体文件所需的格式,并且可以通过使用适用于该格式的编解码器来对媒体文件执行编码或解码。资源管理器344可以管理应用370中的资源,例如存储空间或源代码。电力管理器345可以管理电池或电力,并且可以提供电子没备的操作所需的电力信息。根据实施例,电力管理器345可以与基本输入/输出系统(BIOS)一起操作。数据库管理器346可以产生、搜索或修改要在应用370中使用的数据库。数据包管理器347可以安装或更新以数据包文件形式分发的应用。
连接管理器348可管理例如无线连接。通知管理器349可以向用户提供事件,例如到达消息、预约或接近通知。例如,位置管理器350可以管理关于电子设备的位置信息。图形管理器351可以管理向用户提供的图形效果,或管理与图形效果相关的用户界面。安全管理器352可以提供例如系统安全或用户认证。根据实施例,中间件330可以包括用于管理电子设备的语音或视频呼叫功能的电话管理器、或组合上述元件的多种功能的中间件模块。根据实施例,中间件330可以提供针对每个OS种类而被专门化的模块,以便提供差异化的功能。此外,中间件330可以动态地移除已有元件的一部分,或者可以向已有元件添加新的元件。API 360可以是例如编程功能的集合,并且可以设置有根据0S而变化的配置。例如,在OS是安卓或iOS的情况下,可以为每个平台提供一个API集合。在OS是tizen的情况下,可以为每个平台提供两个或更多个API集合。
应用370可以包括例如多种应用,例如主页371、拨号盘372、SMS/MMS373、即时消息(IM)374、浏览器375、相机376、闹钟377、联系人378、语音拨号379、电子邮件380、日历381、媒体播放器382、相册383、时钟384、卫生保健(例如,测量运动量、血糖等)或提供环境信息(例如,气压、湿度或温度等的信息)。根据实施例,应用370可以包括用于支持电子设备和外部电子设备之间的信息交换的信息交换应用。例如,信息交换应用可以包括用于向外部电子设备发送特定信息的通知中继应用或者用于管理外部电子设备的设备管理应用。例如,通知中继应用可以包括将从其它应用中产生的通知信息发送到外部电子设备的功能,或者可以从外部电子设备接收例如通知信息,并且向用户提供通知信息。设备管理应用可以安装、删除或更新例如与电子设备通信的外部电子设备的功能(例如,外部电子设备自身(或一部分组件)的开启/关闭或显示器的亮度(或分辨率)的调整)、以及在外部电子设备中运行的应用。根据实施例,应用370可以包括根据外部电子设备的属性分配的应用(例如,移动医疗设备的卫生保健应用)。根据实施例,应用370可以包括从外部电子设备接收的应用。程序模块310中的至少一部分可以以软件、固件、硬件(例如,处理器210)或其中的两个或更多个的组合(例如,执行)来实现,并且可以包括用于执行一个或多个功能的模块、程序、例程、指令集、进程等。
在某些实施例中,浏览器375、媒体播放器382可以使显示器260、扬声器282或麦克风286输出媒体数据。
图4示出了根据实施例的电子设备的操作环境。
参考图4,根据实施例的电子设备400可以输出媒体数据410。例如,输出的媒体数据410可以包括再现或回放的内容。电子设备400的用户可以连同电子设备400一起使用诸如智能手表的外部设备41。电子设备400可以结合外部设备41进行操作。当媒体数据410被输出时,电子设备400可从外部设备41或电子设备400获得电子设备400的用户的心率(HR)数据。电子设备400可以获得包含连续HR数据的HR数据序列。电子设备400可以对HR数据序列执行频率分析以确定电子设备400的用户的情绪变化。电子设备400可以获得与已检测到用户情绪改变的时间段相对应的媒体数据部分或媒体数据410的该部分的标识。电子设备400可以存储媒体数据的该部分或媒体数据410的标识。电子设备400可以推断用户的情绪并且可以用推断的情绪来标记媒体数据410的该部分。如上所述,根据实施例的电子设备400可以基于HR数据自动捕获与电子设备400的用户的情绪变化相关联的媒体数据410的部分。下面将参照图5详细描述根据实施例的电子设备的具体结构和操作。
图5是示出了根据实施例的电子设备的配置的框图。
参考图5,根据实施例的电子设备500可以包括通信电路510、HR传感器520、环境传感器530、存储器540和处理器550。电子设备500还可以被称为移动设备、移动终端、用户设备(UE)等。
根据实施例的外部设备51可以获得用户的HR数据。外部设备51可以是例如也包括HR传感器520的可穿戴设备。
根据实施例的服务器53可以是从电子设备500接收数据并处理和存储所接收的数据的计算设备。根据实施例,服务器53可以向电子设备500提供媒体数据。例如,服务器53可以存储各种类型的媒体数据,并可以共享或推荐一些媒体数据。
根据实施例的通信电路510可以与外部设备51和/或服务器53通信。例如,通信电路510可以通过使用诸如蓝牙、低功耗蓝牙(BLE)、Wi-Fi直连等的通信方法与外部设备51通信。在另一个例子中,通信电路510可以通过使用诸如长期演进(LTE)、Wi-Fi等的通信方法与服务器53进行通信。不限于此,通信电路510可以包括支持与外部设备51和/或服务器53通信的各种类型的模块中的一个或多个。
根据实施例的HR传感器520可以感测电子设备500的用户的HR。HR传感器520可以获得电子设备500的用户的HR数据。电子设备500可以通过使用HR传感器520获得HR数据,并且可以通过使用通信电路510从外部设备51获得HR数据。
根据实施例的环境传感器530可以获得电子设备500的环境信息。环境传感器530可以包括多种元件(诸如麦克风、相机、陀螺仪传感器、照度传感器、GPS模块等)中的至少一些。环境信息可以包括例如由环境传感器530获得的关于声音、图像、加速度、角速度、照度和/或位置的信息。环境信息可以包括关于电子设备500中在运行的应用的信息和/或关于与电子设备500连接的外部设备51的信息。
根据实施例的存储器540可临时或非临时地存储各种数据和信息。例如,存储器540可以存储媒体数据、媒体数据的一部分、电子设备500的用户的HR数据、HR数据序列、环境信息和/或情绪信息。媒体数据的一部分可以排除媒体数据的其余部分。
根据实施例的处理器550可以与通信电路510、HR传感器520、环境传感器530和存储器540电连接。处理器550可以控制通信电路510、HR传感器520、环境传感器530和存储器540。
根据一个实施例,处理器550可以输出(或回放)内容。处理器550可以输出各种媒体数据,诸如照片、照片幻灯片、视频数据、音频数据和/或网页。处理器550可以利用与其相连的外部设备51来回放媒体数据。处理器550可以通过使用例如图2的显示模块260或扬声器282/麦克风286中的至少一个,回放存储在存储器540中的媒体数据或通过通信电路510流传输的媒体数据。处理器550还可以通过使用除了图2的显示模块260或扬声器282以外的各种类型的输出设备来输出媒体数据。
根据一个实施例,在输出媒体数据时,处理器550可以获得媒体数据的一部分的标识和与媒体数据的该部分相对应的电子设备500的用户的心率(HR)数据的序列。处理器550可以在输出媒体数据时捕获媒体数据的部分并将其存储在存储器540中。例如,处理器550可以使用滑动窗口来顺序地捕获媒体数据的部分。处理器550可以在输出媒体数据时获得与媒体数据的部分相对应的时间数据。时间数据可以是例如对其中已回放媒体数据的部分的时间段加以表示的数据。例如,处理器550可以与包括HR传感器的外部设备51无线连接,并且可以通过通信电路510从外部设备51获得由外部设备51获取的HR数据的至少一部分。在另一个示例中,处理器550可以使用HR传感器520来获得HR数据。处理器550可以至少临时地将关于HR数据的至少一部分的信息存储在存储器540中。处理器550可以在获得的HR数据中获得与内容的部分序列相对应的HR数据序列。例如,处理器550可以获得在已经回放内容的所捕获的部分序列的时间段期间感测到的HR数据的序列。在另一个示例中,处理器550可以获得在与内容的部分序列相对应的时间数据中包括的时间段上感测到的HR数据的序列。处理器550可以通过通信电路510向服务器53发送存储在存储器540中的信息。例如,处理器550可以通过通信电路510向服务器53发送HR数据序列。
根据一个实施例,处理器550可以确定HR数据序列是否满足指定条件。例如,处理器550可以基于HR数据序列来确定电子设备500的用户的情绪是否已发生改变。根据一个实施例,处理器550可以对HR数据序列执行频率分析,并且可以基于频率分析的执行结果来确定HR数据序列是否满足指定条件。处理器550可以使用诸如傅里叶变换或快速傅里叶变换的技术来对HR数据序列执行频率分析。例如,处理器550可以确定在低于指定频率的频带中的HR数据序列的功率谱与在高于指定频率的频带中的HR数据序列的功率谱之比是否满足指定条件。
根据一个实施例,如果HR数据序列满足指定条件,则处理器550可以将与HR数据序列相对应的媒体数据部分存储在存储器540中。处理器550可以通过通信电路510向服务器53发送与满足指定条件的HR数据序列相对应的媒体数据部分。
根据一个实施例,处理器550可以基于满足指定条件的HR数据序列来获得电子设备500的用户的情绪信息。根据一个实施例,处理器550可以获得环境信息,该环境信息包括由环境传感器530获得的第一信息、关于由处理器550执行的应用的第二信息以及关于通过通信电路510连接的外部设备51的第三信息中的至少一些,并且处理器550可以基于HR数据序列和环境信息来获得情绪信息。处理器550可以用情绪信息来标记与HR数据序列相对应的内容的部分序列。处理器550可以用环境信息来标记与HR数据序列相对应的媒体数据部分。
这里描述为由电子设备500的处理器550执行的至少一些操作还可以由外部设备51或服务器53执行。例如,电子设备500可以将HR数据发送给服务器53,并且服务器53可以基于发送的HR数据来获得情绪信息。在这种情况下,服务器53可以将获得的情绪信息发送给电子设备500。
图6是示出了根据实施例的存储在电子设备中的程序模块的框图。
图6所示的程序模块可以由图5的电子设备500、外部设备51或服务器53来执行。图6所示的程序模块的至少一部分可以由图5所示的电子设备500的处理器550来执行。根据本公开实施例,示出为包括在图6的外部设备620或服务器630中的程序模块或存储器的至少一部分可以包括在电子设备610中。
参考图6,根据实施例的媒体数据查看器611可以显示视频、照片、网页或输出音频信号等。媒体数据查看器611可以包括例如视频播放器、照片查看器、音乐播放器、网页浏览器等。
根据一个实施例,当媒体数据查看器611输出媒体数据时,环境信息收集模块612可以收集关于电子设备610的用户的周围环境的信息。环境信息收集模块612可以使用环境传感器(例如麦克风、相机、陀螺仪传感器、照度传感器、GPS模块等)来收集环境信息。
根据一个实施例,HR数据收集模块621可以在媒体数据查看器611输出媒体数据时收集电子设备610的用户的HR数据。HR数据收集模块621可以使用外部设备620的HR传感器来收集HR数据。虽然图6示出HR数据收集模块621包括在外部设备620中,但是HR数据收集模块621可以包括在电子设备610中并且可以使用包括在电子设备610中的HR传感器来收集HR数据。
根据一个实施例,当媒体数据查看器611正在输出内容时,媒体数据捕获模块614可以产生正被输出的媒体数据的快照。快照可以包括图像和声音。媒体数据捕获模块614可以存储快照和对应于快照的时间数据。
根据一个实施例,媒体数据存储模块615可以按照时间顺序存储快照。例如,媒体数据存储模块615可以通过使用滑动窗口按照时间顺序存储指定数量的快照。滑动窗口可以执行按照时间顺序存储数据的功能。如果新数据输入到滑动窗口,则滑动窗口中最早的数据可以被删除。媒体数据存储模块615可以先进先出(FIFO)方式存储指定数量的快照。在某些实施例中,媒体数据模块615可以使用循环缓冲器。
根据一个实施例,HR数据序列存储模块613可以按照时间顺序存储HR数据。例如,HR数据序列存储模块613可以通过使用滑动窗口按照时间顺序存储由指定数量的HR数据构成的序列。与HR数据相关联的指定数量可以不同于与媒体数据相关联的指定数量。HR数据序列存储模块613可以FIFO方式存储指定数量的HR数据序列。在某些实施例中,存储模块613可以使用循环缓冲器。其中已显示由媒体数据存储模块615存储的媒体数据部分的时间段可以与其中已获得HR数据序列存储模块613存储的HR数据序列的时间段同步。
根据一个实施例,功率谱变换模块616可以对由HR数据序列存储模块613存储的HR数据序列执行傅里叶变换以获得HR数据序列的功率谱。功率谱变换模块616可以随机地选择HR数据序列中包括的HR数据中的至少一些,并且可以对所选择的HR数据执行快速傅立叶变换。功率谱变换模块616可以计算低频(LF)频带(例如,0.04Hz至0.15Hz)中的功率谱与高频(HF)频带(例如,0.15Hz至0.4Hz)中的功率谱之比(LF/HF)。功率谱变换模块616可将LF/HF发送给功率谱存储器631。
根据一个实施例,功率谱存储器631可以存储LF/HF。功率谱存储器631可以按照时间顺序存储所接收的LF/HF。功率谱存储器631可以持续地存储所接收的LF/HF并且可以保持多个LF/HF值。
根据一个实施例,事件模式建模模块632可以分析存储在功率谱存储器631中的LF/HF值,以区分LF/HF值的普通序列和LF/HF值的事件序列。例如,事件模式建模模块632可以分析存储在功率谱存储器631中的多个LF/HF值的变化模式,以区分典型变化范围内的LF/HF序列和典型变化范围以外的LF/HF序列。事件模式建模模块632可以基于多个LF/HF值,产生用于确定事件是否发生的参考数据(事件序列)。
根据一个实施例,事件检测模块617可以基于由功率谱变换模块616计算的LF/HF序列来确定事件是否发生。例如,事件检测模块617可比较由功率谱变换模块616计算的LF/HF序列和由事件模式建模模块632区分的事件序列。在LF/HF序列中包括与事件序列相似的子序列的情况下,事件检测模块617可以确定在相应的LF/HF序列中发生了事件。事件的发生可能对应于用户情绪的改变。事件检测模块617可以向媒体数据存储器633发送LF/HF序列(基于该LF/HF序列确定已经发生事件)以及与该LF/HF序列相对应的媒体数据部分。例如,LF/HF序列和媒体数据部分可以具有相同的时间数据。事件检测模块617可以向媒体数据存储器633发送与该媒体数据部分相对应的环境信息。
根据一个实施例,媒体数据存储器633可以存储该媒体数据部分和LF/HF序列。内容存储器633还可以存储与该媒体数据部分相对应的环境信息。媒体数据存储器633可以按照时间顺序存储所接收的信息。
根据一个实施例,情绪推断模块634可以基于LF/HF序列和环境信息来推断电子设备610的用户的情绪。例如,情绪推断模块634可以基于例如G.Valenza,L.Citi,A.Lanata,E.-P.Scilingo和R.Barbieri的题为“Reveal ing Real-Time Emot ional Responses:aPerSonali zed Assessment based on Heartbeat Dynamics”(Scientific Repo rts 4,文章编号:4998,2014)的文章(通过引用合并于此)中描述的方法来获得情绪信息。
根据一个实施例,标记模块635可以用情绪信息来标记情绪信息相关的内容序列。标记模块635可以响应于用户的请求来修改情绪信息。
根据一个实施例,媒体数据共享模块636可以与其他用户共享存储在媒体数据存储器633中的媒体数据部分。媒体数据共享模块636可以共享用情绪信息标记的内容序列。
图7是用于解释根据实施例的在电子设备中存储媒体数据和HR数据的方法的示图。
可以理解的是,在图7的描述中描述的由电子设备执行的操作受电子设备500的处理器550的控制。
根据一个实施例,当输出媒体数据时,电子设备可以通过使用滑动窗口来获得媒体数据的一部分以及HR数据的序列。
参考图7,根据实施例的电子设备可以回放媒体数据710。在媒体数据710正被回放时,电子设备可以获得例如媒体数据710的快照711至719。快照711至719可以是包括在媒体数据710中的帧。在媒体数据710正被回放时,电子设备可以获得HR数据730。电子设备可以获得包括例如第一数据731至第九数据739的HR数据730。
根据一个实施例,如果媒体数据710回放到包括第四快照714的区段,则电子设备可以通过使用滑动窗口来获得包含第一快照711至第四快照714的第一媒体数据部分721。通过使用滑动窗口,电子设备可以获得在回放第一媒体数据部分721的持续时间期间获取的第一HR数据序列741。第一HR数据序列741可以包含第一数据731至第四数据734。
根据一个实施例,如果媒体数据710回放到包括第五快照715的区段,则电子设备可以通过使用滑动窗口来获得包含第二快照712至第五快照715的第二内容序列722。通过使用滑动窗口,电子设备可以获得在回放第二媒体数据部分722的持续时间期间获取的第二HR数据序列742。第二HR数据序列742可以包含第二数据732至第五数据735。
根据一个实施例,如果媒体数据710回放到包括第六快照716的区段,则电子设备可以通过使用滑动窗口来获得包含第三快照713至第六快照716的第三内容序列723。通过使用滑动窗口,电子设备可以获得在回放第三媒体数据部分723的持续时间期间获取的第三HR数据序列743。第三HR数据序列743可以包含第三数据733至第六数据736。
如上所述,根据实施例的电子设备可以在媒体数据710被回放时顺序地获得内容序列和HR数据序列。
在图7中,媒体的每个部分被示为包含四个快照,并且每个HR数据序列被示出为包含四个数据点。在某些实施例中,HR数据可以是在测量时间处的瞬时每秒心跳次数。然而,不限于此,媒体数据的每个部分可以包含预先确定的各种数量的快照,并且每个HR数据序列可以包含预先确定的各种数量的数据点。包含在每个内容序列中的快照的数量可以不同于包含在每个HR数据序列中的数据的数量。然而,对应于内容序列的时间段可以与对应于HR数据序列的时间段相同。
图8是示出了根据实施例的由电子设备获得的HR数据序列的能量相对于频率的曲线图。
可以理解的是,在图8的描述中描述的由电子设备执行的操作受电子设备500的处理器550的控制。
根据一个实施例,基于频率分析的执行结果,电子设备可以确定第二频带中的HR数据序列的分量与第一频带中的HR数据序列的分量之比是否满足指定条件。
参考图8,根据实施例的电子设备可以对HR数据序列执行傅里叶变换。在某些实施例中,HR序列可以是在给定时间的每秒心跳次数。通过执行傅立叶变换,电子设备可以获得示出HR数据序列的能量和频率之间的关系的曲线810。电子设备可以计算参考频率f0(例如,约0.15Hz)与第一频率f1(例如,约0.04Hz)之间的第一区域820的面积。电子设备可以计算参考频率f0与第二频率(例如,约0.4Hz)之间的第二区域830的面积。电子设备可以通过计算第一区域820的面积与第二区域830的面积之比来获得LF/HF。
图9是示出了根据实施例的由电子设备获得的根据时间的LF/HR值的曲线图。
可以理解的是,在图9的描述中描述的由电子设备执行的操作受电子设备500的处理器550的控制。
根据一个实施例,电子没备可以通过将HR数据序列之中的第二频带中的分量与第一频带中的分量之比和与内容的其他部分序列相对应的HR数据序列之中的第二频带中的分量与第一频带中的分量之比进行比较,来确定HR数据序列中的第二频带中的分量与第一频带中的分量之比是否满足指定条件。
参考图9,电子设备可以获得第一LF/HF值910至第九LF/HF值990。第一LF/HF值910至第九LF/HF值990可分别对应于第一至第九HR数据序列。电子设备可以顺序地获得第一LF/HF值910至第九LF/HF值990。电子设备可基于第一LF/HF值910至第九LF/HF值990中的至少一些来确定电子设备的用户的情绪改变。例如,如果LF/HF值之间存在较大差异,则电子设备可以确定满足指定条件。
例如,基于第一LF/HF值910至第四LF/HF值940,电子设备可以确定电子设备的用户的情绪是否在回放与第五LF/HF值950相对应的内容序列的持续时间内发生了改变。由于第五LF/HF值950显著低于第一LF/HF值910至第四LF/HF值940,所以电子设备可以确定电子设备的用户的情绪在回放与第五LF/HF值950相对应的内容序列的持续时间内发生了改变。
在另一示例中,基于第一LF/HF值910至第七LF/HF值970,电子设备可以确定电子设备的用户的情绪是否在回放与第八LF/HF值980相对应的内容序列的持续时间内发生了改变。由于第八LF/HF值980显著高于第一LF/HF值910至第七LF/HF值970,所以电子设备可以确定电子设备的用户的情绪在回放与第八LF/HF值980相对应的内容序列的持续时间内发生了改变。
电子设备可以基于第一LF/HF值910至第九LF/HF值990获得电子设备的用户的情绪信息。
图10示出了与多个外部设备连接的根据实施例的电子设备。
参考图10,根据实施例的电子设备1000可以支持物联网(IoT)。电子设备1000可以与各种家用电器(例如TV 1010、照明设备1020、扬声器1030等)一起操作。电子设备1000可以与提供内容服务的服务器1040通信。服务器1040可以提供例如音频数据。
根据一个实施例,电子没备1000可以向服务器1040提供在音频数据输出时关于音频数据中检测到电子设备1000的用户的情绪改变的一部分音频数据的信息。在某些实施例中,关于音频数据的该部分的信息可以包括根据音频数据的时基的时间段。例如,电子设备1000可以向服务器1040提供音频数据中与满足指定条件的HR数据相对应的一部分音频数据。电子设备1000可以向服务器1040提供在回放声源时获得的情绪信息。电子设备1000可以向服务器1040提供关于电子设备1000的用户的信息(例如,用户的年龄和性别)。
根据一个实施例,服务器1040可以基于从电子设备1000接收的信息创建个性化简档。服务器1040可以通过使用个性化简档向电子设备1000提供各种服务。例如,服务器1040可以存储从电子设备1000接收到的音频数据的一部分,并且可以将所存储的音频数据部分提供给电子设备1000。在另一个示例中,服务器1040可以将与用户的肯定情绪信息相关联的其他音频数据推荐给电子设备1000。在电子设备1000中回放古典音乐的同时获得电子设备1000的用户的肯定情绪信息的情况下,服务器1040可以向电子设备1000推荐古典音乐。在另一个示例中,服务器1040可以基于从多个设备收集的情绪信息以及用户信息向电子设备1000推荐音频数据。例如,通过分析情绪信息和用户信息,服务器1040可以获得例如30多岁的男性用户更喜欢摇滚音乐的信息,并且在电子设备1000的用户是30多岁的男性的情况下,服务器1040可以向电子设备1000推荐具有摇滚音乐的音频数据。服务器1040可以基于从电子设备1000收集的信息向电子设备1000提供各种服务。
根据一个实施例,在回放音频数据期间,电子设备1000可以获得关于各种家用电器(诸如TV 1010、照明设备1020、扬声器1030等)的信息作为上下文信息。例如,电子设备1000可以获得关于TV 1010的频道、音量或亮度的信息、关于照明设备1020的颜色或亮度的信息以及关于扬声器1030的音调或音量的信息。电子设备1000可以存储上下文信息并且可以向服务器1040发送上下文信息。服务器1040可以存储上下文信息。在与上下文信息相关联的声源被再次回放的情况下,电子设备1000可以基于从服务器1040提供的或存储在电子设备1000中的环境信息来控制TV 1010、照明没备1020和扬声器1030。在另一个示例中,电子设备1000可以基于在回放满足指定条件的声源序列的同时收集的上下文信息来控制TV1010、照明设备1020和扬声器1030。在另一个示例中,电子设备1000可以基于在获得了肯定情绪信息的时间段上收集的上下文信息来控制TV 1010、照明设备1020和扬声器1030。
图11是示出了根据实施例的在电子设备中捕获内容的方法的流程图。
下文中,假设图5的电子设备500执行图11所示的处理。此外,可以理解的是,在图11的描述中描述的由电子设备执行的操作受电子设备500的处理器550的控制。
参考图11,在操作1110中,根据实施例的电子设备可以输出媒体数据。例如,电子设备可以通过使用显示器和/或扬声器来输出照片、视频数据、音频数据、网页等。
在操作1120中,根据实施例的电子设备可以获得媒体数据的一部分的标识以及与内容的该部分序列相对应的HR数据序列。例如,电子设备可以使用滑动窗口来获得媒体数据的一部分。电子设备还可以获得与媒体数据的该部分相对应的时间数据。电子设备可以获得在媒体数据的该部分被回放的时间段期间或者与时间数据相对应的时间段期间收集的HR数据的序列。
在操作1130中,根据实施例的电子设备可以确定HR数据序列是否满足指定条件。例如,电子设备可以确定第一频带中的HR数据序列的能量与第二频带中的HR数据序列的能量之比是否满足指定条件。
如果满足指定条件,则根据实施例的电子设备可以在操作1140中存储媒体数据的与HR数据序列相对应的部分。例如,电子设备可以存储在获得了满足指定条件的HR数据序列的时间段期间输出的媒体数据部分。电子设备可以将所存储的媒体数据部分提供给用户。
图12是示出了根据实施例的在电子设备中捕获媒体数据的方法的流程图。
下文中,假设图5的电子设备500执行图12所示的处理。此外,可以理解的是,在图12的描述中描述的由电子设备执行的操作受电子设备500的处理器550的控制。为了描述的简洁,将省略对参照图11描述的操作的重复描述。
参考图12,在操作1210中,根据实施例的电子设备可以输出媒体数据。
在操作1220中,根据实施例的电子设备可以将n设置为1。例如,电子设备可以对内容的第一序列执行以下操作1230至1250。内容的第一序列可以包含媒体数据的第一至第k帧。例如,在媒体数据是视频的情况下,第一至第k帧可以是视频帧。
在操作1230中,根据实施例的电子设备可以获得与媒体数据的第一部分相关联的数据和与媒体数据的第一部分相对应的第一HR数据序列。
在操作1240中,根据实施例的电子设备可以确定HR数据的第一序列的LF/HF是否满足指定条件。例如,电子设备可以对HR数据的第一序列执行傅里叶变换以计算低频带中的功率谱与高频带中的功率谱之比。例如,电子设备可以确定LF/HF是否包括在指定范围内,或者LF/HF的变化模式是否与指定模式相似。
如果满足指定条件,则根据实施例的电子设备可以在操作1250中存储媒体数据的第一部分。
在操作1260中,根据实施例的电子设备可以确定媒体数据回放是否完成。例如,电子设备可以重复操作1230至1260直到媒体数据回放完成,并且如果内容回放完成,则可以结束操作。
在媒体回放未完成的情况下,根据实施例的电子设备可以在操作1270中将n设置为2。电子设备可以再次对内容的第二序列执行操作1230至1250。第二序列可以包含内容的第二至第(k+1)帧。
电子设备可以对下一个序列重复执行操作1230至1250,直到媒体数据回放完成。如果媒体数据回放完成,则电子设备可以结束操作。
本公开中使用的术语“模块”可以包括由硬件、软件和固件组成的单元,并且可以与术语“单元”、“逻辑”、“逻辑块”、“组件”和“电路”互换使用。“模块”可以是集成组件,或者可以是用于执行一个或多个功能的最小单元或其一部分。“模块”可以被机械地或电子地实现,并且可以包括用于执行已知的或将来开发的一些操作的专用IC(ASIC)芯片、现场可编程门阵列(FPGA)和可编程逻辑器件中的至少一种。根据各种实施例的装置的至少一部分(例如,模块或其功能)或方法的至少一部分(例如,操作)可以例如通过以程序模块形式存储在计算机可读存储介质(例如,存储器130)中的命令(或指令)实现。指令在由处理器(例如,处理器120)执行时,可以使所述处理器执行与该指令相对应的功能。计算机可读记录介质可以包括硬盘、软盘、磁介质(例如,磁带)、光介质(例如,紧凑盘只读存储器(CD-ROM)和数字通用盘(DVD))、磁光介质(例如,光磁软盘)和内部存储器。此外,程序指令不仅可以包括诸如由编译器产生的事物的机器代码,而且包括使用解释器在计算机上可执行的高级语言代码。根据各种实施例的模块或程序模块可以包括上述元件中的至少一个,或者可以省略上述元件的一部分,或者还可以包括其它元件。根据各种实施例的模块、程序模块或其它元件执行的操作可以顺序地、并行地、重复地或者按照启发式方法执行,或者一些操作可以以不同的顺序执行或者可以被省略。备选地可以添加其它操作。
虽然参考本公开各实施例示出并描述了本公开,但是本领域技术人员将理解:在不脱离由所附权利要求及其等同物限定的本公开的精神和范围的前提下,可以进行形式和细节上的各种改变。

Claims (15)

1.一种电子设备,包括:
存储器;以及
处理器,与所述存储器电连接,
其中,所述处理器被配置为:
在输出媒体数据时,获得与所述媒体数据的一部分相关联的数据以及所述电子设备的用户的与所述媒体数据的所述部分相对应的心率“HR”数据序列;以及
当所述HR数据序列满足指定条件时,将与所述HR数据序列相对应的所述媒体数据的所述部分存储在所述存储器中。
2.根据权利要求1所述的电子设备,还包括:
通信电路,被配置为与外部设备进行通信;
其中所述处理器被配置为使用所述通信电路从所述外部设备接收所述HR数据序列。
3.根据权利要求1所述的电子设备,还包括:
HR传感器,被配置为感测所述电子设备的用户的心率“HR”,
其中所述处理器被配置为使用所述HR传感器来获得所述HR数据序列。
4.根据权利要求1所述的电子设备,其中所述处理器被配置为在输出所述媒体数据时使用滑动窗口来获得所述媒体数据的所述部分。
5.根据权利要求1所述的电子设备,其中所述处理器被配置为在输出所述媒体数据时使用滑动窗口来获得所述HR数据序列。
6.根据权利要求1所述的电子设备,其中所述处理器被配置为在输出所述媒体数据时捕获所述媒体数据的所述部分。
7.根据权利要求1所述的电子设备,其中所述处理器被配置为在输出所述媒体数据时获得与所述媒体数据的所述部分相对应的基于时间的数据。
8.根据权利要求1所述的电子设备,其中,所述处理器被配置为:
对所述HR数据序列进行频率分析;以及
基于所述频率分析的结果,确定所述HR数据序列是否满足所述指定条件。
9.根据权利要求8所述的电子设备,其中,所述处理器被配置为基于所述频率分析的结果,确定所述HR数据序列当中第二频带中的分量与第一频带中的分量之比率是否满足所述指定条件。
10.根据权利要求9所述的电子设备,其中,所述处理器被配置为通过将所述比率和对应于所述媒体数据的另一部分的HR数据序列当中第二频带中的分量与第一频带中的分量之比率进行比较,来确定所述比率是否满足所述指定条件。
11.根据权利要求1所述的电子设备,还包括:
通信电路,被配置为与服务器通信;
其中所述处理器被配置为使用所述通信电路向所述服务器发送所述HR数据序列。
12.根据权利要求1所述的电子设备,还包括:
通信电路,被配置为与服务器通信;
其中,所述处理器被配置为当所述HR数据序列满足所述指定条件时,使用所述通信电路向所述服务器发送与所述HR数据序列相对应的所述媒体数据的所述部分。
13.根据权利要求1所述的电子设备,其中,所述处理器被配置为基于满足所述指定条件的所述HR数据序列,获得所述电子设备的用户的情绪信息。
14.一种电子设备中提取媒体数据的一部分的方法,所述方法包括:
输出所述媒体数据;
在输出所述媒体数据时,获得与所述媒体数据的一部分相关联的数据以及与所述媒体数据的所述部分相对应的心率“HR”数据序列;以及
当所述HR数据序列满足指定条件时,存储与所述HR数据序列相对应所述媒体数据的所述部分。
15.一种电子设备,包括:
外壳;
通过所述外壳的一部分暴露的显示器;
通过所述外壳的一部分暴露的扬声器;
包括在所述外壳中的通信电路;
与所述显示器、所述扬声器和所述通信电路电连接的处理器;以及
与所述处理器电连接的至少一个存储器,
其中所述至少一个存储器存储当由所述处理器执行时使得所述处理器进行以下操作的指令:
使用所述通信电路将所述电子设备无线连接到包括心率“HR”传感器的外部设备;
在所述电子设备与所述外部设备无线连接期间,使用所述显示器或所述扬声器中的至少一个播放存储在所述存储器中或者通过所述通信电路流传输的媒体数据;
在输出所述媒体数据时通过所述通信电路接收由所述HR传感器获得的HR数据的至少一部分;
在所述存储器中存储关于与所述媒体数据的播放区段相对应的所述HR数据的所述至少一部分的信息;以及
通过所述通信电路向服务器发送所存储的信息。
CN201810242613.4A 2017-03-24 2018-03-22 用于捕获内容的电子设备和方法 Pending CN108632450A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020170037962A KR20180108341A (ko) 2017-03-24 2017-03-24 전자 장치 및 전자 장치의 컨텐츠 캡쳐 방법
KR10-2017-0037962 2017-03-24

Publications (1)

Publication Number Publication Date
CN108632450A true CN108632450A (zh) 2018-10-09

Family

ID=61906587

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810242613.4A Pending CN108632450A (zh) 2017-03-24 2018-03-22 用于捕获内容的电子设备和方法

Country Status (4)

Country Link
US (1) US11191439B2 (zh)
EP (1) EP3379431A1 (zh)
KR (1) KR20180108341A (zh)
CN (1) CN108632450A (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20200205741A1 (en) * 2018-12-28 2020-07-02 X Development Llc Predicting anxiety from neuroelectric data
CN112817503B (zh) * 2021-01-18 2024-03-26 陈林斌 电子相框的智能显示方法、电子相框及可读存储介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101198277A (zh) * 2005-02-22 2008-06-11 海尔思-斯玛特有限公司 用于生理学和心理生理学监控的方法和系统及其应用
US20090192961A1 (en) * 2008-01-25 2009-07-30 International Business Machines Corporation Adapting media storage based on user interest as determined by biometric feedback
US20110300847A1 (en) * 2010-06-02 2011-12-08 Q-Tec Systems Llc Method and apparatus for monitoring emotion in an interactive network
CN104580972A (zh) * 2013-10-21 2015-04-29 谷歌公司 用于提供由设备的传感器收集的媒体内容的方法和系统
US20150297109A1 (en) * 2014-04-22 2015-10-22 Interaxon Inc. System and method for associating music with brain-state data
US20150342479A1 (en) * 2014-05-30 2015-12-03 Microsoft Corporation Data recovery for optical heart rate sensors
CN105829995A (zh) * 2013-10-22 2016-08-03 谷歌公司 根据观看者表情捕捉媒体内容
US20160371372A1 (en) * 2013-03-15 2016-12-22 Futurewei Technologies, Inc. Music Recommendation Based on Biometric and Motion Sensors on Mobile Device

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003178078A (ja) 2001-12-12 2003-06-27 Matsushita Electric Ind Co Ltd 画像、音声データへの付加用標識データとその付加方法
US20150099987A1 (en) 2010-06-07 2015-04-09 Affectiva, Inc. Heart rate variability evaluation for mental state analysis
KR101307248B1 (ko) 2010-10-19 2013-09-12 주식회사 라이프사이언스테크놀로지 사용자의 생체정보 분석을 통한 감정상태 분석장치 및 방법
KR20150110053A (ko) 2014-03-24 2015-10-02 주식회사 엘지유플러스 웨어러블 디바이스를 이용한 정보 공유 방법 및 장치
KR102302871B1 (ko) 2014-09-05 2021-09-16 삼성전자주식회사 사용자의 생체신호를 모니터링 및 분석하는 장치 및 방법
US9392324B1 (en) * 2015-03-30 2016-07-12 Rovi Guides, Inc. Systems and methods for identifying and storing a portion of a media asset
US10285634B2 (en) 2015-07-08 2019-05-14 Samsung Electronics Company, Ltd. Emotion evaluation
US10382815B2 (en) * 2015-10-15 2019-08-13 DISH Technologies L.L.C. Apparatus, systems and methods for buffering of media content
US9916866B2 (en) * 2015-12-22 2018-03-13 Intel Corporation Emotional timed media playback

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101198277A (zh) * 2005-02-22 2008-06-11 海尔思-斯玛特有限公司 用于生理学和心理生理学监控的方法和系统及其应用
US20090192961A1 (en) * 2008-01-25 2009-07-30 International Business Machines Corporation Adapting media storage based on user interest as determined by biometric feedback
US20110300847A1 (en) * 2010-06-02 2011-12-08 Q-Tec Systems Llc Method and apparatus for monitoring emotion in an interactive network
US20160371372A1 (en) * 2013-03-15 2016-12-22 Futurewei Technologies, Inc. Music Recommendation Based on Biometric and Motion Sensors on Mobile Device
CN104580972A (zh) * 2013-10-21 2015-04-29 谷歌公司 用于提供由设备的传感器收集的媒体内容的方法和系统
CN105829995A (zh) * 2013-10-22 2016-08-03 谷歌公司 根据观看者表情捕捉媒体内容
US20150297109A1 (en) * 2014-04-22 2015-10-22 Interaxon Inc. System and method for associating music with brain-state data
US20150342479A1 (en) * 2014-05-30 2015-12-03 Microsoft Corporation Data recovery for optical heart rate sensors

Also Published As

Publication number Publication date
EP3379431A1 (en) 2018-09-26
KR20180108341A (ko) 2018-10-04
US20180271388A1 (en) 2018-09-27
US11191439B2 (en) 2021-12-07

Similar Documents

Publication Publication Date Title
CN108076217A (zh) 用于显示使用图标的应用的执行屏幕的电子装置和方法
CN107959877A (zh) 电子设备和电子设备播放多媒体内容的方法
CN109478393A (zh) 显示图像的电子装置和方法
CN108509168A (zh) 设备及其控制方法
CN108388782A (zh) 用于认证生物计量数据的电子设备和系统
CN107257954A (zh) 用于提供屏幕镜像服务的设备和方法
CN108604432A (zh) 电子设备及用于控制其的方法
CN108076405A (zh) 电子设备及其操作方法
KR20170136317A (ko) 전자 장치 및 그의 동작 방법
CN108664829A (zh) 用于提供与图像中对象有关的信息的设备
CN108713314A (zh) 服务器和由服务器控制用户环境的方法
CN107997767A (zh) 用于识别用户活动的方法及其电子设备
CN106575424A (zh) 使音乐信息可视化的方法和装置
CN108353105A (zh) 电子设备和电子设备的内容输出方法
CN105426069B (zh) 用于产生预览数据的方法和电子设备
CN107491177A (zh) 用于识别旋转体的旋转的方法及用于处理该方法的电子设备
CN108427533A (zh) 电子设备及用于确定电子设备的环境的方法
US20190378611A1 (en) Healthcare program management method and electronic device thereof
CN108353161A (zh) 电子设备、可穿戴设备和用于控制通过电子设备显示的对象的方法
CN106796651A (zh) 电子设备的多媒体数据处理方法及其电子设备
KR102358849B1 (ko) 스마트 워치에 대한 정보를 제공하는 전자 장치와 이의 동작 방법
US10835782B2 (en) Electronic device, system, and method for determining suitable workout in consideration of context
CN108351892A (zh) 用于提供对象推荐的电子装置和方法
CN108024763A (zh) 活动信息提供方法及支持其的电子设备
CN109196546A (zh) 电子设备和包括该电子设备的信息处理系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20181009