CN106575424B - 使音乐信息可视化的方法和装置 - Google Patents

使音乐信息可视化的方法和装置 Download PDF

Info

Publication number
CN106575424B
CN106575424B CN201580041691.2A CN201580041691A CN106575424B CN 106575424 B CN106575424 B CN 106575424B CN 201580041691 A CN201580041691 A CN 201580041691A CN 106575424 B CN106575424 B CN 106575424B
Authority
CN
China
Prior art keywords
music
electronic device
display
information
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201580041691.2A
Other languages
English (en)
Other versions
CN106575424A (zh
Inventor
罗爱礼
尹智嬉
赵真衡
李慈卿
李惠恩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN106575424A publication Critical patent/CN106575424A/zh
Application granted granted Critical
Publication of CN106575424B publication Critical patent/CN106575424B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/165Management of the audio stream, e.g. setting of volume, audio stream path
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486Drag-and-drop
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0626Adjustment of display parameters for control of overall brightness
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/14Solving problems related to the presentation of information to be displayed
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)
  • Computer Hardware Design (AREA)

Abstract

公开了一种操作电子设备的方法,包括:获取与正在由电子设备播放的音乐关联的音乐信息;基于音乐信息通过电子设备的显示器输出视觉效果。根据本公开的另一方面,提供了一种电子设备,该电子设备包括显示器和处理器,处理器配置为:获取与正在由电子设备播放的音乐关联的音乐信息;以及基于音乐信息通过显示器输出视觉效果。

Description

使音乐信息可视化的方法和装置
技术领域
本公开涉及电子设备,并且更具体地,涉及用于使音乐信息可视化的方法和装置。
背景技术
随着信息通信技术和半导体技术的发展,各种电子设备正进化为用于提供各种多媒体服务的多媒体设备。例如,电子设备提供各种多媒体服务,例如,通信服务器,广播服务,无线互联网服务,照相机服务以及音乐播放服务。
使用诸如音乐播放服务的音频服务,用户可以听音乐并且同时欣赏在显示屏幕上显示的诸如歌词或专辑封面的音乐内容。
传统的音乐播放服务使音乐中情绪的主观属性可视化,以便于搜索和访问更多的各种音乐,但是这需要用户的理解,并且没有考虑个体用户的偏好。此外,传统的音乐播放服务不加选择地在音乐播放中显示不必要的信息,由此造成用户的困扰和混乱。
上述信息仅作为背景信息呈现以帮助理解本公开。并未确定和断言有关上述内容中的任何一个是否可以作为相对于本公开的现有技术。
发明内容
技术方案
本公开解决这一需求。根据本公开的一方面,提供了一种操作电子设备的方法,包括:获取与正在由电子设备播放的音乐关联的音乐信息;以及基于音乐信息的输出视觉效果。
根据本公开的另一方面,提供了一种电子设备,该电子设备包括显示器和处理器,处理器配置为:获取与正在由电子设备播放的音乐关联的音乐信息;以及基于音乐信息输出视觉效果。
附图说明
通过结合附图的以下详细描述,本公开的各个方面的上述和其他方面、特征和优点将更加显而易见,其中:
图1是根据本公开的方面的电子设备的示例的图示;
图2是根据本公开的方面的可视化模块的示例的框图;
图3是根据本公开的方面的过程的示例的流程图;
图4是根据本公开的方面的过程的示例的流程图;
图5是根据本公开的方面的电子设备操作的示例的图示;
图6是根据本公开的方面的电子设备操作的示例的图示;
图7是根据本公开的方面的电子设备操作的示例的图示;
图8是根据本公开的方面的过程的示例的流程图;
图9是根据本公开的方面的电子设备操作的示例的图示;
图10是根据本公开的方面的过程的示例的流程图;
图11是根据本公开的方面的电子设备操作的示例的图示;
图12是根据本公开的方面的电子设备操作的示例的图示;
图13是根据本公开的方面的电子设备操作的示例的图示;
图14是根据本公开的方面的过程的示例的流程图;以及
图15是根据本公开的方面的电子设备的示例的框图。
在全部附图中,相同的附图标记将被理解为指代相同的部分、部件和结构。
具体实施方式
提供以下参照附图的描述以帮助全面理解由权利要求和其等同所限定的本公开的实施方式。该描述包括各种具体细节以帮助理解,但这些具体细节仅被视作是示例性的。因此,本领域普通技术人员将认识到,在不脱离本公开的范围和精神的情况下,可以对本文描述的实施方式进行各种改变和修改。此外,为求清晰简明,可以省略对众所周知的功能和结构的描述。
如在本公开中使用的,诸如“包括”或“可以包括”的用语是指存在相应的功能,操作或特征,而不限制额外功能、操作和特征的存在。同样地,诸如“包括”或“具有”的用语是指特征、数字、步骤、操作、部件或其组合的存在,并不旨在排除一个或多个额外的特征、数字、步骤、操作、部件或其组合。
如在本公开中使用的,用语“或”用于包括所列举的项的任何和全部组合。例如,“A或B”包括仅A,仅B或A和B两者。
如在本公开中使用的,诸如“第一”或“第二”的用语可用于描述各种特征,但不对这些特征进行限定。例如,所述用语不对它们相关联的特征的次序和/或重要性进行限定。这样的用语可以用于区分一个特征与另一个特征。例如,第一用户设备(UE)和第二用户设备都是用户设备,但互为不同的用户设备。例如,在不脱离本公开的范围的情况下,第一部件可以被称为第二部件,同样地,第二部件可以被称为第一部件。
如果部件被称为与另一部件“连接”或“连接到”另一部件,则所述部件可直接与另一部件连接或连接到另一部件,或二者之间可存在其他部件。另一方面,如果部件被描述为与另一部件“直接连接”或“直接连接到”另一部件,则应理解的是,它们之间不存在其他部件。
用语“基本上”是指所描述的特征、参数或值无需精确地实现,而偏差或变化(包括例如公差、测量误差、测量精度限制和其他为本领域技术人员已知的因素)可以以不妨碍所述特征意图提供的效果的量发生。
在本公开的实施方式中使用的用语“模块”表示例如包括硬件、软件或固件中的一个或多个的组合的单元。用语“模块”可以与例如“单元”、“逻辑”、“逻辑块”、“部件”或“电路”的用语互换地使用。“模块”可以是最小单元或整体形成的部件的一部分。“模块”可以是一个或多个功能的最小单元或一部分。“模块”可以被机械地或电子地执行。例如,“模块”可以包括专用集成电路(ASIC)、现场可编程门阵列(FPGA)或用于执行众所周知的或将要开发的操作的可编程逻辑设备中的至少一个。
除非另外限定,否则本文中使用的所有用语具有与本领域技术人员通常理解的含义相同的含义。在通常使用的字典中定义的这些术语应被解释为具有与相关领域中的语境意义上的含义相同的含义,并不应被解释为具有理想的或过于正式的含义,除非在本说明书中清楚地定义。
根据本公开的各种实施方式的电子设备可以是包括通信功能的设备。例如,电子设备可以包括:智能手机、平板个人电脑(PC)、移动电话、视频电话、电子书阅读器、台式PC、膝上型PC、上网本电脑、个人数字助理(PDA)、便携式多媒体播放器(PMP)、运动图像专家组音频层3(Moving Picture Experts Group Audio Layer 3,MP3)播放器、移动医疗器械、照相机及可佩戴设备(例如,诸如电子眼镜的头戴式设备(HMD)、电子纺织品、电子手环、电子项链、电子配件、电子纹身及智能手表)中的至少一个。
根据本公开的各种实施方式,电子设备可以是具备通信功能的智能家用电器。所述智能家用电器可以包括例如电视机、数字视频盘(DVD)播放器、音频系统、冰箱、空调、吸尘器、烤箱、微波炉、洗衣机、空气净化器、机顶盒、TV盒子(例如,三星HomeSyncTM、苹果AppleTVTM或谷歌Google TVTM)、游戏机、电子词典、电子钥匙、摄像机及电子相框中的至少一个。
根据本公开的各种实施方式,电子设备可以包括各种医疗器械(例如磁共振血管造影机(MRA)、磁共振成像机(MRI)、计算机断层扫描机(CT)、X射线系统、超声波传感器)、导航设备、全球定位系统(GPS)接收器、事件数据记录器(EDR)、飞行数据记录器(FDR)、车载信息娱乐设备、海洋电子设备(例如,海洋导航设备和陀螺罗盘)、航空电子系统、安全设备及工业或家庭机器人中的至少一个。
根据本公开的各种实施方式,电子设备可以包括具有通信功能的家具或建筑/结构的一部分、电子板、电子签名接收设备、投影仪和各种仪表(例如,用于水、电、气体和无线电波的仪表)中的至少一个。
根据本公开的各种实施方式的电子设备可以是这些各种设备中的一个或这些各种设备的组合。电子设备可以是柔性设备。此外,本领域技术人员应当理解,电子设备不限于这些设备。
在下文中,本公开的实施方式通过参考附图提供了电子设备。在本公开的实施方式中使用的用语“用户”可以表示使用电子设备的人或设备(例如,人工智能电子设备)。
图1是根据本公开的方面的电子设备的示例的图示。参照图1,电子设备100包括总线110、处理器120、存储器130、输入/输出接口140、显示器150、通信接口160和可视化模块170。可视化模块170可以包括在处理器120中或包括在单独的模块中。在下文中,可视化模块170被描述为包括在处理器120中。
总线110将电子设备100的部件(例如,处理器120、存储器130、输入/输出接口140、显示器150、通信接口160和可视化模块170)互连并控制部件之间的通信。
处理器120可以包括任何合适类型的处理电路。例如,处理器120可以包括通用处理器(例如,基于ARM的处理器)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)和/或数字信号处理器(DSP)中的一个或多个。处理器120通过总线110从电子设备100的部件(例如,存储器130,输入/输出接口140,显示器150,通信接口160和可视化模块170)接收指令,解释接收到的指令,并根据解释的指令执行操作或处理数据。处理器120执行存储在存储器130中的至少一个程序,并提供对应该程序的服务。
存储器130存储从电子设备100的一个或多个部件(例如,处理器120、输入/输出接口140、显示器150、通信接口160和可视化模块170)接收或生成的指令或数据。
存储器130存储一个或多个程序。例如,存储器130可以存储内核131、中间件132、应用程序接口(API)133和应用134。这些程序中的任何一个可以使用程序模块来执行,并且程序模块可以使用软件、固件和硬件、或它们中的至少两个的组合来执行。
内核131控制或管理用于执行其他程序模块(例如,中间件132、API 133或应用134)的操作或功能的系统资源(例如,总线110、处理器120和存储器130)。此外,内核131提供允许中间件132、API 133或应用134访问、控制或管理电子设备100的单独部件的接口。
中间件132在API 133或应用134与内核131之间中继数据。中间件132通过给予任务请求以电子设备100的系统资源(例如,总线110、处理器120或存储器130)优先级来对从至少一个应用接收的任务请求进行负载平衡。
API 133(其为用于应用134以控制从内核131或中间件132提供的功能的接口)可以包括用于文件控制、窗口控制、图像处理或文本控制的至少一个接口或功能(例如,指令)。
应用134可以包括短消息服务(SMS)/多媒体消息服务(MMS)应用、电子邮件应用、日历应用、报警应用、健康护理应用(例如,用于测量锻炼量、血糖水平等的应用)、或环境信息应用(例如,用于提供气压、湿度、温度信息等的应用)。可选地,应用134可以参与电子设备100和外部电子设备(例如,电子设备104)之间的信息交换。信息交换应用可以包括例如用于将某些信息中继到外部电子设备的通知中继应用或用于管理外部电子设备的设备管理应用。
例如,通知中继应用可以将在电子设备100上运行的另一应用(例如,SMS/MMS应用、电子邮件应用、健康护理应用、环境信息应用等)的通知信息中继到外部电子设备104。可选地,通知中继应用可以接收从外部电子设备104接收的信息并将其提供给其他应用。设备管理应用打开/关闭与电子设备100通信的外部电子设备104的功能的至少一部分(例如,打开/关闭外部电子设备(或一些其他部件)),控制显示器的亮度(或分辨率),以及管理(例如,安装、删除或更新)由外部电子设备的应用或外部电子设备本身提供的服务(例如,呼叫服务或消息服务)。
应用134可以包括基于外部电子设备104的属性(例如,电子设备的类型)指定的应用。例如,当外部电子设备是MP3播放器时,应用134可以包括音乐播放应用。类似地,当外部电子设备是移动医疗设备时,应用134可以包括健康护理应用。应用134可以包括在电子设备100中指定的应用和从服务器106、电子设备104接收的应用中的至少一个。
输入/输出接口140经由总线110将来自用户的、通过输入/输出设备(例如,传感器、键盘或触摸屏)输入的指令或数据转发到例如处理器120、存储器130、通信接口160或可视化模块170。例如,输入/输出接口140可以通过触摸屏将用户触摸输入的数据转发到处理器120。例如,输入/输出接口140可以通过输入/输出设备(例如,扬声器或显示器)经由总线110输出从处理器120,存储器130,通信接口160或可视化模块170接收的指令或数据。例如,输入/输出接口140可以通过扬声器将由处理器120处理的语音数据输出给用户。
显示器150向用户显示各种信息(例如,多媒体数据或文本数据)。
通信接口160建立电子设备100与外部电子设备104或服务器106之间的通信。例如,通信接口160可以使用无线通信或有线通信通过网络162与外部设备通信。无线通信可以包括例如无线保真(WiFi)、蓝牙(BT)、近场通信(NFC)、GPS和蜂窝通信(例如,长期演进(LTE)、长期演进高级(LTE-A)、码分多址(CDMA)、宽带码分多址(WCDMA)、通用移动电信系统(UMTS)、无线宽带(WiBro)或全球移动通信系统(GSM))中的至少一个。有线通信可以包括例如通用串行总线(USB)、高清晰度多媒体接口(HDMI)、推荐标准(RS)232、普通老式电话服务(POTS)等中的至少一个。
网络162可以是通信网络。通信网络可以包括计算机网络、互连网、物联网和电话网络中的至少一个。用于电子设备100和外部设备之间通信的协议(例如,传输层协议,数据链路协议或物理层协议)可以由应用134、API 133、中间件132、内核131和通信接口160中的至少一个支持。
可视化模块170可以从音乐文件或与正在播放的音乐相关联的信息中获取音乐信息,分析所获取的音乐信息,并基于所分析的音乐信息使所述音乐信息可视化。可视化模块170可以获取音乐文件的属性信息或播放信息。音乐文件的属性信息可以包括指示音乐文件的属性的音乐信息。作为示例,属性可以包括音乐文件属性信息中的文件类型、文件名称、文件大小、音乐流派、音乐名称、歌手、歌词和专辑封面中的至少一个。专辑封面可以包括音乐文件的专辑信息的图像(专辑封页、专辑图片)。播放信息可以与正在播放的音乐(例如,编码在音乐文件中的音乐)有关。作为示例,播放信息可以包括音乐的音调、音量水平、音高、韵律、节奏、节拍以及织体中的至少一个。可视化模块170可以基于音乐信息在显示器上输出特效。
服务器106可以通过完成电子设备100的操作(或功能)中的至少一个来支持电子设备100。例如,服务器106可以包括可视化服务器模块108用于支持电子设备100的可视化模块170。可视化服务器模块108可以包括可视化模块170的至少一个部件并且执行(例如,替换)可视化模块170的操作中的至少一个。
可视化模块170可以处理从其他部件(例如,处理器120、存储器130、输入/输出接口140和通信接口160)获取的信息的至少一部分,并且将处理过的信息以各种方式提供给用户。例如,可视化模块170可以通过利用处理器120或独立于处理器120地控制电子设备100的至少一部分功能以与其他电子设备(例如,电子设备104、服务器106)互相配合。可视化模块170的至少一部分可以包括在服务器106(例如,可视化服务器模块108)中,并且服务器106可以支持可视化模块170的至少一个操作。
图2是根据本公开的方面的可视化模块的示例的框图。参照图2,可视化模块170可以包括音乐信息获取模块200、音乐信息分析模块210和特效添加模块220。虽然在该示例中,模块200、210和220被描绘为单独的模块,但是在一些实现方式中,模块200、210和220中的任何一个可以被集成在一起。
音乐信息获取模块200可以收集或获取存储在电子设备或外部电子设备(例如,服务器)中的音乐文件的音乐信息。例如,音乐信息获取模块200可以选择或播放音乐文件,并获取音乐文件的属性信息或播放信息。与音乐文件相关联的属性信息可以包括指示音乐文件的属性的音乐信息。作为示例,属性可以包括音乐文件属性信息中的文件类型、文件名称、文件大小、音乐流派、音乐名称、歌手、歌词和专辑封面中的至少一个。专辑封面可以包括图像(专辑封页、专辑图片)或与音乐文件相关联的其他信息。音乐文件的播放信息可以与编码在音乐文件中的音乐有关。作为示例,播放信息可以包括音乐的音调、音量水平、音高、韵律、节奏、节拍以及织体中的至少一个。
音乐信息分析模块210可以对获取的音乐信息进行分类或分析。音乐信息分析模块210可以提取所获取的音乐属性信息或音乐播放信息中的特征值或模式,并且使用数学算法对其进行分析。音乐信息分析模块210可以从音乐特征、元音乐特征和在所获取的音乐信息中识别的音乐情感信息中提取特征值或模式。
特效添加模块220可以基于所分析的音乐信息输出特效。在一些实施方式中,特效添加模块220可以基于所分析的音乐属性信息或音乐播放信息来改变显示器的亮度、色彩和色度设置中的至少一个。另外地或可选地,在一些实现方式中,特效添加模块220可以基于所分析的音乐属性信息或音乐播放信息在显示器上显示对象。所述对象可以包括图形、字母和/或任何合适类型的视觉对象。特效添加模块220可以在图形或字母上赋予运动效果。另外地或可选地,在一些实现方式中,特效添加模块220可以基于所分析的音乐属性信息或音乐播放信息来改变在音乐正在播放时在显示器上呈现的专辑封面(或另一对象)。特效添加模块220可以改变专辑封面(或在显示器上呈现的另一对象)的形状、大小、颜色、亮度和色度中的至少一个。例如,特效添加模块220可以向所显示的专辑封面添加图形或字母,以及以各种方式改变或合成专辑封面。
特效添加模块220可以根据所分析的音乐信息选择显示的特定特效。另外地或可选地,特效添加模块220可基于在电子设备100处接收的用于选择特效的用户输入来选择特定特效。例如,用户可选择他/她期望的特效,并基于视觉、听觉或触觉设置各种呈现效果。
根据本公开的多个实施方式,电子设备包括显示器,并且处理器配置为控制:获取电子设备的音乐信息;分析所获取的音乐信息,以及基于所分析的音乐信息使音乐信息可视化。
音乐信息可以包括音乐文件的属性信息或播放信息中的至少一个。
处理器还被配置为获取音乐文件的属性信息中的文件类型、文件名称、文件大小、音乐流派、音乐名称、歌手、歌词和专辑封面中的至少一个,或者获取音乐文件的播放信息中的音调、音量水平、音高、韵律、节奏、节拍以及织体中的至少一个。
处理器还被配置为提取所获取的音乐文件的属性信息或播放信息中的特征值或音乐模式。
处理器还被配置为基于所获取的音乐文件的属性信息或播放信息向显示器添加特效。
处理器还被配置为根据显示器上的触摸输入进一步将特效添加到显示器。
处理器还被配置为基于所获取的音乐文件的属性信息或播放信息来改变显示器的亮度、色彩和色度中的至少一个。
处理器还被配置为基于所获取的音乐文件的属性信息或播放信息在显示器上显示对象。
处理器还被配置为基于所获取的音乐文件的属性信息或播放信息来改变显示器上的歌词或专辑封面。
处理器还被配置为基于所分析的音乐信息输出振动或声音。
图3是根据本公开的方面的过程的示例的流程图。参照图3,电子设备(例如,电子设备100)可以在操作300中获取音乐信息。例如,电子设备可以通过选择或播放预存的音乐文件来获取音乐信息。作为另一示例,电子设备可以通过通信从外部电子设备(例如,服务器)选择或播放音乐文件来获取音乐信息。音乐信息可以包括音乐文件的属性信息或播放信息。音乐文件的属性信息可以是指示音乐文件的属性的音乐信息。作为示例,属性可以包括音乐文件属性信息中的文件类型、文件名称、文件大小、音乐流派、音乐名称、歌手、歌词和专辑封面中的至少一个。专辑封面可以包括音乐文件的专辑信息的图像(专辑封页、专辑图片)。音乐文件的播放信息可以与编码在音乐文件中的音乐有关。作为示例,播放信息可以包括音乐文件的音调、音量水平、音高、韵律、节奏、节拍以及织体中的至少一个。
在操作310中,电子设备可以分析所获取的音乐信息。电子设备可以提取所获取的音乐属性信息或音乐播放信息中的特征值或模式,并且使用数学算法对其进行分析。
在操作320中,电子设备可以基于音乐信息输出视觉效果。在一些实现方式中,电子设备可以基于所分析的音乐信息输出特效。另外地或可选地,在一些实现方式中,电子设备可以基于所分析的音乐信息中的音乐属性信息或音乐播放信息来改变显示器的亮度、色彩和色度设置中的至少一个。另外地或可选地,在一些实现方式中,电子设备可以基于所分析的音乐属性信息或音乐播放信息在显示器上显示对象。所述对象可以包括图形、字母和/或任何合适类型的视觉对象。电子设备可以在图形或字母上赋予运动效果。另外地或可选地,在一些实现方式中,电子设备可以基于所分析的音乐信息改变在显示器上呈现的专辑封面(或另一对象)。电子设备可以改变专辑封面(或在显示器上呈现的另一对象)的形状、大小、颜色、亮度和色度中的至少一个。例如,电子设备可以向所显示的专辑封面添加图形或字母,以及以各种方式改变或合成专辑封面。
电子设备可以基于所分析的音乐信息听觉化或触觉化所述音乐信息。例如,电子设备可以基于所分析的音乐信息向用户生成特定的声音。作为另一示例,电子设备可以基于所分析的音乐信息向用户生成振动。
图4是根据本公开的方面的过程的示例的流程图。
参照图4,在操作400中,电子设备(例如,电子设备100)可以开始播放音乐文件。例如,电子设备可以运行预存的音乐文件或通过外部电子设备(例如,服务器)选择音乐文件进行播放。
在操作410中,电子设备可以获取所播放的音乐文件的音乐信息。电子设备可以获取音乐文件的属性信息或播放信息。音乐文件的属性信息可以是指示音乐文件的属性的音乐信息。作为示例,属性可以包括音乐文件属性信息中的文件类型、文件名称、文件大小、音乐流派、音乐名称、歌手、歌词和专辑封面中的至少一个。专辑封面可以包括音乐文件的专辑信息的图像(专辑封页、专辑图片)。音乐文件的播放信息可以与编码在音乐文件中的音乐有关。作为示例,播放信息可以包括音乐的音调、音量水平、音高、韵律、节奏、节拍以及织体中的至少一个。
在操作420中,电子设备可以通过分析所获取的音乐信息来确定用于在显示器上呈现的对象。电子设备可以提取获取的音乐信息中的特征值或模式,并且使用数学算法对其进行分析。电子设备可以通过分析所获取的音乐信息来选择要在显示器上显示的对象。例如,电子设备可以基于所获取的音乐信息来为对象选择亮度,颜色,图形,专辑封面和运动效果中的至少一个。
电子设备可以根据作为音乐播放信息的音高来确定要在显示器上显示的对象的运动效果范围。电子设备可以根据作为音乐播放信息的节奏来确定要在显示器上显示的对象的运动速度。电子设备可以根据作为音乐播放信息的韵律来确定要在显示器上显示的图形或字母。电子设备可以根据正在播放的音乐的流派来确定对象的亮度。电子设备可以根据作为音乐文件信息的音乐歌词来确定要在显示器上显示的歌词。电子设备可以根据作为音乐文件信息的专辑封面来确定要在显示器上显示的颜色。例如,电子设备可以通过从专辑封面提取至少一种颜色来选择要在显示器上显示的颜色。各种对象可以根据音乐播放信息或音乐文件信息确定。
在操作430中,电子设备可以确定是否检测到触摸输入。电子设备可以确定是否从显示器上检测到手指或输入笔的触摸输入。
当没有检测到触摸输入时,电子设备可返回操作410。
在检测到触摸输入时,电子设备可以在操作440中根据触摸输入在显示器上显示确定的对象。电子设备可以在触摸的区域中显示确定的对象。例如,电子设备可以根据连续触摸或拖曳显示另一对象。在显示确定的对象的同时,电子设备还可以输出振动或特定的声音。
参照图5,电子设备500可以检测主屏幕501上的连续触摸或拖曳503,并沿着拖曳的轨迹连续地显示图形505。例如,图形505可以根据音乐信息改变成各种形状,以及在预定时段之后消失。
如图6所示,电子设备600可以检测主屏幕601上的连续触摸或拖曳603,并且连续地显示与当前由电子设备600正在播放的音乐相关联的专辑封面(例如,专辑封页图像)获取的特定图像605。例如,特定图像605可以包括人、符号和/或专辑封面的任何其它合适部分的图像。电子设备600可以在如图6所示的片段中呈现特定图像605,但不限于此。
如图7所示,电子设备700可以检测主屏幕701上的连续触摸或拖曳703,并且在拖曳的区域中连续地显示专辑封面的特定图像705。例如,特定图像705可以包括与正在播放的音乐相关联的专辑封面中的人或符号的图像(例如,专辑封页图像)。电子设备700可以在图像705上赋予所选择的形状。例如,电子设备可以在图像705上赋予水滴形状,如图7所示。如上所述,可以基于音乐信息来选择形状。电子设备可以根据在另一屏幕以及主屏幕中检测到的触摸来显示对象。例如,电子设备可以根据在锁定屏幕或应用运行屏幕中检测到的触摸或拖曳来显示各种对象。
图8是根据本公开的方面的过程的示例的流程图。
参照图8,在操作800中,电子设备(例如,电子设备100)可以播放音乐文件和/或显示与所播放的音乐相对应的歌词。电子设备可以运行预存的音乐文件或通过外部电子设备(例如,服务器)选择音乐文件进行播放。
在操作810中,电子设备可以获取并分析所播放的音乐文件的音乐信息。电子设备可以获取和分析音乐文件的属性信息或播放信息。音乐文件的属性信息可以是指示音乐文件的属性的音乐信息。作为示例,属性可以包括音乐文件属性信息中的文件类型、文件名称、文件大小、音乐流派、音乐名称、歌手、歌词和专辑封面中的至少一个。专辑封面可以包括音乐文件的专辑信息的图像(专辑封页、专辑图片)。音乐文件的播放信息可以与编码在音乐文件中的音乐有关。作为示例,播放信息可以包括音乐的音调、音量水平、音高、韵律、节奏、节拍和织体中的至少一个。电子设备可以提取所获取的音乐信息中的特征值或模式,并且使用数学算法对其进行分析。
在操作820中,电子设备可以基于音乐信息改变显示的歌词。电子设备可以根据分析改变所显示的歌词的行高、字体大小、字母间距和字体颜色中的至少一个。
电子设备可以根据作为音乐播放信息的音高来改变所显示歌词的行高。例如,电子设备可以随着音量水平的升高而增加歌词的行高。电子设备可以根据作为音乐播放信息的音量水平来改变所显示歌词的字体大小。例如,电子设备可以随着音高的升高而增加歌词的字体大小。电子设备可以根据作为音乐播放信息的节奏来改变所显示歌词的字母间距。例如,电子设备可以随着节奏的减慢而增加歌词的字母间距。
电子设备可以根据音乐文件信息改变所显示歌词的字体颜色。例如,当存在与音乐名称相同的歌词时,电子设备可以改变相应歌词的字体颜色。电子设备可以从音乐文件的专辑封面中提取使用最多的颜色并将提取的颜色应用于相应的歌词。电子设备可以处理专辑封面以识别专辑封面中描绘的歌手(或另一个人)的图像。随后,电子设备可以在歌词旁边显示歌手的图像。电子设备可以高亮与当前播放的音乐对应的歌词并调暗其他歌词。
如图9所示,电子设备900可以播放音乐文件并显示音乐文件的歌词信息910。歌词信息910可以包括根据相应歌词911的歌手的脸部图像913。例如,电子设备900可以根据当前播放的音乐高亮相应歌词911。电子设备900可以根据所分析音乐信息的音高、音量水平、节奏、名称、歌手和音乐部分对相应歌词911的外观进行各种改变。
图10是根据本公开的方面的过程的示例的流程图。在操作1000中,电子设备(例如,电子设备100)可以播放电子设备的音乐文件并在显示器上显示特定的图像。电子设备可以运行预存的音乐文件或通过外部电子设备(例如,服务器)选择音乐文件进行播放。例如,如图11所示,电子设备1100可以选择音乐文件并显示相应音乐文件的专辑封面(专辑封页图像)1110。电子设备1100可以显示各种屏幕图像例如,主屏幕、锁定屏幕和应用屏幕,以及专辑封面1110。
在操作1010中,电子设备可以获取并分析所播放的音乐文件的音乐信息。电子设备可以获取和分析音乐文件的属性信息或播放信息。音乐文件的属性信息可以是指示音乐文件的属性的音乐信息。作为示例,属性可以包括音乐文件属性信息中的文件类型、文件名称、文件大小、音乐流派、音乐名称、歌手、歌词、专辑封面中的至少一个。专辑封面可以包括音乐文件的专辑信息的图像(专辑封页、专辑图片)。音乐文件的播放信息可以与编码在音乐文件中的音乐有关。作为示例,播放信息可以包括音乐的音调、音量水平、音高、韵律、节奏、节拍和织体中的至少一个。电子设备可以提取所获取的音乐信息中的特征值或模式,并且使用数学算法对其进行分析。
在操作1020中,电子设备可以基于音乐信息改变所显示的图像。电子设备可以根据分析改变所显示的图像(例如,专辑封面)的形状、大小、颜色、亮度和色度中的至少一个。例如,电子设备可以向所显示的专辑封面添加图形或字母,并且以各种方式合成专辑封面。
电子设备可以根据作为音乐播放信息的音高来改变添加到专辑封面的图形的角度。电子设备可以根据作为音乐播放信息的音量水平来改变添加到专辑封面的图形的大小。电子设备可以根据作为音乐播放信息的节奏来改变添加到专辑封面的图形的间距。电子设备可以根据歌手的性别改变专辑封面的颜色或亮度。
如图12所示,电子设备1200可以播放音乐文件并显示音乐文件的专辑封面1210。专辑封面1210可以包括艺术家照片或相应音乐文件的封页图像。电子设备1200可以根据所分析的音乐信息向专辑封面1210添加字母或图形1211。当前音乐的音高或节奏上升时,电子设备1200可以显示更多的图形1211。例如,图形1211可以根据当前音乐的音高、音量水平和节奏而改变,但不限于此。
如图13所示,电子设备1300可以在音乐文件播放期间在主屏幕或锁定屏幕1310中显示专辑封面1311。例如,电子设备1300可以根据所分析的音乐信息以各种方式改变专辑封面1311。例如,如图所示,电子设备可以在专辑封面1311上赋予玻璃粉碎效果。电子设备1300可以改变或合成在各种屏幕中显示的图像。
图14是根据本公开的方面的过程的示例的流程图。
参照图14,在操作1400中,电子设备(例如,电子设备100)可以选择音乐。电子设备可以选择预存的音乐文件或通过外部电子设备(例如,服务器)选择音乐文件。
在操作1410中,电子设备可以获取所选音乐的属性信息。音乐属性信息可以包括指示音乐的属性的音乐信息。作为示例,属性可以包括音乐属性信息中的文件类型、文件名称、文件大小、音乐流派、音乐名称、歌手、歌词和专辑封面中的至少一个。专辑封面可以包括音乐文件的专辑信息的专辑图像(专辑封页、专辑图片)。
在操作1420中,电子设备可以分析所获取的属性信息。电子设备可以提取所获取的属性信息中的特征值或模式,并且使用数学算法对其进行分析。
在操作1430中,电子设备可以基于音乐信息输出特效。电子设备可以基于所分析的属性信息改变整个显示器的亮度、色彩和色度中的至少一个。电子设备可以基于所分析的属性信息在显示器上显示对象。所述对象可以包括但不限于图形或字母。电子设备可以在图形或字母上赋予运动效果。电子设备可以基于所分析的属性信息改变显示器上的专辑封面。电子设备可以改变专辑封面(或在显示器上呈现的另一对象)的形状、大小、颜色、亮度和色度中的至少一个。例如,电子设备可以以各种方式改变或合成专辑封面,例如,通过向所显示的专辑封面添加图形或字母。
根据本公开的多个实施方式,一种操作电子设备的方法包括:获取电子设备的音乐信息;分析所获取的音乐信息;以及基于所分析的音乐信息使所述音乐信息可视化。
音乐信息可以包括音乐文件的属性信息或播放信息中的至少一个。
获取电子设备的音乐信息包括获取音乐文件属性信息中的文件类型、文件名称、文件大小、音乐流派、音乐名称、歌手、歌词和专辑封面中的至少一个,或者获取音乐文件播放信息的音调、音量水平、音高、韵律、节奏、节拍和织体中的至少一个。
分析所获取的音乐信息包括提取所获取的音乐文件的属性信息或播放信息中的特征值或音乐模式。
基于所分析的音乐信息使音乐信息可视化包括基于所获取的音乐文件的属性信息或播放信息向显示器添加特效。
所述方法还包括根据在显示器上的触摸输入进一步向显示器添加特效。
添加特效包括基于所获取的音乐文件的属性信息或播放信息改变显示器的亮度、色彩和色度中的至少一个。
向显示器添加特效包括基于所获取的音乐文件的属性信息或播放信息在显示器上显示对象。
向显示器添加特效包括基于所获取的音乐文件的属性信息或播放信息改变显示器上的歌词或专辑封面。
所述方法还包括基于所分析的音乐信息输出振动或声音。
图15示出了根据本公开的多个示例性实施方式的电子设备1501的框图1500。电子设备1501可以配置如图1所示的电子设备100的全部或部分。
参照图15,电子设备1501可以包括一个或多个应用处理器(AP)1510、通信模块1520、用户识别模块(SIM)卡1524、存储器1530、传感器模块1540、输入设备1550、显示器1560、接口1570、音频模块1580、相机模块1591、电源管理模块1595、电池1596、指示器1597或电机1598。
应用处理器1510可以通过驱动操作系统或应用程序来控制连接到AP 1510的多个硬件或软件元件,并且可以处理和计算包括多媒体数据在内的各种数据。例如,AP 1510可以通过使用片上系统(SoC)来实现。根据示例性实施方式,AP 1510还可以包括图形处理单元(GPU)(未示出)。
通信模块1520可以经由通过网络连接的电子设备1501(例如,电子设备100)和其他电子设备(例如,电子设备104或服务器106)之间的通信来发送和接收数据。根据示例性实施方式,通信模块1520可以包括蜂窝模块1521、WiFi模块1523、BT模块1525、GPS模块1527、NFC模块1528和射频(RF)模块1529。
蜂窝模块1521可以通过电信网络(例如,LTE、LTE-A、CDMA、WCDMA、UMTS、WiBro、GSM等)提供语音呼叫、视频呼叫、文本服务或互联网服务。此外,蜂窝模块1521可以通过使用用户识别模块(例如,SIM卡1524)来识别和认证电信网络中的电子设备。根据示例性实施方式,蜂窝模块1521可以执行由AP 1510提供的功能中的至少一些。例如,蜂窝模块1521可以执行多媒体控制功能中的至少一些。
根据示例性实施方式,蜂窝模块1521可以包括通信处理器(CP)。此外,蜂窝模块1521可以通过使用例如SoC来执行。在图15中,蜂窝模块1521(例如,通信处理器)、存储器1530或电源管理模块1595是与AP 1510分离出的元件。然而,根据示例性实施方式,AP 1510可以被配置为包括上述元件(例如,蜂窝模块1521)中的至少一些。
根据示例性实施方式,AP 1510或蜂窝模块1521(例如,通信处理器)可以将从与其连接的非易失性存储器或其它元件中的至少一个中接收到的指令或数据加载到易失性存储器中,并可以处理所述指令或数据。此外,AP 1510或蜂窝模块1521可以存储从其他元件中的至少一个中接收或由非易失性存储器中其他元件中的至少一个生成的数据。
WiFi模块1523、BT模块1525、GPS模块1527或NFC模块1528各自可以包括用于处理通过相应模块接收和发送的数据的处理器。在图15中,在单独的框中示出了蜂窝模块1521、WiFi模块1523、BT模块1525、GPS模块1527或NFC模块1528。然而,根据示例性实施方式,蜂窝模块1521、WiFi模块1523、BT模块1525、GPS模块1527或NFC模块1528中的至少一些(例如,两个或更多个)可以包括在单个集成芯片(IC)或单个集成芯片封装中。例如,与蜂窝模块1521、WiFi模块1523、BT模块1525、GPS模块1527和NFC模块1528对应的至少一些处理器(例如,与蜂窝模块1521对应的通信处理器和与WiFi模块1523对应的WiFi处理器)可以通过使用单个SoC来执行。
RF模块1529可以发送和接收数据,例如,可以发送和接收RF信号。尽管未示出,但是RF模块1529可以包括例如收发器、功率放大器模块(PAM)、频率滤波器或低噪声放大器(LNA)。此外,RF模块1529还可以包括用于在无线通信中的自由空间中交换电磁波的部分,例如,导体或导线。在图15中,蜂窝模块1521、WiFi模块1523、BT模块1525、GPS模块1527和NFC模块1528彼此共享单个RF模块1529。然而,根据示例性实施方式,蜂窝模块1521、WiFi模块1523、BT模块1525、GPS模块1527或NFC模块1528中的至少一个可以通过单独的RF模块发送和接收RF信号。
SIM卡1524可以是包括用户识别模块的卡,并且可以插入到形成在电子设备特定位置上的槽中。SIM卡1524可以包括唯一的标识信息(例如,集成电路卡识别码(ICCID))或用户信息(例如,国际移动用户识别码(IMSI))。
存储器1530(例如,存储器130)可以包括内部存储器1532或外部存储器1534。例如,内部存储器1532可以包括易失性存储器(例如,动态随机存取存储器(DRAM)、静态随机存取存储器(SRAM)、同步DRAM(SDRAM)等)和非易失性存储器(例如,一次性可编程只读存储器(OTPROM)、可编程只读存储器(PROM)、可擦除可编程只读存储器(EPROM)、电可擦除可编程只读存储器(EEPROM)、掩模ROM、闪速ROM、NAND闪速存储器、NOR闪速存储器等)中的至少一个。
根据示例性实施方式,内部存储器1532可以是固态驱动器(SSD)。外部存储器1534还可以包括闪存驱动器,例如,紧凑型闪存(CF)、安全数字(SD)、微型SD、迷你SD、极限数字(xD)、记忆棒等。外部存储器1534可以通过各种接口与电子设备1501功能性连接。根据示例性实施方式,电子设备1501还可以包括诸如硬盘驱动器的存储设备(或存储介质)。
传感器模块1540可以测量电子设备1501的物理量或者检测其操作状态,并且可以将测量到或检测到的信息转换为电信号。传感器模块1540可以包括手势传感器1540A、陀螺仪传感器1540B、大气压力传感器1540C、磁性传感器1540D、加速度传感器1540E、握力传感器1540F、接近传感器1540G、颜色传感器1540H(例如,红色、绿色、蓝色(RGB)传感器)、生物传感器1540I、温度/湿度传感器1540J、照度传感器1540K和紫外线(UV)传感器1540M中的至少一种。另外地或可替代地,传感器模块1540可以包括电子鼻传感器(未示出)、肌电图(EMG)传感器(未示出)、脑电图(EEG)传感器(未示出)、心电图(ECG)传感器(未示出)、红外线(IR)传感器、虹膜传感器(未示出)、指纹传感器(未示出)等。传感器模块1540还可以包括用于控制其中包括的至少一个传感器的控制电路。
输入设备1550可以包括触摸面板1552、(数字)笔传感器1554、键1556或超声波输入设备1558。触摸面板1552可以通过电容性、电阻性、红外线和超声波方法中的至少一种识别触摸输入。此外,触摸面板1552还可以包括控制电路(未示出)。在电容性方法的实施方式中,触摸面板1552可以识别物理接触或悬停。触摸面板1552还可以包括触觉层。在本实施方式中,触摸面板1552可以向用户提供触觉响应。
(数字)笔传感器1554可以以与接收用户的触摸输入的方法相同或相似的方法实现,或通过使用单独的检测片来实现。键1556可以包括物理按钮、光学键或小型键盘。超声波输入设备1558允许电子设备1501通过生成超声信号的输入设备由麦克风(例如,麦克风1588)检测声波,并且能够进行无线识别。根据示例性实施方式,电子设备1501可以通过使用通信模块1520从与其连接的外部设备(例如,计算机或服务器)接收用户输入。
显示器1560可以包括面板1562、全息设备1564或投影仪1566。例如,面板1562可以是液晶显示器(LCD)或有源矩阵有机发光二极管(AM-OLED)。例如,面板1562可以实现为柔性的、透明的或可佩戴的。面板1562可以与触摸面板1552一起被配置为单个模块。全息设备1564可以使用光的干涉在空中显示立体图像。投影仪1566可以通过将光投射到屏幕上来显示图像。屏幕可以位于电子设备1501的内部或外部。根据示例性实施方式,显示器1560还可以包括控制电路以控制面板1562、全息设备1564或投影仪1566。
接口1570可以包括高清晰度多媒体接口(HDMI)1572、通用串行总线(USB)1574、光学接口1576或超小型接口(子)(D-subminiature(sub))1578。接口1570可以包括在如图1所示的通信接口160中。另外地或可选地,接口1570可以包括移动高清晰度链路(MHL)接口、安全数字(SD)/多媒体卡(MMC)接口或红外数据标准协会(IrDA)标准接口。
音频模块1580可以双向地转换声音和电信号。音频模块1580可以处理通过扬声器1582、接收器1584、耳机1586或麦克风1588输入或输出的声音信息。
相机模块1591是用于拍摄静止图像和运动图像的设备,并且根据示例性实施方式,相机模块1591可以包括一个或多个图像传感器(例如,前表面传感器或后表面传感器)、镜头(未示出)、图像信号处理器(ISP)(未示出)/闪存(存储器)或闪光灯(例如,发光二极管(LED)或氙气灯)。
电源管理模块1595可以管理电子设备1501的电源。虽然未示出,但是电源管理模块1595可以包括电源管理IC(PMIC)、充电器IC或电池或电量表。例如,PMIC可以安装在集成电路或SoC半导体中。
充电方法可以分为有线充电方法和无线充电方法。充电器IC可以对电池充电并且可以防止来自充电器的过电压或过电流的流入。根据示例性实施方式,充电器IC可以包括用于有线充电方法和无线充电方法中的至少一个的充电器IC。无线充电方法可以包括磁共振方法、磁感应方法或电磁波方法,以及用于无线充电的附加电路,例如,可加入诸如线圈环路,谐振电路,整流器等的电路。
例如,电池量表可以测量电池1596的剩余电池寿命、充电期间的电压、电流或温度。电池1596可以存储或产生电力,并且可以通过使用存储或产生的电力向电子设备1501供电。电池1596可以包括可充电电池或太阳能电池。
指示器1597可以显示电子设备1501或其一部分(例如,AP 1510)的特定状态,例如,启动状态、消息状态或充电状态。电机1598可以将电信号转换为机械性振动。虽然未示出,但电子设备1501可以包括用于支持移动TV的处理设备(例如,GPU)。用于支持移动TV的处理设备可以根据诸如数字多媒体广播(DMB)、数字视频广播(DVB)或媒体流的标准处理媒体数据。
根据本公开的多个示例性实施方式的电子设备的上述部件各自可以包括一个或多个部件,并且相应部件的名称可以根据电子设备的类型而不同。电子设备可以包括上述部件中的至少一个,省略一些部件,或者还包括其他部件。此外,本电子设备的一些部件可以被组合成单个实体,从而执行相应部件的相同功能。
在本公开的实施方式中使用的用语“模块”表示例如包括硬件、软件或固件中的一个或多个的组合的单元。用语“模块”可以与例如“单元”、“逻辑”、“逻辑块”、“部件”或“电路”的用语互换地使用。“模块”可以是最小单元或整体形成的部件的一部分。“模块”可以是一个或多个功能的最小单元或一部分。“模块”可以被机械地或电子地实现。例如,“模块”可以包括专用集成电路(ASIC)、现场可编程门阵列(FPGA)或用于执行众所周知或将要开发的操作的可编程逻辑设备中的至少一个。
在本公开的所附权利要求和/或说明书中描述的设备的至少一部分(例如,模块或功能)或方法(例如,操作)可以使用例如作为编程模块存储在非暂时性计算机可读存储介质中的指令来执行。例如,当由一个或多个处理器(例如,处理器120)运行指令时,所述一个或多个处理器执行相应的功能。非暂时性计算机可读存储介质可以是例如存储器130。编程模块的至少一部分可以由处理器120执行(例如,运行)。编程模块的至少一部分可以包括例如模块、程序、指令集或用于执行一个或多个功能的进程。
非暂时性计算机可读记录介质可以包括诸如硬盘、软盘和磁带的磁介质、诸如压缩盘只读存储器(CD-ROM)和数字通用盘(DVD)的光介质、诸如软光盘的磁光介质,以及专门配置为存储和运行应用指令(例如,编程模块)的硬件设备,例如,只读存储器(ROM)、随机存取存储器(RAM)和闪存。程序指令不仅可以包括由编译器生成的机器代码,还可以包括可由计算机使用解释器运行的高级语言代码。上述电子设备可以用作用于完成本公开实施方式的操作的一个或多个软件模块,反之亦然。
根据本公开实施方式的模块或编程模块可以包括上述部件中的至少一个,省略一些部件,或者还包括其他部件。由模块、编程模块或其他部件完成的操作可以顺序地、并行地、重复地或启发式地执行。此外,一些操作可以以不同的次序运行或被省略,或者可以添加其他操作。
在存储指令的存储介质中,在指令由至少一个处理器运行时,控制所述至少一个处理器以进行至少一个操作。所述至少一个操作可以包括获取音乐信息,分析所获取的音乐信息,以及基于所分析的音乐信息使所述音乐信息可视化。
如上所述,用于使音乐信息可视化的方法和设备获取并分析电子设备的音乐信息,并基于所分析的音乐信息可视化,听觉化或触觉化音乐信息,从而提供情感的和广阔的音乐播放体验。
图1-15仅作为示例提供。关于这些附图所讨论的步骤中的至少一些可以同时执行,以不同的次序执行和/或一并省略。应当理解的是,本文中描述的示例的提供,以及表述为“诸如”、“例如”,“包括”、“在一些方面”、“在一些实施方式中”等的句子不应被解释为将所要求权利保护的主题限于具体示例。
本公开的上述方面可以由硬件、固件或通过运行可存储在记录介质(例如,CD-ROM、数字通用盘(DVD)、磁带、RAM、软盘、硬盘、磁光盘)中的软件或计算机代码或通过原始存储在远程记录介质或非暂时性机器可读介质上并且待存储在本地记录介质的网络下载的计算机代码来执行,使得可以使用通用计算机、专用处理器或在可编程或专用硬件(例如,ASIC或FPGA)中经由存储在记录介质上的这样的软件来呈现本文中描述的方法。在本领域中可理解的是,计算机、处理器、微处理器控制器或可编程硬件包括:可以存储或接收软件或计算机代码的存储部件(例如,RAM、ROM、闪存等),其中,当计算机、处理器或硬件访问和运行软件或计算机代码时执行本文中描述的处理方法。此外,应当认识到,当通用计算机访问用于执行本文示出的过程的代码时,代码的运行将通用计算机变成用于运行本文示出的过程的专用计算机。在附图中提供的任何功能和步骤可以由硬件、软件或两者的组合来执行,并可以在计算机的编程指令内全部或部分地执行。
本公开已参考本文所提供的示例予以具体示出和描述,本领域技术人员应理解,在不脱离所附权利要求限定的本公开的精神和范围的情况下,可以在形式和细节上对其进行各种改变。

Claims (18)

1.一种操作电子设备的方法,包括:
获取与正在由所述电子设备播放的音乐关联的音乐信息;
探测显示器上的拖曳;
当在所述显示器上执行所述拖曳时,通过沿所述显示器上的所述拖曳的轨迹显示多个图像而经由所述电子设备的所述显示器输出视觉效果,
其中,所述多个图像中的图像彼此不同,并且所述图像中的每个由所述电子设备基于所述音乐信息生成。
2.根据权利要求1所述的方法,其中,所述音乐信息包括正在由所述电子设备播放的音乐的属性信息或播放信息中的至少一个。
3.根据权利要求1所述的方法,其中,所述音乐信息包括文件类型、文件名称、文件大小、音乐流派、音乐名称、歌手、歌词、与所述音乐相关联的图像、所述音乐的音调、所述音乐播放时的音量水平、所述音乐的音高、所述音乐的韵律、所述音乐的节奏、所述音乐的节拍以及所述音乐的织体中的至少一个的指示。
4.根据权利要求1所述的方法,其中,输出所述视觉效果包括:
修改由所述电子设备在所述显示器上显示的图像。
5.根据权利要求1所述的方法,其中,所述视觉效果还基于对所述显示器的触摸输入而输出。
6.根据权利要求1所述的方法,其中,输出所述视觉效果包括:
改变所述显示器的亮度设置、色彩设置和色度设置中的至少一个。
7.根据权利要求1所述的方法,其中,输出所述视觉效果包括:
在所述显示器上显示对象。
8.根据权利要求1所述的方法,其中,输出所述视觉效果包括:
修改在所述显示器上显示的歌词或专辑封面。
9.根据权利要求1所述的方法,还包括:
基于所述音乐信息输出振动或声音。
10.一种电子设备,包括显示器和处理器,所述处理器配置为:
获取与正在由所述电子设备播放的音乐关联的音乐信息;
探测显示器上的拖曳;
当在所述显示器上执行所述拖曳时,通过沿所述显示器上的所述拖曳的轨迹显示多个图像而经由所述显示器输出视觉效果,
其中,所述多个图像中的图像彼此不同,并且所述图像中的每个由所述电子设备基于所述音乐信息生成。
11.根据权利要求10所述的电子设备,其中,所述音乐信息包括:
正在由所述电子设备播放的音乐的属性信息或播放信息中的至少一个。
12.根据权利要求10所述的电子设备,其中,所述音乐信息包括:
文件类型、文件名称、文件大小、音乐流派、音乐名称、歌手、歌词、与所述音乐相关联的图像、所述音乐的音调、所述音乐播放时的音量水平、所述音乐的音高、所述音乐的韵律、所述音乐的节奏、所述音乐的节拍以及所述音乐的织体中的至少一个的指示。
13.根据权利要求10所述的电子设备,其中,输出所述视觉效果包括:
修改由所述电子设备在所述显示器上显示的图像。
14.根据权利要求10所述的电子设备,其中,所述视觉效果还基于对所述显示器的触摸输入而输出。
15.根据权利要求13所述的电子设备,其中,输出所述视觉效果包括改变所述显示器的亮度设置、色彩设置和色度设置中的至少一个。
16.根据权利要求13所述的电子设备,其中,输出所述视觉效果包括在所述显示器上显示对象。
17.根据权利要求13所述的电子设备,其中,输出所述视觉效果包括修改在所述显示器上显示的歌词或专辑封面。
18.根据权利要求10所述的电子设备,其中,所述处理器还配置为基于所述音乐信息输出振动或声音。
CN201580041691.2A 2014-07-31 2015-06-23 使音乐信息可视化的方法和装置 Active CN106575424B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR10-2014-0098355 2014-07-31
KR1020140098355A KR102207208B1 (ko) 2014-07-31 2014-07-31 음악 정보 시각화 방법 및 장치
PCT/KR2015/006391 WO2016017929A1 (en) 2014-07-31 2015-06-23 Method and apparatus for visualizing music information

Publications (2)

Publication Number Publication Date
CN106575424A CN106575424A (zh) 2017-04-19
CN106575424B true CN106575424B (zh) 2020-08-18

Family

ID=55180661

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580041691.2A Active CN106575424B (zh) 2014-07-31 2015-06-23 使音乐信息可视化的方法和装置

Country Status (5)

Country Link
US (1) US10599383B2 (zh)
EP (1) EP3175419A4 (zh)
KR (1) KR102207208B1 (zh)
CN (1) CN106575424B (zh)
WO (1) WO2016017929A1 (zh)

Families Citing this family (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9606620B2 (en) 2015-05-19 2017-03-28 Spotify Ab Multi-track playback of media content during repetitive motion activities
KR102358025B1 (ko) * 2015-10-07 2022-02-04 삼성전자주식회사 전자 장치 및 전자 장치의 음악 컨텐츠 시각화 방법
US10372410B2 (en) * 2015-12-21 2019-08-06 Facebook, Inc. Systems and methods to optimize music play in a scrolling news feed
US9798514B2 (en) * 2016-03-09 2017-10-24 Spotify Ab System and method for color beat display in a media content environment
CN106649703B (zh) * 2016-12-20 2019-11-19 中国科学院深圳先进技术研究院 音频数据可视化方法及装置
US11402981B2 (en) 2017-08-11 2022-08-02 Samsung Electronics Co., Ltd. Display device for visualizing contents as the display is rotated and control method thereof
KR102373510B1 (ko) 2017-08-11 2022-03-11 삼성전자주식회사 디스플레이를 회전함에 따라 컨텐츠를 시각화 하는 디스플레이 장치 및 이의 제어 방법
CN107943964A (zh) * 2017-11-27 2018-04-20 腾讯音乐娱乐科技(深圳)有限公司 歌词显示方法、装置及计算机可读存储介质
CN107967706B (zh) * 2017-11-27 2021-06-11 腾讯音乐娱乐科技(深圳)有限公司 多媒体数据的处理方法、装置及计算机可读存储介质
CN108776985A (zh) * 2018-06-05 2018-11-09 科大讯飞股份有限公司 一种语音处理方法、装置、设备及可读存储介质
CN109343770B (zh) * 2018-09-27 2021-07-20 腾讯科技(深圳)有限公司 交互反馈方法、设备和记录介质
CN109257499B (zh) * 2018-09-30 2021-07-27 腾讯音乐娱乐科技(深圳)有限公司 一种歌词的动态展示方法及装置
CN109558103B (zh) * 2018-11-30 2022-06-14 北京天泰博远科技发展有限公司 双面屏终端显示控制方法、装置、移动终端及存储介质
CN113302945A (zh) * 2018-12-03 2021-08-24 思妙公司 用于捕获的视听表演的增强现实过滤器
US20220122573A1 (en) * 2018-12-03 2022-04-21 Smule, Inc. Augmented Reality Filters for Captured Audiovisual Performances
CN109992228A (zh) * 2019-02-18 2019-07-09 维沃移动通信有限公司 一种界面显示参数调整方法及终端设备
KR102148006B1 (ko) * 2019-04-30 2020-08-25 주식회사 카카오 동영상에 특수 이펙트를 제공하는 방법 및 장치
CN110085253A (zh) * 2019-05-09 2019-08-02 广州小鹏汽车科技有限公司 一种音乐可视化信息的控制方法、装置、车辆及存储介质
CN110232135B (zh) * 2019-06-13 2023-08-11 广州酷狗计算机科技有限公司 歌曲播放方法及装置、终端、存储介质
CN110460720A (zh) * 2019-07-25 2019-11-15 维沃移动通信有限公司 一种屏幕色彩调节方法及电子设备电子设备
CN112395825A (zh) * 2019-08-01 2021-02-23 北京字节跳动网络技术有限公司 文字特效处理方法及装置
CN110570841A (zh) * 2019-09-12 2019-12-13 腾讯科技(深圳)有限公司 多媒体播放界面的处理方法、装置、客户端及介质
CN110830619A (zh) * 2019-10-28 2020-02-21 维沃移动通信有限公司 一种显示方法及电子设备
US11307412B1 (en) * 2019-12-30 2022-04-19 Snap Inc. Audio visualizer eyewear device
CN111309961B (zh) * 2020-02-12 2024-04-02 深圳市腾讯计算机系统有限公司 歌曲封面生成方法、装置、计算机可读存储介质和设备
KR102343675B1 (ko) * 2020-09-14 2021-12-29 뉴튠(주) 음악 정보 시각화 서비스 제공 방법과 장치 및 이를 포함하는 내비게이션 시스템
CN113721821A (zh) * 2021-09-04 2021-11-30 北京字节跳动网络技术有限公司 音乐播放方法及设备
US20230086518A1 (en) * 2021-09-22 2023-03-23 Behr Process Corporation Systems And Methods For Providing Paint Colors Based On Music
KR102618683B1 (ko) * 2021-09-23 2023-12-29 동국대학교 산학협력단 노래 가사 분석을 이용한 배경 스타일 변환 장치 및 그 방법
CN113885828B (zh) * 2021-10-25 2024-03-12 北京字跳网络技术有限公司 一种音效展示方法及终端设备
CN113986191B (zh) * 2021-12-27 2022-06-07 广州酷狗计算机科技有限公司 音频播放方法、装置、终端设备及存储介质
US12107984B2 (en) 2022-11-23 2024-10-01 Music Makes Us Feels, Llc Multimedia messaging apparatuses and methods for sending multimedia messages

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102499863A (zh) * 2011-10-18 2012-06-20 李晓云 一种减轻眼睛疲劳的方法
JP2013200898A (ja) * 2013-07-08 2013-10-03 Olympus Imaging Corp 操作制御装置、操作制御方法および操作制御用プログラム
CN103927110A (zh) * 2013-01-16 2014-07-16 索尼公司 显示控制设备、显示控制方法和程序

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7648416B2 (en) * 2001-02-08 2010-01-19 Sony Computer Entertainment Inc. Information expressing method
US7058889B2 (en) * 2001-03-23 2006-06-06 Koninklijke Philips Electronics N.V. Synchronizing text/visual information with audio playback
US20060218505A1 (en) * 2005-03-28 2006-09-28 Compton Anthony K System, method and program product for displaying always visible audio content based visualization
KR100657111B1 (ko) 2005-10-04 2006-12-13 엘지전자 주식회사 이동 단말기의 음향 시각화 표시방법과 그 장치
KR20070080481A (ko) * 2006-02-07 2007-08-10 삼성전자주식회사 노래 가사를 이용하여 하이라이트 구간을 검색하는 장치 및그 방법
US8370747B2 (en) 2006-07-31 2013-02-05 Sony Mobile Communications Ab Method and system for adapting a visual user interface of a mobile radio terminal in coordination with music
WO2008114209A1 (en) * 2007-03-21 2008-09-25 Koninklijke Philips Electronics N.V. Method and apparatus for enabling simultaneous reproduction of a first media item and a second media item
JP5057511B2 (ja) * 2007-04-25 2012-10-24 株式会社第一興商 カラオケシステム
KR20090063453A (ko) 2007-12-14 2009-06-18 엘지전자 주식회사 가사 표시 방법 및 이를 이용한 음악 재생 장치
US20090177966A1 (en) * 2008-01-06 2009-07-09 Apple Inc. Content Sheet for Media Player
JP4632102B2 (ja) * 2008-07-17 2011-02-16 ソニー株式会社 情報処理装置、情報処理方法及び情報処理プログラム
US20100023485A1 (en) * 2008-07-25 2010-01-28 Hung-Yi Cheng Chu Method of generating audiovisual content through meta-data analysis
CN101656090A (zh) 2008-08-20 2010-02-24 宋学锋 多媒体播放器、多媒体输出方法及多媒体系统
KR101521920B1 (ko) * 2008-08-29 2015-05-20 엘지전자 주식회사 이동 단말기 및 그의 음악재생 제어방법
KR20100044477A (ko) * 2008-10-22 2010-04-30 삼성전자주식회사 디스플레이장치 및 그 제어방법
KR20100081577A (ko) 2009-01-06 2010-07-15 삼성전자주식회사 휴대단말에서 오브젝트의 내비게이션 방법 및 장치
EP2211279A3 (en) 2009-01-14 2014-10-01 Samsung Electronics Co., Ltd. Apparatus and method for playing of multimedia item
CN101577114B (zh) 2009-06-18 2012-01-25 无锡中星微电子有限公司 一种音频可视化实现方法及装置
US20110015765A1 (en) * 2009-07-15 2011-01-20 Apple Inc. Controlling an audio and visual experience based on an environment
KR101588733B1 (ko) * 2009-07-21 2016-01-26 엘지전자 주식회사 이동 단말기
KR100972570B1 (ko) * 2009-08-17 2010-07-28 주식회사 엔씽모바일 음의 고저를 표현하는 자막 생성 방법 및 자막 표시 방법
WO2011094330A1 (en) * 2010-01-26 2011-08-04 Touchtunes Music Corporation Digital jukebox device with improved user interfaces, and associated methods
US20130110838A1 (en) * 2010-07-21 2013-05-02 Spectralmind Gmbh Method and system to organize and visualize media
KR20120051343A (ko) 2010-11-12 2012-05-22 한국전자통신연구원 음악 시각화 방법을 이용한 음악 재생 시스템 및 방법
KR20120129570A (ko) 2011-05-20 2012-11-28 주식회사 네오위즈인터넷 음원 서비스를 제공하는 방법, 모바일 단말기 및 기록매체
US20120311444A1 (en) * 2011-06-05 2012-12-06 Apple Inc. Portable multifunction device, method, and graphical user interface for controlling media playback using gestures
KR20110103926A (ko) 2011-09-05 2011-09-21 (주)유토포스 스마트폰에서 음악파일 재생 플레이어의 동작 선택 및 수행 방법
KR101879333B1 (ko) * 2011-12-06 2018-07-17 엘지전자 주식회사 이동 단말기 및 그의 아이콘 배열방법
US9514786B2 (en) * 2013-01-25 2016-12-06 Htc Corporation Electronic device and music visualization method thereof
CN103927175A (zh) 2014-04-18 2014-07-16 深圳市中兴移动通信有限公司 背景界面随音频动态变化的方法和终端设备

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102499863A (zh) * 2011-10-18 2012-06-20 李晓云 一种减轻眼睛疲劳的方法
CN103927110A (zh) * 2013-01-16 2014-07-16 索尼公司 显示控制设备、显示控制方法和程序
JP2013200898A (ja) * 2013-07-08 2013-10-03 Olympus Imaging Corp 操作制御装置、操作制御方法および操作制御用プログラム

Also Published As

Publication number Publication date
US20160035323A1 (en) 2016-02-04
KR20160015727A (ko) 2016-02-15
US10599383B2 (en) 2020-03-24
CN106575424A (zh) 2017-04-19
EP3175419A4 (en) 2018-04-04
WO2016017929A1 (en) 2016-02-04
EP3175419A1 (en) 2017-06-07
KR102207208B1 (ko) 2021-01-25

Similar Documents

Publication Publication Date Title
CN106575424B (zh) 使音乐信息可视化的方法和装置
US10996847B2 (en) Method for providing content search interface and electronic device for supporting the same
CN106462325B (zh) 控制显示器的方法和提供该方法的电子设备
KR102471174B1 (ko) 테마 적용 방법 및 이를 수행하는 전자 장치
KR102503937B1 (ko) 전자 장치의 사용자 인터페이스 제공 방법 및 장치
US20170221456A1 (en) Electronic device and method for running function according to transformation of display of electronic device
CN115097982B (zh) 处理内容的方法及其电子设备
US20170131772A1 (en) Method of providing a haptic effect and electronic device supporting the same
US9641665B2 (en) Method for providing content and electronic device thereof
CN107037966B (zh) 感测输入的压力的电子设备和用于操作电子设备的方法
KR102560635B1 (ko) 컨텐트 인식 장치 및 그 동작 방법
US20160253564A1 (en) Electronic device and image display method thereof
KR102409202B1 (ko) 전자 장치 및 전자 장치에서 폴더 내 객체를 관리하기 위한 방법
US20170131795A1 (en) Method for recognizing rotation of rotating body and electronic device for processing the same
US20170046123A1 (en) Device for providing sound user interface and method thereof
KR102447907B1 (ko) 추천 객체를 제공하기 위한 전자 장치 및 방법
CN108024763B (zh) 活动信息提供方法及支持其的电子设备
KR20170019651A (ko) 음향 제공 방법 및 이를 수행하는 전자 장치
US10042600B2 (en) Method for controlling display and electronic device thereof
US20170094219A1 (en) Method and electronic device for providing video of a specified playback time
KR20170014407A (ko) 전자장치의 보안 장치 및 제어 방법
US20160065943A1 (en) Method for displaying images and electronic device thereof
US9990912B2 (en) Electronic device and method for reproducing sound in the electronic device
KR20160071694A (ko) 웹 애플리케이션 처리 방법, 장치, 및 기록 매체
CN108139811B (zh) 记录执行屏幕的方法和处理该方法的电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant