CN111651231A - 作品生成方法、装置、车机端和移动终端 - Google Patents

作品生成方法、装置、车机端和移动终端 Download PDF

Info

Publication number
CN111651231A
CN111651231A CN202010498069.7A CN202010498069A CN111651231A CN 111651231 A CN111651231 A CN 111651231A CN 202010498069 A CN202010498069 A CN 202010498069A CN 111651231 A CN111651231 A CN 111651231A
Authority
CN
China
Prior art keywords
work
editing
edited
works
cloud
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010498069.7A
Other languages
English (en)
Other versions
CN111651231B (zh
Inventor
丁磊
郭刘飞
黄骏
周宏波
郭昊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Human Horizons Shanghai Internet Technology Co Ltd
Original Assignee
Human Horizons Shanghai Internet Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Human Horizons Shanghai Internet Technology Co Ltd filed Critical Human Horizons Shanghai Internet Technology Co Ltd
Priority to CN202010498069.7A priority Critical patent/CN111651231B/zh
Publication of CN111651231A publication Critical patent/CN111651231A/zh
Application granted granted Critical
Publication of CN111651231B publication Critical patent/CN111651231B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/432Query formulation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/438Presentation of query results
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/44Browsing; Visualisation therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/166Editing, e.g. inserting or deleting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/06Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/12Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks

Abstract

本申请提出一种作品生成方法、装置、车机端和移动终端,该作品生成方法包括:向云端发送作品创作请求,以使云端创作对应的待选作品;展示云端返回的待选作品;获取对待选作品编辑后的编辑作品,编辑作品在车机端或移动终端编辑生成。本申请的技术方案可以根据用户的创作诉求进行智能创作,并由用户对智能创作的作品进行编辑(二次创作),从而提供一个更有创意的人机创作作品。

Description

作品生成方法、装置、车机端和移动终端
技术领域
本申请涉及车联网技术,尤其涉及一种作品生成方法、装置、车机端和移动终端。
背景技术
车机端是指安装在车辆里面的车载信息娱乐产品的简称,在功能上能够实现人与车,车与外界(如车与车)的信息通讯。目前车机端大多为用户提供多媒体服务和导航服务,服务形式比较单一。然而随着车辆的逐渐普及,用户期望车机端可以提供多样化的服务。
发明内容
本申请实施例提供一种作品生成方法、装置、车机端和移动终端,以解决相关技术存在的问题,技术方案如下:
第一方面,本申请实施例提供了一种作品生成方法,应用于车机端,该方法包括:
向云端发送作品创作请求,以使云端创作对应的待选作品;
展示云端返回的待选作品;
获取对待选作品编辑后的编辑作品,编辑作品在车机端或移动终端编辑生成。
第二方面,本申请实施例提供了一种作品生成方法,应用于移动终端,该方法包括:
识别车机端展示的作品编辑标识;
根据作品编辑标识生成作品编辑页面,作品编辑页面用于提供编辑待选作品的页面,待选作品由云端根据车机端的作品创作请求而创作生成;
基于作品编辑页面编辑指令编辑待选作品,生成编辑作品;
将编辑作品上传至云端,以使车机端从云端获取编辑作品。
第三方面,本申请实施例提供了一种作品生成装置,应用于车机端,该装置包括:
作品创作请求发送模块,用于向云端发送作品创作请求,以使云端创作对应的待选作品;
展示模块,用于展示云端返回的待选作品;
编辑作品获取模块,用于获取对待选作品编辑后的编辑作品,编辑作品在车机端或移动终端编辑生成。
第四方面,本申请实施例提供了一种作品生成装置,应用于移动终端,该装置包括:
识别模块,用于识别车机端展示的作品编辑标识;
编辑页面生成模块,用于根据作品编辑标识生成作品编辑页面,作品编辑页面用于向用户提供编辑待选作品的页面,待选作品由云端根据车机端的作品创作请求而创作生成;
编辑作品生成模块,用于基于作品编辑页面编辑待选作品,生成编辑作品;
编辑作品上传模块,用于将编辑作品上传至云端,以使车机端从云端获取编辑作品。
第五方面,本申请实施例提供了一种车机端,包括:
至少一个第一处理器;以及
与该至少一个第一处理器通信连接的第一存储器;其中,
该第一存储器存储有可被该至少一个第一处理器执行的指令,该指令被该至少一个第一处理器执行,以使该至少一个第一处理器能够执行以上任一种车机端的作品生成方法。
第六方面,本申请实施例提供了一种移动终端,包括:
至少一个第二处理器;以及
与该至少一个第二处理器通信连接的第二存储器;其中,
该第二存储器存储有可被该至少一个第二处理器执行的指令,该指令被该至少一个第二处理器执行,以使该至少一个第二处理器能够执行上述任一方面的作品生成方法。
第七方面,本申请实施例提供了一种计算机可读存储介质,该计算机可读存储介质内存储有计算机指令,该计算机指令被处理器执行时实现上述任一方面的作品生成方法。
上述技术方案中的优点或有益效果至少包括:可以根据用户的创作诉求进行智能创作,并由用户对智能创作的作品进行编辑(二次创作),从而提供一个更有创意的人机创作作品。
上述概述仅仅是为了说明书的目的,并不意图以任何方式进行限制。除上述描述的示意性的方面、实施方式和特征之外,通过参考附图和以下的详细描述,本申请进一步的方面、实施方式和特征将会是容易明白的。
附图说明
在附图中,除非另外规定,否则贯穿多个附图相同的附图标记表示相同或相似的部件或元素。这些附图不一定是按照比例绘制的。应该理解,这些附图仅描绘了根据本申请公开的一些实施方式,而不应将其视为是对本申请范围的限制。
图1为根据本申请实施例一种实施方式的作品生成方法的示意图;
图2为根据本申请实施例作品生成方法的应用示例图;
图3为根据本申请实施例另一种实施方式的作品生成方法的示意图;
图4为根据本申请实施例又一种实施方式的作品生成方法的示意图;
图5为根据本申请实施例再一种实施方式的车机端和云端的通讯示意图;
图6-1为根据本申请实施例作品生成方法的应用示例图;
图6-2为根据本申请实施例作品生成方法的应用示例图;
图6-3为根据本申请实施例作品生成方法的应用示例图;
图6-4为根据本申请实施例又一种实施方式的作品生成方法的示意图;
图6-5为根据本申请实施例作品生成方法的应用示例图;
图7为根据本申请实施例的车机端的作品生成装置的示意图;
图8为根据本申请实施例的移动终端的作品生成装置的示意图;
图9为可以实现本申请实施例的车机端或移动终端的框图。
具体实施方式
在下文中,仅简单地描述了某些示例性实施例。正如本领域技术人员可认识到的那样,在不脱离本申请的精神或范围的情况下,可通过各种不同方式修改所描述的实施例。因此,附图和描述被认为本质上是示例性的而非限制性的。
实施例一
图1示出根据本申请实施例的作品生成方法的流程图。该作品生成方法可以应用于车机端,即可以由车机端实现。
如图1所示,该作品生成方法可以包括:
步骤S101、向云端发送作品创作请求,以使云端创作对应的待选作品。
例如,如图2所示,用户可以利用车机端提供的人工智能(ArtificialIntelligence,AI)创作应用(Application,APP),主动发起创作诉求,车机端根据用户的创作诉求向云端发送作品创作请求。云端的作品创作请求处理服务对作品创作请求进行解析,从而触发云端进行AI作品的创作服务,并进一步生成AI作品(待选作品),返回给车机端。待选作品可以为AI诗歌、AI绘画、AI音乐等。
其中,用户主动发起创作诉求的方式包括但不限于车机端界面操作、语音方式、拍照触发、手机扫码触发等。具体地,用户可以通过车机端AI创作APP的界面进行相应的界面操作,从而通过界面操作方式主动发起创作诉求。用户也可以向车机端的麦克风多媒体组件发出创作语音指令,从而主动发起创作诉求。
用户可以进一步在车机端提供创作参数,创作参数可以随作品创作请求一起发送给云端,也可以在车机端发送作品创作请求后发送给云端,以使云端创作与该创作参数相对应的AI作品(待选作品)。
如图2所示,云端的AI创作服务可以对创作参数进行整合,并发送给作品创作模块(第三方AI云),请求作品创作模块创作AI作品。创作成功后的AI作品会返回给AI创作服务,并存储在云端的网盘,如云端的联机商用系统(On-line Business Systems,OBS)。创作成功后的AI作品并由云端的消息推送中心返回给车机端。在一个示例中,每个AI作品在云端具有统一资源定位系统(Uniform Resource Locator,URL)地址。
在一个示例中,创作参数可以包括创作意图,云端可以从该创作意图中提取创作意境的关键词,并根据该关键词进行AI作品创作,从而生成对应的待选作品。用户也可以不提供创作意图,而由云端根据预设的默认创作意图进行随机创作,从而生成对应的待选作品。其中,创作意图可以包括主题、风格、韵律等用户期望。
在一个示例中,创作参数可以包括创作素材(如图片、视频、音频等)或创作素材在云端的地址,以使云端根据创作素材创作对应的待选作品。创作素材可以为车载多媒体组件采集的多媒体资源,如车载麦克风多媒体组件采集的音频、车载摄像头多媒体组件采集的图像数据等,图像数据包括图片和视频。
对于创作素材的文件较小的情况,车机端可将创作素材作为创作参数直接发送给云端。但对于创作素材较大的情况,如果直接发送,将影响通讯效率。因此,可以将创作素材发送(上传,upload)至云端的OBS,该创作素材的地址可以为URL地址。如图2所示。云端在接收到创作素材后,可以将其保存至云端,并将该创作素材在云端的地址返回给车机端。车机端可以接收云端返回的与该创作素材对应的地址,并将该地址作为创作参数发送给云端,以使云端根据该地址调用对应的创作素材创作待选作品。
在一个示例中,云端可以请求作品创作模块创作待选作品。作品创作模块中可以包括智能(AI)创作模型,该AI创作模型可以通过大量的样本数据训练深度学习神经网络而得到。AI创作模型可以为多个,如AI诗歌创作模型、AI绘画创作模型、AI音乐创作模型等。
在一种实施方式中,创作参数为创作素材在云端的地址,如URL地址。作品创作模块可以根据该地址从网盘下载对应的创作素材。
在一个示例中,创作参数可以包括上述的创作参数,创作参数作为输入参数被作品创作模块输入对应的AI创作模型中,从而使最终创作的待选作品符合用户期望。
进一步地,由于作品创作比较耗时,云端可以生成与作品创作请求相对应的创作任务ID(Identity Document,身份标识号),并将该创作任务ID返回给车机端。
车机端在收到创作任务ID后,可以向云端发送第一查询请求,第一查询请求中包括创作任务ID,从而向查询对应的作品是否已完成以使云端查询与创作任务ID对应的待选作品。
云端在接收到第一查询请求后,根据创作任务ID查询对应的待选作品。在一个示例中,当待选作品创作完成后会被存入云端的作品数据库(Data Base,DB)中,云端可以根据创作任务ID从作品数据库中查找对应的待选作品,并将查找到的待选作品发送给车机端。
车机端可以按照第一预设时间间隔,向云端发送所述第一查询请求。也就是说,车机端会多次轮询云端,查询待选作品是否已完成。云端每次根据第一查询请求从作品数据库中查询是否存在对应的待选作品,如果存在即说明创作作品已完成,进而云端可以将待选作品发送给车机端。
进一步地,如图1所示,进入步骤S102、展示云端返回的待选作品。
车机端在接收到云端返回的待选作品后,可通过车载多媒体组件进行展示。例如,按照预设的界面设计方案展示待选作品。
步骤S103、获取对待选作品编辑后的编辑作品,该编辑作品在车机端或移动终端编辑生成。
用户在看到车机端展示的待选作品后,可以在车机端或移动终端编辑该待选作品,从而生成编辑作品。
进一步地,待选作品和编辑作品均可以保留完整的创作时间或编辑时间、地点、创作参数等信息。
在一种实施方式中,编辑作品可以在车机端编辑生成,在步骤S103中可以包括:根据编辑指令编辑待选作品,生成编辑作品。
也就是说,云端返回待选作品后,用户可以在车机端对该作品进行编辑,实现车机端的二次创作。编辑作品即二次创作的作品可以在车机端展示,也可以上传至云端。
在一种实施方式中,编辑作品可以在车机端编辑生成,在步骤S103中可以包括:从素材库获取编辑素材;根据编辑素材编辑待选作品。
车机端可以根据用户的编辑指令从素材库(表情包库、段子库、旁白文本库等)获取对应的编辑素材(表情包、段子、旁白文本等),并根据这些编辑素材编辑创作作品,实现车机端的二次创作。
在一种实施方式中,待选作品可以为待选音乐作品,在步骤S103中可以包括:获取旁白文本;将旁白文本转换为对应的旁白音频;合成旁白音频和待选音乐作品,以生成编辑作品。
车机端可以设置有文本转语音(Text To Speech,TTS)模块,通过该模块可以将用户提供或从旁边文本库中选择的旁白文本转换为旁白音频,并将旁白音频设置为某种风格后,与待选音乐作品合成,从而生成编辑作品。其中,旁白音频与待选音乐作品的合成可以通过云端的作品创作模块实现。车机端也可以借助云端的TTS引擎将旁白文本转换为旁白音频。
在一种实施方式中,在步骤S103之后还可以包括:将编辑作品上传至云端;根据编辑作品在云端的地址,生成对应的作品分享标识;在车机端展示作品分享标识。
也就是说,编辑作品可以在车机端进行分享。具体地,编辑作品可以先从车机端上传至云端,云端可以将车机端的编辑作品保存在作品数据库,该编辑作品也对应有作品ID。在车机端分享编辑作品时,车机端向云端发送的分享请求中包括的是编辑作品的作品ID,从而使云端根据该作品ID从云端(如作品数据库中)查询对应的编辑作品,以获得该编辑作品的地址,并将该地址返回给车机端。车机端收到该地址后,生成对应的分享标识,如二维码,并在车机端展示。用户可以使用手机等移动终端扫描二维码,分享作品卡片到微信、微博等社交媒体。
在一种实施方式中,编辑作品可以在移动终端编辑生成,如图3所示,在步骤S103中可以包括:步骤S301、根据待选作品生成对应的作品编辑标识;步骤S302、在车机端展示作品编辑标识,以使移动终端根据作品编辑标识生成作品编辑页面,作品编辑页面用于提供编辑待选作品以生成编辑作品的页面;步骤S303、从云端获取移动终端上传的编辑作品。
车机端可以生成作品编辑标识,如二维码,该作品编辑标识与待编辑的待选作品在云端的地址相对应。用户可通过移动终端扫描车机端的二维码,可以在移动终端展示该创作作品,并在移动终端提供相应的作品编辑页面供用户对该待选作品进行二次创作。其中,移动终端可以为手机、平板电脑等智能设备。
图4示出根据本申请一种实施方式的作品生成方法的流程图。该作品生成方法可以应用于移动终端。如图4所示,该方法可以包括:
步骤S401、识别车机端展示的作品编辑标识;
步骤S402、根据作品编辑标识生成作品编辑页面,作品编辑页面用于提供编辑待选作品的页面,待选作品由云端根据车机端的作品创作请求而创作生成;
步骤S403、基于作品编辑页面编辑待选作品,生成编辑作品;
步骤S404、将编辑作品上传至云端,以使车机端从云端获取编辑作品。
本申请实施的移动终端的作品生成方法的一些具体实现方式,可结合上述实施例中的对应描述,在此不再赘述。
在一种实施方式中,在步骤S403中可以包括:从素材库获取编辑素材;根据编辑素材编辑待选作品。
移动终端可以根据用户的编辑指令从素材库(表情包库、段子库、旁白文本库等)获取对应的编辑素材(表情包、段子、旁白文本等),并根据这些编辑素材编辑创作作品,实现移动终端的二次创作。
在一种实施方式中,待选作品可以为待选音乐作品,在步骤S403中可以包括:获取旁白文本;将旁白文本转换为对应的旁白音频;合成旁白音频和待选音乐作品,以生成编辑作品。
移动终端可以设置有TTS模块,通过该模块可以将用户提供或从旁边文本库中选择的旁白文本转换为旁白音频,并将旁白音频设置为某种风格后,与待选音乐作品合成,从而生成编辑作品。其中,旁白音频与待选音乐作品的合成可以通过云端的作品创作模块实现。移动端也可以借助云端的TTS引擎将旁白文本转换为旁白音频。
进一步地,用户可以在移动终端将编辑(二次创作)作品分享到社交媒体。
根据本申请实施例的作品生成方法,可以根据用户的创作诉求进行智能创作,并由用户编辑(二次创作),从而提供一个更有创意的人机创作作品。
实施例二
如图5所示,在步骤S101中可以包括:步骤S501、检测车机端所处的场景条件;步骤S502、在场景条件满足预设的触发条件的情况下,向云端发送作品创作请求。
也就是说,车机端向云端发送作品创作请求可以是用户发起的,也可以是根据车机端(车辆)所处的场景条件自动发起的。当检测到车机端所处的场景条件满足预设的触发条件时,车机端自动触发对应的车载对媒体组件采集对应的多媒体资源,并向云端发送作品创作请求。其中,预设的触发条件可以是时间或地理位置等。
在一种实施方式中,创作素材包括车载多媒体组件采集的多媒体资源,在步骤S502中可以包括:在所述场景条件满足预设的触发条件的情况下,控制对应的车载多媒体组件采集对应的多媒体资源,并向云端发送作品创作请求,创作请求中包括与多媒体资源对应的创作参数,以使云端根据该创作参数创作待选作品。
在一个示例中,多媒体资源作为创作素材可以提前上传至云端,从而收到云端返回的地址(如多媒体资源在云端的网盘的地址),创作参数可以包括该地址,随作品创作请求一起发送至云端。当云端的创作服务模块请求作品创作模块创作作品时,可以通过该地址从网盘下载对应的多媒体资源。
在一种实施方式中,场景条件包括定位信息,触发条件包括目标旅途信息,在场景条件满足预设的触发条件的情况下,控制对应的车载多媒体组件采集对应的多媒体资源,包括:在定位信息与目标旅途信息相对应的情况下,控制车载多媒体组件采集多媒体资源。
例如:目标旅途信息为某一景点,如果检测到车辆当前的定位信息与该景点相匹配,则车机端会自动触发车载多媒体组件,如摄像头多媒体组件或麦克风多媒体组件采集对应的音频、图像或视频,从而为用户记录旅途中的所见所闻,并基于这些所见所闻生成对应的AI创作作品。
在一个示例中,车机端可以自动触发麦克风多媒体组件采集环境音频,触发摄像头多媒体组件采集图像数据。其中,环境音频可以为车辆内部或周围的音频。
例如:车机端检测环境音频中是否包括预设的触发词,如可以对环境音频进行语义识别得到对应的识别结果,并检测该识别结果是否与预设从触发词匹配。如果匹配,则触发麦克风多媒体组件继续采集环境音频,并触发摄像头多媒体组件采集图像数据,从而可以基于这些环境音频和图像数据生成对应的AI创作作品,并在车机端展示。
在一种实施方式中,场景条件和触发条件包括情绪状态,在场景条件满足预设的触发条件的情况下,控制对应的车载多媒体组件采集对应的多媒体资源,包括:根据目标用户的面部图像确定目标用户的情绪状态;在目标用户的情绪状态与预设的情绪状态相对应的情况下,控制车载多媒体组件采集多媒体资源。
其中,用户的面部图像中包括用户的脸部特征,根据脸部特征可以识别用户的情绪状态。例如,可以将脸部特征输入训练好的情绪识别模型,进而得到用户的情绪状态。如果识别到用户的情绪状态符合预设情绪状态(如高兴),则可以自动触发多媒体资源,记录用户在该情绪状态下的音频、图像或视频,并基于这些多媒体资源生成对应的AI创作作品,并在车机端展示。
根据本实施例的方法,用户在可以在车辆使用过程中,如旅途过程中,根据车辆的场景条件自动触发车载多媒体组件采集多媒体资源,记录用户行为、所见所闻等,并基于这些素材生成对应的AI创作作品在车机端展示。
实施例三
下面介绍应用本实施例的方法生成诗歌作品的应用示例。
如图6-1所示,用户可通过车机端AI创作APP主动发起作品创作,也可以由车机端的场景引擎根据车机端的场景条件和触发条件判断并触发AI诗歌作品创作。云端(HHT AI云)收到作品创作请求而进行待选诗歌作品的创作,可通过调用AI诗歌创作接口实现。创作完成后,作品创作模块通过HHT AI云将AI诗歌作品(待选诗歌作品)推送到指定的车机端;车机端按界面设计方案展示待选诗歌作品;用户可对待选诗歌作品进行多种方式的分发,也可以在车机端或移动终端进行人工创作(编辑),生成编辑作品(最终创作结果)。
人工创作的方式包括正常的措辞修改,也支持自黑式创作。若是自黑式创作,创作方式支持添加段子和表情包;若是添加段子,则支持从段子库中选择合适的段子,也可以基于个性化诉求手动编辑;若是添加表情包,则支持从表情包库中选择合适的表情包,也可以基于个性化诉求本地上传。人工创作完成后,最终创作结果将保存到HHT AI云。最终创作结果的展示方式可以包括分享到社交媒体(社交分享)和下载到车机端或移动终端的本地。
实施例四
下面介绍应用本实施例的方法生成诗歌作品的应用示例。
如图6-2所示,用户可通过车机端AI创作APP主动发起作品创作,也可以由车机端的场景引擎根据车机端的场景条件和触发条件判断并触发AI绘画作品创作。云端(HHT AI云)收到作品创作请求而进行待选绘画作品的创作,可通过调用AI绘画创作接口实现。创作完成后,作品创作模块通过HHT AI云将AI绘画作品(待选绘画作品)推送到指定的车机端;车机端按界面设计方案展示待选绘画作品;用户可对待选绘画作品进行多种方式的分发,也可以在车机端或移动终端进行人工创作(编辑),生成编辑作品(最终创作结果)。
人工创作的方式包括正常的措辞修改,也支持自黑式创作。若是自黑式创作,创作方式支持添加段子和表情包;若是添加段子,则支持从段子库中选择合适的段子,也可以基于个性化诉求手动编辑;若是添加表情包,则支持从表情包库中选择合适的表情包,也可以基于个性化诉求本地上传。人工创作完成后,最终创作结果将保存到HHT AI云。最终创作结果的展示方式可以包括分享到社交媒体(社交分享)和下载到车机端或移动终端的本地。
实施例五
下面介绍应用本实施例的方法生成音乐作品的应用示例。
如图6-3所示,用户可通过车机端AI创作APP主动发起作品创作,也可以由车机端的场景引擎根据车机端的场景条件和触发条件判断并触发AI音乐作品创作。云端(HHT AI云)收到作品创作请求而进行待选音乐作品的创作,可通过调用AI音乐创作接口实现。创作完成后,作品创作模块通过HHT AI云将AI音乐作品(待选音乐作品)推送到指定的车机端;车机端按界面设计方案展示待选音乐作品;用户可对待选音乐作品进行多种方式的分发,也可以在车机端或移动终端进行人工创作(编辑),生成编辑作品(最终创作结果)。
人工创作的方式包括在在音乐的开头和结尾添加音频格式的旁白音频。旁白文本支持从系统提供的旁白文本库中选择合适的旁白文本,也可以基于个性化诉求自主编辑;添加的旁白文本由在线TTS引擎合成旁白音频,旁白音频的声音风格可以使用通用风格;旁白音频生成后,作品创作模块将旁白音频和原创作结果进行合成,合成后的作品为最终创作结果。人工创作完成后,最终创作结果将保存到HHT AI云。最终创作结果的展示方式可以包括分享到社交媒体(社交分享)和下载到车机端或移动终端的本地。
实施例六
如图6-4所示,本申请实施例的作品生成方法还可以包括:步骤S601、确定多个目标作品,目标作品包括编辑作品;步骤S602、根据目标作品的作品信息,分类展示多个目标作品,作品信息包括编辑信息、创作参数和作品类型中的至少一个,编辑信息包括编辑时间和/或编辑风格,创作参数包括创作意图和/或位置信息。
其中,目标作品可以是AI创作的待选作品,也可以是编辑作品,即二次创作作品。也就是说,多个目标作品可以基于作品的编辑时间形成的时间轴进行顺序展示,也可以基于多个作品的位置信息形成的出行轨迹进行顺序展示,还可以基于作品的作品类型进行归类和展示。
进一步地,本申请实施例的方法还可以包括:按照预设的时间间隔,生成作品报告。其中,作品报告可以是AI创作的待选作品报告,也可以是编辑作品报告,即二次创作作品报告。也就是说,根据运营需求和时光机的服务策略,可以周期性生成作品的时光报告,并分享给其他用户。
下面结合图6-5介绍根据本申请实施例的一个应用示例。如图6-5所示,用户通过AI创作APP可以请求云端的时间机功能。具体地,所有正在创作和已创作完成的作品的创作状态或作品都会呈现在AI创作APP中的“出行生活时光机”。在“出行生活时光机”中,用户可通过页面操作查看实时创作进程,也可再次查看已创作完成的作品。所有创作结果(作品)均可以保留完整的创作参数,进而可以对多个创作结果进行归类和展示,例如上述的基于时间轴、出行轨迹或作品类型的归类和展示。
基于此,用户在驾驶智能网联车辆过程中,车机端可以记录用户的出行生活,包括去过的地方、写的诗、画的画、创作的音乐及纪录片等作品,成为用户使用智能网联车辆后的珍贵回忆。
需要说明的是,尽管以上述多个示例介绍了本申请实施例的视频作品生成方法,但本领域技术人员能够理解,本申请应不限于此。事实上,用户完全可根据个人喜好和/或实际应用场景灵活设定各步骤的实现方法。
实施例七
本申请实施例提供一种作品生成装置,应用于车机端,如图7所示,该作品生成装置包括:
作品创作请求发送模块701,用于向云端发送作品创作请求,以使所述云端创作对应的待选作品;
展示模块702,用于展示所述云端返回的所述待选作品;
编辑作品获取模块703,用于获取对所述待选作品编辑后的编辑作品,所述编辑作品在所述车机端或移动终端编辑生成。
本申请实施例提供一种作品生成装置,应用于移动终端,如图8所示,该作品生成装置包括:
识别模块801,用于识别车机端展示的作品编辑标识;
编辑页面生成模块802,用于根据所述作品编辑标识生成作品编辑页面,所述作品编辑页面用于提供编辑待选作品的页面,所述待选作品由云端根据所述车机端的作品创作请求而创作生成;
编辑作品生成模块803,用于基于作品编辑页面编辑所述待选作品,生成编辑作品;
编辑作品上传模块804,用于将所述编辑作品上传至所述云端,以使所述车机端从所述云端获取所述编辑作品。
本申请实施例各装置中的各模块的功能可以参见上述方法中的对应描述,在此不再赘述。
实施例八
图9示出根据本申请实施例的车机端或移动终端的结构框图。如图9所示,该车机端或移动终端包括:存储器901和处理器902,存储器901内存储有可在处理器902上运行的指令。处理器902执行该指令时实现上述实施例中的任一种作品生成方法。存储器901和处理器902的数量可以为一个或多个。该终端或服务器旨在表示各种形式的数字计算机,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。终端或服务器还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例,并且不意在限制本文中描述的和/或者要求的本申请的实现。
该车机端或移动终端还可以包括通信接口903,用于与外界设备进行通信,进行数据交互传输。各个设备利用不同的总线互相连接,并且可以被安装在公共主板上或者根据需要以其它方式安装。处理器902可以对在终端或服务器内执行的指令进行处理,包括存储在存储器中或者存储器上以在外部输入/输出装置(诸如,耦合至接口的显示设备)上显示GUI的图形信息的指令。在其它实施方式中,若需要,可以将多个处理器和/或多条总线与多个存储器和多个存储器一起使用。同样,可以连接多个终端或服务器,各个设备提供部分必要的操作(例如,作为服务器阵列、一组刀片式服务器、或者多处理器系统)。该总线可以分为地址总线、数据总线、控制总线等。为便于表示,图9中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
可选的,在具体实现上,如果存储器901、处理器902及通信接口903集成在一块芯片上,则存储器901、处理器902及通信接口903可以通过内部接口完成相互间的通信。
应理解的是,上述处理器可以是中央处理器(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital Sigtal Processing,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(FieldProgrammable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者是任何常规的处理器等。值得说明的是,处理器可以是支持进阶精简指令集机器(advanced RISC machines,ARM)架构的处理器。
本申请实施例提供了一种计算机可读存储介质(如上述的存储器901),其存储有计算机指令,该程序被处理器执行时实现本申请实施例中提供的方法。
可选的,存储器901可以包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需要的应用程序;存储数据区可存储根据终端或服务器的使用所创建的数据等。此外,存储器901可以包括高速随机存取存储器,还可以包括非瞬时存储器,例如至少一个磁盘存储器件、闪存器件、或其他非瞬时固态存储器件。在一些实施例中,存储器901可选包括相对于处理器902远程设置的存储器,这些远程存储器可以通过网络连接至终端或服务器。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
其中,处理器902可以为第一处理器或第二处理器;存储器901可以为第一存储器或第二存储器。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包括于本申请的至少一个实施例或示例中。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或隐含地包括至少一个该特征。在本申请的描述中,“多个”的含义是两个或两个以上,除非另有明确具体的限定。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或多个(两个或两个以上)用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分。并且本申请的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用,或结合这些指令执行系统、装置或设备而使用。
应理解的是,本申请的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。上述实施例方法的全部或部分步骤是可以通过程序来指令相关的硬件完成,该程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本申请各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。上述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读存储介质中。该存储介质可以是只读存储器,磁盘或光盘等。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到其各种变化或替换,这些都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以权利要求的保护范围为准。

Claims (22)

1.一种作品生成方法,应用于车机端,其特征在于,包括:
向云端发送作品创作请求,以使所述云端创作对应的待选作品;
展示所述云端返回的所述待选作品;
获取对所述待选作品编辑后的编辑作品,所述编辑作品在所述车机端或移动终端编辑生成。
2.根据权利要求1所述的方法,其特征在于,所述编辑作品在所述车机端编辑,获取对所述待选作品编辑后的编辑作品,包括:
根据编辑指令编辑所述待选作品,生成所述编辑作品。
3.根据权利要求1所述的方法,其特征在于,所述编辑作品在所述车机端编辑,获取对所述待选作品编辑后的编辑作品,包括:
从素材库获取编辑素材;
根据所述编辑素材编辑所述待选作品。
4.根据权利要求1所述的方法,其特征在于,所述待选作品为待选音乐作品,所述编辑作品在所述车机端编辑,获取对所述待选作品编辑后的编辑作品,包括:
获取旁白文本;
将所述旁白文本转换为对应的旁白音频;
合成所述旁白音频和所述待选音乐作品,以生成所述编辑作品。
5.根据权利要求2或3或4所述的方法,其特征在于,所述的获取对所述待选作品编辑后的编辑作品之后,还包括:
将所述编辑作品上传至所述云端;
根据所述编辑作品在所述云端的地址,生成对应的作品分享标识;
在所述车机端展示所述作品分享标识。
6.根据权利要求1所述的方法,其特征在于,所述编辑作品在所述移动终端编辑,获取对所述待选作品编辑后的编辑作品,包括:
根据所述待选作品生成对应的作品编辑标识;
在所述车机端展示所述作品编辑标识,以使移动终端根据所述作品编辑标识生成作品编辑页面,所述作品编辑页面用于提供编辑所述待选作品以生成所述编辑作品的页面;
从所述云端获取所述移动终端上传的所述编辑作品。
7.根据权利要求1所述的方法,其特征在于,向云端发送作品创作请求,包括:
检测所述车机端所处的场景条件;
在所述场景条件满足预设的触发条件的情况下,向所述云端发送所述作品创作请求。
8.根据权利要求7所述的方法,其特征在于,在所述场景条件满足预设的触发条件的情况下,向所述云端发送所述作品创作请求,包括:
在所述场景条件满足预设的触发条件的情况下,控制对应的车载多媒体组件采集对应的多媒体资源,并向所述云端发送所述作品创作请求,所述创作请求中包括与所述多媒体资源对应的创作参数,以使所述云端根据所述创作参数创作所述待选作品。
9.根据权利要求8所述的方法,其特征在于,所述场景条件包括定位信息,所述触发条件包括目标旅途信息,在所述场景条件满足预设的触发条件的情况下,控制对应的车载多媒体组件采集对应的多媒体资源,包括:
在所述定位信息与目标旅途信息相对应的情况下,控制所述车载多媒体组件采集多媒体资源。
10.根据权利要求8所述的方法,其特征在于,所述场景条件和所述触发条件包括情绪状态,在所述场景条件满足预设的触发条件的情况下,控制对应的车载多媒体组件采集对应的多媒体资源,包括:
根据目标用户的面部图像确定所述目标用户的情绪状态;
在所述目标用户的情绪状态与预设的情绪状态相对应的情况下,控制所述车载多媒体组件采集多媒体资源。
11.根据权利要求1所述的方法,其特征在于,还包括:
确定多个目标作品,所述目标作品包括所述编辑作品;
根据所述目标作品的作品信息,分类展示多个所述目标作品,所述作品信息包括编辑信息、创作参数和作品类型中的至少一个,所述编辑信息包括编辑时间和/或编辑风格,所述创作参数包括创作意图和/或位置信息。
12.根据权利要求1所述的方法,其特征在于,还包括:
按照预设的时间间隔,生成作品报告,所述作品报告包括编辑作品报告。
13.一种作品生成方法,应用于移动终端,其特征在于,包括:
识别车机端展示的作品编辑标识;
根据所述作品编辑标识生成作品编辑页面,所述作品编辑页面用于提供编辑待选作品的页面,所述待选作品由云端根据所述车机端的作品创作请求而创作生成;
基于所述作品编辑页面编辑所述待选作品,生成编辑作品;
将所述编辑作品上传至所述云端,以使所述车机端从所述云端获取所述编辑作品。
14.根据权利要求13所述的方法,其特征在于,基于所述作品编辑页面编辑所述待选作品,生成编辑作品,包括:
从素材库获取编辑素材;
根据所述编辑素材编辑所述待选作品。
15.根据权利要求13所述的方法,其特征在于,所述待选作品包括待选音乐作品,基于所述作品编辑页面编辑所述待选作品,生成编辑作品,包括:
获取旁白文本;
将所述旁白文本转换为对应的旁白音频;
合成所述旁白音频和所述待选音乐作品,以生成所述编辑作品。
16.根据权利要求13所述的方法,其特征在于,还包括:
分享所述编辑作品。
17.一种作品生成装置,应用于车机端,其特征在于,包括:
作品创作请求发送模块,用于向云端发送作品创作请求,以使所述云端创作对应的待选作品;
展示模块,用于展示所述云端返回的所述待选作品;
编辑作品获取模块,用于获取对所述待选作品编辑后的编辑作品,所述编辑作品在所述车机端或移动终端编辑生成。
18.一种作品生成装置,应用于移动终端,其特征在于,包括:
识别模块,用于识别车机端展示的作品编辑标识;
编辑页面生成模块,用于根据所述作品编辑标识生成作品编辑页面,所述作品编辑页面用于提供编辑待选作品的页面,所述待选作品由云端根据所述车机端的作品创作请求而创作生成;
编辑作品生成模块,用于基于所述作品编辑页面编辑所述待选作品,生成编辑作品;
编辑作品上传模块,用于将所述编辑作品上传至所述云端,以使所述车机端从所述云端获取所述编辑作品。
19.一种车机端,其特征在于,包括:
至少一个第一处理器;以及
与所述至少一个第一处理器通信连接的第一存储器;其中,
所述第一存储器存储有可被所述至少一个第一处理器执行的指令,所述指令被所述至少一个第一处理器执行,以使所述至少一个第一处理器能够执行权利要求1至12中任一项所述的方法。
20.一种移动终端,其特征在于,包括:
至少一个第二处理器;以及
与所述至少一个第二处理器通信连接的第二存储器;其中,
所述第二存储器存储有可被所述至少一个第二处理器执行的指令,所述指令被所述至少一个第二处理器执行,以使所述至少一个第二处理器能够执行权利要求13至16中任一项所述的方法。
21.一种作品生成系统,其特征在于,包括权利要求19所述的车机端以及权利要求20所述的移动终端。
22.一种计算机可读存储介质,所述计算机可读存储介质内存储有计算机指令,所述计算机指令被处理器执行时实现如权利要求1至16中任一项所述的方法。
CN202010498069.7A 2020-06-04 2020-06-04 作品生成方法、装置、车机端和移动终端 Active CN111651231B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010498069.7A CN111651231B (zh) 2020-06-04 2020-06-04 作品生成方法、装置、车机端和移动终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010498069.7A CN111651231B (zh) 2020-06-04 2020-06-04 作品生成方法、装置、车机端和移动终端

Publications (2)

Publication Number Publication Date
CN111651231A true CN111651231A (zh) 2020-09-11
CN111651231B CN111651231B (zh) 2022-11-11

Family

ID=72348323

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010498069.7A Active CN111651231B (zh) 2020-06-04 2020-06-04 作品生成方法、装置、车机端和移动终端

Country Status (1)

Country Link
CN (1) CN111651231B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112199586A (zh) * 2020-09-29 2021-01-08 北京字节跳动网络技术有限公司 一种作品分发方法、装置、计算机设备及存储介质
CN112783484A (zh) * 2020-12-25 2021-05-11 特赞(上海)信息科技有限公司 协作设计创意的向导模版系统、共享方法、终端及介质
CN115830171A (zh) * 2023-02-17 2023-03-21 深圳前海深蕾半导体有限公司 基于人工智能绘画的图像生成方法、显示设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105657538A (zh) * 2015-12-31 2016-06-08 北京东方云图科技有限公司 一种通过移动终端对视频文件进行合成的方法及装置
CN108595403A (zh) * 2018-04-28 2018-09-28 掌阅科技股份有限公司 用于辅助撰写的处理方法、计算设备及存储介质
CN109194644A (zh) * 2018-08-29 2019-01-11 北京达佳互联信息技术有限公司 网络作品的分享方法、装置、服务器以及存储介质
CN110298934A (zh) * 2019-06-18 2019-10-01 重庆长安汽车股份有限公司 行车视频拍摄及分享方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105657538A (zh) * 2015-12-31 2016-06-08 北京东方云图科技有限公司 一种通过移动终端对视频文件进行合成的方法及装置
CN108595403A (zh) * 2018-04-28 2018-09-28 掌阅科技股份有限公司 用于辅助撰写的处理方法、计算设备及存储介质
CN109194644A (zh) * 2018-08-29 2019-01-11 北京达佳互联信息技术有限公司 网络作品的分享方法、装置、服务器以及存储介质
CN110298934A (zh) * 2019-06-18 2019-10-01 重庆长安汽车股份有限公司 行车视频拍摄及分享方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112199586A (zh) * 2020-09-29 2021-01-08 北京字节跳动网络技术有限公司 一种作品分发方法、装置、计算机设备及存储介质
CN112783484A (zh) * 2020-12-25 2021-05-11 特赞(上海)信息科技有限公司 协作设计创意的向导模版系统、共享方法、终端及介质
CN115830171A (zh) * 2023-02-17 2023-03-21 深圳前海深蕾半导体有限公司 基于人工智能绘画的图像生成方法、显示设备及存储介质

Also Published As

Publication number Publication date
CN111651231B (zh) 2022-11-11

Similar Documents

Publication Publication Date Title
CN111400518B (zh) 作品生成和编辑方法、装置、终端、服务器和系统
CN111651231B (zh) 作品生成方法、装置、车机端和移动终端
EP3095113B1 (en) Digital personal assistant interaction with impersonations and rich multimedia in responses
US9449523B2 (en) Systems and methods for narrating electronic books
US10270831B2 (en) Automated system for combining and publishing network-based audio programming
CN107463700B (zh) 用于获取信息的方法、装置及设备
CN103443759A (zh) 提供媒体文件的不同版本
CN103080930A (zh) 用于辨识和映射内容的方法和装置
CN111601161A (zh) 视频作品生成方法、装置、终端、服务器和系统
CN112165647B (zh) 音频数据的处理方法、装置、设备及存储介质
CN105144212A (zh) 用于日历显示的初始视图
CN110781417A (zh) 一种基于二维码的朗读作品传播方法及系统
CN110413834B (zh) 语音评论修饰方法、系统、介质和电子设备
CN109325180B (zh) 文章摘要推送方法、装置、终端设备、服务器及存储介质
US20220391440A1 (en) Content providing system, content providing method, and storage medium
US20190198041A1 (en) Information providing apparatus
CN111752538A (zh) 车端场景的生成方法、装置、云端、车端和存储介质
CN111703278A (zh) 香氛释放方法、装置、车端、云端、系统和存储介质
US20130204414A1 (en) Digital audio communication system
KR102296483B1 (ko) 회의록 제공 단말 및 회의록 제공 방법
US11968432B2 (en) Information processing system, information processing method, and storage medium
JP6627315B2 (ja) 情報処理装置、情報処理方法、および制御プログラム
JP6944920B2 (ja) スマートインタラクティブの処理方法、装置、設備及びコンピュータ記憶媒体
CN111625508A (zh) 一种信息处理方法及装置
CN110931014A (zh) 基于正则匹配规则的语音识别方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant