WO2019227429A1 - 多媒体内容生成方法、装置和设备/终端/服务器 - Google Patents

多媒体内容生成方法、装置和设备/终端/服务器 Download PDF

Info

Publication number
WO2019227429A1
WO2019227429A1 PCT/CN2018/089360 CN2018089360W WO2019227429A1 WO 2019227429 A1 WO2019227429 A1 WO 2019227429A1 CN 2018089360 W CN2018089360 W CN 2018089360W WO 2019227429 A1 WO2019227429 A1 WO 2019227429A1
Authority
WO
WIPO (PCT)
Prior art keywords
multimedia content
information
reading
template information
target data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/CN2018/089360
Other languages
English (en)
French (fr)
Inventor
朱志航
胡月鹏
原英虎
潘璐璐
马俊杰
张倩倩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
UC MOBILE CO Ltd
UC Mobile Ltd
Ucweb Singapore Pte Ltd
Original Assignee
UC MOBILE CO Ltd
UC Mobile Ltd
Ucweb Singapore Pte Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by UC MOBILE CO Ltd, UC Mobile Ltd, Ucweb Singapore Pte Ltd filed Critical UC MOBILE CO Ltd
Priority to CN201880001151.5A priority Critical patent/CN109496295A/zh
Priority to PCT/CN2018/089360 priority patent/WO2019227429A1/zh
Priority to PH12018502029A priority patent/PH12018502029A1/en
Priority to US16/138,906 priority patent/US20190371023A1/en
Publication of WO2019227429A1 publication Critical patent/WO2019227429A1/zh
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—Two-dimensional [2D] image generation
    • G06T11/60—Creating or editing images; Combining images with text
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/20—Natural language analysis
    • G06F40/279—Recognition of textual entities
    • G06F40/284—Lexical analysis, e.g. tokenisation or collocates
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/54—Browsing; Visualisation therefor
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/12—Use of codes for handling textual entities
    • G06F40/131—Fragmentation of text files, e.g. creating reusable text-blocks; Linking to fragments, e.g. using XInclude; Namespaces
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/166—Editing, e.g. inserting or deleting
    • G06F40/169—Annotation, e.g. comment data or footnotes
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/20—Natural language analysis
    • G06F40/205—Parsing

Definitions

  • the embodiments of the present application relate to the field of Internet technologies, and in particular, to a method, an apparatus, and a device / terminal / server for generating multimedia content.
  • the current electronic reading methods are mostly limited to the form of text display, or the combination of text and pictures. For example, displaying text and / or pictures through a browser webpage or e-book application.
  • the current electronic reading method has a single form of content display, which cannot meet the personalized needs of users for electronic reading.
  • the embodiments of the present application provide a method, an apparatus, and a device / terminal / server for generating multimedia content, so as to solve the problem that the content display form of the electronic reading method in the prior art is single and cannot meet the personalized needs of users.
  • a multimedia content generation method which includes: obtaining reading target data of multimedia content to be generated; analyzing the reading target data to obtain characteristic information of the reading target data; determining Multimedia content template information matching the characteristic information; and generating multimedia content corresponding to the reading object data according to the multimedia content template information and the reading object data.
  • a multimedia content generation device including: a first acquisition module configured to acquire reading target data of multimedia content to be generated; and a second acquisition module configured to read the reading
  • the object data is analyzed to obtain the characteristic information of the reading object data;
  • the determination module is configured to determine the multimedia content template information that matches the characteristic information;
  • the generating module is configured to be based on the multimedia content template information and the reading
  • the object data generates multimedia content corresponding to the reading object data.
  • a device / terminal / server including: one or more processors; a storage device configured to store one or more programs; when the one or more programs Executed by the one or more processors, so that the one or more processors implement the multimedia content generation method as described above. .
  • a computer-readable storage medium in which a computer program is stored, and when the program is executed by a processor, the multimedia content generation method described above is implemented.
  • the multimedia content template information matching with the reading target data is determined according to the characteristic information of the reading target data, and the corresponding multimedia content is generated according to the multimedia content template information and the reading target data.
  • the multimedia content template information is used to generate multimedia content with a certain pattern, theme, or style.
  • FIG. 1 is a flowchart of steps in a method for generating multimedia content according to Embodiment 1 of the present application; FIG.
  • FIG. 2 is a flowchart of steps in a method for generating multimedia content according to Embodiment 2 of the present application;
  • FIG. 3 is a schematic diagram of a multimedia content display interface in the embodiment shown in FIG. 2;
  • FIG. 4 is a schematic diagram of another multimedia content display interface in the embodiment shown in FIG. 2;
  • FIG. 5 is a structural block diagram of a multimedia content generating apparatus according to Embodiment 3 of the present application.
  • FIG. 6 is a structural block diagram of a multimedia content generating device according to Embodiment 4 of the present application.
  • FIG. 7 is a schematic structural diagram of a device / terminal / server according to Embodiment 5 of the present application.
  • FIG. 1 a flowchart of steps of a multimedia content generation method according to Embodiment 1 of the present application is shown.
  • Step S102 Acquire reading target data of multimedia content to be generated.
  • the data to be read includes, but is not limited to, data that can be read by electronic reading methods such as text, pictures, etc .; the multimedia content to be generated may include, but is not limited to: dynamic images, audio, video, AR, special effects, etc. One or more of them (two or more).
  • Step S104 Analyze the reading target data to obtain characteristic information of the reading target data.
  • the feature information of the reading object data is used to characterize the characteristics of the reading object data.
  • the text data may be a plurality of keywords or a plurality of word segmentation thereof;
  • the picture data may be information of picture feature points, and so on.
  • a person skilled in the art may analyze the reading object data in any appropriate manner to obtain its characteristic information, such as a natural language processing method, a support vector machine method, a neural network method, and the like. There are no restrictions on this.
  • Step S106 Determine multimedia content template information that matches the feature information.
  • matching multimedia content template information can be determined, and those skilled in the art can adopt appropriate methods to determine whether the characteristic information matches the multimedia content template information.
  • the multimedia content template information may also correspond to corresponding feature information or key information to determine the degree of matching with the feature information of the reading target data.
  • the multimedia content template information is used to provide information of shooting templates with certain rules for generating multimedia content with corresponding themes or styles or modes, such as various magic expression templates, various scene or plot templates, and so on.
  • the multimedia content template information may optionally include at least one of a set text, image, audio, and video.
  • the multimedia content template information can be stored locally and / or on the server. If the multimedia content template information is stored locally, the locally stored template information can be used directly in subsequent steps; if the template information is not stored locally, it can be downloaded from the server. Use the template information locally.
  • the multimedia content template information is stored locally and is convenient to use; the multimedia content template information is stored in the server and can be obtained from the server when needed, saving local storage resources and system consumption.
  • Step S108 Generate multimedia content corresponding to the reading target data according to the multimedia content template information and the reading target data.
  • a part or all of the reading target data can be used to generate the content required by the template information and combined with the content corresponding to the template information to generate the final multimedia content corresponding to the reading target data.
  • the matching multimedia content template information is determined according to the characteristic information of the reading target data, and the corresponding multimedia content is generated according to the multimedia content template information and the reading target data.
  • the multimedia content template information is used to generate multimedia content with a certain pattern, theme, or style.
  • the multimedia content generation method of this embodiment may be executed by any appropriate device having data processing capabilities, including but not limited to various terminal devices or servers, such as a PC, a tablet computer, a mobile terminal, and the like.
  • FIG. 2 a flowchart of steps of a method for generating multimedia content according to Embodiment 2 of the present application is shown.
  • Step S202 Acquire reading target data of multimedia content to be generated.
  • the data to be read includes, but is not limited to, data that can be read through electronic reading methods such as text, pictures, etc .
  • the multimedia content to be generated may include, but is not limited to: dynamic images, audio, video, AR Or special effects (two or more).
  • Step S204 Analyze the reading target data to obtain characteristic information of the reading target data.
  • a person skilled in the art may analyze the reading target data in any suitable manner to obtain its characteristic information.
  • Step S206 Determine multimedia content template information that matches the characteristic information of the reading target data.
  • the multimedia content template information is used to provide information of a shooting template with a certain rule for generating multimedia content with a corresponding theme or style or mode.
  • the multimedia content template information may include: feature information and editing information of shooting multimedia content.
  • the characteristic information characterizes the characteristics of the shooting template of the multimedia content.
  • the characteristic information may include at least one of expression information, action information, script information, sound information, color information, and scene information.
  • the emoticon information includes application software and / or emoticons content captured and / or edited by the user;
  • the action information includes application software and / or action content photographed and / or edited by the user;
  • the script information Including application software and / or plot content that the user shoots and / or editing video;
  • the sound information includes application software and / or sound content that the user records and / or editing audio;
  • the color information includes the user shooting and / or editing video Application software and / or color content;
  • the scene information includes application software and / or scene content taken and / or edited by a user.
  • the editing information represents information for editing multimedia content using a shooting template of the multimedia content.
  • the editing information may include: application information for generating the multimedia content.
  • the editing information may include a shooting application and / or editing application for the multimedia content; optionally, the editing information may also include other shooting applications and / or editing applications for the multimedia content A similar application program for the same shooting and / or editing may be implemented; further optionally, the editing information may further include a shooting and / or editing method for the multimedia content. For example, exposure time, aperture selection, color tuning, person space allocation, shooting angle, light selection, person motion, etc.
  • multimedia content template information can be obtained.
  • the multimedia content receiver may perform a local multimedia content generation operation according to the obtained template information, and may also perform an editing process on the received or to-be-generated multimedia content elements according to the obtained template information, or may obtain the After the template information is taken to generate the multimedia content elements, the elements are edited accordingly according to the obtained template information.
  • the template information may also be edited and then the local multimedia content generation operation may be performed. Edit the template information, edit the elements to generate multimedia content, and then perform local multimedia content generation operations.
  • the multimedia content receiver obtains template information corresponding to the magic expression video by parsing the transmission protocol, for example, information including a shooting application program, a shooting method, and expression content used by the magic expression video.
  • the multimedia content receiver does not need to install a shooting and / or editing application, and can log in to the server according to the template information to use the shooting application to shoot the same magic facial expression video by using the shooting method.
  • the captured magic expression video is shared to other users. Of course, other users may also choose to download the magic expression shooting and / or editing application to the local to implement shooting and / or editing of the magic expression video.
  • the multimedia content receiver obtains template information corresponding to the scenario video by analyzing the transmission protocol, for example, including a shooting application program, a shooting method, and script content used by the scenario video.
  • the multimedia content receiver does not need to install a shooting and / or editing application, and can log in to the server according to the template information to use the shooting application to use the shooting method to shoot the same video according to the script.
  • the captured video can be shared to other users. Of course, other users may also choose to download the shooting and / or editing application locally to implement video shooting and / or editing.
  • Step S208 Generate multimedia content corresponding to the reading target data according to the multimedia content template information and the reading target data.
  • the generated multimedia content may include, but is not limited to, one or more (two or more) of moving images, audio, video, AR, special effects, and the like.
  • the data required to generate multimedia content can be obtained from the reading target data according to the template information, and then the multimedia content template information and the acquired required data are used to generate multimedia content.
  • the reading target data can be read aloud according to the sound information in the template information to realize the audio reading object; for another example, the description of the expression or action of a character in the reading target data can be obtained, and according to the description, the The expression information and / or action information generates corresponding magic expressions and / or magic actions; for example, according to at least one of script information, color information, and scene information in the template information, combined with reading object data, a short scene is generated. Video, etc.
  • the multimedia content generation condition data corresponding to the multimedia content template information can be obtained from the reading target data; the multimedia content generating condition data and the multimedia content template information are used to generate and read the target data.
  • Corresponding multimedia content For example, when generating a magic expression and / or action, it may be implemented based on the description of the character's expression and / or action in the reading object data, that is, the multimedia content template information may be filtered out from all the reading object data.
  • the required data, that is, the multimedia content generation condition data is further combined with the template information to generate multimedia content.
  • the input multimedia content generation parameters may also be received.
  • the user sets input multimedia content generation parameters through the interface, including but not limited to: character (including real and virtual characters) parameters, gender parameters, scene parameters, and other parameters set by those skilled in the art according to actual needs, and so on.
  • the multimedia content corresponding to the reading target data can be generated according to the multimedia content template information, the reading target data, and the multimedia content generation parameters. Multimedia content.
  • the user when generating a scenario video based on the scenario information in the multimedia content template information, the user selects or enters the name of a specific person (such as a star), then can obtain a virtual image of the specific person,
  • the template information is combined to generate the corresponding scene video; for example, when generating a voice reading object based on the sound information in the multimedia content template information, the user selects or enters the name of a specific person (such as a famous reader) Then, the real voice or synthesized voice of the specific character can be obtained, combined with the template information after processing, to generate the corresponding voice reading object; for example, the scenario is generated based on the script information and / or scene information in the multimedia content template information During the video, the user selects or enters a certain scene parameter such as "Seaside", and the generated scene video will use the seaside as the scene, and so on.
  • the multimedia content generation parameters provide users with a higher degree of participation in multimedia content. Users can choose the elements that generate multimedia content according to their preferences,
  • Step S210 Display the generated multimedia content.
  • displaying the generated multimedia content through a floating window or displaying the reading target data in the first area of the display screen and displaying the generated multimedia content (such as the reading target data and the multimedia content data) in the second area of the display screen.
  • Separate display or other suitable content or data can be displayed in addition to reading target data and multimedia content).
  • FIG. 3 An interface of a multimedia content displayed by a floating window method is shown in FIG. 3.
  • the floating window is suspended above the reading object data, and conventional floating window operations such as dragging, resizing, hiding, and closing can be performed.
  • the content displayed in the floating window is a frame in a short video generated based on the reading target data and the multimedia content template information. Flexible display through floating window, convenient for users to adjust the display window.
  • FIG. 4 An interface of a multimedia content displayed in a split screen manner is shown in FIG. 4.
  • the reading target data is displayed on the upper half screen of the display screen
  • the multimedia content is displayed on the lower half screen of the display screen.
  • the displayed multimedia content is a frame of a short video generated based on the reading target data and the multimedia content template information.
  • Step S212 The generated multimedia content is transmitted through a transmission protocol.
  • the generated multimedia content is transmitted to other users in a specific range or a non-specific range through a transmission protocol for sharing.
  • the transmission protocol carries multimedia content template information.
  • the receiver of the multimedia content can obtain the corresponding template information without installing the application software that generates the multimedia content, and can then generate local multimedia content corresponding to or matching the received multimedia content according to user operations. , While reducing the operation burden of the multimedia content receiver, it also achieves effective information interaction between users.
  • the transmission protocol that can carry the template information may be any appropriate protocol, including but not limited to the HTTP protocol.
  • the multimedia content sender encodes the multimedia template information, such as encoding "Magic Emoji: A”, “Beauty: On”, and "Music: X”, and carries these encoded information in the HTTP protocol.
  • the multimedia content receiver obtains the encoding information therein by analyzing the transmission protocol, and then obtains the corresponding template information from the corresponding server according to the encoding information, and then can perform corresponding operations according to the template information.
  • the specific encoding rules and methods may be implemented by any person skilled in the art in any appropriate manner according to the actual situation and the requirements of the transmission protocol used, which is not limited in the embodiments of the present application.
  • the multimedia content receiver may obtain the characteristic information and editing information of the multimedia content shooting by analyzing the transmission protocol used by the received multimedia content, and obtain the multimedia content template information according to the characteristic information and the editing information. Furthermore, the multimedia content receiver can generate similar or matching multimedia content according to the reading object data of the receiver and the obtained template information when needed.
  • this step is an optional step.
  • those skilled in the art may also share the generated multimedia content and multimedia content template information to others through other appropriate methods.
  • the matching multimedia content template information is determined according to the characteristic information of the reading target data, and the corresponding multimedia content is generated according to the multimedia content template information and the reading target data.
  • the multimedia content template information is used to generate multimedia content with a certain pattern, theme, or style.
  • the multimedia content generation method of this embodiment may be executed by any appropriate device having data processing capabilities, including but not limited to various terminal devices or servers, such as a PC, a tablet computer, a mobile terminal, and the like.
  • FIG. 5 a structural block diagram of a multimedia content generating apparatus according to Embodiment 3 of the present application is shown.
  • the multimedia content generating device of this embodiment includes a first obtaining module 302 configured to obtain reading target data of multimedia content to be generated, and a second obtaining module 304 configured to analyze reading target data and obtain characteristic information of the reading target data.
  • a determining module 306 configured to determine multimedia content template information matching the characteristic information;
  • a generating module 308 configured to generate multimedia content corresponding to the reading target data according to the multimedia content template information and the reading target data.
  • the multimedia content generating device in this embodiment is configured to implement the corresponding multimedia content generating methods in the foregoing multiple method embodiments, and has the beneficial effects of the corresponding method embodiments, which are not described herein again.
  • the multimedia content generating device in this embodiment includes a first obtaining module 402 configured to obtain reading target data of multimedia content to be generated, and a second obtaining module 404 configured to analyze reading target data and obtain characteristic information of the reading target data.
  • a determining module 406 configured to determine multimedia content template information that matches the characteristic information;
  • a generating module 408 configured to generate multimedia content corresponding to the reading target data according to the multimedia content template information and the reading target data.
  • the multimedia content template information includes: feature information and editing information of shooting multimedia content.
  • the characteristic information of the multimedia content includes at least one of expression information, action information, script information, sound information, color information, and scene information.
  • the editing information includes: application information for generating multimedia content.
  • the generating module 408 is configured to obtain the multimedia content generation condition data corresponding to the multimedia content template information from the reading object data; use the multimedia content to generate the condition data and the multimedia content template information to generate multimedia content corresponding to the reading object data .
  • the multimedia content generating device of this embodiment further includes a receiving module 410 configured to receive the inputted multimedia content before the generating module 408 generates the multimedia content corresponding to the reading target data according to the multimedia content template information and the reading target data.
  • Multimedia content generation parameters the generation module 408 is configured to generate multimedia content corresponding to the reading target data according to the multimedia content template information, the reading target data, and the multimedia content generating parameters.
  • the multimedia content generating device in this embodiment further includes: a display module 412 configured to display the generated multimedia content through a floating window; or configured to display reading target data in a first area of the display screen, and The second area displays the generated multimedia content.
  • a display module 412 configured to display the generated multimedia content through a floating window; or configured to display reading target data in a first area of the display screen, and The second area displays the generated multimedia content.
  • the multimedia content generating device in this embodiment further includes a transmission module 414 configured to transmit the generated multimedia content through a transmission protocol, wherein the transmission protocol carries multimedia content template information.
  • the multimedia content generating device in this embodiment is configured to implement the corresponding multimedia content generating methods in the foregoing multiple method embodiments, and has the beneficial effects of the corresponding method embodiments, which are not described herein again.
  • FIG. 7 a schematic structural diagram of a device / terminal / server according to Embodiment 5 of the present application is shown.
  • the specific embodiment of the present application does not limit the specific implementation of the device / terminal / server.
  • the device / terminal / server may include a processor 502 and a memory 504.
  • the processor 502 is configured to execute a program 506, and may specifically perform relevant steps in the foregoing embodiment of the method for generating multimedia content.
  • the program 506 may include program code, where the program code includes a computer operation instruction.
  • the processor 502 may be a central processing unit CPU, or an application specific integrated circuit (ASIC), or one or more integrated circuits configured to implement the embodiments of the present application.
  • the device / terminal / server includes one or more processors, which can be processors of the same type, such as one or more CPUs; or different types of processors, such as one or more CPUs and one or more ASICs .
  • the storage device 504 is configured to store one or more programs 506.
  • the storage device 504 may include a high-speed RAM memory, and may also include a non-volatile memory (non-volatile memory), for example, at least one magnetic disk memory.
  • the program 506 may be specifically configured to cause the processor 502 to perform the following operations: obtain reading target data of multimedia content to be generated; analyze the reading target data to obtain characteristic information of the reading target data; and determine multimedia content matching the characteristic information. Template information; according to the multimedia content template information and the reading target data, generating multimedia content corresponding to the reading target data.
  • the multimedia content template information includes: feature information and editing information of shooting multimedia content.
  • the characteristic information of the multimedia content includes at least one of expression information, action information, script information, sound information, color information, and scene information.
  • editing the information includes: generating application information of the multimedia content.
  • the program 506 is further configured to cause the processor 502 to obtain multimedia from the reading target data when generating multimedia content corresponding to the reading target data according to the multimedia content template information and the reading target data.
  • the multimedia content corresponding to the content template information generates condition data; the multimedia content is used to generate condition data and multimedia content template information to generate multimedia content corresponding to the reading target data.
  • the program 506 is further configured to cause the processor 502 to receive input multimedia content generation parameters before generating multimedia content corresponding to the reading object data according to the multimedia content template information and the reading object data;
  • the program 506 is further configured to cause the processor 502 to generate and read the multimedia content corresponding to the reading target data according to the multimedia content template information, the reading target data, and the multimedia content generation parameters according to the multimedia content template information and the reading target data.
  • the program 506 is further configured to cause the processor 502 to display the generated multimedia content through a floating window; or, display the reading target data in a first area of a display screen, and display in the display The second area of the screen displays the generated multimedia content.
  • the program 506 is further configured to cause the processor 502 to transmit the generated multimedia content through a transmission protocol, where the transmission protocol carries the multimedia content template information.
  • the multimedia content template information matching the read target data is determined according to the characteristic information of the read target data, and then the corresponding multimedia content is generated according to the multimedia content template information and the read target data.
  • the multimedia content template information is used to generate multimedia content with a certain pattern, theme, or style.
  • each component / step described in the embodiments of the present application may be split into more components / steps, or two or more components / steps or part of the operations of components / steps may be combined New components / steps to achieve the purpose of the embodiments of the present application.
  • an embodiment of the present application includes a computer program product including a computer program borne on a computer-readable medium, the computer program containing program code for executing the method shown in the multiple method embodiments above.
  • the computer program may be downloaded and installed from a network through a communication section, and / or installed from a removable medium.
  • CPU central processing unit
  • the foregoing functions defined in the method shown in the embodiment of the present application are executed.
  • the computer-readable medium described in this application may be a computer-readable signal medium or a computer-readable storage medium or any combination of the two.
  • the computer-readable storage medium may be, for example, but not limited to, an electronic, magnetic, optical, electromagnetic, infrared, or semiconductor system, apparatus, or device, or any combination thereof. More specific examples of computer-readable storage media may include, but are not limited to: electrical connections with one or more wires, portable computer disks, hard disks, random access storage (RAM), read-only storage (ROM), erasable Type programmable read-only storage device (EPROM or flash memory), optical fiber, portable compact disk read-only storage device (CD-ROM), optical storage device, magnetic storage device, or any suitable combination of the foregoing.
  • a computer-readable storage medium may be any tangible medium that contains or stores a program that can be used by or in combination with an instruction execution system, apparatus, or device.
  • a computer-readable signal medium may include a data signal that is included in baseband or propagated as part of a carrier wave, and which carries computer-readable program code. Such a propagated data signal may take many forms, including but not limited to electromagnetic signals, optical signals, or any suitable combination of the foregoing.
  • the computer-readable signal medium may also be any computer-readable medium other than a computer-readable storage medium, and the computer-readable medium may send, propagate, or transmit a program for use by or in connection with an instruction execution system, apparatus, or device .
  • Program code embodied on a computer-readable medium may be transmitted using any appropriate medium, including but not limited to: wireless, wire, optical fiber cable, RF, etc., or any suitable combination of the foregoing.
  • Computer program code for performing the operations of this application may be written in one or more programming languages, or a combination thereof, including programming languages such as Java, Smalltalk, C ++ also includes conventional procedural programming languages--such as "C" or similar programming languages.
  • the program code can be executed entirely on the user's computer, partly on the user's computer, as an independent software package, partly on the user's computer, partly on a remote computer, or entirely on a remote computer or server.
  • the remote computer can be connected to the user's computer through any kind of network-including local area network (LAN) or wide area network (WAN)-or it can be connected to an external computer (E.g. using an Internet service provider to connect via the Internet).
  • LAN local area network
  • WAN wide area network
  • each block in the flowchart or block diagram may represent a module, a program segment, or a part of code, which contains one or more functions to implement a specified logical function Executable instructions.
  • the functions labeled in the blocks may also occur in a different order than those labeled in the drawings. For example, two blocks represented one after the other may actually be executed substantially in parallel, and they may sometimes be executed in the reverse order, depending on the functions involved.
  • each block in the block diagrams and / or flowcharts, and combinations of blocks in the block diagrams and / or flowcharts can be implemented by a dedicated hardware-based system that performs the specified function or operation , Or it can be implemented with a combination of dedicated hardware and computer instructions.
  • the units described in the embodiments of the present application may be implemented by software or hardware.
  • the described unit may also be provided in a processor, for example, it may be described as: a processor includes a first obtaining unit, a second obtaining unit, a determining unit, and a generating unit.
  • a processor includes a first obtaining unit, a second obtaining unit, a determining unit, and a generating unit.
  • the names of these units do not constitute a limitation on the unit itself in some cases, for example, the determining unit may also be described as a “unit for determining multimedia content template information matching the characteristic information”.
  • the present application also provides a computer-readable storage medium on which a computer program is stored, and when the program is executed by a processor, the method described in any one of the foregoing embodiments is implemented.
  • the present application further provides a computer-readable medium, which may be included in the device described in the foregoing embodiments; or may exist alone without being assembled into the device.
  • the computer-readable medium carries one or more programs, and when the one or more programs are executed by the device, the device causes the device to: obtain reading target data of multimedia content to be generated; analyze the reading target data to obtain Feature information of the reading object data; determining multimedia content template information that matches the feature information; and generating multimedia content corresponding to the reading object data according to the multimedia content template information and the reading object data.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本申请实施例提供了一种多媒体内容生成方法、装置和设备/终端/服务器，其中，多媒体内容生成方法包括：获取待生成多媒体内容的阅读对象数据；对所述阅读对象数据进行分析，获取所述阅读对象数据的特征信息；确定与所述特征信息相匹配的多媒体内容模板信息；根据所述多媒体内容模板信息和所述阅读对象数据，生成与所述阅读对象数据相对应的多媒体内容。通过本申请实施例，极大地丰富了电子阅读方式的内容展示形式，提升了用户阅读体验，有效满足了用户的个性化需求。

Description

多媒体内容生成方法、装置和设备/终端/服务器 技术领域
本申请实施例涉及互联网技术领域，尤其涉及一种多媒体内容生成方法、装置和设备/终端/服务器。
背景技术
随着互联网技术的发展，传统的纸质阅读方式已逐渐被电子阅读方式所取代，人们越来越趋向于利用互联网和计算机技术，通过各种设备/终端/服务器实现电子阅读。
但是，目前的电子阅读方式多局限于文字展示的形式，或者文字和图片相结合展示的形式。例如，通过浏览器网页或者电子书应用展示文字和/或图片。
由上可见，目前的电子阅读方式中内容展示形式单一，无法满足用户对电子阅读的个性化需求。
发明内容
本申请实施例提供了一种多媒体内容生成方法、装置和设备/终端/服务器，以解决上述现有技术中电子阅读方式内容展示形式单一，无法满足用户个性化需求的问题。
根据本申请实施例的一个方面，提供了一种多媒体内容生成方法，包括：获取待生成多媒体内容的阅读对象数据；对所述阅读对象数据进行分析，获取所述阅读对象数据的特征信息；确定与所述特征信息相匹配的多媒体内容模板信息；根据所述多媒体内容模板信息和所述阅读对象数据，生成与所述阅读对象数据相对应的多媒体内容。
根据本申请实施例的另一个方面，还提供了一种多媒体内容生成装置，包括：第一获取模块，配置为获取待生成多媒体内容的阅读对象数据；第二获取模块，配置为对所述阅读对象数据进行分析，获取所述阅读对象数据的特征信息；确定模块，配置为确定与所述特征信息相匹配的多媒体内容模板信息；生成模块，配置为根据所述多媒体内容模板信息和所述阅读对象数据，生成与所述阅读对象数据相对应的多媒体内容。
根据本申请实施例的又一个方面，还提供了一种设备/终端/服务器，包括：一个或多个处理器；存储装置，配置为存储一个或多个程序；当 所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如上所述的多媒体内容生成方法。。
根据本申请实施例的再一个方面，还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如上所述的多媒体内容生成方法。
通过本申请实施例提供的技术方案，根据阅读对象数据的特征信息确定与其匹配的多媒体内容模板信息，进而依据该多媒体内容模板信息和阅读对象数据生成对应的多媒体内容。其中，多媒体内容模板信息用于生成一定模式或主题或风格的多媒体内容。通过本申请实施例，用户在采用电子阅读方式进行阅读时，不仅可以实现文字和/或图片等静态内容的阅读，还可以实现动态的多媒体内容的观看，极大地丰富了电子阅读方式的内容展示形式，提升了用户阅读体验，有效满足了用户的个性化需求。
附图说明
图1是根据本申请实施例一的一种多媒体内容生成方法的步骤流程图；
图2是根据本申请实施例二的一种多媒体内容生成方法的步骤流程图；
图3是图2所示实施例中的一种多媒体内容的展示界面示意图；
图4是图2所示实施例中的另一种多媒体内容的展示界面示意图；
图5是根据本申请实施例三的一种多媒体内容生成装置的结构框图；
图6是根据本申请实施例四的一种多媒体内容生成装置的结构框图；
图7是根据本申请实施例五的一种设备/终端/服务器的结构示意图。
具体实施方式
下面结合附图(若干附图中相同的标号表示相同的元素)和实施例，对本申请实施例的具体实施方式作进一步详细说明。以下实施例用于说明本申请，但不用来限制本申请的范围。
本领域技术人员可以理解，本申请实施例中的“第一”、“第二”等术语仅用于区别不同步骤、设备或模块等，既不代表任何特定技术含义，也不表示它们之间的必然逻辑顺序。
实施例一
参照图1，示出了根据本申请实施例一的一种多媒体内容生成方法的步骤流程图。
本实施例的多媒体内容生成方法包括以下步骤：
步骤S102：获取待生成多媒体内容的阅读对象数据。
其中，所述阅读对象数据包括但不限于：可以通过电子阅读方式阅读的数据如文字、图片等；所述待生成的多媒体内容可以包括但不限于：动态图像、音频、视频、AR、特效等中的一种或多种(两种及两种以上)。
步骤S104：对阅读对象数据进行分析，获取阅读对象数据的特征信息。
阅读对象数据的特征信息用于表征阅读对象数据的特征，例如，对于文字数据可以是其中的多个关键词或多个分词；对于图片数据可以是图片特征点的信息，等等。
本申请实施例中，可以由本领域技术人员采用任意适当的方式对阅读对象数据进行分析，以获取其特征信息，如自然语言处理方式、支持向量机方式、神经网络方式等等，本申请实施例对此不作限制。
步骤S106：确定与所述特征信息相匹配的多媒体内容模板信息。
根据阅读对象数据的特征信息可以确定与其相匹配的多媒体内容模板信息，本领域技术人员可以采用适当的方式实现对所述特征信息与所述多媒体内容模板信息是否匹配的确定。可选地，多媒体内容模板信息也可以对应有相应的特征信息或关键信息，以确定与阅读对象数据的特征信息的匹配程度。
多媒体内容模板信息用于提供具有一定规则的拍摄模板的信息，以供生成具有相应主题或风格或模式的多媒体内容，如，各种魔法表情模板、各种场景或剧情模板，等等。多媒体内容模板信息除具有一定规则外，可选地，还可以包括设定的文字、图像、音频、视频中的至少一种。
多媒体内容模板信息可以存储于本地和/或服务器中，若多媒体内容模板信息存储于本地，则在后续步骤中可以直接使用本地存储的模板信息；若本地没有存储模板信息，则可以从服务器中下载模板信息至本地后再使用。将多媒体内容模板信息存储于本地，使用方便；将多媒体内容模板信息存储于服务器中，可以在需要时从服务器获取，节省了本地 存储资源和系统消耗。
步骤S108：根据多媒体内容模板信息和阅读对象数据，生成与阅读对象数据相对应的多媒体内容。
在确定了多媒体内容模板信息后，可以使用阅读对象数据中的一部分或全部生成该模板信息要求的内容，并与该模板信息对应的内容相结合，生成最终的与阅读对象数据相对应的多媒体内容。
通过本实施例，根据阅读对象数据的特征信息确定与其匹配的多媒体内容模板信息，进而依据该多媒体内容模板信息和阅读对象数据生成对应的多媒体内容。其中，多媒体内容模板信息用于生成一定模式或主题或风格的多媒体内容。通过本申请实施例，用户在采用电子阅读方式进行阅读时，不仅可以实现文字和/或图片等静态内容的阅读，还可以实现动态的多媒体内容的观看，极大地丰富了电子阅读方式的内容展示形式，提升了用户阅读体验，有效满足了用户的个性化需求。
本实施例的多媒体内容生成方法可以由任意适当的具有数据处理能力的设备执行，包括但不限于：各种终端设备或者服务器，如，PC机、平板电脑、移动终端等。
实施例二
参照图2，示出了根据本申请实施例二的一种多媒体内容生成方法的步骤流程图。
本实施例的多媒体内容生成方法包括以下步骤：
步骤S202：获取待生成多媒体内容的阅读对象数据。
如前所述，所述阅读对象数据包括但不限于：可以通过电子阅读方式阅读的数据如文字、图片等；所述待生成的多媒体内容可以包括但不限于：动态图像、音频、视频、AR、特效等中的一种或多种(两种及两种以上)。
步骤S204：对阅读对象数据进行分析，获取阅读对象数据的特征信息。
本领域技术人员可以采用任意适当的方式对阅读对象数据进行分析，以获取其特征信息。
步骤S206：确定与阅读对象数据的特征信息相匹配的多媒体内容模 板信息。
如实施例一中所述，多媒体内容模板信息用于提供具有一定规则的拍摄模板的信息，以供生成具有相应主题或风格或模式的多媒体内容。可选地，多媒体内容模板信息可以包括：拍摄多媒体内容的特征信息和编辑信息。
其中，特征信息表征了多媒体内容的拍摄模板的特征，可选地，所述特征信息可以包括：表情信息、动作信息、剧本信息、声音信息、色彩信息、场景信息中的至少一种。例如，所述表情信息包括用户拍摄和/或编辑魔法表情的应用软件和/或表情内容；所述动作信息包括用户拍摄和/或编辑魔法动作的应用软件和/或动作内容；所述剧本信息包括用户拍摄和/或编辑视频的应用软件和/或剧情内容；所述声音信息包括用户录制和/或编辑音频的应用软件和/或声音内容；所述色彩信息包括用户拍摄和/或编辑视频的应用软件和/或色彩内容；所述场景信息包括用户拍摄和/或编辑视频的应用软件和/或场景内容。
编辑信息表征了使用多媒体内容的拍摄模板进行多媒体内容编辑的信息，可选地，所述编辑信息可以包括：生成所述多媒体内容的应用程序信息。例如，所述编辑信息可以包括所述多媒体内容的拍摄应用程序和/或编辑应用程序；可选地，所述编辑信息还可以包括所述多媒体内容的拍摄应用程序和/或编辑应用程序以外其他可以实现同样拍摄和/或编辑的类似应用程序；进一步可选地，所述编辑信息还可以包括所述多媒体内容的拍摄和/或编辑手段。例如，曝光时长、光圈选择、色彩调教、人物空间分配、拍摄角度、光线选择、人物动作等。
通过上述特征信息和编辑信息，即可获取多媒体内容模板信息。多媒体内容接收方可以根据获得的所述模板信息进行本地的多媒体内容生成操作，也可以根据获得的所述模板信息对接收的或待生成多媒体内容的元素进行编辑处理，也可以根据获得的所述模板信息先对待生成多媒体内容的元素进行拍摄后再根据获得的所述模板信息对这些元素进行相应的编辑处理，还可以先对模板信息进行编辑处理后进行本地的多媒体内容生成操作，还可以先对模板信息进行编辑处理，再对待生成多媒体内容的元素进行编辑处理，然后再进行本地的多媒体内容生成操作。无需多媒体内容生成方用户下载和/或安装相应的多媒体内容生成程序或应用，减轻了用户负担，提高了多媒体内容生成、交互和分享效率。
例如，多媒体内容接收方通过解析所述传输协议，获得魔法表情视频对应的模板信息，例如包括魔法表情视频所采用的拍摄应用程序以及拍摄手段和表情内容的信息。多媒体内容接收方无需安装拍摄和/或编辑应用程序，即可根据所述模板信息登录服务器来通过所述拍摄应用程序，利用所述拍摄手段拍摄同样的一段魔法表情视频，进一步地，还可以将拍摄的所述魔法表情视频分享至其它用户。当然其它用户也可以选择将所述魔法表情拍摄和/或编辑应用程序下载至本地实现魔法表情视频的拍摄和/或编辑。
再例如，多媒体内容接收方通过解析所述传输协议，获得剧情视频对应的模板信息，例如包括所述剧情视频所采用的拍摄应用程序以及拍摄手段和剧本内容。多媒体内容接收方无需安装拍摄和/或编辑应用程序，即可根据所述模板信息登录服务器来通过所述拍摄应用程序，利用所述拍摄手段按照所述剧本拍摄同样的一段视频，进一步地，还可以将拍摄的所述视频分享至其它用户。当然其它用户也可以选择将所述拍摄和/或编辑应用程序下载至本地实现视频的拍摄和/或编辑。
步骤S208：根据多媒体内容模板信息和阅读对象数据，生成与阅读对象数据相对应的多媒体内容。
生成的多媒体内容可以包括但不限于：动态图像、音频、视频、AR、特效等中的一种或多种(两种及两种以上)。
在确定了多媒体内容模板信息后，即可以根据该模板信息从阅读对象数据中获取生成多媒体内容所需要的数据，进而结合多媒体内容模板信息和获取的所需要的数据，生成多媒体内容。例如，可以根据模板信息中的声音信息进行阅读对象数据的朗读，实现有声阅读对象；再例如，可以获取阅读对象数据中对某个人物的表情或动作的描述，根据该描述使用模板信息中的表情信息和/或动作信息生成相应的魔法表情和/或魔法动作；又例如，可以根据模板信息中的剧本信息、色彩信息和场景信息中的至少一种，结合阅读对象数据，生成一段情景短视频，等等。
在一种可行方式中，在实现本步骤时，可以从阅读对象数据中，获取多媒体内容模板信息对应的多媒体内容生成条件数据；使用多媒体内容生成条件数据和多媒体内容模板信息，生成与阅读对象数据相对应的多媒体内容。例如，在生成魔法表情和/或动作时，可能根据阅读对象数据中对人物的表情和/或动作的描述即可实现，也即，多媒体内容模板信 息可能会从所有阅读对象数据中筛选出其所需的数据即多媒体内容生成条件数据，进而，根据这些数据结合模板信息即可生成多媒体内容。
在另一种可行方式中，在本步骤根据多媒体内容模板信息和阅读对象数据，生成与阅读对象数据相对应的多媒体内容之前，还可以接收输入的多媒体内容生成参数。例如，用户通过界面设置输入的多媒体内容生成参数，包括但不限于：人物(包括真实人物和虚拟人物)参数、性别参数、场景参数、以及其它由本领域技术人员根据实际需求设置的参数等等。
基于此，在根据多媒体内容模板信息和阅读对象数据，生成与阅读对象数据相对应的多媒体内容时，可以根据多媒体内容模板信息、阅读对象数据和多媒体内容生成参数，生成与阅读对象数据相对应的多媒体内容。例如，在根据多媒体内容模板信息中的场景信息生成情景视频时，用户选择或输入了某一特定人物(如某个明星)的姓名，则可以获取该特定人物的虚拟图像，对其处理后与模板信息相结合，生成相应的情景视频；再例如，在根据多媒体内容模板信息中的声音信息生成语音阅读对象时，用户选择或输入了某一特定人物(如某个著名朗读者)的姓名，则可以获取该特定人物的真实声音或合成声音，对其处理后与模板信息相结合，生成相应的语音阅读对象；又例如，在根据多媒体内容模板信息中的剧本信息和/或场景信息生成情景视频时，用户选择或输入了某一场景参数如“海边”，则生成的情景视频将会以海边为场景，等等。通过多媒体内容生成参数，为用户提供了更高的多媒体内容参与程度，用户可以根据自己的喜好选择生成多媒体内容的元素，提升了用户使用体验。
步骤S210：显示生成的多媒体内容。
包括但不限于：通过悬浮窗显示生成的多媒体内容；或者，在显示屏幕的第一区域显示阅读对象数据，在显示屏幕的第二区域显示生成的多媒体内容(如将阅读对象数据和多媒体内容数据分屏显示或者在显示阅读对象数据和多媒体内容之外，还可以显示其它适当内容或数据)。
一种通过悬浮窗方式显示的多媒体内容的界面如图3所示，由图3中可见，悬浮窗悬浮于阅读对象数据上层，可进行常规的悬浮窗口操作如拖拽、调整大小、隐藏、关闭等，悬浮窗中显示的内容为根据阅读对象数据和多媒体内容模板信息生成的一段短视频中的一帧画面。通过悬浮窗的方式显示灵活，方便用户进行显示窗口调整。
一种通过分屏方式显示的多媒体内容的界面如图4所示，由图4中可见，阅读对象数据在显示屏幕的上半屏显示，多媒体内容在显示屏幕的下半屏显示，下半屏显示的多媒体内容为根据阅读对象数据和多媒体内容模板信息生成的一段短视频中的一帧画面。通过在显示屏幕不同区域显示的方式，可以有较大的多媒体内容显示空间，且可以与阅读对象数据对照查看，提升了阅读体验。
当然，不限于上述显示方式，在实际应用中，本领域技术人员还可以根据实际需求采用任意适当的方式显示生成的多媒体内容，如全屏显示方式等。
步骤S212：通过传输协议传输生成的多媒体内容。
例如，通过传输协议将生成的多媒体内容传输给特定范围或非特定范围的其它用户以进行分享。
其中，所述传输协议中携带有多媒体内容模板信息。将多媒体内容模板信息携带在传输协议中，多媒体内容的接收方无需安装生成多媒体内容的应用软件即可获取相应的模板信息，进而可以根据用户操作生成与接收的多媒体内容对应或匹配的本地多媒体内容，在减轻多媒体内容接收方操作负担的同时，也实现了用户之间有效的信息交互。
其中，可以携带模板信息的传输协议可以是任意适当的协议，包括但不限于HTTP协议。例如，多媒体内容发送方将多媒体模板信息进行编码，如，分别对“魔法表情：A”，“美颜：开”、“音乐：X”进行编码，并将这些编码信息携带在HTTP协议中，多媒体内容接收方通过对该传输协议的解析，获取其中的编码信息，进而，依据该编码信息从相应服务器中获得对应的模板信息，然后，即可根据该模板信息进行相应的操作。其中，具体的编码规则和方式可以由本领域技术人员根据实际情况和使用的传输协议的需求，采用任意适当方式实现，本申请实施例对此不作限制。
例如，多媒体内容接收方可以通过解析接收到的多媒体内容所采用的传输协议，获得多媒体内容拍摄的特征信息与编辑信息，根据所述特征信息与所述编辑信息，获得多媒体内容模板信息。进而，多媒体内容接收方可以在需要时，根据接收方的阅读对象数据和获得的该模板信息，生成类似或相匹配的多媒体内容。
需要说明的是，本步骤为可选步骤，在实际应用中，本领域技术人 员也可以通过其它适当方式将生成的多媒体内容和多媒体内容模板信息分享给他人。
通过本实施例，根据阅读对象数据的特征信息确定与其匹配的多媒体内容模板信息，进而依据该多媒体内容模板信息和阅读对象数据生成对应的多媒体内容。其中，多媒体内容模板信息用于生成一定模式或主题或风格的多媒体内容。通过本申请实施例，用户在采用电子阅读方式进行阅读时，不仅可以实现文字和/或图片等静态内容的阅读，还可以实现动态的多媒体内容的观看，极大地丰富了电子阅读方式的内容展示形式，提升了用户阅读体验，有效满足了用户的个性化需求。
本实施例的多媒体内容生成方法可以由任意适当的具有数据处理能力的设备执行，包括但不限于：各种终端设备或者服务器，如，PC机、平板电脑、移动终端等。
实施例三
参照图5，示出了根据本申请实施例三的一种多媒体内容生成装置的结构框图。
本实施例的多媒体内容生成装置包括：第一获取模块302，配置为获取待生成多媒体内容的阅读对象数据；第二获取模块304，配置为对阅读对象数据进行分析，获取阅读对象数据的特征信息；确定模块306，配置为确定与所述特征信息相匹配的多媒体内容模板信息；生成模块308，配置为根据多媒体内容模板信息和阅读对象数据，生成与阅读对象数据相对应的多媒体内容。
本实施例的多媒体内容生成装置用于实现前述多个方法实施例中相应的多媒体内容生成方法，并具有相应方法实施例的有益效果，在此不再赘述。
实施例四
参照图6，示出了根据本申请实施例四的一种多媒体内容生成装置的结构框图。
本实施例的多媒体内容生成装置包括：第一获取模块402，配置为获取待生成多媒体内容的阅读对象数据；第二获取模块404，配置为对阅读 对象数据进行分析，获取阅读对象数据的特征信息；确定模块406，配置为确定与所述特征信息相匹配的多媒体内容模板信息；生成模块408，配置为根据多媒体内容模板信息和阅读对象数据，生成与阅读对象数据相对应的多媒体内容。
可选地，多媒体内容模板信息包括：拍摄多媒体内容的特征信息和编辑信息。
可选地，多媒体内容的特征信息包括：表情信息、动作信息、剧本信息、声音信息、色彩信息、场景信息中的至少一种。
可选地，编辑信息包括：生成多媒体内容的应用程序信息。
可选地，生成模块408配置为从阅读对象数据中，获取多媒体内容模板信息对应的多媒体内容生成条件数据；使用多媒体内容生成条件数据和多媒体内容模板信息，生成与阅读对象数据相对应的多媒体内容。
可选地，本实施例的多媒体内容生成装置还包括：接收模块410，配置为在生成模块408根据多媒体内容模板信息和阅读对象数据，生成与阅读对象数据相对应的多媒体内容之前，接收输入的多媒体内容生成参数；生成模块408配置为根据多媒体内容模板信息、阅读对象数据和多媒体内容生成参数，生成与阅读对象数据相对应的多媒体内容。
可选地，本实施例的多媒体内容生成装置还包括：显示模块412，配置为通过悬浮窗显示生成的多媒体内容；或者，配置为在显示屏幕的第一区域显示阅读对象数据，在显示屏幕的第二区域显示生成的多媒体内容。
可选地，本实施例的多媒体内容生成装置还包括：传输模块414，配置为通过传输协议传输生成的多媒体内容，其中，所述传输协议中携带有多媒体内容模板信息。
本实施例的多媒体内容生成装置用于实现前述多个方法实施例中相应的多媒体内容生成方法，并具有相应方法实施例的有益效果，在此不再赘述。
实施例五
参照图7，示出了根据本申请实施例五的一种设备/终端/服务器的结构示意图，本申请具体实施例并不对设备/终端/服务器的具体实现做限定。
如图7所示，该设备/终端/服务器可以包括：处理器(processor)502、存储装置(memory)504。
其中：
处理器502，配置为执行程序506，具体可以执行上述多媒体内容生成方法实施例中的相关步骤。
具体地，程序506可以包括程序代码，该程序代码包括计算机操作指令。
处理器502可能是中央处理器CPU，或者是特定集成电路ASIC(Application Specific Integrated Circuit)，或者是被配置成实施本申请实施例的一个或多个集成电路。设备/终端/服务器包括的一个或多个处理器，可以是同一类型的处理器，如一个或多个CPU；也可以是不同类型的处理器，如一个或多个CPU以及一个或多个ASIC。
存储装置504，配置为存放一个或多个程序506。存储装置504可能包含高速RAM存储器，也可能还包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。
程序506具体可以用于使得处理器502执行以下操作：获取待生成多媒体内容的阅读对象数据；对阅读对象数据进行分析，获取阅读对象数据的特征信息；确定与所述特征信息相匹配的多媒体内容模板信息；根据多媒体内容模板信息和阅读对象数据，生成与阅读对象数据相对应的多媒体内容。
在一种可选的实施方式中，多媒体内容模板信息包括：拍摄多媒体内容的特征信息和编辑信息。
在一种可选的实施方式中，多媒体内容的特征信息包括：表情信息、动作信息、剧本信息、声音信息、色彩信息、场景信息中的至少一种。
在一种可选的实施方式中，编辑信息包括：生成所述多媒体内容的应用程序信息。
在一种可选的实施方式中，程序506还用于使得处理器502在根据多媒体内容模板信息和阅读对象数据，生成与阅读对象数据相对应的多媒体内容时，从阅读对象数据中，获取多媒体内容模板信息对应的多媒体内容生成条件数据；使用多媒体内容生成条件数据和多媒体内容模板信息，生成与阅读对象数据相对应的多媒体内容。
在一种可选的实施方式中，程序506还用于使得处理器502在根据多媒体内容模板信息和阅读对象数据，生成与阅读对象数据相对应的多媒体内容之前，接收输入的多媒体内容生成参数；程序506还用于使得处理器502在根据多媒体内容模板信息和阅读对象数据，生成与阅读对象数据相对应的多媒体内容时，根据多媒体内容模板信息、阅读对象数据和多媒体内容生成参数，生成与阅读对象数据相对应的多媒体内容。
在一种可选的实施方式中，程序506还用于使得处理器502通过悬浮窗显示生成的所述多媒体内容；或者，在显示屏幕的第一区域显示所述阅读对象数据，在所述显示屏幕的第二区域显示生成的所述多媒体内容。
在一种可选的实施方式中，程序506还用于使得处理器502通过传输协议传输生成的所述多媒体内容，其中，所述传输协议中携带有所述多媒体内容模板信息。
程序506中各步骤的具体实现可以参见上述多媒体内容生成方法实施例中的相应步骤和单元中对应的描述，在此不赘述。所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的设备和模块的具体工作过程，可以参考前述方法实施例中的对应过程描述，在此不再赘述。
通过本实施例的设备/终端/服务器，根据阅读对象数据的特征信息确定与其匹配的多媒体内容模板信息，进而依据该多媒体内容模板信息和阅读对象数据生成对应的多媒体内容。其中，多媒体内容模板信息用于生成一定模式或主题或风格的多媒体内容。通过本申请实施例，用户在采用电子阅读方式进行阅读时，不仅可以实现文字和/或图片等静态内容的阅读，还可以实现动态的多媒体内容的观看，极大地丰富了电子阅读方式的内容展示形式，提升了用户阅读体验，有效满足了用户的个性化需求。
需要指出，根据实施的需要，可将本申请实施例中描述的各个部件/步骤拆分为更多部件/步骤，也可将两个或多个部件/步骤或者部件/步骤的部分操作组合成新的部件/步骤，以实现本申请实施例的目的。
特别地，根据本申请实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本申请实施例包括一种计算机程序产品， 其包括承载在计算机可读介质上的计算机程序，该计算机程序包含用于执行上文多个方法实施例中所示的方法的程序代码。在这样的实施例中，该计算机程序可以通过通信部分从网络上被下载和安装，和/或从可拆卸介质被安装。在该计算机程序被中央处理单元(CPU)执行时，执行本申请实施例示出的方法中限定的上述功能。需要说明的是，本申请所述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是，但不限于，电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储装置(RAM)、只读存储装置(ROM)、可擦式可编程只读存储装置(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储装置(CD-ROM)、光存储装置件、磁存储装置件、或者上述的任意合适的组合。在本申请中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本申请中，计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：无线、电线、光缆、RF等等，或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本申请的操作的计算机程序代码，所述程序设计语言包括面向对象的程序设计语言------诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言------诸如”C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络------包括局域网(LAN)或广域网(WAN)------连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商 来通过因特网连接)。
附图中的流程图和框图，图示了按照本申请各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
描述于本申请实施例中所涉及到的单元可以通过软件的方式实现，也可以通过硬件的方式来实现。所描述的单元也可以设置在处理器中，例如，可以描述为：一种处理器包括第一获取单元、第二获取单元、确定单元和生成单元。其中，这些单元的名称在某种情况下并不构成对该单元本身的限定，例如，确定单元还可以被描述为“确定与所述特征信息相匹配的多媒体内容模板信息的单元”。
作为另一方面，本申请还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如上述任一实施例所描述的方法。
作为另一方面，本申请还提供了一种计算机可读介质，该计算机可读介质可以是上述实施例中描述的装置中所包含的；也可以是单独存在，而未装配入该装置中。上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被该装置执行时，使得该装置：获取待生成多媒体内容的阅读对象数据；对所述阅读对象数据进行分析，获取所述阅读对象数据的特征信息；确定与所述特征信息相匹配的多媒体内容模板信息；根据所述多媒体内容模板信息和所述阅读对象数据，生成与所述阅读对象数据相对应的多媒体内容。
以上描述仅为本申请的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解，本申请中所涉及的发明范围，并不限于上述技术特征的特定组合而成的技术方案，同时也应涵盖在不脱离上述发明 构思的情况下，由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本申请中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (18)

  1. 一种多媒体内容生成方法，其特征在于，包括：
    获取待生成多媒体内容的阅读对象数据；
    对所述阅读对象数据进行分析，获取所述阅读对象数据的特征信息；
    确定与所述特征信息相匹配的多媒体内容模板信息；
    根据所述多媒体内容模板信息和所述阅读对象数据，生成与所述阅读对象数据相对应的多媒体内容。
  2. 根据权利要求1所述的方法，其特征在于，所述多媒体内容模板信息包括：拍摄多媒体内容的特征信息和编辑信息。
  3. 根据权利要求2所述的方法，其特征在于，所述多媒体内容的特征信息包括：表情信息、动作信息、剧本信息、声音信息、色彩信息、场景信息中的至少一种。
  4. 根据权利要求2所述的方法，其特征在于，所述编辑信息包括：生成所述多媒体内容的应用程序信息。
  5. 根据权利要求2-4任一项所述的方法，其特征在于，所述根据所述多媒体内容模板信息和所述阅读对象数据，生成与所述阅读对象数据相对应的多媒体内容，包括：
    从所述阅读对象数据中，获取所述多媒体内容模板信息对应的多媒体内容生成条件数据；
    使用所述多媒体内容生成条件数据和所述多媒体内容模板信息，生成与所述阅读对象数据相对应的多媒体内容。
  6. 根据权利要求1-5任一项所述的方法，其特征在于，
    在所述根据所述多媒体内容模板信息和所述阅读对象数据，生成与所述阅读对象数据相对应的多媒体内容之前，所述方法还包括：接收输入的多媒体内容生成参数；
    所述根据所述多媒体内容模板信息和所述阅读对象数据，生成与所述阅读对象数据相对应的多媒体内容，包括：根据所述多媒体内容模板信息、所述阅读对象数据和所述多媒体内容生成参数，生成与所述阅读对象数据相对应的多媒体内容。
  7. 根据权利要求1-6任一项所述的方法，其特征在于，所述方法还包括：
    通过悬浮窗显示生成的所述多媒体内容；
    或者，
    在显示屏幕的第一区域显示所述阅读对象数据，在所述显示屏幕的第二区域显示生成的所述多媒体内容。
  8. 根据权利要求1-7任一项所述的方法，其特征在于，所述方法还包括：
    通过传输协议传输生成的所述多媒体内容，其中，所述传输协议中携带有所述多媒体内容模板信息。
  9. 一种多媒体内容生成装置，其特征在于，包括：
    第一获取模块，配置为获取待生成多媒体内容的阅读对象数据；
    第二获取模块，配置为对所述阅读对象数据进行分析，获取所述阅读对象数据的特征信息；
    确定模块，配置为确定与所述特征信息相匹配的多媒体内容模板信息；
    生成模块，配置为根据所述多媒体内容模板信息和所述阅读对象数据，生成与所述阅读对象数据相对应的多媒体内容。
  10. 根据权利要求9所述的装置，其特征在于，所述多媒体内容模板信息包括：拍摄多媒体内容的特征信息和编辑信息。
  11. 根据权利要求10所述的装置，其特征在于，所述多媒体内容的特征信息包括：表情信息、动作信息、剧本信息、声音信息、色彩信息、场景信息中的至少一种。
  12. 根据权利要求10所述的装置，其特征在于，所述编辑信息包括：生成所述多媒体内容的应用程序信息。
  13. 根据权利要求10-12任一项所述的装置，其特征在于，所述生成模块，配置为从所述阅读对象数据中，获取所述多媒体内容模板信息对应的多媒体内容生成条件数据；使用所述多媒体内容生成条件数据和所述多媒体内容模板信息，生成与所述阅读对象数据相对应的多媒体内容。
  14. 根据权利要求9-14任一项所述的装置，其特征在于，
    所述装置还包括：接收模块，配置为在所述生成模块根据所述多媒 体内容模板信息和所述阅读对象数据，生成与所述阅读对象数据相对应的多媒体内容之前，接收输入的多媒体内容生成参数；
    所述生成模块，配置为根据所述多媒体内容模板信息、所述阅读对象数据和所述多媒体内容生成参数，生成与所述阅读对象数据相对应的多媒体内容。
  15. 根据权利要求9-14任一项所述的装置，其特征在于，所述装置还包括：
    显示模块，配置为通过悬浮窗显示生成的所述多媒体内容；或者，配置为在显示屏幕的第一区域显示所述阅读对象数据，在所述显示屏幕的第二区域显示生成的所述多媒体内容。
  16. 根据权利要求9-15任一项所述的装置，其特征在于，所述装置还包括：
    传输模块，配置为通过传输协议传输生成的所述多媒体内容，其中，所述传输协议中携带有所述多媒体内容模板信息。
  17. 一种设备/终端/服务器，包括：
    一个或多个处理器；
    存储装置，配置为存储一个或多个程序；
    当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-8中任一所述的方法。
  18. 一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如权利要求1-8中任一所述的方法。
PCT/CN2018/089360 2018-05-31 2018-05-31 多媒体内容生成方法、装置和设备/终端/服务器 Ceased WO2019227429A1 (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201880001151.5A CN109496295A (zh) 2018-05-31 2018-05-31 多媒体内容生成方法、装置和设备/终端/服务器
PCT/CN2018/089360 WO2019227429A1 (zh) 2018-05-31 2018-05-31 多媒体内容生成方法、装置和设备/终端/服务器
PH12018502029A PH12018502029A1 (en) 2018-05-31 2018-09-21 Method and apparatus for generating multimedia content, and device/terminal/server therefor
US16/138,906 US20190371023A1 (en) 2018-05-31 2018-09-21 Method and apparatus for generating multimedia content, and device therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2018/089360 WO2019227429A1 (zh) 2018-05-31 2018-05-31 多媒体内容生成方法、装置和设备/终端/服务器

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US16/138,906 Continuation US20190371023A1 (en) 2018-05-31 2018-09-21 Method and apparatus for generating multimedia content, and device therefor

Publications (1)

Publication Number Publication Date
WO2019227429A1 true WO2019227429A1 (zh) 2019-12-05

Family

ID=65713841

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2018/089360 Ceased WO2019227429A1 (zh) 2018-05-31 2018-05-31 多媒体内容生成方法、装置和设备/终端/服务器

Country Status (4)

Country Link
US (1) US20190371023A1 (zh)
CN (1) CN109496295A (zh)
PH (1) PH12018502029A1 (zh)
WO (1) WO2019227429A1 (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110262716B (zh) * 2019-06-13 2024-05-24 腾讯科技（深圳）有限公司 一种数据操作方法、装置以及计算机可读存储介质
CN110381266A (zh) * 2019-07-31 2019-10-25 百度在线网络技术（北京）有限公司 一种视频生成方法、装置以及终端
CN111866587A (zh) * 2020-07-30 2020-10-30 口碑(上海)信息技术有限公司 短视频的生成方法及装置
CN112308172B (zh) * 2020-12-24 2022-04-01 北京达佳互联信息技术有限公司 一种识别方法、装置及电子设备
CN114697730B (zh) * 2020-12-28 2024-08-16 阿里巴巴集团控股有限公司 视频处理方法、装置、存储介质及计算机设备
CN114968609A (zh) * 2021-02-27 2022-08-30 华为技术有限公司 媒体资源收藏方法、电子设备及存储介质
CN115414667B (zh) * 2021-10-28 2025-09-09 北京完美赤金科技有限公司 游戏内的界面交互方法及装置、存储介质、计算机设备
US12340823B2 (en) 2023-05-29 2025-06-24 International Business Machines Corporation Accelerated video editing
CN117437320A (zh) * 2023-11-27 2024-01-23 北京字跳网络技术有限公司 图像生成方法、装置和非易失性计算机可读存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020052976A1 (en) * 2000-10-30 2002-05-02 Jochen Loesch Method for generating multimedia projects
US8489609B1 (en) * 2006-08-08 2013-07-16 CastTV Inc. Indexing multimedia web content
CN104244032A (zh) * 2014-09-11 2014-12-24 腾讯科技（深圳）有限公司 推送多媒体数据的方法和装置
CN105373567A (zh) * 2014-09-01 2016-03-02 北京奇虎科技有限公司 页面生成方法及客户端
CN106713896A (zh) * 2016-11-30 2017-05-24 世优（北京）科技有限公司 静态图像的多媒体呈现方法、装置和系统

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080201361A1 (en) * 2007-02-16 2008-08-21 Alexander Castro Targeted insertion of an audio - video advertising into a multimedia object
US9940307B2 (en) * 2012-12-31 2018-04-10 Adobe Systems Incorporated Augmenting text with multimedia assets
US20160064033A1 (en) * 2014-08-26 2016-03-03 Microsoft Corporation Personalized audio and/or video shows
CN104731959B (zh) * 2015-04-03 2017-10-17 北京威扬科技有限公司 基于文本的网页内容生成视频摘要的方法、装置及系统
US10387570B2 (en) * 2015-08-27 2019-08-20 Lenovo (Singapore) Pte Ltd Enhanced e-reader experience
CN105118081B (zh) * 2015-09-15 2018-05-01 北京金山安全软件有限公司 图片合成视频的处理方法和装置
CN107517323B (zh) * 2017-09-08 2019-12-24 咪咕数字传媒有限公司 一种信息分享方法、装置及存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020052976A1 (en) * 2000-10-30 2002-05-02 Jochen Loesch Method for generating multimedia projects
US8489609B1 (en) * 2006-08-08 2013-07-16 CastTV Inc. Indexing multimedia web content
CN105373567A (zh) * 2014-09-01 2016-03-02 北京奇虎科技有限公司 页面生成方法及客户端
CN104244032A (zh) * 2014-09-11 2014-12-24 腾讯科技（深圳）有限公司 推送多媒体数据的方法和装置
CN106713896A (zh) * 2016-11-30 2017-05-24 世优（北京）科技有限公司 静态图像的多媒体呈现方法、装置和系统

Also Published As

Publication number Publication date
CN109496295A (zh) 2019-03-19
PH12018502029A1 (en) 2019-07-08
US20190371023A1 (en) 2019-12-05

Similar Documents

Publication Publication Date Title
WO2019227429A1 (zh) 多媒体内容生成方法、装置和设备/终端/服务器
CN110085244B (zh) 直播互动方法、装置、电子设备及可读存储介质
US12271578B2 (en) Audio sharing method and apparatus, device and medium
US11670015B2 (en) Method and apparatus for generating video
US20200234483A1 (en) Systems and methods for generating personalized videos with customized text messages
CN110070896B (zh) 图像处理方法、装置、硬件装置
CN109189544B (zh) 用于生成表盘的方法和装置
WO2023125374A1 (zh) 图像处理方法、装置、电子设备及存储介质
US20240112702A1 (en) Method and apparatus for template recommendation, device, and storage medium
CN116847147A (zh) 特效视频确定方法、装置、电子设备及存储介质
JP7732004B2 (ja) ビデオ生成方法、装置、デバイス、記憶媒体およびプログラム製品
CN113778419A (zh) 多媒体数据的生成方法、装置、可读介质及电子设备
WO2021057740A1 (zh) 视频生成方法、装置、电子设备和计算机可读介质
CN112738634A (zh) 视频文件的生成方法、装置、终端及存储介质
KR20180111981A (ko) 제한된 상호 작용을 갖는 실시간 콘텐츠 편집
CN115981769A (zh) 页面显示方法、装置、设备、计算机可读存储介质及产品
CN112364144A (zh) 交互方法、装置、设备和计算机可读介质
CN112308950A (zh) 视频生成方法及装置
WO2023024803A1 (zh) 动态封面生成方法、装置、电子设备、介质及程序产品
US20240040069A1 (en) Image special effect configuration method, image recognition method, apparatus and electronic device
CN110415318B (zh) 图像处理方法和装置
CN118018664A (zh) 视频处理方法、装置、电子设备及存储介质
CN113282770A (zh) 一种多媒体推荐系统及方法
CN110062116A (zh) 用于处理信息的方法和设备
CN108713313B (zh) 多媒体数据处理方法、装置和设备/终端/服务器

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18921122

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 18921122

Country of ref document: EP

Kind code of ref document: A1