WO2020192394A1 - 笔记显示方法、装置、终端和存储介质 - Google Patents

笔记显示方法、装置、终端和存储介质 Download PDF

Info

Publication number
WO2020192394A1
WO2020192394A1 PCT/CN2020/078201 CN2020078201W WO2020192394A1 WO 2020192394 A1 WO2020192394 A1 WO 2020192394A1 CN 2020078201 W CN2020078201 W CN 2020078201W WO 2020192394 A1 WO2020192394 A1 WO 2020192394A1
Authority
WO
WIPO (PCT)
Prior art keywords
video clip
note
screen
language
content
Prior art date
Application number
PCT/CN2020/078201
Other languages
English (en)
French (fr)
Inventor
谢美花
Original Assignee
维沃移动通信有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 维沃移动通信有限公司 filed Critical 维沃移动通信有限公司
Publication of WO2020192394A1 publication Critical patent/WO2020192394A1/zh

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1438—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display using more than one graphics controller
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00—Electrically-operated educational appliances
    • G09B5/02—Electrically-operated educational appliances with visual presentation of the material to be studied, e.g. using film strip

Definitions

  • the present disclosure relates to the field of computer technology, and in particular, to a note display method, device, terminal and storage medium.
  • Multimedia materials have both graphics, text and audio, which can mobilize students' emotions, attention and interest from multiple angles.
  • the dynamic nature of multimedia data is conducive to reflecting concepts and processes, and can effectively break through teaching difficulties. Through the reproduction and simulation of real scenes, multimedia materials can cultivate the advantages of students' exploration and creativity. Therefore, multimedia learning materials are gradually used by most people for learning, such as English videos and technical learning videos.
  • Paper-based learning materials can be freely taken in the book, but taking notes on multimedia learning materials is not convenient enough.
  • multimedia learning in related technologies the terminal is only used as a medium for displaying multimedia learning materials. It is extremely inconvenient in retrospective learning and taking notes at any time through multimedia learning.
  • related technologies when learning multimedia materials, if you need to take notes, you often need to stop the video and take notes in a paper notebook. This way of taking notes reduces a good user experience.
  • the embodiments of the present disclosure provide a method, device, terminal, and storage medium for displaying notes to solve the problem of not being able to display the contents of notes made on the terminal while watching multimedia data.
  • a note display method which is applied to a terminal, the terminal includes a first screen and a second screen, and the method includes:
  • the content of the note is displayed on the second screen.
  • an embodiment of the present disclosure also provides a note display device, which is applied to a terminal, the terminal includes a first screen and a second screen, and the device includes:
  • the multimedia data display module is used to display multimedia data on the first screen
  • the marking component display module is used to display the marking component on the first screen after receiving the marking instruction, and the marking component is used to mark the multimedia data;
  • the note content determination module is used to determine the note content according to the content marked by the marked component
  • the note content display module is used to display the note content on the second screen.
  • the embodiments of the present disclosure also provide a terminal.
  • the terminal includes a processor, a memory, and a computer program stored on the memory and running on the processor.
  • the computer program is executed by the processor to realize the above-mentioned note-taking Display method.
  • the embodiments of the present disclosure also provide a computer storage medium, on which computer program instructions are stored, and when the computer program instructions are executed by a processor, the above note display method is implemented.
  • the simultaneous operation of multiple applications is realized, so that the user can learn multimedia materials.
  • FIG. 1 is a flowchart of a method for displaying notes according to an embodiment of the present disclosure
  • FIG. 2 is a flowchart of a method for displaying notes according to another embodiment of the present disclosure
  • FIG. 3 is a schematic diagram of a marker of note content in an embodiment of the disclosure.
  • FIG. 4 is a schematic diagram of a language video note template according to an embodiment of the disclosure.
  • FIG. 5 is a schematic diagram of a non-video note template according to an embodiment of the disclosure.
  • FIG. 6 is a schematic structural diagram of a note display device according to an embodiment of the disclosure.
  • FIG. 7 is a schematic structural diagram of a terminal according to an embodiment of the disclosure.
  • FIG. 1 shows a schematic flowchart of a note display method 100 applied to a terminal according to an embodiment of the present disclosure.
  • the note display method in the embodiment of the present disclosure is applied to a terminal.
  • the terminal includes a first screen and a second screen.
  • the method includes the following steps:
  • S110 Display multimedia data on the first screen.
  • S120 After receiving the marking instruction, display a marking component on the first screen, where the marking component is used to mark the multimedia data.
  • S130 Determine the content of the note according to the content marked by the marked component.
  • S140 Display the note content on the second screen.
  • multimedia learning materials are displayed on the first screen of the terminal, and the content of the notes made is displayed on the second screen of the terminal at the same time, so that multiple applications can run simultaneously, so that users can While studying multimedia materials, you can also record and watch notes at any time, which improves the convenience of learning.
  • first screen and the second screen in the embodiment of the present disclosure may be two independent screens on the same terminal, for example, a terminal with a double-sided screen.
  • first screen and the second screen may also be two different areas of the same screen of the terminal, for example, a terminal with a folding screen.
  • the marking instruction when the preset physical button or the preset area of the first screen is triggered, the marking instruction is triggered.
  • the marking instruction can be triggered in at least one of the following multiple ways:
  • the trigger mode of the marking instruction can be customized by the user.
  • the user of the terminal triggers the marking instruction by long pressing on a certain corner of the first screen.
  • the multimedia data displayed on the first screen is video data, and the type of the marking component is determined according to the determination result.
  • the time for the user to select the marking components is shortened, and the efficiency and good experience of the user when taking notes are improved.
  • Multimedia materials are video materials
  • the video clip component is displayed on the first screen for the user to mark the start position and the end position of the video clip to be intercepted.
  • the video clip component is used for users to mark key video data parts.
  • the video clip component After receiving the mark made by the video clip component, that is, after receiving the start position and the end position of the video clip marked by the user in the background, it is determined whether the video clip marked by the video clip component includes subtitles.
  • the voice information of the video clip is converted into text information, and the video clip, the voice information corresponding to the video clip, and the text information converted from the language information As the note content of the marked video clip.
  • the video clip marked by the video clip component includes subtitles
  • the first language and the second language may be user preset languages.
  • subtitle information in two different languages is provided to users, namely subtitle information in the first language and subtitle information in the second language.
  • the second language subtitle information corresponding to the first language subtitle information may be obtained from a preset database.
  • the first language subtitle information corresponding to the second language subtitle information can be obtained from a preset database.
  • the first language caption information and the second language caption information of the video segment can be directly parsed from the video segment.
  • the marked video clip is not a video clip in the first language
  • the subtitle information and voice information of the video clip are directly obtained, and the video clip, subtitle information and voice information are used as the note content.
  • the first language is a non-native language, that is, the first language is a foreign language
  • the second language is a native language.
  • it can be determined whether the marked video clip is a foreign language video clip based on the voice, subtitles and the user's native language in the video clip.
  • the user's native language can be judged according to the user's reading habits and typing habits.
  • the video clip is a "foreign language” learning material.
  • the marked key video segment is a foreign language video segment
  • the marked video segment is a foreign language video segment
  • the native language subtitle information of the foreign language video segment and the foreign language subtitle information of the foreign language video segment are acquired. Then the video clip, foreign language subtitle information, and native language subtitle information are used as the note content of the foreign language video clip.
  • the marked foreign language video clips may not include native language subtitles. Therefore, when it is determined that the marked key video clip is a foreign language video clip, it is also necessary to determine whether the subtitles of the foreign language video clip include Contrasting subtitles between native language and foreign language.
  • the foreign language subtitle information of the foreign language video clip is acquired as the note content. Then, the native subtitle information corresponding to the foreign language subtitle information is obtained from the preset database, which is also used as the note content.
  • the native language subtitle information corresponding to the foreign language subtitle information of the video segment is obtained from the big data, and the native language subtitle information Foreign language subtitle information is used as the content of the notes.
  • the foreign language subtitle information corresponding to the native language subtitle information of the video clip is obtained from the big data, and the video clip, the native language subtitle information of the video clip and Foreign language subtitle information is used as the content of the notes.
  • the subtitles of the foreign language video clip include contrast subtitles between the native language and the foreign language
  • all subtitle information of the foreign language video clip is directly obtained, and the video clip and all subtitle information of the video clip are used as the note content.
  • the voice information and subtitle information of the foreign language video clip are acquired, and the foreign language video clip, the voice information and subtitle information of the foreign language video clip are used as Note content.
  • the video clip marked by the video clip component before displaying the note content of the marked video clip, it can also be determined whether the video clip marked by the video clip component includes blackboard writing information.
  • Blackboard information is a general term for the teaching information presented by teachers in condensed and concise text, symbols, diagrams, etc. in order to help students understand and master knowledge during the teaching process.
  • the blackboard writing information in the video clip may be the teaching information presented by the teacher on the blackboard or multimedia courseware in the video clip.
  • the video clip includes blackboard writing information
  • an option of whether to intercept the blackboard writing information is provided on the first screen, so that the user can decide whether to intercept the blackboard writing information according to his needs.
  • the intercepted information on the blackboard will be used as the note content.
  • the user by providing the option of whether to intercept blackboard writing information, the user can determine the content of the note according to his own needs, which improves the user's good experience.
  • a marker when the user views the recorded note content on the second screen, a marker can be set for the note content according to his own needs. Among them, the marker is used to represent the importance of the content of the note.
  • the mark made by the video clip component refers to the user's mark of the start position of the video clip and the mark of the end position of the video clip.
  • Note content refers to the voice information, subtitle information, and video information of the video clip marked by the video clip component.
  • the user uses different markers to mark different key notes.
  • corresponding markers are set at the position of the original video data, so that the user can focus on viewing the notes.
  • the marking component is a brush component.
  • the marking component By simulating the way of taking notes with a pen in real life, it provides users with "drawing key pens”. The user can choose to "draw key points" to draw key lines under the text, or frame selection pictures.
  • the key line drawn by the brush component or the frame drawn on the picture are all marks made by the brush component.
  • the background obtains the text information and picture information corresponding to the mark made by the brush component, and uses the text information and picture information as the note content. Finally, the content of the note is displayed according to the preset template on the second screen.
  • the note content also includes a link to the note corresponding to the note content, and the link points to the position of the video clip in the note content in the multimedia data.
  • the link corresponding to the note content of the video clip points to the playback position of the start point in the original video material.
  • the link corresponding to the note points to the position of the key line in the original non-video material.
  • the marked multimedia material slides from the first screen to the second screen.
  • the background receives the mark made by the user through the mark component, it will automatically capture the key content marked by the user. Then, the background typesets the content of the notes according to different data classifications according to user-defined templates.
  • FIG. 4 shows a note template of a language video displayed on the second screen.
  • the note template of language video includes tags, foreign language subtitles, native language subtitles, voice information, links to the original video material of the note, marked video clips, summary thanks, and blocking bars.
  • the user can also drag or edit the small units in the layout.
  • Figure 5 is a non-video note template.
  • the non-video note template includes note tags, marked text, and pictures corresponding to the text.
  • the note label is Yanghui Triangle
  • the left side of the note is the text explanation of Yanghui Triangle
  • the right side is the schematic diagram of Yanghui Triangle.
  • the embodiments of the present disclosure make full use of the advantages of the two screens of the terminal.
  • the first screen is used for the display of multimedia materials; on the other hand, the positions that the user considers to be important in the multimedia materials are circled and recorded as notes. Or part of the data worth reviewing is transferred to the second screen, and the screen text information and voice information are automatically obtained to form a note effect, and the note content is displayed on the second screen.
  • mark the position of the note in the original multimedia material to form a link, which is convenient for later learning.
  • the note display method provided by the embodiments of the present disclosure realizes the simultaneous operation of multiple applications. While the multimedia data is played on the first screen, notes such as text information, voice information and picture information of the marked key data are displayed on the second screen at the same time.
  • the content provides a simple and effective mode of reading notes in multimedia learning, improving the experience of multimedia learning.
  • the note display method provided by the embodiments of the present disclosure makes the "memory is not as good as a bad pen" method becomes more modern, convenient and fun, which not only retains the note-taking method of related technologies, but also combines the advantages of modern technology , Make learning more convenient and interesting.
  • FIG. 6 shows a schematic structural diagram of a note display device provided by some embodiments of the present disclosure.
  • the note display device provided by the embodiment of the present disclosure is applied to a terminal, the terminal includes a first screen and a second screen, and the device includes:
  • the multimedia data display module 610 is used to display multimedia data on the first screen.
  • the marking component display module 620 is configured to display the marking component on the first screen after receiving the marking instruction, and the marking component is used to mark the multimedia data.
  • the note content determination module 630 is configured to determine the note content according to the content marked by the marked component.
  • the note content display module 640 is configured to display note content on the second screen.
  • the note display device further includes a marking component type judgment module, and the marking component type judgment module is used for:
  • the marking component is a video clip component.
  • the note content determination module 630 is specifically configured to:
  • the video clip is a video clip in the first language, acquiring subtitle information in the first language of the video clip and subtitle information in the second language of the video clip;
  • the note content determination module 630 is specifically configured to:
  • the second language subtitle information corresponding to the first language subtitle information is obtained from a preset database.
  • the note content determination module 630 is also used to:
  • the note display device further includes a writing information providing module on the blackboard, and the writing information providing module on the blackboard is used for:
  • the first screen provides the option of whether to capture the blackboard writing information.
  • the note display device provided by the embodiments of the present disclosure displays multimedia learning materials on the first screen of the terminal, and displays the content of the notes made on the second screen at the same time, so that multiple applications can run simultaneously, so that users can learn multimedia At the same time, you can record and watch notes at any time, which improves the convenience of learning.
  • the embodiment of the present disclosure also provides a terminal, and the terminal includes:
  • Memory used to store programs
  • the processor is configured to run a program stored in the memory to execute each step in the note display method of the embodiment of the present disclosure, wherein the method includes: displaying multimedia data on a first screen; after receiving a marking instruction, A marking component is displayed on one screen, and the marking component is used to mark the multimedia data; the content of the note is determined according to the content marked by the marked component; and the content of the note is displayed on the second screen.
  • the terminal provided in the embodiment of the present disclosure can implement each process in the method embodiments of FIG. 1 to FIG. 5, and to avoid repetition, details are not described herein again.
  • multimedia learning materials are displayed on the first screen of the terminal, and the content of the notes made is displayed on the second screen at the same time, so that multiple applications can run simultaneously, so that users can learn multimedia materials at the same time. Recording and viewing notes at any time improves the convenience of learning.
  • FIG. 7 is a schematic diagram of the hardware structure of a mobile terminal that implements various embodiments of the present disclosure.
  • the mobile terminal 700 includes but is not limited to: a radio frequency unit 701, a network module 702, an audio output unit 703, an input unit 704, a sensor 705, a display unit 706, a user input unit 707, an interface unit 708, a memory 709, a processor 710, and Power 711 and other components.
  • the mobile terminal 700 also includes a first screen and a second screen.
  • Those skilled in the art can understand that the structure of the mobile terminal shown in FIG. 7 does not constitute a limitation on the mobile terminal.
  • the mobile terminal may include more or less components than those shown in the figure, or combine certain components, or different components. Layout.
  • mobile terminals include, but are not limited to, mobile phones, tablet computers, notebook computers, palmtop computers, vehicle-mounted terminals, wearable devices, and pedometers.
  • the processor 710 is configured to display multimedia data on the first screen; after receiving the marking instruction, display a marking component on the first screen, the marking component is used to mark the multimedia data; according to the content marked by the marked component Determine the content of the note; display the content of the note on the second screen.
  • multimedia learning materials are displayed on the first screen of the terminal, and the content of the notes is displayed on the second screen at the same time, so that multiple applications can run simultaneously, so that users can watch multimedia materials at any time while learning. Taking notes improves the convenience of learning.
  • the radio frequency unit 701 can be used for receiving and sending signals in the process of sending and receiving information or talking. Specifically, the downlink data from the base station is received and processed by the processor 710; in addition, Uplink data is sent to the base station.
  • the radio frequency unit 701 includes but is not limited to an antenna, at least one amplifier, a transceiver, a coupler, a low noise amplifier, a duplexer, and the like.
  • the radio frequency unit 701 can also communicate with the network and other devices through a wireless communication system.
  • the mobile terminal provides users with wireless broadband Internet access through the network module 702, such as helping users to send and receive emails, browse web pages, and access streaming media.
  • the audio output unit 703 may convert the audio data received by the radio frequency unit 701 or the network module 702 or stored in the memory 709 into audio signals and output them as sounds. Moreover, the audio output unit 703 may also provide audio output related to a specific function performed by the mobile terminal 700 (for example, call signal reception sound, message reception sound, etc.).
  • the audio output unit 703 includes a speaker, a buzzer, a receiver, and the like.
  • the input unit 704 is used to receive audio or video signals.
  • the input unit 704 may include a graphics processing unit (GPU) 7041 and a microphone 7042.
  • the graphics processor 7041 is used for the image of a still picture or video obtained by an image capture device (such as a camera) in the video capture mode or the image capture mode. Data is processed.
  • the processed image frame may be displayed on the display unit 706.
  • the image frame processed by the graphics processor 7041 may be stored in the memory 709 (or other storage medium) or sent via the radio frequency unit 701 or the network module 702.
  • the microphone 7042 can receive sound, and can process such sound into audio data.
  • the processed audio data can be converted into a format that can be sent to the mobile communication base station via the radio frequency unit 701 for output in the case of a telephone call mode.
  • the mobile terminal 700 also includes at least one sensor 705, such as a light sensor, a motion sensor, and other sensors.
  • the light sensor includes an ambient light sensor and a proximity sensor.
  • the ambient light sensor can adjust the brightness of the display panel 7061 according to the brightness of the ambient light.
  • the proximity sensor can close the display panel 7061 and the display panel 7061 when the mobile terminal 700 is moved to the ear. / Or backlight.
  • the accelerometer sensor can detect the magnitude of acceleration in various directions (usually three-axis), and can detect the magnitude and direction of gravity when stationary, and can be used to identify the posture of the mobile terminal (such as horizontal and vertical screen switching, related games , Magnetometer attitude calibration), vibration recognition related functions (such as pedometer, tap), etc.; sensor 705 can also include fingerprint sensors, pressure sensors, iris sensors, molecular sensors, gyroscopes, barometers, hygrometers, thermometers, Infrared sensors, etc., will not be repeated here.
  • the display unit 706 is used to display information input by the user or information provided to the user.
  • the display unit 706 may include a display panel 7061, and the display panel 7061 may be configured in the form of a liquid crystal display (LCD), an organic light-emitting diode (OLED), etc.
  • LCD liquid crystal display
  • OLED organic light-emitting diode
  • the user input unit 707 may be used to receive inputted numeric or character information, and generate key signal input related to user settings and function control of the mobile terminal.
  • the user input unit 707 includes a touch panel 7071 and other input devices 7072.
  • the touch panel 7071 also called a touch screen, can collect user touch operations on or near it (for example, the user uses any suitable objects or accessories such as fingers, stylus, etc.) on the touch panel 7071 or near the touch panel 7071. operating).
  • the touch panel 7071 may include two parts: a touch detection device and a touch controller.
  • the touch detection device detects the user's touch position, detects the signal brought by the touch operation, and transmits the signal to the touch controller; the touch controller receives the touch information from the touch detection device, converts it into contact coordinates, and then sends it To the processor 710, the command sent by the processor 710 is received and executed.
  • the touch panel 7071 can be implemented in multiple types such as resistive, capacitive, infrared, and surface acoustic wave.
  • the user input unit 707 may also include other input devices 7072.
  • other input devices 7072 may include, but are not limited to, a physical keyboard, function keys (such as volume control buttons, switch buttons, etc.), trackball, mouse, and joystick, which will not be repeated here.
  • the touch panel 7071 can be overlaid on the display panel 7061.
  • the touch panel 7071 detects a touch operation on or near it, it transmits it to the processor 710 to determine the type of the touch event.
  • the type of event provides corresponding visual output on the display panel 7061.
  • the touch panel 7071 and the display panel 7061 are used as two independent components to implement the input and output functions of the mobile terminal, in some embodiments, the touch panel 7071 and the display panel 7061 can be integrated
  • the implementation of the input and output functions of the mobile terminal is not specifically limited here.
  • the interface unit 708 is an interface for connecting an external device with the mobile terminal 700.
  • the external device may include a wired or wireless headset port, an external power source (or battery charger) port, a wired or wireless data port, a memory card port, a port for connecting a device with an identification module, audio input/output (input/output, I/O) port, video I/O port, headphone port, etc.
  • the interface unit 708 can be used to receive input (for example, data information, power, etc.) from an external device and transmit the received input to one or more elements in the mobile terminal 700 or can be used to connect to the mobile terminal 700 and external Transfer data between devices.
  • the memory 709 can be used to store software programs and various data.
  • the memory 709 may mainly include a program storage area and a data storage area.
  • the program storage area may store an operating system, an application program required by at least one function (such as a sound playback function, an image playback function, etc.), etc.; Data (such as audio data, phone book, etc.) created by the use of mobile phones.
  • the memory 709 may include a high-speed random access memory, and may also include a non-volatile memory, such as at least one magnetic disk storage device, a flash memory device, or other volatile solid-state storage devices.
  • the processor 710 is the control center of the mobile terminal. It uses various interfaces and lines to connect the various parts of the entire mobile terminal, runs or executes software programs and/or modules stored in the memory 709, and calls data stored in the memory 709 , Perform various functions of the mobile terminal and process data, so as to monitor the mobile terminal as a whole.
  • the processor 710 may include one or more processing units; optionally, the processor 710 may integrate an application processor and a modem processor, where the application processor mainly processes the operating system, user interface, and application programs.
  • the adjustment processor mainly deals with wireless communication. It can be understood that the foregoing modem processor may not be integrated into the processor 710.
  • the mobile terminal 700 may also include a power supply 711 (such as a battery) for supplying power to various components.
  • a power supply 711 (such as a battery) for supplying power to various components.
  • the power supply 711 may be logically connected to the processor 710 through a power management system, so as to manage charging, discharging, and power consumption through the power management system. Management and other functions.
  • the mobile terminal 700 includes some functional modules not shown, which will not be repeated here.
  • an embodiment of the present disclosure further provides a mobile terminal.
  • the terminal includes a first screen and a second screen, and further includes a processor 710, a memory 709, and a mobile terminal that is stored in the memory 709 and can run on the processor 710.
  • a computer program When the computer program is executed by the processor 710, each process of the above-mentioned note display method embodiment can be realized, and the same technical effect can be achieved. In order to avoid repetition, it will not be repeated here.
  • the embodiments of the present disclosure also provide a computer-readable storage medium, and a computer program is stored on the computer-readable storage medium.
  • a computer program is stored on the computer-readable storage medium.
  • the computer program is executed by a processor, each process of the embodiment of the note display method is realized, and the same technical effect can be achieved. To avoid repetition, I won’t repeat it here.
  • the computer-readable storage medium such as read-only memory (Read-Only Memory, ROM), random access memory (Random Access Memory, RAM), magnetic disk or optical disk, etc.
  • the technical solution of the present disclosure essentially or the part that contributes to the related technology can be embodied in the form of a software product.
  • the computer software product is stored in a storage medium (such as ROM/RAM, magnetic disk, optical disk).
  • a terminal which can be a mobile phone, a computer, a server, an air conditioner, or a network device, etc.
  • the disclosed device and method may be implemented in other ways.
  • the device embodiments described above are only illustrative.
  • the division of the units is only a logical function division, and there may be other divisions in actual implementation, for example, multiple units or components can be combined or It can be integrated into another system, or some features can be ignored or not implemented.
  • the displayed or discussed mutual coupling or direct coupling or communication connection may be indirect coupling or communication connection through some interfaces, devices or units, and may be in electrical, mechanical or other forms.
  • the units described as separate components may or may not be physically separated, and the components displayed as units may or may not be physical units, that is, they may be located in one place, or they may be distributed on multiple network units. Some or all of the units may be selected according to actual needs to achieve the objectives of the solutions of the embodiments.
  • the functional units in the various embodiments of the present disclosure may be integrated into one processing unit, or each unit may exist alone physically, or two or more units may be integrated into one unit.
  • the function is implemented in the form of a software functional unit and sold or used as an independent product, it can be stored in a computer readable storage medium.
  • the computer software product is stored in a storage medium and includes several instructions to make a A computer device (which may be a personal computer, a server, or a network device, etc.) executes all or part of the steps of the methods described in the various embodiments of the present disclosure.
  • the aforementioned storage media include: U disk, mobile hard disk, ROM, RAM, magnetic disk or optical disk and other media that can store program codes.
  • the program can be stored in a computer readable storage medium. When executed, it may include the processes of the above-mentioned method embodiments.
  • the storage medium may be a magnetic disk, an optical disk, a read-only memory (Read-Only Memory, ROM), or a random access memory (Random Access Memory, RAM), etc.
  • modules, units, and sub-units can be implemented in one or more Application Specific Integrated Circuits (ASIC), Digital Signal Processor (DSP), Digital Signal Processing Device (DSP Device, DSPD) ), Programmable Logic Device (PLD), Field-Programmable Gate Array (FPGA), general-purpose processors, controllers, microcontrollers, microprocessors, used to implement Other electronic units or combinations of the functions described above.
  • ASIC Application Specific Integrated Circuits
  • DSP Digital Signal Processor
  • DSP Device Digital Signal Processing Device
  • DSPD Digital Signal Processing Device
  • PLD Programmable Logic Device
  • FPGA Field-Programmable Gate Array
  • the technology described in the embodiments of the present disclosure can be implemented through modules (for example, procedures, functions, etc.) that perform the functions described in the embodiments of the present disclosure.
  • the software codes can be stored in the memory and executed by the processor.
  • the memory can be implemented in the processor or external to the processor.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Graphics (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • User Interface Of Digital Computer (AREA)
  • Electrically Operated Instructional Devices (AREA)

Abstract

本公开实施例提供了一种笔记显示方法、装置、终端和存储介质。该方法应用于终端，终端包括第一屏幕和第二屏幕，该方法包括：在第一屏幕上显示多媒体资料；在接收到标记指令之后，在第一屏幕上显示标记组件，标记组件用于对多媒体资料进行标记；根据被标记组件标记的内容确定笔记内容；在第二屏幕上显示笔记内容。

Description

笔记显示方法、装置、终端和存储介质
相关申请的交叉引用
本申请主张在2019年3月25日在中国提交的中国专利申请号No.201910228159.1的优先权，其全部内容通过引用包含于此。
技术领域
本公开涉及计算机技术领域，尤其涉及一种笔记显示方法、装置、终端和存储介质。
背景技术
多媒体学习资料的直观性，有助于概念的理解和方法的掌握。多媒体资料图文声像并茂，能够从多角度调动学生的情绪、注意力和兴趣。多媒体资料的动态性有利于反映概念及过程，能有效地突破教学难点。多媒体资料通过对真实情景的再现和模拟，能够培养学生的探索、创造能力等优点。因此多媒体学习资料逐渐被大多数人使用学习，如英文视频、技术学习视频等。
纸质学习资料可以在书上随意做笔记，但是在多媒体学习资料上做笔记却不够便捷。在相关技术中的多媒体学习中，只是把终端当作展示多媒体学习资料的媒介。通过多媒体学习方式在回溯学习、随手随时做笔记等方面极为不便。相关技术中在学习多媒体资料时，若需要做笔记，往往需要停下视频，在纸质笔记本上做笔记，此种做笔记的方式降低了用户的良好体验。
并且，在纸质笔记本上做笔记也无法体现出多媒体学习在复习上的优点，例如有声阅读和动态阅读等。例如，针对语言类的视频资料，读者通过视频学习关注的重点往往是当时的场景、人物表达的意境以及跟读模仿。如何在观看多媒体学习资料时在终端制作笔记，并同时在终端显示制作的笔记显得尤为重要。
发明内容
本公开实施例提供一种笔记显示方法、装置、终端和存储介质，以解决 在观看多媒体资料的同时不能显示在终端制作的笔记内容的问题。
为了解决上述技术问题，本公开是这样实现的：一种笔记显示方法，该方法应用于终端，终端包括第一屏幕和第二屏幕，该方法包括：
在第一屏幕上显示多媒体资料；
在接收到笔记标记功能启动指令之后，在第一屏幕上显示标记笔记功能组件，标记笔记组件用于对多媒体资料进行标记；
根据被标记组件标记的内容确定笔记内容；
在第二屏幕上显示笔记内容。
第一方面，本公开实施例还提供了一种笔记显示装置，该装置应用于终端，终端包括第一屏幕和第二屏幕，该装置包括：
多媒体资料显示模块，用于在第一屏幕上显示多媒体资料；
标记组件显示模块，用于在接收到标记指令之后，在第一屏幕上显示标记组件，标记组件用于对多媒体资料进行标记；
笔记内容确定模块，用于根据被标记组件标记的内容确定笔记内容；
笔记内容显示模块，用于在第二屏幕上显示笔记内容。
第二方面，本公开实施例还提供了一种终端，终端包括处理器、存储器及存储在存储器上并可在处理器上运行的计算机程序，计算机程序被处理器执行时实现如上所述的笔记显示方法。
第三方面，本公开实施例还提供了一种计算机存储介质，计算机存储介质上存储有计算机程序指令，计算机程序指令被处理器执行时实现如上所述的笔记显示方法。
在本公开实施例中，通过在终端的第一屏幕上显示多媒体学习资料，并将制作的笔记内容同时在终端的第二屏幕上显示，实现了多应用同时运行，以使用户在学习多媒体资料的同时也可以随时记录和观看笔记，提高了学习的便捷性。
附图说明
从下面结合附图对本公开的具体实施方式的描述中可以更好地理解本公开，其中，相同或相似的附图标记表示相同或相似的特征。
图1为本公开一实施例的笔记显示方法的流程框图；
图2为本公开另一实施例的笔记显示方法的流程框图；
图3为本公开实施例的笔记内容的标记符的示意图；
图4为本公开实施例的语言类视频笔记模板的示意图；
图5为本公开实施例的非视频笔记模板的示意图；
图6为本公开实施例的笔记显示装置的结构示意图；
图7为本公开实施例的终端的结构示意图。
具体实施方式
下面将结合本公开实施例中的附图，对本公开实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本公开一部分实施例，而不是全部的实施例。基于本公开中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本公开保护的范围。
图1示出根据本公开实施例提供的应用于终端的笔记显示方法100的流程示意图。如图1所示，本公开实施例中的笔记显示方法应用于终端，该终端包括第一屏幕和二屏幕，该方法包括以下步骤：
S110，在第一屏幕上显示多媒体资料。
S120，在接收到标记指令之后，在第一屏幕上显示标记组件，标记组件用于对多媒体资料进行标记。
S130，根据被标记组件标记的内容确定笔记内容。
S140，在第二屏幕上显示笔记内容。
本公开实施例提供的笔记显示方法，通过在终端的第一屏幕上显示多媒体学习资料，并将制作的笔记内容同时在终端的第二屏幕上显示，实现了多应用同时运行，以使用户在学习多媒体资料的同时也可以随时记录和观看笔记，提高了学习的便捷性。
下面结合具体示例对本公开实施例提供的笔记显示方法的实现方式进行详细描述。
需要说明的是，本公开实施例的第一屏幕和第二屏幕可以为同一个终端上的两个独立屏幕，例如具有双面屏的终端。或者，第一屏幕和第二屏幕也 可以为终端的同一屏幕的两个不同区域，例如具有折叠屏的终端。
如图2所示，当多媒体资料在第一屏幕显示的过程中，若标记指令被触发，则进入笔记模式。
在本公开的实施例中，在预设物理按键或第一屏幕的预设区域被触发时，触发标记指令。具体地，可以采用以下多种方式中的至少一种方式触发标记指令：
与第一屏幕发生接触且在指定时间范围内接触次数达到次数阈值、与第一屏幕发生持续接触且接触时长达到时长阈值、与第一屏幕发生接触且沿预定方向形成滑动轨迹、发出预设声音信号。其中，标记指令的触发方式可以由用户自定义。
在本公开的实施例中，标记指令的触发方式多种多样，且可根据用户的习惯自行设置，灵活性高。
作为一个具体示例，终端的用户通过在第一屏幕的某个角落长按以触发标记指令。
当接收到标记指令之后，判断第一屏幕显示的多媒体资料是否为视频资料，并根据判断结果确定标记组件的类型。
在本公开的实施例中，通过根据多媒体资料的不同类型显示对应的标记组件，缩短了用户选择标记组件的时间，提高了用户在做笔记时的效率和良好体验。
(一)多媒体资料为视频资料
在本公开的实施例中，若多媒体资料为视频资料，则在第一屏幕上显示视频剪辑组件，以供用户标记需要截取视频片段的开始位置和结束位置。也就是说，视频剪辑组件用于供用户标记重点视频资料部分。
当接收到通过视频剪辑组件所做的标记后，即后台接收到用户标记的视频片段的开始位置和结束位置之后，则判断被视频剪辑组件标记的视频片段中是否包括字幕。
若被视频剪辑组件标记的视频片段不包括字幕，只包括语音，则将视频片段的语音信息转化为文字信息，并将该视频片段、该视频片段对应的语音信息以及该语言信息转换的文字信息作为被标记的视频片段的笔记内容。
若被视频剪辑组件标记的视频片段包括字幕，则判断视频片段是否为第一语种视频片段。若视频片段为第一语种视频片段，获取视频片段的第一语种字幕信息以及视频片段的第二语种字幕信息。然后将视频片段、第一语种字幕信息以及第二语种字幕信息作为笔记内容。
作为一个示例，第一语种和第二语种可以为用户预设的语种。为了满足用户的需求，方便用户的学习，对于第一语种的学习资料，则向用户提供两种不同语种的字幕信息，即第一语种字幕信息和第二语种字幕信息。
如果视频片段中包括第一语种字幕信息，但不包括第二语种字幕信息，则可以从预设的数据库中获取与第一语种字幕信息对应的第二语种字幕信息。
类似地，若视频片段中包括第二语种字幕信息，但不包括第一语种字幕信息，则可以从预设的数据库中获取与第二语种字幕信息对应的第一语种字幕信息。
若视频片段中包括第一语种和第二语种的对照字幕，则可以直接从视频片段中解析该视频片段的第一语种字幕信息和第二语种字幕信息。
若被标记的视频片段不是第一语种视频片段，则直接获取该视频片段的字幕信息和语音信息，并将该视频片段、字幕信息和语音信息作为笔记内容。
在另一些示例中，参见图2，第一语种为非母语，即第一语种为外语，第二语种为母语。作为一个示例，根据视频片段中的语音、字幕以及用户的母语即可以判断被标记的视频片段是否为外语视频片段。其中，用户的母语可根据用户阅读习惯和打字习惯进行判断。
作为一个示例，若被标记的视频片段中的语音与母语的发音不同，或者字幕中的语言种类与母语的语言种类不同，则可以判断该视频片段为“外语类”学习资料。
在本公开的一些实施例中，为了方便用户的回溯学习，当确定被标记的重点视频片段为外语类视频片段时，需要记录该视频片段的外语字幕和母语字幕，以方便用户的回溯学习。
因此，若被标记的视频片段为外语视频片段，则获取外语视频片段的母语字幕信息以及与该外语视频片段的外语字幕信息。然后将该视频片段、外语字幕信息以及母语字幕信息作为该外语视频片段的笔记内容。
在本公开的一些实施例中，被标记的外语视频片段中有可能不包括母语字幕，因此，当确定被标记的重点视频片段为外语类视频片段时，还需要判断外语视频片段的字幕是否包括母语与外语的对照字幕。
若外语视频片段的字幕仅包括外语字幕，不包括母语字幕，则获取外语视频片段的外语字幕信息，作为笔记内容。然后从预设的数据库中获取与外语字幕信息相对应的母语字幕信息，也作为笔记内容。
也就是说，若被标记的外语视频片段中没有母语与外语的对照字幕，只包括外语字幕，则从大数据中获取该视频段的外语字幕信息对应的母语字幕信息，并将母语字幕信息和外语字幕信息均作为笔记内容。
相类似的，若被标记的外语视频片段中只包括母语字幕，则从大数据中获取该视频片段的母语字幕信息对应的外语字幕信息，并将该视频片段、该视频片段的母语字幕信息和外语字幕信息均作为笔记内容。
若外语视频片段的字幕包括母语与外语的对照字幕，则直接获取外语视频片段的所有字幕信息，并将该视频片段和该视频片段的所有字幕信息作为笔记内容。
在本公开的实施例中，若被标记的视频片段不是外语视频片段，则获取该外语视频片段的语音信息和字幕信息，并将该外语视频片段、该外语视频片段的语音信息和字幕信息作为笔记内容。
在本公开的实施例中，通过将外语学习视频资料的母语字幕信息和外语字幕信息均作为笔记内容，可以使用户在复习该视频资料时更加方便，提高了用户的良好体验。
在本公开的一些实施例中，在显示被标记的视频片段的笔记内容之前，还可以判断被视频剪辑组件标记的视频片段中是否包括板书信息。板书信息是教师在教学过程中为帮助学生理解掌握知识而利用教学工具以凝练、简洁的文字、符号、图表等呈现的教学信息的总称。例如，视频片段中的板书信息可以为视频片段中老师在黑板或多媒体课件上呈现的教学信息。
若视频片段中包括板书信息，在第一屏幕上提供是否截取板书信息的选项，以使用户根据自己的需求决定是否截取板书信息。
若用户选取了截取板书信息的选项，则将截取的板书信息作为笔记内容。
在本公开的实施例中，通过提供是否截取板书信息的选项，以使用户根据自己的需求确定笔记内容，提高了用户的良好体验。
在本公开的一些实施例中，当用户在第二屏幕上观看已记录的笔记内容时，可根据自身需求对笔记内容设置标记符。其中，标记符用于表征笔记内容的重要程度。
首先获取每个笔记内容中的视频片段在原视频资料中的位置，然后在视频资料的播放进度条上每个笔记内容中的视频片段的播放位置处设置该笔记内容的标记符，便于用户在播放视频时，根据标记符有重点的查看笔记内容。
需要说明的是，通过视频剪辑组件所做的标记是指用户对视频片段的开始位置的标记以及对视频片段结束位置的标记。笔记内容是指被视频剪辑组件标记的视频片段的语音信息、字幕信息和视频信息等内容。
如图3所示，在第二屏幕上，用户利用不同的标记符对不同的重点笔记内容进行了标记。在第一屏幕上，对于重点笔记内容对应的笔记在原视频资料的位置处均设置了对应的标记符，以便于用户有重点的查看笔记。
(二)多媒体资料为非视频资料
在本公开的实施例中，若多媒体资料为非视频资料，则标记组件为画笔组件。通过模拟现实生活中用笔做笔记的方式，给用户提供“画重点笔”。用户可以选择“画重点笔”在文字下方划重点线，或者框选图片。
其中，利用画笔组件画的重点线，或在图片上画的框，均为通过画笔组件做的标记。
然后，后台获取通过画笔组件所做的标记对应的文字信息和图片信息，并将文字信息和图片信息作为笔记内容。最后，在第二屏幕上按预设模板显示笔记内容。
在本公开的实施例中，笔记内容还包括自身对应的笔记的链接，该链接指向该笔记内容中的视频片段在多媒体资料中的位置。作为一个示例，若用户通过视频剪辑组件设置截取视频片段的开始点和结束点，以对视频资料进行标记，该视频片段的笔记内容对应的链接即指向该开始点在原视频资料中的播放位置。作为另外一个示例，若用户通过画笔组件对非视频资料划重点线，以对非视频资料做了笔记，该笔记对应的链接即指向该重点线在原非视 频资料中的位置。
在本公开的实施例中，当用户停止用标记组件标记后，被标记的多媒体资料从第一屏幕滑动到第二屏幕中。在实际处理中，当后台接收到用户通过标记组件所做的标记之后，将自动捕捉用户标记的重点内容。然后，后台根据不同资料分类按照用户自定义的模板方式对笔记内容进行排版。
作为一个示例，图4示出了第二屏幕上显示的语言类视频的笔记模板。如图4所示，语言类视频的笔记模板中包括标签、外语字幕、母语字幕、语音信息、笔记在原视频资料的链接、被标记的视频片段、总结感谢以及遮挡条等内容。其中，用户也可对排版中的小单元进行拖拽或者编辑。
作为另外一个示例，图5为非视频类笔记模板。如图5所示，非视频类笔记模板中包括笔记标签、标记的文字和文字对应的图片。作为一个具体示例，笔记标签为杨辉三角，笔记左侧为杨辉三角的文字解释，右侧为杨辉三角的示意图。
本公开实施例充分利用终端的两个屏幕的优势，一方面第一屏幕用于多媒体资料的展示；另一方面将多媒体资料中用户认为重点的位置圈出来记录为笔记，通过圈出用户认为重点或者值得回顾的部分资料到第二屏幕中，自动获取其中的屏幕文字信息以及语音信息等信息，形成笔记效果，并在第二屏幕显示笔记内容。同时标记笔记在原多媒体资料中的位置形成链接，便于后面的回溯学习。
本公开实施例提供的笔记显示方法，实现了多应用同时运行，在第一屏幕播放多媒体资料的同时，在第二屏幕上同时显示被标记的重点资料的文字信息、语音信息和图片信息等笔记内容，在多媒体学习中提供一种简便有效的阅读笔记模式，提高多媒体学习的体验效果。
本公开实施例提供的笔记显示方法，让“好记性不如烂笔头”的方式变得更为现代化、便捷化以及乐趣化，既保留了相关技术中笔记的笔记方式，又结合了现代技术的优势，将学习变得更加便捷、趣味化。
与本公开实施例的方法相对应地，本公开还提供一种笔记显示装置。图6示出本公开一些实施例提供的笔记显示装置的结构示意图。本公开的实施例提供的笔记显示装置应用于终端，该终端包括第一屏幕和第二屏幕，该装 置包括：
多媒体资料显示模块610，用于在第一屏幕上显示多媒体资料。
标记组件显示模块620，用于在接收到标记指令之后，在第一屏幕上显示标记组件，标记组件用于对多媒体资料进行标记。
笔记内容确定模块630，用于根据被标记组件标记的内容确定笔记内容。
笔记内容显示模块640，用于在第二屏幕上显示笔记内容。
在本公开的实施例中，笔记显示装置还包括标记组件类型判断模块，该标记组件类型判断模块用于：
判断多媒体资料是否为视频资料，并根据判断结果确定笔记组件的类型；
若多媒体资料为视频资料，则标记组件为视频剪辑组件。
在本公开的实施例中，笔记内容确定模块630具体用于：
判断被视频剪辑组件标记的视频片段中是否包括字幕；
若视频片段中包括字幕，判断视频片段是否为第一语种视频片段；
若视频片段为第一语种视频片段，获取视频片段的第一语种字幕信息以及视频片段的第二语种字幕信息；
将视频片段、第一语种字幕信息以及第二语种字幕信息作为笔记内容。
在本公开的实施例中，笔记内容确定模块630具体用于：
若视频片段中包括第一语种字幕信息，且视频片段不包括第二语种字幕信息，则从预设的数据库中获取与第一语种字幕信息对应的第二语种字幕信息。
在本公开的实施例中，笔记内容确定模块630还用于：
若视频片段中不包括字幕，则将视频片段的语音信息转换为文字信息；
将视频片段、语音信息和文字信息作为笔记内容。
在本公开的实施例中，笔记显示装置还包括板书信息提供模块，该板书信息提供模块用于：
判断被视频剪辑组件标记的视频片段中是否包括板书信息；
若视频片段中包括板书信息，在第一屏幕上提供是否截取板书信息的选项。
本公开实施例提供的笔记显示装置，通过在终端的第一屏幕上显示多媒 体学习资料，并将制作的笔记内容同时在第二屏幕上显示，实现了多应用同时运行，以使用户在学习多媒体资料的同时也可以随时记录和观看笔记，提高了学习的便捷性。
本公开实施例还提供一种终端，终端包括：
存储器，用于存储程序；
处理器，用于运行存储器中存储的程序，以执行本公开实施例的笔记显示方法中的各步骤，其中，方法包括：在第一屏幕上显示多媒体资料；在接收到标记指令之后，在第一屏幕上显示标记组件，标记组件用于对多媒体资料进行标记；根据被标记组件标记的内容确定笔记内容；在第二屏幕上显示笔记内容。
本公开实施例提供的终端能够实现图1至图5的方法实施例中的各个过程，为避免重复，这里不再赘述。本公开的实施例通过在终端的第一屏幕上显示多媒体学习资料，并将制作的笔记内容同时在第二屏幕上显示，实现了多应用同时运行，以使用户在学习多媒体资料的同时也可以随时记录和观看笔记，提高了学习的便捷性。
图7为实现本公开各个实施例的一种移动终端的硬件结构示意图，
该移动终端700包括但不限于：射频单元701、网络模块702、音频输出单元703、输入单元704、传感器705、显示单元706、用户输入单元707、接口单元708、存储器709、处理器710、以及电源711等部件。移动终端700还包括第一屏幕和第二屏幕。本领域技术人员可以理解，图7中示出的移动终端结构并不构成对移动终端的限定，移动终端可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。在本公开实施例中，移动终端包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。
其中，处理器710，用于在第一屏幕上显示多媒体资料；在接收到标记指令之后，在第一屏幕上显示标记组件，标记组件用于对多媒体资料进行标记；根据被标记组件标记的内容确定笔记内容；在第二屏幕上显示笔记内容。
本公开的实施例通过在终端的第一屏幕上显示多媒体学习资料，并将笔记内容同时在第二屏幕上显示，实现了多应用同时运行，以使用户在学习多 媒体资料的同时也可以随时观看笔记，提高了学习的便捷性。
应理解的是，本公开实施例中，射频单元701可用于收发信息或通话过程中，信号的接收和发送，具体的，将来自基站的下行数据接收后，给处理器710处理；另外，将上行的数据发送给基站。通常，射频单元701包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外，射频单元701还可以通过无线通信系统与网络和其他设备通信。
移动终端通过网络模块702为用户提供了无线的宽带互联网访问，如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元703可以将射频单元701或网络模块702接收的或者在存储器709中存储的音频数据转换成音频信号并且输出为声音。而且，音频输出单元703还可以提供与移动终端700执行的特定功能相关的音频输出(例如，呼叫信号接收声音、消息接收声音等等)。音频输出单元703包括扬声器、蜂鸣器以及受话器等。
输入单元704用于接收音频或视频信号。输入单元704可以包括图形处理器(Graphics Processing Unit，GPU)7041和麦克风7042，图形处理器7041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元706上。经图形处理器7041处理后的图像帧可以存储在存储器709(或其它存储介质)中或者经由射频单元701或网络模块702进行发送。麦克风7042可以接收声音，并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元701发送到移动通信基站的格式输出。
移动终端700还包括至少一种传感器705，比如光传感器、运动传感器以及其他传感器。具体地，光传感器包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板7061的亮度，接近传感器可在移动终端700移动到耳边时，关闭显示面板7061和/或背光。作为运动传感器的一种，加速计传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别移动终端姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、 敲击)等；传感器705还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等，在此不再赘述。
显示单元706用于显示由用户输入的信息或提供给用户的信息。显示单元706可包括显示面板7061，可以采用液晶显示器(Liquid Crystal Display，LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板7061。
用户输入单元707可用于接收输入的数字或字符信息，以及产生与移动终端的用户设置以及功能控制有关的键信号输入。具体地，用户输入单元707包括触控面板7071以及其他输入设备7072。触控面板7071，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板7071上或在触控面板7071附近的操作)。触控面板7071可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器710，接收处理器710发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板7071。除了触控面板7071，用户输入单元707还可以包括其他输入设备7072。具体地，其他输入设备7072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。
进一步的，触控面板7071可覆盖在显示面板7061上，当触控面板7071检测到在其上或附近的触摸操作后，传送给处理器710以确定触摸事件的类型，随后处理器710根据触摸事件的类型在显示面板7061上提供相应的视觉输出。虽然在图7中，触控面板7071与显示面板7061是作为两个独立的部件来实现移动终端的输入和输出功能，但是在某些实施例中，可以将触控面板7071与显示面板7061集成而实现移动终端的输入和输出功能，具体此处不做限定。
接口单元708为外部装置与移动终端700连接的接口。例如，外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或 无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(input/output，I/O)端口、视频I/O端口、耳机端口等等。接口单元708可以用于接收来自外部装置的输入(例如，数据信息、电力等等)并且将接收到的输入传输到移动终端700内的一个或多个元件或者可以用于在移动终端700和外部装置之间传输数据。
存储器709可用于存储软件程序以及各种数据。存储器709可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器709可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器710是移动终端的控制中心，利用各种接口和线路连接整个移动终端的各个部分，通过运行或执行存储在存储器709内的软件程序和/或模块，以及调用存储在存储器709内的数据，执行移动终端的各种功能和处理数据，从而对移动终端进行整体监控。处理器710可包括一个或多个处理单元；可选的，处理器710可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器710中。
移动终端700还可以包括给各个部件供电的电源711(比如电池)，可选的，电源711可以通过电源管理系统与处理器710逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
另外，移动终端700包括一些未示出的功能模块，在此不再赘述。
可选的，本公开实施例还提供一种移动终端，终端包括第一屏幕和第二屏幕，还包括处理器710，存储器709，存储在存储器709上并可在所述处理器710上运行的计算机程序，该计算机程序被处理器710执行时实现上述笔记显示方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
本公开实施例还提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现笔记显示方法实施例 的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。其中，所述的计算机可读存储介质，如只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本公开的技术方案本质上或者说对相关技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本公开各个实施例所述的方法。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本公开的范围。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直 接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本公开各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本公开的技术方案本质上或者说对相关技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本公开各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来控制相关的硬件来完成，所述的程序可存储于计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储器(Read-Only Memory，ROM)或随机存取存储器(Random Access Memory，RAM)等。
可以理解的是，本公开实施例描述的这些实施例可以用硬件、软件、固件、中间件、微码或其组合来实现。对于硬件实现，模块、单元、子单元可以实现在一个或多个专用集成电路(Application Specific Integrated Circuits，ASIC)、数字信号处理器(Digital Signal Processor，DSP)、数字信号处理设备(DSP Device，DSPD)、可编程逻辑设备(Programmable Logic Device，PLD)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)、通用处理器、控制器、微控制器、微处理器、用于执行本公开所述功能的其它电子单元或其组合中。
对于软件实现，可通过执行本公开实施例所述功能的模块(例如过程、函数等)来实现本公开实施例所述的技术。软件代码可存储在存储器中并通过处理器执行。存储器可以在处理器中或在处理器外部实现。
上面结合附图对本公开的实施例进行了描述，但是本公开并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本公开的启示下，在不脱离本公开宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本公开的保护范围之内。

Claims (10)

  1. 一种笔记显示方法，应用于终端，所述终端包括第一屏幕和第二屏幕，包括：
    在所述第一屏幕上显示多媒体资料；
    在接收到标记指令之后，在所述第一屏幕上显示标记组件，所述标记组件用于对所述多媒体资料进行标记；
    根据被所述标记组件标记的内容确定笔记内容；
    在所述第二屏幕上显示所述笔记内容。
  2. 根据权利要求1所述的方法，其中，在接收到所述标记指令之后，在所述第一屏幕上显示标记组件之前，所述方法还包括：
    判断所述多媒体资料是否为视频资料，并根据判断结果确定所述笔记组件的类型；
    若所述多媒体资料为视频资料，则所述标记组件为视频剪辑组件。
  3. 根据权利要求2所述的方法，其中，所述根据被所述标记组件标记的内容确定笔记内容，包括：
    判断被所述视频剪辑组件标记的视频片段中是否包括字幕；
    若所述视频片段中包括字幕，判断所述视频片段是否为第一语种视频片段；
    若所述视频片段为所述第一语种视频片段，获取所述视频片段的第一语种字幕信息以及所述视频片段的第二语种字幕信息；
    将所述视频片段、所述第一语种字幕信息以及所述第二语种字幕信息作为所述笔记内容。
  4. 根据权利要求3所述的方法，其中，所述若所述视频片段为所述第一语种视频片段，获取所述视频片段的第一语种字幕信息以及所述视频片段的第二语种字幕信息，包括：
    若所述视频片段中包括所述第一语种字幕信息，且所述视频片段不包括所述第二语种字幕信息，则从预设的数据库中获取与所述第一语种字幕信息对应的所述第二语种字幕信息。
  5. 根据权利要求3所述的方法，还包括：
    若所述视频片段中不包括字幕，则将所述视频片段的语音信息转换为文字信息；
    将所述视频片段、所述语音信息和所述文字信息作为所述笔记内容。
  6. 根据权利要求2所述的方法，其中，在根据被所述标记组件标记的内容确定笔记内容之后，在所述第二屏幕上显示所述笔记内容之前，所述方法还包括：
    判断被所述视频剪辑组件标记的视频片段中是否包括板书信息；
    若所述视频片段中包括板书信息，在所述第一屏幕上提供是否截取所述板书信息的选项。
  7. 一种笔记显示装置，应用于终端，所述终端包括第一屏幕和第二屏幕，包括：
    多媒体资料显示模块，用于在所述第一屏幕上显示多媒体资料；
    标记组件显示模块，用于在接收到标记指令之后，在所述第一屏幕上显示标记组件，所述标记组件用于对所述多媒体资料进行标记；
    笔记内容确定模块，用于根据被所述标记组件标记的内容确定笔记内容；
    笔记内容显示模块，用于在所述第二屏幕上显示所述笔记内容。
  8. 根据权利要求7所述的装置，还包括标记组件类型判断模块，用于判断所述多媒体资料是否为视频资料，并根据判断结果确定所述笔记组件的类型，若所述多媒体资料为视频资料，则所述标记组件为视频剪辑组件。
  9. 一种终端，包括第一屏幕和第二屏幕，所述终端还包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如权利要求1至6中任一项所述的笔记显示方法的步骤。
  10. 一种计算机存储介质，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如权利要求1至6中任一项所述的笔记显示方法的步骤。
PCT/CN2020/078201 2019-03-25 2020-03-06 笔记显示方法、装置、终端和存储介质 WO2020192394A1 (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201910228159.1 2019-03-25
CN201910228159.1A CN110083319B (zh) 2019-03-25 2019-03-25 笔记显示方法、装置、终端和存储介质

Publications (1)

Publication Number Publication Date
WO2020192394A1 true WO2020192394A1 (zh) 2020-10-01

Family

ID=67413493

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2020/078201 WO2020192394A1 (zh) 2019-03-25 2020-03-06 笔记显示方法、装置、终端和存储介质

Country Status (2)

Country Link
CN (1) CN110083319B (zh)
WO (1) WO2020192394A1 (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102717063B1 (ko) 2018-12-24 2024-10-15 삼성전자주식회사 전자 장치 및 전자 장치의 제어 방법
CN110083319B (zh) * 2019-03-25 2021-07-16 维沃移动通信有限公司 笔记显示方法、装置、终端和存储介质
CN111556371A (zh) * 2020-05-20 2020-08-18 维沃移动通信有限公司 笔记记录方法及电子设备
CN111723816B (zh) * 2020-06-28 2023-10-27 北京联想软件有限公司 一种教学笔记的获取方法及电子设备
CN111859856A (zh) * 2020-06-30 2020-10-30 维沃移动通信有限公司 信息显示方法、装置、电子设备及存储介质
CN111858686B (zh) * 2020-07-08 2024-05-28 深圳市富途网络科技有限公司 数据显示方法、装置、终端设备及存储介质
CN112087656B (zh) * 2020-09-08 2022-10-04 远光软件股份有限公司 在线笔记生成方法、装置及电子设备

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102347044A (zh) * 2011-05-20 2012-02-08 合一网络技术(北京)有限公司 一种用于嵌入式媒体播放器的同步显示、控制方法和系统及设备
US20130004138A1 (en) * 2011-06-30 2013-01-03 Hulu Llc Commenting Correlated To Temporal Point Of Video Data
US20140033040A1 (en) * 2012-07-24 2014-01-30 Apple Inc. Portable device with capability for note taking while outputting content
CN105912192A (zh) * 2016-03-31 2016-08-31 联想(北京)有限公司 一种显示控制方法及电子设备
CN106445144A (zh) * 2016-09-27 2017-02-22 宇龙计算机通信科技(深圳)有限公司 一种笔记方法、装置及终端
CN108197286A (zh) * 2018-01-16 2018-06-22 维沃移动通信有限公司 一种信息显示方法及移动终端
CN110032350A (zh) * 2019-04-16 2019-07-19 维沃移动通信有限公司 一种信息处理方法及终端
CN110083319A (zh) * 2019-03-25 2019-08-02 维沃移动通信有限公司 笔记显示方法、装置、终端和存储介质

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4815962B2 (ja) * 2005-09-12 2011-11-16 ソニー株式会社 再生装置および再生方法、プログラム、並びに、プログラム格納媒体
CN101502104A (zh) * 2006-06-30 2009-08-05 索尼株式会社 信息处理设备，信息处理方法，记录介质和程序
CN101924863A (zh) * 2010-05-21 2010-12-22 中山大学 一种数字电视设备
WO2013006002A2 (ko) * 2011-07-06 2013-01-10 (주)터치엔 디지털 기반의 지식 정보 카드, 그 카드 생성 방법, 시스템, 컴퓨터 판독 가능한 기록 매체 및 디지털 기반의 지식 정보 카드를 이용한 카드북의 생성방법.
US20150206444A1 (en) * 2014-01-23 2015-07-23 Zyante, Inc. System and method for authoring animated content for web viewable textbook data object
JP6320982B2 (ja) * 2014-11-26 2018-05-09 ネイバー コーポレーションＮＡＶＥＲ Ｃｏｒｐｏｒａｔｉｏｎ 翻訳文エディタ提供装置、並びに翻訳文エディタ提供方法
CN104703055A (zh) * 2015-03-13 2015-06-10 天脉聚源（北京）教育科技有限公司 一种视频播放定位方法及装置
CN104795082B (zh) * 2015-03-26 2019-06-21 广州酷狗计算机科技有限公司 音频字幕显示方法、装置及播放器
CN105681890A (zh) * 2016-01-26 2016-06-15 广东欧珀移动通信有限公司 一种视频播放终端的字幕显示方法及装置
CN107203498A (zh) * 2016-03-18 2017-09-26 北京京东尚科信息技术有限公司 一种创建电子书的方法、系统及其用户终端和服务器
CN107451139A (zh) * 2016-05-30 2017-12-08 北京三星通信技术研究有限公司 文件资源展示方法、装置及相应智能设备
CN107066619B (zh) * 2017-05-10 2021-08-10 广州视源电子科技股份有限公司 基于多媒体资源的用户笔记生成方法、装置和终端
CN207410451U (zh) * 2017-09-26 2018-05-25 贵州格林耐特科技股份有限公司 一种交互式互联网教学点播系统
CN107992455A (zh) * 2017-10-31 2018-05-04 努比亚技术有限公司 一种文本处理方法、终端及计算机可读存储介质
CN108121987B (zh) * 2018-01-02 2022-04-22 联想(北京)有限公司 一种信息处理方法和电子设备
CN108646994B (zh) * 2018-03-28 2022-02-22 Oppo广东移动通信有限公司 信息处理方法、装置、移动终端及存储介质
CN108762640A (zh) * 2018-05-28 2018-11-06 维沃移动通信有限公司 一种弹幕信息的显示方法和终端
CN109462692A (zh) * 2018-10-29 2019-03-12 努比亚技术有限公司 分屏显示操作方法、移动终端及计算机可读存储介质

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102347044A (zh) * 2011-05-20 2012-02-08 合一网络技术(北京)有限公司 一种用于嵌入式媒体播放器的同步显示、控制方法和系统及设备
US20130004138A1 (en) * 2011-06-30 2013-01-03 Hulu Llc Commenting Correlated To Temporal Point Of Video Data
US20140033040A1 (en) * 2012-07-24 2014-01-30 Apple Inc. Portable device with capability for note taking while outputting content
CN105912192A (zh) * 2016-03-31 2016-08-31 联想(北京)有限公司 一种显示控制方法及电子设备
CN106445144A (zh) * 2016-09-27 2017-02-22 宇龙计算机通信科技(深圳)有限公司 一种笔记方法、装置及终端
CN108197286A (zh) * 2018-01-16 2018-06-22 维沃移动通信有限公司 一种信息显示方法及移动终端
CN110083319A (zh) * 2019-03-25 2019-08-02 维沃移动通信有限公司 笔记显示方法、装置、终端和存储介质
CN110032350A (zh) * 2019-04-16 2019-07-19 维沃移动通信有限公司 一种信息处理方法及终端

Also Published As

Publication number Publication date
CN110083319B (zh) 2021-07-16
CN110083319A (zh) 2019-08-02

Similar Documents

Publication Publication Date Title
WO2020192394A1 (zh) 笔记显示方法、装置、终端和存储介质
WO2021233293A1 (zh) 笔记记录方法及电子设备
WO2020151516A1 (zh) 消息发送方法及移动终端
CN107943390B (zh) 一种文字复制方法及移动终端
US20160117142A1 (en) Multiple-user collaboration with a smart pen system
WO2019196929A1 (zh) 一种视频数据处理方法及移动终端
US8194081B2 (en) Animation of audio ink
CN110830362B (zh) 一种生成内容的方法、移动终端
WO2021088720A1 (zh) 信息发送方法及电子设备
WO2020199988A1 (zh) 内容复制方法及终端
WO2021088752A1 (zh) 消息处理方法和电子设备
CN107358227A (zh) 一种标记识别方法、移动终端以及计算机可读存储介质
WO2020238938A1 (zh) 信息输入方法及移动终端
WO2021031843A1 (zh) 对象位置调整方法及电子设备
CN107864353B (zh) 一种视频录制方法及移动终端
WO2021104160A1 (zh) 编辑方法及电子设备
WO2019114530A1 (zh) 信息提示方法及移动终端
WO2021083036A1 (zh) 消息回复方法、服务器和电子设备
WO2020192383A1 (zh) 页面内容编辑方法及终端
WO2021139613A1 (zh) 信息处理方法及电子设备
KR20220154763A (ko) 이미지 처리 방법 및 전자 장비
WO2021098632A1 (zh) 消息处理方法、电子设备及服务器
WO2020156112A1 (zh) 终端的操作控制方法及终端
WO2020024788A1 (zh) 文字输入方法和终端
WO2017010469A1 (ja) 手書き装置および音声・手書き通信システム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20777124

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20777124

Country of ref document: EP

Kind code of ref document: A1