WO2019192096A1 - 信息传递方法、接收终端设备、发送终端设备及存储介质 - Google Patents

信息传递方法、接收终端设备、发送终端设备及存储介质 Download PDF

Info

Publication number
WO2019192096A1
WO2019192096A1 PCT/CN2018/094800 CN2018094800W WO2019192096A1 WO 2019192096 A1 WO2019192096 A1 WO 2019192096A1 CN 2018094800 W CN2018094800 W CN 2018094800W WO 2019192096 A1 WO2019192096 A1 WO 2019192096A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
emotion
different
color
font
Prior art date
Application number
PCT/CN2018/094800
Other languages
English (en)
French (fr)
Inventor
刘真
Original Assignee
平安科技(深圳)有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 平安科技(深圳)有限公司 filed Critical 平安科技(深圳)有限公司
Publication of WO2019192096A1 publication Critical patent/WO2019192096A1/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/103Formatting, i.e. changing of presentation of documents
    • G06F40/106Display of layout of documents; Previewing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/103Formatting, i.e. changing of presentation of documents
    • G06F40/109Font handling; Temporal or kinetic typography
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174Facial expression recognition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04Real-time or near real-time messaging, e.g. instant messaging [IM]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/06Message adaptation to terminal or network requirements
    • H04L51/063Content adaptation, e.g. replacement of unsuitable content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/06Message adaptation to terminal or network requirements
    • H04L51/066Format adaptation, e.g. format conversion or compression

Definitions

  • the present application relates to the field of communications technologies, and in particular, to an information delivery method, a receiving terminal device, and a transmitting terminal device.
  • the instant messaging application can realize the communication of communication between people, so that users with relatively long distance can also communicate.
  • instant messaging applications when communicating information, instant messaging applications usually only realize the transmission of communication information between people through text information. However, the communication information between people is multi-dimensional.
  • text information can only convey or express the literal meaning of text information. This literal meaning is more limited, but if you don’t understand each other or Without the context, it will be misleading, resulting in less communication information, resulting in narrower communication coverage, resulting in lower communication efficiency between the two parties.
  • the present application provides an information delivery method, a receiving terminal device, a transmitting terminal device, and a computer readable storage medium, which are mainly capable of transmitting communication information that text information cannot be transmitted, can improve the amount of communication information transmitted, and widen the communication coverage. Can improve the communication efficiency of both parties.
  • an information delivery method is provided, which is applied to a receiving terminal device, and includes:
  • an information delivery method is provided, which is applied to a transmitting terminal device, and includes:
  • Transmitting the text information and the emotion information to the receiving terminal device so that the receiving terminal device queries the combination of the font information and the color information corresponding to the emotion information according to the emotion information, and utilizes the font information and color of the query.
  • the information combination processes the text information and displays the text information.
  • a receiving terminal device including:
  • a receiving unit configured to receive text information input by the sender through the instant messaging application, and the sentiment information that is sent by the sender when the text information is input according to the face information;
  • a query unit configured to query a combination of font information and color information corresponding to the emotion information from a preset emotion model, where the preset emotion model is used to save different emotion information, and different fonts corresponding to the different emotion information a combination of information and color information;
  • a processing unit configured to process the text information by using the combined font information and color information
  • a display unit configured to display the processed text information.
  • a transmitting terminal device including:
  • a collecting unit configured to collect, by using an image sensor, face information of the sender when detecting that the text information is input through the instant messaging application
  • a recognition unit configured to identify, from the face information, emotion information when the sender inputs text information
  • a sending unit configured to send the text information and the emotion information to the receiving terminal device, so that the receiving terminal device queries the combination of the font information and the color information corresponding to the emotion information according to the emotion information, and uses the query
  • the font information and the color information are combined to display the text information to convey the communication information of the sender and the receiver.
  • a computer readable storage medium having stored thereon computer readable instructions which, when executed by a processor, implement an information transfer method as applied to a receiving terminal device A step of.
  • a receiving terminal device comprising a memory, a processor, and computer readable instructions stored on the memory and executable on the processor, the computer readable instructions being executed by the processor At the time, the steps of the information transfer method applied to the receiving terminal device as described above are implemented.
  • a computer readable storage medium having stored thereon computer readable instructions which, when executed by a processor, implement an information transfer method as applied to a transmitting terminal device as described above A step of.
  • a transmitting terminal device comprising a memory, a processor, and computer readable instructions stored on the memory and executable on the processor, the computer readable instructions being executed by the processor At the time, the steps of the information transfer method applied to the transmitting terminal device as described above are implemented.
  • the information delivery method, the receiving terminal device, the transmitting terminal device and the storage medium provided by the application are capable of receiving text information input by the sender through the instant communication application, and the sender identifying the text according to the face information Emotional information at the time of information; a combination of font information and color information corresponding to the emotion information can be queried from a preset emotion model, wherein the preset emotion model is used to store different emotion information, and the different emotion information corresponds to different A combination of font information and color information.
  • the text information can be processed by using the combined font information and color information, and the processed text information can be displayed, so that the communication information of the sender and the receiver can be transmitted through the text information and the emotion information.
  • communication information that cannot be transmitted by text information can be transmitted, and the amount of communication information transmitted can be increased, and communication coverage can be broadened, thereby improving communication efficiency between the two parties.
  • FIG. 1 is a flowchart of an information delivery method provided by an embodiment of the present application
  • FIG. 2 is a flowchart of another information delivery method provided by an embodiment of the present application.
  • FIG. 3 is a flowchart of still another information delivery method provided by an embodiment of the present application.
  • FIG. 4 is a flowchart of still another method for transmitting information provided by an embodiment of the present application.
  • FIG. 7 is a schematic diagram showing the physical structure of a receiving terminal device according to an embodiment of the present application.
  • FIG. 10 is a schematic diagram showing the physical structure of a transmitting terminal device according to an embodiment of the present application.
  • FIG. 11 is a schematic structural diagram of an information delivery system according to an embodiment of the present application.
  • the embodiment of the present application provides an information transmission method, which is applied to a receiving terminal device. As shown in FIG. 1 , the method includes:
  • the preset mood model may be used to save different emotion information, and different font information and color information combinations corresponding to the different emotion information.
  • the preset emotion model may be pre-established and saved in the receiving terminal device. Specifically, the emotion may be divided according to different font information and color information combination to obtain different emotion information, and then the difference is established and saved. Correspondence between emotional information and different combinations of font information and color information.
  • the corresponding relationship may be stored in the form of a three-dimensional emotion model, or may be stored in a database form, which is not limited in the embodiment of the present application.
  • the information can be: green "I am angry”; if the text message sent by the sender is: I am angry, the emotional information is: smile, the combination of the font information and color information that can be queried can be yellow Chinese color cloud, receiving The text message displayed by the terminal device can be: yellow "I am angry”.
  • the function of establishing a preset emotion model is also supported.
  • the preset emotion model may be established, including: dividing the emotion into different emotion types according to different font types; according to different colors.
  • the type will respectively divide the same emotion type into different emotional intensity levels, and divide the same emotional intensity into different emotional durations according to the different color depths of the corresponding color types; respectively establish the different font types and Determining a correspondence between different emotion types, the different color types, the different emotional intensity levels, the different color shade levels, and the different emotional durations, and saving to the preset emotion models in. That is, each type of emotion corresponds to one type of font; each type of emotion corresponds to one color, and different emotion durations correspond to different color shades.
  • the font type may be a square positive body, a square positive body, a baby body, a Chinese color cloud body, an isometric body, etc.
  • the emotion type may be smile, pleasure, happiness, disgust, sadness, anger, fear, etc.
  • the type of emotion; the color type may be red, yellow, green, blue, pink, etc.
  • the intensity of the emotion may be expressed by a strong level of emotion, and the strong level of the emotion may be classified into a light level, a medium level, and a heavy level. It can be divided into a lighter grade, a light grade, a medium grade, a heavy grade, a severity grade, etc., and is not limited in this embodiment.
  • the degree of color depth may be expressed by a color depth level, which may be a deep level, a medium level, a shallow level, or may be a deep level, a deep level medium level, a shallow level, a lighter level, etc.
  • the emotion continues
  • the time may be expressed in terms of an emotional duration range, which may be divided into a first time range, a second time range, a third time range, and the like.
  • the embodiments of the present application illustrate the correspondence between the font type and the emotion type, the color type and the intensity of the emotion, the degree of the color shade, and the emotional duration, but are not limited thereto:
  • the smile corresponds to the young round body
  • the peace corresponds to the Chinese color cloud
  • the intensity of the heavy level corresponds to the intensity of the red
  • the middle level of the emotion corresponds to the yellow
  • the light level of the emotion strongly corresponds to the green
  • the emotional duration falls into the first
  • the corresponding color depth is deep level and the emotion duration falls within the second time range
  • the corresponding color depth is medium level
  • the emotion duration falls into the third time range
  • the corresponding color depth is Shallow level.
  • Another information delivery method provided by the embodiment of the present application is capable of receiving text information input by a sender through an instant communication application, and emotion information when the sender identifies the text information according to the face information;
  • the preset emotion model is configured to query a combination of font information and color information corresponding to the emotion information, where the preset emotion model is used to save different emotion information, and different font information and color information combinations corresponding to the different emotion information.
  • the text information can be processed by using the combined font information and color information, and the processed text information can be displayed, so that the communication information of the sender and the receiver can be transmitted through the text information and the emotion information.
  • communication information that cannot be transmitted by text information can be transmitted, and the amount of communication information transmitted can be increased, and communication coverage can be broadened, thereby improving communication efficiency between the two parties.
  • the face information of the sender is collected by the image sensor and the emotion information when the sender inputs the text information is identified from the face information.
  • the receiving terminal device can query the combination of the font information and the color information corresponding to the emotion information by using the step 302, and process the text information by using the combined font information and color information, and display the text information.
  • the text information is such that the communication information of the sender and the receiver can be delivered.
  • Each of the emotion types corresponds to a preset feature offset vector combination, and when the feature offset vector combination matches a preset feature offset vector combination of a certain emotion type, the emotion type can be identified.
  • the recognized emotion type may be a smile; if the obtained eye pupil is placed large, the eyebrows are greatly wrinkled. The wrinkles on the forehead are greatly wrinkled, and the corners of the mouth are deeply sunk.
  • the type of emotions identified can be anger and so on.
  • the sender's mouth is slightly opened, the corner of the mouth is slightly upturned, the outline of the laughing muscle is highlighted, and the type of emotion recognized may be a smile, and the font type according to the smile may be: Chinese color cloud; the mouth opening level is The light grade, the upper corner of the mouth angle is light grade, the smiley muscle outline is light grade, and the smile of comprehensive judgment recognition can be a light grade smile.
  • the color according to the light grade smile can be green, according to the continuous short
  • the green color of the smile time can be light green.
  • the information transmission method when detecting the input of the text information by the instant messaging application, the face information of the sender can be collected by the image sensor and the said face information is recognized from the face information Transmitting the emotion information when the text information is input; and transmitting the text information and the emotion information to the receiving terminal device, so that the receiving terminal device can query the combination of the font information and the color information corresponding to the emotion information And processing the text information by using the combined font information and color information; and displaying the processed text information, enabling communication of the sender and the receiver through the text information and the emotion information, thereby enabling the text to be transmitted Communication information that cannot be transmitted by information can increase the amount of communication information transmitted and broaden the communication coverage, thereby improving communication efficiency between the two parties.
  • the embodiment of the present application provides a receiving terminal device.
  • the device includes: a receiving unit 51, a query unit 52, a processing unit 53, and a display unit 54.
  • the receiving unit 51 may be configured to receive text information input by the sender through the instant messaging application, and the emotion information when the sender inputs the text information according to the face information.
  • the query unit 52 may be configured to query, from the preset emotion model, a combination of font information and color information corresponding to the emotion information, where the preset emotion model is used to save different emotion information, and the different emotion information corresponds to A combination of different font information and color information.
  • the processing unit 53 may be further configured to process the text information by using a combined font type, a color type, and a color depth degree.
  • the dividing unit 55 can be configured to divide the emotion into different emotion types according to different font types.
  • the establishing unit 56 may be configured to respectively establish the different font types and the different mood types, the different color types and the different emotional intensity levels, the different color depth levels, and the The correspondence between different emotional durations.
  • the saving unit 57 may be configured to save the correspondence relationship into the preset emotion model.
  • the saving unit 57 is a main function module in the device that saves the corresponding relationship into the preset emotion model.
  • the embodiment of the present application further provides a computer readable storage medium, which may be a non-volatile readable storage medium, on which a computer may be stored.
  • a read command that, when executed by the processor, implements the steps of applying the information transfer method to the receiving terminal device as described above.
  • the embodiment of the present application further provides an entity structure diagram of the receiving terminal device.
  • the receiving terminal device includes: A processor 61, a memory 62, and computer readable instructions stored on the memory 62 and operative on the processor, wherein the memory 62 and the processor 61 are both disposed on a bus 63, the processor 61 executing the computer readable
  • the step of applying the information transfer method applied to the receiving terminal device as described above is implemented at the time of instruction.
  • the embodiment of the present application provides a transmitting terminal device.
  • the device includes: an acquiring unit 71, an identifying unit 72, and a sending unit 73.
  • the identifying unit 72 may be configured to identify, from the face information, emotion information when the sender inputs text information.
  • the sending unit 73 may be configured to send the text information and the emotion information to the receiving terminal device, so that the receiving terminal device queries the combination of the font information and the color information corresponding to the emotion information, and uses the query to The font information and the color information are combined to process the text information and display the text information.
  • the identifying unit 72 may specifically include: a comparing module 721 and an identifying module 722, as shown in FIG.
  • the comparison module 721 can be configured to compare the current facial features and the preset standard facial features to obtain a feature offset vector combination of facial features.
  • the identifying module 722 can be configured to identify, according to the combination of the feature offset vector and the preset feature offset vector, an emotion type when the sender inputs text information.
  • the identification module 722 is further configured to identify an emotional intensity of the emotional type according to the degree of offset of the feature offset vector combination, and identify the emotional intensity according to the duration of the offset degree. The duration of the emotions.
  • the sending unit 73 is specifically configured to send the text information and the emotion type, the emotional intensity level, and the emotional duration to the receiving terminal device.
  • the embodiment of the present application further provides a computer readable storage medium, which may be a non-volatile readable storage medium, on which a computer may be stored.
  • a read command that, when executed by the processor, implements the steps of the information transfer method applied to the transmitting terminal device as described above.
  • the embodiment of the present application further provides a physical structure diagram of the transmitting terminal device.
  • the transmitting terminal device includes: A processor 81, a memory 82, and computer readable instructions stored on the memory 82 and operative on the processor, wherein the memory 82 and the processor 81 are both disposed on a bus 83, the processor 81 executing the computer readable At the time of instruction, the steps of the information transfer method applied to the transmitting terminal device as described above are implemented.
  • the embodiment of the present application further provides an information delivery system. As shown in FIG. 11, the system includes a transmitting terminal device 91 and a receiving terminal device 92.
  • the sending terminal device 91 may be configured to: when detecting the input of the text information by the instant messaging application, collecting the face information of the sender through the image sensor and identifying the input text information of the sender from the face information Emotional information; and transmitting the text information and the emotional information to the receiving terminal device 92.
  • the receiving terminal device 92 may be configured to query, according to the emotion information, a combination of font information and color information corresponding to the emotion information, and process the text information by using the combined font information and color information, and display the Textual information.
  • the face information of the sender when it is detected that the text information is input through the instant messaging application, the face information of the sender can be collected by the image sensor and the emotion when the sender inputs the text information can be identified from the face information. And transmitting the text information and the emotion information to the receiving terminal device, so that the receiving terminal device can query the combination of the font information and the color information corresponding to the emotion information, and utilize the queried font information. Combining the color information with the color information; and displaying the processed text information, the communication information of the sender and the receiver can be transmitted through the text information and the emotion information, thereby transmitting the communication information that the text information cannot be transmitted, and Improve the amount of communication information passed, so as to improve the communication efficiency of both parties.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • General Engineering & Computer Science (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Artificial Intelligence (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本申请公开了一种信息传递方法、接收终端设备、发送终端设备及存储介质,涉及通信技术领域,能够提高传递的沟通信息量,扩宽沟通覆盖面,从而能够提高沟通双方的沟通效率。所述方法包括:接收发送方通过即时通信应用输入的文本信息,以及根据人脸信息识别的所述发送方在输入所述文本信息时的情绪信息;从预设情绪模型中查询与所述情绪信息对应的字体信息和色彩信息组合,所述预设情绪模型用于保存不同情绪信息,以及所述不同情绪信息对应的不同的字体信息和色彩信息组合;利用查询到的字体信息和色彩信息组合处理所述文本信息;并显示处理后的文本信息。本申请适用于信息传递。

Description

信息传递方法、接收终端设备、发送终端设备及存储介质
本申请要求于2018年4月3日提交中国专利局、申请号为201810305657.7、发明名称为“信息传递方法、接收终端设备及发送终端设备”的中国专利申请的优先权,其全部内容通过引用结合在申请中。
技术领域
本申请涉及通信技术领域,尤其是涉及一种信息传递方法、接收终端设备及发送终端设备。
背景技术
随着信息技术的不断发展,各种即时通信应用随之出现并得到了广泛应用。通过即时通信应用可以实现人与人之间沟通信息的传递,使得相对距离较远的用户也可以进行沟通。
目前,在进行信息传递时,即时通信应用通常仅通过文本信息实现人与人之间沟通信息的传递。然而,人与人之间的沟通信息是多种维度的,而通过即时通信应用沟通时,文本信息只能传递或者表达文本信息的字面意思,这种字面意思较为局限,但如果不了解对方或不结合上下文,就会会错意,造成传递的沟通信息量较少,造成沟通覆盖面较窄,导致沟通双方的沟通效率较低。
发明内容
本申请提供了一种信息传递方法、接收终端设备、发送终端设备及计算机可读存储介质,主要在于能够传递文本信息无法传递的沟通信息,能够提高传递的沟通信息量,扩宽沟通覆盖面,从而能够提高沟通双方的沟通效率。
根据本申请的第一个方面,提供一种信息传递方法,应用于接收终端设备,包括:
接收发送方通过即时通信应用输入的文本信息,以及根据人脸信息识别的所述发送方在输入所述文本信息时的情绪信息;
从预设情绪模型中查询与所述情绪信息对应的字体信息和色彩信息组合,所述预设情绪模型用于保存不同情绪信息,以及所述不同情绪信息对应的不同的字体信息和色彩信息组合;
利用查询到的字体信息和色彩信息组合处理所述文本信息;
显示处理后的文本信息。
根据本申请的第二个方面,提供一种信息传递方法,应用于发送终端设备,包括:
当检测到通过即时通信应用输入文本信息时,通过图像传感器采集发送方的人脸信息并从所述人脸信息中识别出所述发送方输入文本信息时的情绪信息;
将所述文本信息和所述情绪信息发送给接收终端设备,使得所述接收终端设备根据所述情绪信息查询与所述情绪信息对应的字体信息和色彩信息组合,利用查询到的字体信息和色彩信息组合处理所述文本信息,并显示所述文本信息。
根据本申请的第三个方面,提供一种接收终端设备,包括:
接收单元,用于接收发送方通过即时通信应用输入的文本信息,以及根据人脸信息识别的所述发送方在输入所述文本信息时的情绪信息;
查询单元,用于从预设情绪模型中查询与所述情绪信息对应的字体信息和色彩信息组合,所述预设情绪模型用于保存不同情绪信息,以及所述不同情绪信息对应的不同的字体信息和色彩信息组合;
处理单元,用于利用查询到的字体信息和色彩信息组合处理所述文本信息;
显示单元,用于显示处理后的所述文本信息。
根据本申请的第四个方面,提供一种发送终端设备,包括:
采集单元,用于当检测到通过即时通信应用输入文本信息时,通过图像传感器采集发送方的人脸信息;
识别单元,用于从所述人脸信息中识别出所述发送方输入文本信息时的情绪信息;
发送单元,用于将所述文本信息和所述情绪信息发送给接收终端设备,使得所述接收终端设备根据所述情绪信息查询与所述情绪信息对应的字体信息和色彩信息组合,并利用查询到的字体信息和色彩信息组合显示所述文本信息,以传递所述发送方和接收方的沟通信息。
根据本申请的第五个方面,提供一种计算机可读存储介质,其上存储有计算机可读指令,该计算机可读指令被处理器执行时,实现如上述应用于接收终端设备的信息传递方法的步骤。
根据本申请的第六个方面,提供一种接收终端设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机可读指令,该计算机可读指令被所述处理器执行时,实现如上述应用于接收终端设备的信息传递方法的步骤。
根据本申请的第七个方面,提供一种计算机可读存储介质,其上存储有计算机可读指令,该计算机可读指令被处理器执行时,实现如上述应用于发送终端设备的信息传递方法的步骤。
根据本申请的第八个方面,提供一种发送终端设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机可读指令,该计算机可读指令被所述处理器执行时,实现如上述应用于发送终端设备的信息传递方法的步骤。
本申请提供的一种信息传递方法、接收终端设备、发送终端设备及存储介质,能够接收发送方通过即时通信应用输入的文本信息,以及根据人脸信息识别的所述发送方在输入所述文本信息时的情绪信息;能够从预设情绪模型中查询与所述情绪信息对应的字体信息和色彩信息组合,所述预设情绪模型用于保存不同情绪信息,以及所述不同情绪信息对应的不同字体信息和色彩信息组合。与此同时,能够利用查询到的字体信息和色彩信息组合处理所述文本信息;并显示处理后的文本信息,从而能够实现通过文本信息和情绪信息传递所述发送方和接收方的沟通信息,进而能够传递文本信息无法传递的沟通信息,能够提高传递的沟通信息量,扩宽沟通覆盖面,从而能够提高沟通双方的沟通效率。
附图说明
图1示出了本申请实施例提供的一种信息传递方法流程图;
图2示出了本申请实施例提供的另一种信息传递方法流程图;
图3示出了本申请实施例提供的又一种信息传递方法流程图;
图4示出了本申请实施例提供的再一种信息传递方法流程图;
图5示出了本申请实施例提供的一种接收终端设备的结构示意图;
图6示出了本申请实施例提供的另一种接收终端设备的结构示意图;
图7示出了本申请实施例提供的一种接收终端设备的实体结构示意图;
图8示出了本申请实施例提供的一种发送终端设备的结构示意图;
图9示出了本申请实施例提供的另一种发送终端设备的结构示意图;
图10示出了本申请实施例提供的一种发送终端设备的实体结构示意图;
图11示出了本申请实施例提供的一种信息传递系统的结构示意图。
具体实施方式
下文中将参考附图并结合实施例来详细说明本申请。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。
本申请实施例提供了一种信息传递方法,应用于接收终端设备,如图1所示,所述方法包括:
101、接收发送方通过即时通信应用输入的文本信息,以及根据人脸信息识别的所述发送方在输入所述文本信息时的情绪信息。
其中,所述接收终端设备可以为智能手机、平板电脑等。发送方和接收方为了实现沟通,需要在各种对应的发送终端设备和接收终端上分别安装即时通信应用。所述即时通信应用可以支持各种语言版本,所述文本信息可以为中文文本信息、英文文本信息、德文文本信息等等。所述人脸信息可以为发送终端设备的摄像头采集的,也可以为发送终端设备上能够实现图像采集功能的任意模块、器件或设备采集的,所述人脸信息可以包括脸部表情,脸部表情是一种可完成精细信息沟通的体语形式,人脸有数十块肌肉,可产生极其丰富的表情,准确表达各种不同的情绪或者情感,所述情绪信息可以为微笑、愉悦、开心、厌恶、悲伤、愤怒、恐惧等信息,例如,人脸表现微笑、愉悦、开心等积极情绪的五官关键部位可以有嘴、颊、眉、额;人脸表现厌恶的五官关键部位可以有鼻、嘴、颊;人脸表现厌恶的五官关键部位可以有眉、颊、眼睛及眼睑。
102、从预设情绪模型中查询与所述情绪信息对应的字体信息和色彩信息组合。
其中,所述预设情绪模型可以用于保存不同情绪信息,以及所述不同情绪信息对应的不同的字体信息和色彩信息组合。所述预设情绪模型可以为预先建立并保存在接收终端设备中的,具体地,可以按照不同的字体信息和色彩信息组合对情绪进行划分,得到不同的情绪信息,然后建立并保存所述不同的情绪信息与不同的字体信息和色彩信息组合之间的对应关系。所述对应关系可以为三维情绪模型的形式存储,也可以为以数据库形式存储,本申请实施例不做限定。
需要说明的是,所述字体信息可以为字体类型,所述色彩信息可以为色彩类型,即不同情绪信息对应不同的字体类型和色彩类型组合,可以根据不同的字体类型和色彩类型组合表达不同的情绪。例如,接收终端设备接收到发送方发送文本信息时的情绪是平和的,根据平和查询到的字体可以为幼圆体,查询到的色彩可以为绿色,即查询用绿色的幼圆体来表达平和的情绪。
103、利用查询到的字体信息和色彩信息组合处理所述文本信息,并显示处理后的文本信息。
例如,若发送方发送的文本信息为:我生气了,情绪信息为:愤怒,则查询到的字体信息和色彩信息组合可以为红色的方正舒体,接收终端设备显示的文本信息可以为:红色的“我生气了”;若发送方发送的文本信息为:我生气了,情绪信息为:平和,则查询到的字体信息和色彩信息组合可以为绿色的幼圆体,接收终端设备显示的文本信息可以为:绿色的“我生气了”;若发送方发送的文本信息为:我生气了,情绪信息为:微笑,则查询到的字体信息和色彩信息组合可以为黄色的华文彩云体,接收终端设备显示的文本信息可以为:黄色的“我生气了”。
通过上述例子可知,接收方根据接收终端设备显示“我生气了”的字体和色彩,即可以区分出发送方在发送“我生气了”时的情绪,从而能够更好的分辨出发送方在发送文本信息时的意思,与单纯发送文本信息相比,本申请实施例能够传递文本信息无法传递的沟通信息,能够提高传递的沟通信息量,扩宽沟通覆盖面,从而能够提高沟通双方的沟通效率。
本申请实施例提供的一种信息传递方法,能够接收发送方通过即时通信应用输入的文本信息,以及根据人脸信息识别的所述发送方在输入所述文本信息时的情绪信息;能够从预设情绪模型中查询与所述情绪信息对应的字体信息和色彩信息组合,所述预设情绪模型用于保存不同情绪信息,以及所述不同情绪信息对应的不同字体信息和色彩信息组合。与此同时,能够利用查询到的字体信息和色彩信息组合处理所述文本信息;并显示处理后的文本信息,从而能够实现通过文本信息和情绪信息传递所述发送方和接收方的沟通信息,进而能够传递文本信息无法传递的沟通信息,能够提高传递的沟通信息量,扩宽沟通覆盖面,从而能够提高沟通双方的沟通效率。
进一步的,为了更好的说明上述信息传递的过程,本申请实施例提供了另一种信息传递方法,如图2所示,所述方法包括:
201、接收发送方通过即时通信应用输入的文本信息,以及根据人脸信息识别的所述发送方在输入所述文本信息时的情绪信息。
其中,所述情绪信息可以包括情绪类型、所述情绪类型的情绪强烈程度和所述情绪强烈程度的情绪持续时间。
对于本申请实施例,还支持建立预设情绪模型的功能,具体地可以在步骤201之前,建立预设情绪模型,包括:按照不同的字体类型将情绪划分为不同的情绪类型;按照不同的色彩类型将分别将同一情绪类型划分为不同的情绪强烈程度,并按照对应色彩类型的不同的色彩深浅程度分别将同一情绪强烈程度划分为不同的情绪持续时间;分别建立所述不同的字体类型与所述不同的情绪类型、所述不同的色彩类型与所述不同的情绪强烈程度、所述不同的色彩深浅程度与所述不同的情绪持续时间之间的对应关系并保存到所述预设情绪模型中。即每一种情绪类型对应一种字体;每一种情感强烈程度对应一种颜色、不同的情绪持续时间对应不同的颜色深浅度。
具体地,所述字体类型可以为方正舒体、方正姚体、幼圆体、华文彩云体、等线体等,所述情绪类型可以为微笑、愉悦、开心、厌恶、悲伤、愤怒、恐惧等情绪类型;所述色彩类型可以为红、黄、绿、蓝、粉等,所述情绪强烈程度可以通过情绪强烈等级表示,所述情绪强烈等级可以分为轻等级、中等级、重等级,也可以分为较轻等级、轻等级、中等级、重等级,严重等级等,本申请实施例不做限定。所述色彩深浅程度可以色彩深浅等级表示,所述色彩深浅等级可以深等级、中等级、浅等级、也可以为较深等级、深等级中等级、浅等级、较浅等级等,所述情绪持续时间可以为以情绪持续时间范围来表示,时间范围可以分为第一时间范围、第二时间范围、第三时间范围等。
为了更好的理解本申请实施例,本申请实施例对字体类型和情绪类型、色彩类型与情绪强烈程度、色彩深浅程度与情绪持续时间之间的对应关系进行举例说明,但不限于此:愤怒对应方正舒体、微笑对应幼圆体、平和对应华文彩云体、重等级的情绪强烈程度对应红色、中等级的情绪强烈程度对应黄色、轻等级的情绪强烈程度对应绿色、情绪持续时间落入第一时间范围时,对应的色彩深浅程度为深等级、情绪持续时间落入第二时间范围时,对应色彩深浅程度为中等级的、情绪持续时间落入第三时间范围时,对应色彩深浅程度为浅等级。
202、当所述情绪信息包括情绪类型和所述情绪类型的情绪强烈程度时,从所述预设情绪模型中查询与所述情绪类型对应的字体类型。
203、从所述预设情绪模型中查询与所述情绪强烈程度对应的色彩类型。
其中,所述预设情绪模型具体用于保存不同的情绪类型,以及所述不同情绪类型对应的不同的字体类型,所述不同的情绪类型对应的不同的情绪强烈程度,以及所述不同的情绪强烈程度对应的不同的色彩类型。
204、利用查询到的字体类型和色彩类型组合处理所述文本信息,并显示处理后的文本信息。
对于本申请实施例,为了进一步地提升沟通双方的沟通效率,所述情绪信息还包括所述情绪类型的情绪持续时间,在步骤204之前,所述方法还包括:从所述预设情绪模型中查询与所述持续时间对应的色彩深浅程度,所述预设情绪模型具体还保存有不同情绪持续时间对应的不同色彩深浅程度。此时,所述步骤204具体可以为:利用查询到的字体类型、色彩类型和色彩深浅程度组合处理所述文本信息,并显示处理后的文本信息。
例如,若发送方发送的文本信息为:我生气了,情绪类型为:愤怒、情绪强烈程度为重等级、情绪持续时间落入第一时间范围内,则查询到的字体信息和色彩信息组合可以为深红色的方正舒体,接收终端设备显示的文本信息可以为:深红色的“我生气了”;若发送方发送的文本信息为:我生气了,情绪类型为:平和、情绪强烈程度为中等级、情绪持续时间落入第二时间范围内,则查询到的字体信息和色彩信息组合可以为中等级黄色的幼圆体,接收终端设备显示的文本信息可以为:中等级黄色的“我生气了”;若发送方发送的文本信息为:我生气了,情绪类型为:微笑、情绪强烈程度为轻等级、情绪持续时间落入第三时间范围内,则查询到的字体信息和色彩信息组合可以为浅绿色的华文彩云体,接收终端设备显示的文本信息可以为:浅绿色的“我生气了”。
本申请实施例提供的另一种信息传递方法,能够接收发送方通过即时通信应用输入的文本信息,以及根据人脸信息识别的所述发送方在输入所述文本信息时的情绪信息;能够从预设情绪模型中查询与所述情绪信息对应的字体信息和色彩信息组合,所述预设情绪模型用于保存不同情绪信息,以及所述不同情绪信息对应的不同字体信息和色彩信息组合。与此同时,能够利用查询到的字体信息和色彩信息组合处理所述文本信息;并显示处理后的文本信息,从而能够实现通过文本信息和情绪信息传递所述发送方和接收方的沟通信息,进而能够传递文本信息无法传递的沟通信息,能够提高传递的沟通信息量,扩宽沟通覆盖面,从而能够提高沟通双方的沟通效率。
相应的地,本申请实施例提供了又一种信息传递方法,应用于发送终端设备,如图3所示,所述方法包括:
301、当检测到通过即时通信应用输入文本信息时,通过图像传感器采集发送方的人脸信息并从所述人脸信息中识别出所述发送方输入文本信息时的情绪信息。
其中,关于采集人脸信息以及人脸信息的相关解释在步骤101进行了详细描述,在此不进行赘述。所述图像传感器为设置在发送移动终端上。本申请实施例,具体可以根据人脸表情的变化、表情幅动程度、表情持续时间,识别发送方的情绪信息。人脸表情可以由人脸五官特征组成,具体地,可以根据人脸五官特征相对预设人脸五官特征的偏移组合,识别各种情绪信息。
需要说明的是,为了提升情绪信息识别的效率,本申请实施例还可以从所述文本信息中提取发送方在做出各个表情时习惯使用的标点符号并进行保存。然后在下次识别情绪信息时,根据保存的标点符号先确定情绪信息,然后再根据人脸信息对情绪信息进行验证和修正。例如,有些用户习惯用“。。。。。。。”表示无奈或者无语,用“!!!!!!!”表示愤怒,用“^_^_^_^_^_^_^_^_^”表示微笑等等。
302、将所述文本信息和所述情绪信息发送给接收终端设备。
对于本申请实施例,通过步骤302能够使得所述接收终端设备查询与所述情绪信息对应的字体信息和色彩信息组合,并利用查询到的字体信息和色彩信息组合处理所述文本信息,并显示所述文本信息,从而能够传递所述发送方和接收方的沟通信息。
本申请实施例提供的又一种信息传递方法,当检测到通过即时通信应用输入文本信息时,能够采集所述发送方的人脸信息并从所述人脸信息中识别出所述发送方在输入文本信息时的情绪信息;并能够将所述文本信息和所述情绪信息发送给接收终端设备,从而能够使得所述接收终端设备查询与所述情绪信息对应的字体信息和色彩信息组合,并利用查询到的字体信息和色彩信息组合处理所述文本信息,并显示所述文本信息,能够实现通过文本信息和情绪信息传递所述发送方和接收方的沟通信息,进而能够传递文本信息无法传递的沟通信息,能够提高传递的沟通信息量,扩宽沟通覆盖面,从而能够提高沟通双方的沟通效率。
进一步的,为了更好的说明上述信息传递的过程,作为对上述实施例的细化和扩展,本申请实施例提供了再一种信息传递方法,如图4所示,所述方法包括:
401、当检测到通过即时通信应用输入文本信息时,通过图像传感器采集发送方的人脸信息并从所述人脸信息中识别出所述发送方输入文本信息时的情绪信息。
402、在所述人脸信息包括当前人脸五官特征时,将所述当前人脸五官特征与预设标准人脸五官特征进行对比,得到人脸五官的特征偏移向量组合。
其中,所述当前人脸五官特征可以为通过人脸识别技术捕捉的,所述预设标准人脸五官特征可以为未做出任何表情时的五官特征,通过对比预设标准人脸五官特征,即可以得到特征偏移向量组合,即可以识别各种情绪信息。
403、根据所述特征偏移向量组合和预设特征偏移向量组合,识别出所述发送方输入文本信息时的情绪类型。
其中,每种情绪类型对应一种预设特征偏移向量组合,当所述特征偏移向量组合和某种情绪类型的预设特征偏移向量组合匹配时,即可以识别出情绪类型。例如,若得到的特征偏移向量组合为识别的嘴巴微微张开、嘴角轻微上翘、笑肌轮廓凸显,则识别情绪类型可以为微笑;若得到的眼睛瞳孔放得较大、眉毛大大皱起、额头皱纹的大大皱起、嘴角深深下沉,则识别的情绪类型可以为发怒等等。
404、根据所述特征偏移向量组合的偏移程度,识别所述情绪类型的情绪强烈程度,并根据所述偏移程度的持续时间,识别所述情绪强烈程度的情绪持续时间。
其中,所述特征偏移向量组合的偏移程度可以为人脸五官的幅动程度,具体地,根据人脸五官的幅动程度等级识别所述情绪类型的情绪强烈程度,例如,可以根据眼睛瞳孔的放大程度等级、嘴巴的张开大小程度等级、嘴角的翘起程度等级、眉毛皱起的程度等级、额头皱纹的皱起程度等级等,识别情绪强烈强度。所述持续时间可以为根据发送终端设备的计时器获取的。具体地,所述偏移程度的持续时间即可以为所述情绪强烈程度的情绪持续时间。
405、将所述文本信息和所述情绪类型、所述情绪强烈程度和所述情绪持续时间发送给接收终端设备。
为了更好的理解本申请实施例,对识别的人脸信息和显示的字体信息和色彩信息进行举例说明:
例如,若识别发送方的嘴巴微微张开、嘴角轻微上翘、笑肌轮廓凸显、识别的情绪类型可以为微笑、根据微笑查询到的字体类型可以为:华文彩云体;识别嘴巴张开等级为轻等级、嘴角上翘等级为轻等级、笑肌轮廓凸显等级为轻等级、综合判断识别的微笑可以为轻等级的微笑,根据轻等级的微笑查询到的色彩可以为绿色、根据持续较短的微笑时间查询到的绿色可以为浅绿色。因此,如果发送方是微笑的输入了“我生气了”,则接收方显示的信息为:浅绿色的“我生气了”。又例如,若识别发送方的眼睛瞳孔放的较大、眉毛大大皱起、额头皱纹大大皱起、嘴角深深下沉、识别的情绪类型可以为发怒、根据发怒识别的字体类型可以为:方正舒体;识别的眼睛瞳孔放大等级为严重级、眉毛皱起程度等级为严重级、嘴角下沉、程度等级为严重级,综合识别发怒的等级为:严重级,根据严重等级查询到的色彩类型可以为红色、根据较长的发怒持续时间较长查询到的红色可以为深颜色的红色。因此,如果发送方是长时间发怒的输入了“我生气了”,则接收方显示的信息可以:深红色的“我生气了”。
本申请实施例提供的再一种信息传递方法,当检测到通过即时通信应用输入文本信息时,能够通过图像传感器采集所述发送方的人脸信息并从所述人脸信息中识别出所述发送方输入文本信息时的情绪信息;并能够将所述文本信息和所述情绪信息发送给接收终端设备,从而能够使得所述接收终端设备查询与所述情绪信息对应的字体信息和色彩信息组合,并利用查询到的字体信息和色彩信息组合处理所述文本信息;并显示处理后的文本信息,能够实现通过文本信息和情绪信息传递所述发送方和接收方的沟通信息,进而能够传递文本信息无法传递的沟通信息,能够提高传递的沟通信息量,扩宽沟通覆盖面,从而能够提高沟通双方的沟通效率。
进一步地,作为图1的具体实现,本申请实施例提供了一种接收终端设备,如图5所示,所述设备包括:接收单元51、查询单元52、处理单元53和显示单元54。
所述接收单元51,可以用于接收发送方通过即时通信应用输入的文本信息,以及根据人脸信息识别的所述发送方输入所述文本信息时的情绪信息。所述查询单元52,可以用于从预设情绪模型中查询与所述情绪信息对应的字体信息和色彩信息组合,所述预设情绪模型用于保存不同情绪信息,以及所述不同情绪信息对应的不同的字体信息和色彩信息组合。
所述处理单元53,可以用于利用查询到的字体信息和色彩信息组合处理所述文本信息。
所述显示单元54,可以用于显示所述文本信息。
对于本申请实施例,所述情绪信息包括情绪类型和所述情绪类型的情绪强烈程度,所述查询单元52,具体可以用于从所述预设情绪模型中查询与所述情绪类型对应的字体类型;并从所述预设情绪模型中查询与所述情绪强烈程度对应的色彩类型,所述预设情绪模型具体用于保存不同的情绪类型,以及所述不同的情绪类型对应的不同的字体类型,所述不同的情绪类型对应的不同的情绪强烈程度,以及所述不同的情绪强烈程度对应的不同的色彩类型。
所述处理单元53,具体可以用于利用查询到的字体类型和色彩类型组合处理所述文本信息。
对于本申请实施例,为了进一步地提高沟通双方的沟通效率,所述查询单元52,具体还可以用于从所述预设情绪模型中查询与所述持续时间对应的色彩深浅程度,所述预设情绪模型具体还用于保存不同情绪持续时间对应的不同色彩深浅程度。
所述处理单元53,具体还可以用于利用查询到的字体类型、色彩类型和色彩深浅程度组合处理所述文本信息。
对于本申请实施例,为了获取预设情绪模型,所述设备还包括:划分单元55、建立单元56和保存单元57,如图6所示。
所述划分单元55,可以用于按照不同的字体类型将情绪划分为不同的情绪类型。
所述划分单元55,还可以用于按照不同的色彩类型将分别将同一情绪类型划分为不同的情绪强烈程度,并按照对应色彩类型的不同的色彩深浅程度分别将同一情绪强烈程度划分为不同的情绪持续时间。
所述建立单元56,可以用于分别建立所述不同的字体类型与所述不同的情绪类型、所述不同的色彩类型与所述不同的情绪强烈程度、所述不同的色彩深浅程度与所述不同的情绪持续时间之间的对应关系。
所述保存单元57,可以用于将所述对应关系保存到所述预设情绪模型中。所述保存单元57是本设备中将所述对应关系保存到所述预设情绪模型中的主要功能模块。
需要说明的是,本申请实施例提供的一种接收终端设备所涉及各功能模块的其他相应描述,可以参考图1所示方法的对应描述,在此不再赘述。
基于上述如图1所示方法,相应的,本申请实施例还提供了一种计算机可读存储介质,该计算机可读存储介质可以为非易失性可读存储介质,其上存储有计算机可读指令,该计算机可读指令被处理器执行时,实现如上述应用于接收终端设备的信息传递方法的步骤。
基于上述如图1所示方法和如图5所示接收终端设备的实施例,本申请实施例还提供了一种接收终端设备的实体结构图,如图7所示,该接收终端设备包括:处理器61、存储器62、及存储在存储器62上并可在处理器上运行的计算机可读指令,其中存储器62和处理器61均设置在总线63上所述处理器61执行所述计算机可读指令时实现如上述应用于接收终端设备的信息传递方法的步骤。
进一步地,作为图1的具体实现,本申请实施例提供了一种发送终端设备,如图8所示,所述设备包括:采集单元71、识别单元72和发送单元73。
所述采集单元71,可以用于当检测到通过即时通信应用输入文本信息时,通过图像传感器采集发送方的人脸信息。
所述识别单元72,可以用于从所述人脸信息中识别出所述发送方输入文本信息时的情绪信息。
所述发送单元73,可以用于将所述文本信息和所述情绪信息发送给接收终端设备,使得所述接收终端设备查询与所述情绪信息对应的字体信息和色彩信息组合,并利用查询到的字体信息和色彩信息组合处理所述文本信息,并显示所述文本信息。
对于本申请实施例,所述识别单元72,具体可以包括:对比模块721和识别模块722,如图9所示。
所述对比模块721,可以用于将所述当前人脸五官特征与预设标准人脸五官特征进行对比,得到人脸五官的特征偏移向量组合。
所述识别模块722,可以用于根据所述特征偏移向量组合和预设特征偏移向量组合,识别出所述发送方输入文本信息时的情绪类型。
所述识别模块722,还可以用于根据所述特征偏移向量组合的偏移程度,识别所述情绪类型的情绪强烈程度,并根据所述偏移程度的持续时间,识别所述情绪强烈程度的情绪持续时间。
所述发送单元73,具体可以用于将所述文本信息和所述情绪类型、所述情绪强烈程度和所述情绪持续时间发送给接收终端设备。
需要说明的是,本申请实施例提供的一种发送终端设备所涉及各功能模块的其他相应描述,可以参考图1所示方法的对应描述,在此不再赘述。
基于上述如图1所示方法,相应的,本申请实施例还提供了一种计算机可读存储介质,该计算机可读存储介质可以为非易失性可读存储介质,其上存储有计算机可读指令,该计算机可读指令被处理器执行时,实现如上述应用于发送终端设备的信息传递方法的步骤。
基于上述如图1所示方法和如图8所示发送终端设备的实施例,本申请实施例还提供了一种发送终端设备的实体结构图,如图10所示,该发送终端设备包括:处理器81、存储器82、及存储在存储器82上并可在处理器上运行的计算机可读指令,其中存储器82和处理器81均设置在总线83上所述处理器81执行所述计算机可读指令时,实现如上述应用于发送终端设备的信息传递方法的步骤。
进一步地,本申请实施例还提供一种信息传递系统,如图11所示,所述系统包括发送终端设备91和接收终端设备92。
所述发送终端设备91,可以用于当检测到通过即时通信应用输入文本信息时,通过图像传感器采集发送方的人脸信息并从所述人脸信息中识别出所述发送方输入文本信息时的情绪信息;并将所述文本信息和所述情绪信息发送给所述接收终端设备92。
所述接收终端设备92,可以用于根据所述情绪信息查询与所述情绪信息对应的字体信息和色彩信息组合,并利用查询到的字体信息和色彩信息组合处理所述文本信息,并显示所述文本信息。
通过本申请的技术方案,当检测到通过即时通信应用输入文本信息时,能够通过图像传感器采集发送方的人脸信息并从所述人脸信息中识别出所述发送方输入文本信息时的情绪信息;并能够将所述文本信息和所述情绪信息发送给接收终端设备,从而能够使得所述接收终端设备查询与所述情绪信息对应的字体信息和色彩信息组合,并利用查询到的字体信息和色彩信息组合处理所述文本信息;并显示处理后的文本信息,能够实现通过文本信息和情绪信息传递所述发送方和接收方的沟通信息,进而能够传递文本信息无法传递的沟通信息,能够提高传递的沟通信息量,从而能够提高沟通双方的沟通效率。
以上所述仅为本申请的优选实施例而已,并不用于限制本申请,对于本领域的技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包括在本申请的保护范围之内。

Claims (20)

  1. 一种信息传递方法,其特征在于,应用于接收终端设备,包括:
    接收发送方通过即时通信应用输入的文本信息,以及根据人脸信息识别的所述发送方在输入所述文本信息时的情绪信息;
    从预设情绪模型中查询与所述情绪信息对应的字体信息和色彩信息组合,所述预设情绪模型用于保存不同情绪信息,以及所述不同情绪信息对应的不同的字体信息和色彩信息组合;
    利用查询到的字体信息和色彩信息组合处理所述文本信息;
    显示处理后的文本信息。
  2. 根据权利要求1所述的方法,其特征在于,所述情绪信息包括情绪类型和所述情绪类型的情绪强烈程度,所述从预设情绪模型中查询与所述情绪信息对应的字体信息和色彩信息组合,具体包括:
    从所述预设情绪模型中查询与所述情绪类型对应的字体类型;
    从所述预设情绪模型中查询与所述情绪强烈程度对应的色彩类型,所述预设情绪模型具体用于保存不同情绪类型,以及所述不同情绪类型对应的不同的字体类型,所述不同情绪类型对应的不同的情绪强烈程度,以及所述不同的情绪强烈程度对应的不同的色彩类型;
    所述利用查询到的字体信息和色彩信息组合处理所述文本信息,具体包括:
    利用查询到的字体类型和色彩类型组合处理所述文本信息。
  3. 根据权利要求2所述的方法,其特征在于,所述情绪信息还包括所述情绪类型的情绪持续时间,所述利用查询到的字体类型和色彩类型显示所述文本信息之前,所述方法还包括:
    从所述预设情绪模型中查询与所述持续时间对应的色彩深浅程度,所述预设情绪模型具体还保存有不同的情绪持续时间对应的不同的色彩深浅程度;
    所述利用查询到的字体信息和色彩类型组合处理所述文本信息,具体包括:
    利用查询到的字体类型、色彩类型和色彩深浅程度组合处理所述文本信息。
  4. 根据权利要求1所述的方法,其特征在于,所述方法还包括:
    按照不同的字体类型将情绪划分为不同的情绪类型;
    按照不同的色彩类型将分别将同一情绪类型划分为不同的情绪强烈程度,并按照对应色彩类型的不同的色彩深浅程度分别将同一情绪强烈程度划分为不同的情绪持续时间;
    分别建立所述不同的字体类型与所述不同的情绪类型、所述不同的色彩类型与所述不同的情绪强烈程度、所述不同的色彩深浅程度与所述不同的情绪持续时间之间的对应关系并保存到所述预设情绪模型中。
  5. 一种信息传递方法,其特征在于,应用于发送终端设备,包括:
    当检测到通过即时通信应用输入文本信息时,通过图像传感器采集发送方的人脸信息并从所述人脸信息中识别出所述发送方输入文本信息时的情绪信息;
    将所述文本信息和所述情绪信息发送给接收终端设备,使得所述接收终端设备查询与所述情绪信息对应的字体信息和色彩信息组合,利用查询到的字体信息和色彩信息组合处理所述文本信息,并显示所述文本信息。
  6. 根据权利要求5所述的信息传递方法,其特征在于,所述人脸信息包括当前人脸五官特征,所述从所述人脸信息中识别出所述发送方输入文本信息时的情绪信息,具体包括:
    将所述当前人脸五官特征与预设标准人脸五官特征进行对比,得到人脸五官的特征偏移向量组合;
    根据所述特征偏移向量组合和预设特征偏移向量组合,识别出所述发送方输入文本信息时的情绪类型;
    根据所述特征偏移向量组合的偏移程度,识别所述情绪类型的情绪强烈程度,并根据所述偏移程度的持续时间,识别所述情绪强烈程度的情绪持续时间;
    所述将所述文本信息和所述情绪信息发送给接收终端设备,具体包括:
    将所述文本信息和所述情绪类型、所述情绪强烈程度和所述情绪持续时间发送给接收终端设备。
  7. 一种接收终端设备,其特征在于,包括:
    接收单元,用于接收发送方通过即时通信应用输入的文本信息,以及根据人脸信息识别的所述发送方在输入所述文本信息时的情绪信息;
    查询单元,用于从预设情绪模型中查询与所述情绪信息对应的字体信息和色彩信息组合,所述预设情绪模型用于保存不同情绪信息,以及所述不同情绪信息对应的不同的字体信息和色彩信息组合;
    处理单元,用于利用查询到的字体信息和色彩信息组合处理所述文本信息;
    显示单元,用于显示处理后的所述文本信息。
  8. 根据权利要求7所述的接收终端设备,其特征在于,所述情绪信息包括情绪类型和所述情绪类型的情绪强烈程度,所述查询单元,具体用于从所述预设情绪模型中查询与所述情绪类型对应的字体类型;并从所述预设情绪模型中查询与所述情绪强烈程度对应的色彩类型,所述预设情绪模型具体用于保存不同的情绪类型,以及所述不同的情绪类型对应的不同的字体类型,所述不同的情绪类型对应的不同的情绪强烈程度,以及所述不同的情绪强烈程度对应的不同的色彩类型;
    所述处理单元,具体用于利用查询到的字体类型和色彩类型组合处理所述文本信息。
  9. 根据权利要求8所述的接收终端设备,其特征在于,所述查询单元,具体用于从所述预设情绪模型中查询与所述持续时间对应的色彩深浅程度,所述预设情绪模型具体还用于保存不同情绪持续时间对应的不同色彩深浅程度。
    所述处理单元,具体用于利用查询到的字体类型、色彩类型和色彩深浅程度组合处理所述文本信息。
  10. 根据权利要求8所述的接收终端设备,其特征在于,所述接收终端设备还包括:
    划分单元,用于按照不同的字体类型将情绪划分为不同的情绪类型;按照不同的色彩类型将分别将同一情绪类型划分为不同的情绪强烈程度,并按照对应色彩类型的不同的色彩深浅程度分别将同一情绪强烈程度划分为不同的情绪持续时间;
    建立单元,用于分别建立所述不同的字体类型与所述不同的情绪类型、所述不同的色彩类型与所述不同的情绪强烈程度、所述不同的色彩深浅程度与所述不同的情绪持续时间之间的对应关系;
    保存单元,用于将所述对应关系保存到所述预设情绪模型中。
  11. 一种发送终端设备,其特征在于,包括:
    采集单元,用于当检测到通过即时通信应用输入文本信息时,通过图像传感器采集发送方的人脸信息;
    识别单元,用于从所述人脸信息中识别出所述发送方输入文本信息时的情绪信息;
    发送单元,用于将所述文本信息和所述情绪信息发送给接收终端设备,使得所述接收终端设备查询与所述情绪信息对应的字体信息和色彩信息组合,并利用查询到的字体信息和色彩信息组合显示所述文本信息,以传递所述发送方和接收方的沟通信息。
  12. 根据权利要求11所述的发送终端设备,其特征在于,所述识别单元包括:
    对比模块,用于将所述当前人脸五官特征与预设标准人脸五官特征进行对比,得到人脸五官的特征偏移向量组合;
    识别模块,用于根据所述特征偏移向量组合和预设特征偏移向量组合,识别出所述发送方输入文本信息时的情绪类型;根据所述特征偏移向量组合的偏移程度,识别所述情绪类型的情绪强烈程度,并根据所述偏移程度的持续时间,识别所述情绪强烈程度的情绪持续时间;
    所述发送单元,还具体用于将所述文本信息和所述情绪类型、所述情绪强烈程度和所述情绪持续时间发送给接收终端设备。
  13. 一种计算机可读存储介质,其上存储有计算机可读指令,其特征在于,所述计算机可读指令被处理器执行时实现以下步骤:
    接收发送方通过即时通信应用输入的文本信息,以及根据人脸信息识别的所述发送方在输入所述文本信息时的情绪信息;
    从预设情绪模型中查询与所述情绪信息对应的字体信息和色彩信息组合,所述预设情绪模型用于保存不同情绪信息,以及所述不同情绪信息对应的不同的字体信息和色彩信息组合;
    利用查询到的字体信息和色彩信息组合处理所述文本信息;
    显示处理后的文本信息。
  14. 根据权利要求13所述的计算机可读存储介质,其特征在于,所述情绪信息包括情绪类型和所述情绪类型的情绪强烈程度,所述从预设情绪模型中查询与所述情绪信息对应的字体信息和色彩信息组合,具体包括:
    从所述预设情绪模型中查询与所述情绪类型对应的字体类型;
    从所述预设情绪模型中查询与所述情绪强烈程度对应的色彩类型,所述预设情绪模型具体用于保存不同情绪类型,以及所述不同情绪类型对应的不同的字体类型,所述不同情绪类型对应的不同的情绪强烈程度,以及所述不同的情绪强烈程度对应的不同的色彩类型;
    所述利用查询到的字体信息和色彩信息组合处理所述文本信息,具体包括:
    利用查询到的字体类型和色彩类型组合处理所述文本信息。
  15. 根据权利要求14所述的计算机可读存储介质,其特征在于,所述情绪信息还包括所述情绪类型的情绪持续时间,所述计算机可读指令被处理器执行时还实现以下步骤:
    从所述预设情绪模型中查询与所述持续时间对应的色彩深浅程度,所述预设情绪模型具体还保存有不同的情绪持续时间对应的不同的色彩深浅程度;
    所述利用查询到的字体信息和色彩类型组合处理所述文本信息,具体包括:
    利用查询到的字体类型、色彩类型和色彩深浅程度组合处理所述文本信息。
  16. 根据权利要求13所述的计算机可读存储介质,其特征在于,所述计算机可读指令被处理器执行时还实现以下步骤:
    按照不同的字体类型将情绪划分为不同的情绪类型;
    按照不同的色彩类型将分别将同一情绪类型划分为不同的情绪强烈程度,并按照对应色彩类型的不同的色彩深浅程度分别将同一情绪强烈程度划分为不同的情绪持续时间;
    分别建立所述不同的字体类型与所述不同的情绪类型、所述不同的色彩类型与所述不同的情绪强烈程度、所述不同的色彩深浅程度与所述不同的情绪持续时间之间的对应关系并保存到所述预设情绪模型中。
  17. 一种计算机可读存储介质,其上存储有计算机可读指令,其特征在于,所述计算机可读指令被处理器执行时实现以下步骤:
    当检测到通过即时通信应用输入文本信息时,通过图像传感器采集发送方的人脸信息并从所述人脸信息中识别出所述发送方输入文本信息时的情绪信息;
    将所述文本信息和所述情绪信息发送给接收终端设备,使得所述接收终端设备查询与所述情绪信息对应的字体信息和色彩信息组合,利用查询到的字体信息和色彩信息组合处理所述文本信息,并显示所述文本信息。
  18. 根据权利要求17所述的计算机可读存储介质,其特征在于,所述人脸信息包括当前人脸五官特征,所述从所述人脸信息中识别出所述发送方输入文本信息时的情绪信息,具体包括:
    将所述当前人脸五官特征与预设标准人脸五官特征进行对比,得到人脸五官的特征偏移向量组合;
    根据所述特征偏移向量组合和预设特征偏移向量组合,识别出所述发送方输入文本信息时的情绪类型;
    根据所述特征偏移向量组合的偏移程度,识别所述情绪类型的情绪强烈程度,并根据所述偏移程度的持续时间,识别所述情绪强烈程度的情绪持续时间;
    所述将所述文本信息和所述情绪信息发送给接收终端设备,具体包括:
    将所述文本信息和所述情绪类型、所述情绪强烈程度和所述情绪持续时间发送给接收终端设备。
  19. 一种接收终端设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机可读指令,其特征在于,所述处理器执行所述计算机可读指令时实现以下步骤:
    接收发送方通过即时通信应用输入的文本信息,以及根据人脸信息识别的所述发送方在输入所述文本信息时的情绪信息;
    从预设情绪模型中查询与所述情绪信息对应的字体信息和色彩信息组合,所述预设情绪模型用于保存不同情绪信息,以及所述不同情绪信息对应的不同的字体信息和色彩信息组合;
    利用查询到的字体信息和色彩信息组合处理所述文本信息;
    显示处理后的文本信息。
  20. 一种发送终端设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机可读指令,其特征在于,所述处理器执行所述计算机可读指令时实现以下步骤:
    当检测到通过即时通信应用输入文本信息时,通过图像传感器采集发送方的人脸信息并从所述人脸信息中识别出所述发送方输入文本信息时的情绪信息;
    将所述文本信息和所述情绪信息发送给接收终端设备,使得所述接收终端设备查询与所述情绪信息对应的字体信息和色彩信息组合,利用查询到的字体信息和色彩信息组合处理所述文本信息,并显示所述文本信息。
PCT/CN2018/094800 2018-04-03 2018-07-06 信息传递方法、接收终端设备、发送终端设备及存储介质 WO2019192096A1 (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201810305657.7 2018-04-03
CN201810305657.7A CN108521369B (zh) 2018-04-03 2018-04-03 信息传递方法、接收终端设备及发送终端设备

Publications (1)

Publication Number Publication Date
WO2019192096A1 true WO2019192096A1 (zh) 2019-10-10

Family

ID=63431635

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2018/094800 WO2019192096A1 (zh) 2018-04-03 2018-07-06 信息传递方法、接收终端设备、发送终端设备及存储介质

Country Status (2)

Country Link
CN (1) CN108521369B (zh)
WO (1) WO2019192096A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109525725B (zh) * 2018-11-21 2021-01-15 三星电子(中国)研发中心 一种基于情绪状态的信息处理方法和装置
CN111816211B (zh) * 2019-04-09 2023-06-02 Oppo广东移动通信有限公司 情绪识别方法、装置、存储介质及电子设备
CN110597384A (zh) * 2019-08-23 2019-12-20 苏州佳世达光电有限公司 信息沟通方法及其系统
CN110750154A (zh) * 2019-09-12 2020-02-04 武汉联影医疗科技有限公司 显示器控制方法、系统、装置、设备和存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1665572A (zh) * 2002-09-30 2005-09-07 科乐美股份有限公司 通信装置、通信方法、程序以及信息记录介质
CN102780651A (zh) * 2012-07-21 2012-11-14 上海量明科技发展有限公司 在即时通信消息中加注情绪数据的方法、客户端及系统
CN103975322A (zh) * 2011-11-16 2014-08-06 N·S·苏库普 在文本消息中呈现情感的方法
CN104412258A (zh) * 2014-05-22 2015-03-11 华为技术有限公司 应用文本信息进行通信的方法及装置
CN105574478A (zh) * 2015-05-28 2016-05-11 宇龙计算机通信科技(深圳)有限公司 一种信息处理的方法和装置
US20170364484A1 (en) * 2016-06-21 2017-12-21 VTCSecure LLC Enhanced text metadata system and methods for using the same

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120047447A1 (en) * 2010-08-23 2012-02-23 Saad Ul Haq Emotion based messaging system and statistical research tool
CN102955569B (zh) * 2012-10-18 2016-03-23 北京天宇朗通通信设备股份有限公司 文本输入的方法及装置
CN102932242A (zh) * 2012-11-24 2013-02-13 上海量明科技发展有限公司 即时通信交互界面开启数据实现的方法、客户端及系统
CN106874239A (zh) * 2015-12-14 2017-06-20 中兴通讯股份有限公司 一种展示阅读文本的方法及装置
CN106873800A (zh) * 2017-02-20 2017-06-20 北京百度网讯科技有限公司 信息输出方法和装置
CN107657652A (zh) * 2017-09-11 2018-02-02 广东欧珀移动通信有限公司 图像处理方法和装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1665572A (zh) * 2002-09-30 2005-09-07 科乐美股份有限公司 通信装置、通信方法、程序以及信息记录介质
CN103975322A (zh) * 2011-11-16 2014-08-06 N·S·苏库普 在文本消息中呈现情感的方法
CN102780651A (zh) * 2012-07-21 2012-11-14 上海量明科技发展有限公司 在即时通信消息中加注情绪数据的方法、客户端及系统
CN104412258A (zh) * 2014-05-22 2015-03-11 华为技术有限公司 应用文本信息进行通信的方法及装置
CN105574478A (zh) * 2015-05-28 2016-05-11 宇龙计算机通信科技(深圳)有限公司 一种信息处理的方法和装置
US20170364484A1 (en) * 2016-06-21 2017-12-21 VTCSecure LLC Enhanced text metadata system and methods for using the same

Also Published As

Publication number Publication date
CN108521369B (zh) 2021-03-09
CN108521369A (zh) 2018-09-11

Similar Documents

Publication Publication Date Title
WO2019192096A1 (zh) 信息传递方法、接收终端设备、发送终端设备及存储介质
WO2019216499A1 (ko) 전자 장치 및 그 제어 방법
WO2019080406A1 (zh) 电视机语音交互方法、语音交互控制装置及存储介质
WO2017043857A1 (ko) 어플리케이션 제공 방법 및 이를 위한 전자 기기
WO2015170832A1 (ko) 디스플레이 장치 및 그의 화상 통화 수행 방법
WO2016204466A1 (en) User authentication method and electronic device supporting the same
WO2016117836A1 (en) Apparatus and method for editing content
WO2017028601A1 (zh) 智能终端的语音控制方法、装置及电视机系统
WO2016173259A1 (zh) 蓝牙配对方法和蓝牙配对设备
WO2016023225A1 (zh) 基于移动终端的电子雾化装置的控制装置及方法
WO2019000462A1 (zh) 人脸图像处理方法、装置、存储介质及电子设备
WO2019161615A1 (zh) 账单录入方法、系统、光学字符识别服务器和存储介质
WO2019056482A1 (zh) 语音关键词识别方法、装置、设备及计算机可读存储介质
WO2017099314A1 (ko) 사용자 정보를 제공하는 전자 장치 및 방법
WO2021177758A1 (en) Methods and systems for denoising media using contextual information of the media
WO2015158032A1 (zh) 通过视网膜信息匹配实现移动终端屏幕解锁的方法及系统
WO2019144526A1 (zh) 借记卡激活方法、设备、系统及计算机可读存储介质
WO2015137666A1 (ko) 오브젝트 인식 장치 및 그 제어 방법
WO2015149588A1 (zh) 手持设备上用户操作模式的识别方法及手持设备
WO2018023926A1 (zh) 电视与移动终端的互动方法及系统
WO2020204668A1 (en) Electronic device and method for controlling camera using external electronic device
WO2021025509A1 (en) Apparatus and method for displaying graphic elements according to object
WO2015120774A1 (en) Network access method and apparatus applied to mobile application
WO2015169177A1 (en) Web page display method and apparatus
CN111373315A (zh) 显示器自动调节亮度的方法、装置及存储介质

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18913623

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

32PN Ep: public notification in the ep bulletin as address of the adressee cannot be established

Free format text: NOTING OF LOSS OF RIGHTS PURSUANT TO RULE 112(1) EPC (EPO FORM 1205A DATED 25/01/2021)

122 Ep: pct application non-entry in european phase

Ref document number: 18913623

Country of ref document: EP

Kind code of ref document: A1