KR20150126538A - Method for Transmitting and Receiving Message Incorporating Picture, Voice, and Touch Information - Google Patents

Method for Transmitting and Receiving Message Incorporating Picture, Voice, and Touch Information Download PDF

Info

Publication number
KR20150126538A
KR20150126538A KR1020140053667A KR20140053667A KR20150126538A KR 20150126538 A KR20150126538 A KR 20150126538A KR 1020140053667 A KR1020140053667 A KR 1020140053667A KR 20140053667 A KR20140053667 A KR 20140053667A KR 20150126538 A KR20150126538 A KR 20150126538A
Authority
KR
South Korea
Prior art keywords
touch
voice
message
transmitting
picture
Prior art date
Application number
KR1020140053667A
Other languages
Korean (ko)
Other versions
KR102128631B1 (en
Inventor
안승희
김학준
문정식
정성진
Original Assignee
주식회사 포스코아이씨티
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 포스코아이씨티 filed Critical 주식회사 포스코아이씨티
Priority to KR1020140053667A priority Critical patent/KR102128631B1/en
Publication of KR20150126538A publication Critical patent/KR20150126538A/en
Application granted granted Critical
Publication of KR102128631B1 publication Critical patent/KR102128631B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/12Messaging; Mailboxes; Announcements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages

Abstract

According to an embodiment of the present invention, a method for transmitting and receiving message incorporating a picture, a voice, and touch information can maximally convey the feelings of a transmitter through a message generated to express the feelings of the transmitter with a picture, a voice and touch information. The method comprises the following steps: recording a user′s voice for a predetermined recording time after a first touch signal from a user is inputted on a picture displayed on the screen of a mobile terminal; and after the recording of the user′s voice is complete, generating and transmitting a message including the picture, the recorded voice, and information on a first touch pass generated according to the first touch signal during the recording time, or when the message is received, playing the recorded voice while displaying the first touch pass on the picture while a second touch signal from the user is inputted onto the picture included in the received message.

Description

사진, 음성, 및 터치정보가 결합된 메시지 송수신 방법{Method for Transmitting and Receiving Message Incorporating Picture, Voice, and Touch Information}TECHNICAL FIELD [0001] The present invention relates to a method for transmitting a picture combined with picture, voice, and touch information,

본 발명은 통신 단말기를 이용한 메시지 송수신에 관한 것이다.The present invention relates to message transmission and reception using a communication terminal.

스마트폰이나 테블릿 등과 같은 단말기나 노트북 등과 같은 디바이스들의 기능과 성능이 향상되면서, 이를 이용한 다양한 서비스들이 제공되고 있다. 통신 단말기의 경우, 상대방과의 통화기능을 기본으로 하여 음악이나 영화등과 같은 멀티미디어를 재생하는 기능, 문자나 음성 메시지 송수신기능, 및 인터넷 기능 등과 같은 다양한 기능을 제공할 수 있다.The functions and performance of devices such as smart phones and tablets, such as terminals and notebooks, have been improved, and various services using them have been provided. In the case of a communication terminal, it is possible to provide various functions such as a function of reproducing multimedia such as music and a movie, a function of transmitting and receiving a character and a voice message, and an Internet function based on a communication function with the other party.

특히 통신 단말기를 이용한 메시지 송수신 기능 중 최근에는 송신자가 선택한 사진과 송신자의 음성을 결합하여 전송할 수 있는 서비스가 제공되고 있다. 이러한 서비스의 일 예가 대한민국 공개특허 제10-2003-0051941호에 개시되어 있다.In recent years, among the message transmission / reception functions using a communication terminal, a service capable of combining a picture selected by a sender and a voice of a sender has been provided. An example of such a service is disclosed in Korean Patent Publication No. 10-2003-0051941.

하지만, 대한민국 공개특허 제10-2003-0051941호를 비롯한 종래 기술의 경우, 송신자가 선택하거나 촬영한 사진과 송신자의 음성을 단순하게 결합하여 메시지로 생성하는 것에 그치기 때문에, 메시지 생성시 송신자의 감성을 시각 또는 청각적으로 표현할 수 밖에 없고, 수신자 또한 수신된 메시지로부터 송신자의 감정을 시각 또는 청각적으로 밖에 느낄 수 없었다. 이에 따라, 종래 기술에 따른 메시지 송수신 서비스는 송신자의 감성을 수신자에게 전달하는 측면에 있어서는 한계가 있다.However, in the related art including Korean Patent Laid-Open No. 10-2003-0051941, since the image selected by the sender or the voice of the sender and the voice of the sender are merely generated as a message, the emotion of the sender Visual or auditory, and the recipient could not only sense the sender's emotions visually or audibly from the received message. Accordingly, the message transmission / reception service according to the related art has a limit in terms of transmitting the emotion of the sender to the receiver.

본 발명은 상술한 문제점을 해결하기 위한 것으로서, 송신자의 감성을 사진, 음성, 및 터치정보로 표현하여 메시지를 생성함으로써 메시지를 통해 송신자의 감성 전달을 극대화시킬 수 있는 사진, 음성, 및 터치정보가 결합된 메시지 송수신 방법 및 장치를 제공하는 것을 그 기술적 과제로 한다.SUMMARY OF THE INVENTION The present invention has been made to solve the above-mentioned problems, and it is an object of the present invention to provide a method and apparatus for generating a message by expressing emotion of a sender as photograph, voice, and touch information, And a method and an apparatus for transmitting and receiving a combined message.

또한, 본 발명은 수신된 메시지 열람시 송신자의 터치정보 및 수신자에 의해 입력되는 터치정보에 따라 소정의 이벤트를 수신자에게 제공할 수 있는 사진, 음성, 및 터치정보가 결합된 메시지 송수신 방법 및 장치를 제공하는 것을 다른 기술적 과제로 한다.In addition, the present invention provides a message transmission / reception method and apparatus combined with a photo, voice, and touch information capable of providing a predetermined event to a receiver according to touch information of a sender and touch information input by a receiver at the time of reading a received message Another technical challenge is to provide.

상술한 목적을 달성하기 위한 본 발명의 일 측면에 따른 사진, 음성, 및 터치정보가 결합된 메시지 송수신 방법은, 단말기의 화면에 표시된 사진 상에 사용자의 제1 터치신호가 입력되면 미리 정해진 녹음시간 동안 사용자의 음성을 녹음하는 단계; 사용자의 음성 녹음이 완료되면, 상기 사진, 녹음된 음성, 및 상기 녹음시간 동안 상기 제1 터치신호에 따라 생성된 제1 터치패스의 정보가 포함된 메시지를 생성하여 전송하거나, 메시지 수신시, 수신된 메시지에 포함된 사진 상에 사용자에 의한 제2 터치신호가 입력되는 시간 동안 상기 사진 상에 상기 제1 터치패스를 표시하면서 상기 녹음된 음성을 재생하는 단계를 포함하는 것을 특징으로 한다.According to an aspect of the present invention, there is provided a method of transmitting / receiving a message combined with photo, voice, and touch information, the method comprising: receiving a first touch signal of a user on a picture displayed on a screen of a terminal, Recording a voice of the user during the recording; When the voice recording of the user is completed, a message including the photo, the recorded voice, and the information of the first touch path generated according to the first touch signal during the recording time is generated and transmitted, And reproducing the recorded voice while displaying the first touch pass on the photograph for a time when the second touch signal is inputted by the user on the photograph included in the message.

상술한 목적을 달성하기 위한 본 발명의 다른 측면에 따른 사진, 음성, 및 터치정보가 결합된 메시지 송수신 방법은, 송신측 단말기의 화면에 표시된 사진 상에 사용자에 의한 제1 터치신호가 입력되면 미리 정해진 녹음시간 동안 사용자의 음성을 녹음하는 단계; 음성 녹음이 완료되면, 상기 사진, 녹음된 음성, 및 상기 녹음시간 동안 상기 제1 터치신호에 따라 생성된 제1 터치패스의 정보가 포함된 메시지를 생성하여 수신측 단말기로 전송하는 단계; 상기 수신측 단말기의 화면에 상기 사진을 표시하는 단계; 및 상기 사진 상에 사용자에 의한 제2 터치신호가 입력되는 시간 동안 상기 사진 상에 상기 제1 터치패스를 표시하면서 상기 녹음된 음성을 재생하는 단계를 포함하는 것을 특징으로 한다.According to another aspect of the present invention, there is provided a method of transmitting / receiving a message combined with photo, voice, and touch information, comprising: receiving a first touch signal by a user on a picture displayed on a screen of a transmitting- Recording a voice of the user during a predetermined recording time; Generating a message including the photo, the recorded voice, and the information of the first touch path generated according to the first touch signal during the recording time, and transmitting the message to the receiving terminal when the voice recording is completed; Displaying the photo on the screen of the receiving terminal; And reproducing the recorded voice while displaying the first touch pass on the photograph for a time period during which the second touch signal is inputted by the user on the photograph.

일 실시예에 있어서, 상기 전송하는 단계는, 상기 제1 터치패스를 구성하는 복수개의 터치포인트들의 제1 좌표값을 상기 송신측 단말기의 화면 해상도와 미리 정해진 기준값의 비율에 따라 제2 좌표값으로 변환하는 단계; 상기 복수개의 터치 포인트들의 제2 좌표값을 각 터치포인트들이 입력된 시간 순서에 따라 나열하여 상기 제1 터치패스의 정보를 생성하는 단계; 및 상기 사진, 녹음된 음성, 및 상기 제1 터치패스의 정보를 결합하여 상기 메시지를 생성하고, 상기 생성된 메시지를 수신측 단말기로 전송하는 단계를 포함하는 것을 특징으로 한다.In an exemplary embodiment, the transmitting may include transmitting a first coordinate value of a plurality of touch points constituting the first touch path to a second coordinate value according to a ratio of a screen resolution of the transmitting terminal to a predetermined reference value Converting; Generating second touch point information by arranging second coordinate values of the plurality of touch points in a time order in which each touch point is input; And generating the message by combining the photo, the recorded voice, and the information of the first touch path, and transmitting the generated message to the receiving terminal.

상기 재생하는 단계는, 상기 제1 터치패스의 정보를 구성하는 복수개의 터치 포인트들의 제2 좌표값을 상기 수신측 단말기의 화면 해상도와 상기 기준값의 비율에 따라 제3 좌표값으로 변환하는 단계를 포함하고, 상기 제1 터치패스는, 상기 수신측 단말기의 화면에 표시되는 사진상에서 상기 제3 좌표값에 따라 표시될 수 있다.The reproducing step may include converting a second coordinate value of the plurality of touch points constituting the information of the first touch path to a third coordinate value according to a ratio of the screen resolution of the receiving terminal and the reference value And the first touch path may be displayed in accordance with the third coordinate value on the photograph displayed on the screen of the receiving terminal.

또한, 상기 재생하는 단계는, 상기 제2 터치신호에 따라 생성되는 제2 터치패스가 상기 제1 터치패스와 교차하면 미리 정해진 애니메니션 이펙트를 상기 수신측 단말기의 화면 상에 표시하는 단계를 더 포함할 수 있다.The reproducing step may further include displaying a predetermined animation effect on the screen of the receiving terminal when the second touch path generated according to the second touch signal crosses the first touch path .

상기 표시하는 단계에서, 상기 메시지에 포함된 사진의 선명도를 미리 정해진 값만큼 감소시켜 상기 수신측 단말기의 화면에 표시하고, 상기 재생하는 단계에서, 상기 녹음된 음성이 재생되는 동안 상기 수신측 단말기의 화면에 표시되고 있는 사진의 선명도를 원래 값까지 단계적으로 증가시킬 수 있다.And displaying the reduced size of the picture on the screen of the receiving terminal in a step of reducing the sharpness of the picture included in the message by a predetermined value in the displaying step, The sharpness of the picture displayed on the screen can be increased stepwise to the original value.

상기 녹음하는 단계 이전에, 상기 송신측 단말기에 설치된 어플리케이션이 실행되면, 상기 송신측 단말기의 카메라 모듈을 활성화시켜 상기 사진을 촬영하는 단계; 및 상기 사진을 상기 송신측 단말기의 화면에 표시하는 단계를 더 포함할 수 있다.Activating a camera module of the transmitting terminal and photographing the photograph when an application installed in the transmitting terminal is executed before the recording step; And displaying the photo on the screen of the transmitting-side terminal.

상기 촬영하는 단계와 상기 표시하는 단계 사이에, 상기 촬영된 사진 상에서 상기 사용자에 의해 선택된 위치에 상기 사용자에 의해 선택 또는 입력된 텍스트를 상기 사용자에 의해 선택된 색상으로 삽입하는 단계를 더 포함할 수 있다.And inserting the text selected or input by the user at a position selected by the user on the photographed picture into a color selected by the user between the photographing step and the displaying step .

상기 재생하는 단계에서, 미리 정해진 형상의 인디케이터를 상기 사진 상에서 상기 제1 터치패스에 따라 이동시킴에 의해 상기 사진 상에 상기 제1 터치패스를 표시할 수 있다.In the reproducing step, the first touch path may be displayed on the photograph by moving an indicator of a predetermined shape along the first touch path on the photograph.

본 발명에 따르면, 송신자에 의해 촬영되는 사진을 통해 송신자의 감성을 시각적으로 표현하고, 송신자에 의해 입력되는 음성을 통해 송신자의 감성을 청각적으로 표현하며, 및 송신자에 의해 입력되는 터치정보를 통해 송신자의 감성을 촉각적으로 표현하여 메시지를 생성함으로써 메시지를 통해 송신자의 감성 전달을 시킬 수 있다는 효과가 있다.According to the present invention, the emotion of the sender is visually expressed through the photograph taken by the sender, the emotion of the sender is expressed audibly through the sound input by the sender, and through the touch information input by the sender It is possible to transmit the emotion of the sender through the message by generating the message by tactually expressing the emotion of the sender.

또한, 본 발명은 수신된 메시지 열람시 송신자의 터치정보에 따른 터치패스와수신자의 터치정보에 따른 터치패스가 교차하는 경우 애니메이션 이펙트를 이벤트로 제공함으로써 메시지 송수신 서비스의 재미(Fun)를 배가시킬 수 있다는 효과가 있다.In addition, the present invention provides an animation effect as an event when a touch path based on touch information of a sender and a touch path based on touch information of a recipient intersect at the time of reading a received message, thereby doubling the fun of the message transmission / reception service .

도 1은 본 발명의 일 실시예에 따른 사진, 음성, 및 터치정보가 결합된 메시지 송신 방법을 보여주는 플로우차트.
도 2는 본 발명의 일 실시예에 따른 사진, 음성, 및 터치정보가 결합된 메시지의 수신방법을 보여주는 플로우차트.
도 3은 메시지 작성시 입력되는 제1 터치패스의 일 예를 보여주는 도면.
도 4는 메시지 열람시 표시되는 제1 터치패스의 일 예를 보여주는 도면.
FIG. 1 is a flowchart illustrating a method of transmitting a message combined with photo, voice, and touch information according to an exemplary embodiment of the present invention. Referring to FIG.
2 is a flow chart illustrating a method of receiving a message combined with photo, voice, and touch information according to an embodiment of the present invention.
3 is a view showing an example of a first touch pass input when a message is created;
4 is a view showing an example of a first touch path displayed when a message is viewed.

본 명세서에서 서술되는 용어의 의미는 다음과 같이 이해되어야 할 것이다.The meaning of the terms described herein should be understood as follows.

단수의 표현은 문맥상 명백하게 다르게 정의하지 않는 한 복수의 표현을 포함하는 것으로 이해되어야 하고, "제1", "제2" 등의 용어는 하나의 구성요소를 다른 구성요소로부터 구별하기 위한 것으로, 이들 용어들에 의해 권리범위가 한정되어서는 아니 된다.The word " first, "" second," and the like, used to distinguish one element from another, are to be understood to include plural representations unless the context clearly dictates otherwise. The scope of the right should not be limited by these terms.

"포함하다" 또는 "가지다" 등의 용어는 하나 또는 그 이상의 다른 특징이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.It should be understood that the terms "comprises" or "having" does not preclude the presence or addition of one or more other features, integers, steps, operations, elements, components, or combinations thereof.

"적어도 하나"의 용어는 하나 이상의 관련 항목으로부터 제시 가능한 모든 조합을 포함하는 것으로 이해되어야 한다. 예를 들어, "제1 항목, 제2 항목 및 제 3항목 중에서 적어도 하나"의 의미는 제1 항목, 제2 항목 또는 제3 항목 각각 뿐만 아니라 제1 항목, 제2 항목 및 제3 항목 중에서 2개 이상으로부터 제시될 수 있는 모든 항목의 조합을 의미한다.It should be understood that the term "at least one" includes all possible combinations from one or more related items. For example, the meaning of "at least one of the first item, the second item and the third item" means not only the first item, the second item or the third item, but also the second item and the second item among the first item, Means any combination of items that can be presented from more than one.

이하에서는 설명의 편의를 위해 동일한 구성에 대해서는 동일한 도면부호를 부여하여 해당 구성을 설명하기로 한다.
Hereinafter, for the sake of convenience of description, the same reference numerals are assigned to the same components and the corresponding components will be described.

이하, 첨부되는 도면을 참고하여 본 발명의 실시예들에 대해 상세히 설명한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명에 따른 사진, 음성, 및 터치정보가 결합된 메시지 송신 방법을 보여주는 플로우차트이고, 도 2는 본 발명에 따른 사진, 음성, 및 터치정보가 결합된 메시지의 수신방법을 보여주는 플로우차트이다.FIG. 1 is a flowchart illustrating a method of transmitting a message combined with photo, voice, and touch information according to the present invention. FIG. 2 is a flowchart illustrating a method of receiving a message combined with a photo, voice, Chart.

도 1을 참조하여 사진, 음성, 및 터치정보가 결합된 메시지 송신 방법을 먼저 설명한 후, 도 2를 참조하여 사진, 음성, 및 터치정보가 결합된 메시지의 수신방법을 설명하기로 한다.Referring to FIG. 1, a method of transmitting a message combined with photo, voice, and touch information will be described first, and then a method of receiving a message combined with photo, voice, and touch information will be described with reference to FIG.

도 1 및 도 2에 도시되어 있는 사진, 음성, 및 터치정보가 결합된 메시지 송신 방법(이하, '메시지 송신 방법'이라 함) 또는 사진, 음성, 및 터치정보가 결합된 메시지 수신 방법(이하, '메시지 수신 방법'이라 함)은 메시지 송수신 방법을 수행하기 위한 어플리케이션이 탑재되어 있는 단말기의 컨트롤러에 의해 수행될 수 있다. 이하에서는 설명의 편의를 위해, 단말기의 컨트롤러를 편의상 단말기로 표시하기로 한다.(Hereinafter, referred to as 'message transmission method') combined with photo, voice, and touch information shown in FIG. 1 and FIG. 2 or a message reception method Message receiving method ") may be performed by a controller of a terminal equipped with an application for performing a message transmission / reception method. Hereinafter, for convenience of explanation, the controller of the terminal will be represented by a terminal for the sake of convenience.

메시지의 생성, 전송, 수신, 및 열람은 하나의 단말기에서 모두 수행될 수 있는 것이지만, 이하에서는 본 발명의 내용을 보다 명확하게 설명하기 위해, 메시지를 생성하여 전송하기 위한 단말기를 송신측 단말기로 표시하고, 메시지를 수신하여 열람하기 위한 단말기를 수신측 단말기로 표시하기로 한다. 또한, 송신측 단말기를 이용하여 메시지의 생성 및 전송을 요청하는 사용자를 송신자로 표시하고, 수신측 단말기를 이용하여 메시지를 수신 및 열람하는 사용자를 수신자로 표시하기로 한다.In order to more clearly describe the contents of the present invention, a terminal for generating and transmitting a message is referred to as a transmitting-side terminal And a terminal for receiving and viewing a message is displayed on the receiving side terminal. Also, a user requesting generation and transmission of a message is displayed as a sender by using a transmitting terminal, and a user who receives and browses a message using a receiving terminal is displayed as a receiver.

먼저, 송신자에 의해 송신측 단말기에 설치되어 있는 어플리케이션의 실행이 선택되면(S100), 송신측 단말기는 송신자가 메시지에 포함될 사진을 촬영할 수 있도록 카메라 모듈을 활성화시켜 활성화된 카메라 모듈을 이용하여 사진을 촬영한다(S120).First, when the execution of the application installed in the transmitting terminal is selected by the sender (S100), the transmitting terminal activates the camera module so that the sender can take a picture to be included in the message, (S120).

일 실시예에 있어서, 송신측 단말기는 송신측 단말기의 화면 상에 카메라를 통해 보여지는 뷰(View)를 메시지에 포함될 텍스트를 선택할 수 있는 텍스트 선택창(미도시) 및 텍스트의 색상을 선택할 수 있는 텍스트 색상 선택창(미도시)과 함께 표시할 수 있다.In one embodiment, the transmitting terminal includes a text selection window (not shown) for selecting a text to be included in the message, a view displayed through a camera on the screen of the transmitting terminal, Text color selection window (not shown).

이때, 송신자가 텍스트 선택창에 포함되어 있는 복수개의 텍스트 중 어느 하나를 선택하면 송신측 단말기는 송신자에 의해 선택된 텍스트를 송신측 단말기의 화면에 표시할 수 있다. 예컨대, 송신자가 텍스트 선택창에서"감사합니다"라는 텍스트를 선택하는 경우, 송신측 단말기는 송신자에 의해 선택된 텍스트인 "감사합니다"라는 텍스트를 송신측 단말기의 화면 상에 표시한다. 즉, 송신측 단말기의 화면에는 카메라 모듈을 통해 보여지는 뷰와 송신자에 의해 선택된 텍스트가 오버랩되어 표시된다.At this time, if the sender selects any one of a plurality of texts included in the text selection window, the transmitting terminal can display the text selected by the sender on the screen of the transmitting terminal. For example, when the sender selects the text "Thank you" in the text selection window, the transmitting terminal displays the text "Thank you ", which is the text selected by the sender, on the screen of the transmitting terminal. That is, the view displayed through the camera module and the text selected by the sender overlap and are displayed on the screen of the transmitting terminal.

일 실시예에 있어서, 송신측 단말기는 송신자에 의해 선택된 텍스트를 화면에 표시할 때, 송신자로부터 텍스트 표시 위치에 대한 선택요청을 수신함으로써 송신자에 의해 선택된 텍스트를 송신자에 의해 선택된 텍스트 표시 위치 상에 표시할 수 있다.In one embodiment, when displaying the text selected by the sender on the screen, the transmitting terminal receives the selection request for the text display position from the sender so that the text selected by the sender is displayed on the text display position selected by the sender can do.

다음으로, 송신측 단말기는 촬영된 사진을 송신측 단말기의 화면을 통해 표시한다(S130). 이때, 촬영된 사진은 송신자가 선택한 텍스트와 함께 화면상에 표시될 수 있다.Next, the transmitting-side terminal displays the photographed photograph on the screen of the transmitting-side terminal (S130). At this time, the photographed picture may be displayed on the screen together with the text selected by the sender.

이후, 송신측 단말기의 화면에 표시된 사진 상에 송신자에 의한 제1 터치신호의 입력이 감지되면(S140), 송신측 단말기는 레코딩 모듈을 활성화시켜 송신자의 음성을 하고, 제1 터치신호에 따라 생성되는 제1 터치패스를 구성하는 터치포인트들의 제1 좌표값을 획득한다(S150). 이때, 녹음은 미리 정해진 시간(예컨대, 15초) 동안 수행될 수 있다. Thereafter, when the input of the first touch signal by the sender is detected on the picture displayed on the screen of the transmitting side terminal (S140), the transmitting side terminal activates the recording module to play the voice of the sender, The first coordinate values of the touch points constituting the first touch path are obtained (S150). At this time, the recording may be performed for a predetermined time (for example, 15 seconds).

일 실시예에 있어서, 송신측 단말기는 사용자의 음성 녹음시 사용자의 음성 녹음을 가이드 하기 위해, 촬영된 사진상에 음성 녹음을 가이드 하기 위한 가이드 메뉴를 오버랩 시켜 표시할 수 있다. 이때, 송신측 단말기는 촬영된 사진과 오버랩되어 표시되는 가이드 메뉴의 시인성을 향상시키기 위해 촬영된 사진의 선명도를 미리 정해진 값만큼 감소시켜 표시할 수 있다.In one embodiment, the transmitting terminal may display a guide menu for guiding voice recording on the photographed photograph by overlapping the guide menu to guide the voice recording of the user during voice recording of the user. At this time, the transmitting terminal can reduce the sharpness of the photographed photograph by a predetermined value in order to improve the visibility of the guide menu displayed overlapping with the photographed photograph.

상술한 실시예에 있어서, 송신측 단말기는 송신자에 의한 제1 터치신호가 연속적으로 입력되고 있는 경우에만 음성 녹음이 수행되도록 할 수 있지만, 송신자에 의한 제1 터치신호의 입력이 감지된 이후에 제1 터치 신호가 연속적으로 입력되지 않더라도 미리 정해진 시간 동안 음성 녹음을 수행할 수 있다.In the above-described embodiment, the transmitting terminal can perform voice recording only when the first touch signal by the sender is continuously input. However, after the input of the first touch signal by the sender is detected, It is possible to perform voice recording for a predetermined time even if one touch signal is not continuously input.

상술한 실시예에 있어서는 송신자가 송신자의 음성을 녹음하는 것으로 설명하였지만, 본 발명은 이에 한정되지 않고 송신자가 수신자에게 전송하기 원하는 다양한 음향을 녹음할 수도 있을 것이다.In the above-described embodiment, the sender records audio of the sender. However, the present invention is not limited to this, and the sender may record various sounds desired to be transmitted to the receiver.

한편, 송신측 단말기는, 도 3에 도시된 바와 같이, 화면상의 제1 터치신호의 입력이 감지된 이후 녹음이 진행되는 동안 연속적으로 입력되는 제1 터치신호에 따라 생성되는 제1 터치패스(320)를 구성하는 복수개의 터치 포인트들의 제1 좌표값을 획득한다. 이때, 제1 좌표값은 화면상에서 각 터치포인트들의 x좌표 및 y좌표로 구성되고, x좌표는 화면의 수평 해상도인 폭(Width)을 나타내고, y좌표는 화면 의 수직 해상도인 높이(Height)를 나타낸다.3, the transmitting terminal includes a first touch path 320, which is generated according to a first touch signal continuously input during the recording process after the input of the first touch signal on the screen is sensed, The first coordinate value of the plurality of touch points constituting the touch point. In this case, the first coordinate value is composed of the x-coordinate and the y-coordinate of each touch point on the screen, the x-coordinate represents the width, which is the horizontal resolution of the screen, and the y-coordinate represents the height, .

다음으로, 송신측 단말기는 음성 녹음과정 동안 획득된 제1 좌표값을 송신측 단말기의 화면 해상도와 미리 정해진 기준값의 비율에 따라 제2 좌표값으로 변환한다(S160). 이때, 제2 좌표값 또한 터치포인트의 x좌표 및 y좌표로 구성된다.Next, the transmitting terminal converts the first coordinate value obtained during the voice recording process into the second coordinate value according to the ratio of the screen resolution of the transmitting terminal and a predetermined reference value (S160). At this time, the second coordinate value is also composed of the x-coordinate and the y-coordinate of the touch point.

일 실시예에 있어서, 송신측 단말기는 아래의 수학식 1 및 2를 이용하여 제1 좌표값을 제2 좌표값으로 변환할 수 있다.In one embodiment, the transmitting terminal may convert the first coordinate value to the second coordinate value using Equations (1) and (2) below.

Figure pat00001
Figure pat00001

Figure pat00002
Figure pat00002

수학식1에서, XS는 제1 좌표값의 X좌표를 나타내고, WS는 송신측 단말기 화면의 수직 해상도인 폭을 나타내며, RV는 기준값을 나타내고, XT는 제2 좌표값의 X좌표를 나타낸다. 또한, 수학식 2에서, YS는 제1 좌표값의 Y좌표를 나타내고, HS는 송신측 단말기 화면의 수평 해상도인 높이를 나타내며, RV는 기준값을 나타내고, YT는 제2 좌표값의 Y좌표를 나타낸다.In Equation (1), X S represents the X coordinate of the first coordinate value, W S represents the width that is the vertical resolution of the transmitting terminal screen, R V represents the reference value, and X T represents the X coordinate . In Equation (2), Y S represents the Y coordinate of the first coordinate value, H S represents the height that is the horizontal resolution of the transmitting terminal screen, R V represents the reference value, and Y T represents the second coordinate value Y coordinate.

이하, 송신측 단말기가 제1 좌표값을 제2 좌표값으로 변환하는 방법을 예를 들어 설명하기로 한다.Hereinafter, a method of converting the first coordinate value into the second coordinate value will be described as an example.

송신측 단말기 화면 해상도의 폭은 200이고 높이는 500이며, 제1 좌표값은 (1,1)이고, 기준값은 1000이라고 가정하면, 제2 좌표값의 X좌표는 수학식 1에 의해 5이고, 제2 좌표값의 Y좌표는 수학식 2에 의해 2가 되므로, 제2 좌표값은 (5,2)로 변환 된다.Assuming that the width of the transmitting terminal screen resolution is 200, the height is 500, the first coordinate value is (1,1), and the reference value is 1000, the X coordinate of the second coordinate value is 5 according to the equation Since the Y coordinate of the 2 coordinate value is 2 according to Equation (2), the second coordinate value is converted into (5, 2).

다음으로, 송신자의 음성 녹음이 완료되면, 송신측 단말기는 촬영된 사진, 녹음된 음성, 및 제1 터치패스의 정보가 포함된 메시지를 생성한다(S170).Next, when the voice recording of the sender is completed, the transmitting terminal generates a message including the photographed picture, the recorded voice, and the information of the first touch pass (S170).

일 실시예에 있어서, 제1 터치패스의 정보는 제2 좌표값들의 집합으로 구성되고, 제2 좌표값은 제2 좌표값을 구성하는 터치포인트들이 발생된 시간적 순서에 따라 나열될 수 있다.In one embodiment, the information of the first touch path may be composed of a set of second coordinate values, and the second coordinate value may be listed according to the temporal order in which the touch points constituting the second coordinate value are generated.

다음으로, 송신측 단말기는 송신자로부터 메시지를 전송할 수신인에 대한 선택요청을 수신하고(S180), 선택된 수신자의 단말기로 메시지를 전송한다(S190). 일 실시예에 있어서, 송신측 단말기는 송신자가 수신자를 보다 편리하게 선택할 수 있도록 하기 위해, 송신측 단말기에 저장되어 있는 주소록과 동기화되어 있는 수신자 리스트를 송신자에게 제공할 수 있다.Next, the transmitting terminal receives a selection request for a recipient to which the message is to be transmitted from the sender (S180), and transmits the message to the selected recipient's terminal (S190). In one embodiment, the sending terminal can provide the sender with a list of recipients that are in sync with the address book stored on the sending terminal, so that the sender can more easily select the recipient.

상술한 실시예에 있어서는, 송신측 단말기는 메시지 생성을 위해 카메라 모듈을 활성화시켜 사진을 촬영하는 것으로 설명하였지만, 이는 하나의 예일 뿐 기 저장되어 있는 사진을 이용하거나, 기 저장되어 있는 사진을 촬영된 사진과 합성하거나 기 저장되어 있는 사진을 촬영된 사진을 이용하여 편집하여 새로운 사진을 생성할 수도 있을 것이다.In the above-described embodiment, the transmitting terminal has been described as activating the camera module to generate a message to take a picture. However, the present invention is not limited thereto. For example, it is possible to use a stored picture, You can also create a new photo by compositing or storing the previously stored photo with the photographed photo.

다음으로, 도 2를 참조하여 사진, 음성, 및 터치정보가 결합된 메시지의 수신방법을 설명하기로 한다.Next, a method of receiving a message combined with photo, voice, and touch information will be described with reference to FIG.

먼저, 수신측 단말기에 메시지가 수신되면, 수신측 단말기는 수신측 단말기에 설치된 어플리케이션을 통해 수신자에게 메시지의 수신을 알린다(S200). First, when a message is received at the receiving terminal, the receiving terminal informs the receiver of the reception of the message through the application installed at the receiving terminal (S200).

이후, 수신자가 해당 어플리케이션의 실행을 통해 수신된 메시지의 열람을 선택하면(S210), 수신측 단말기는 메시지에 포함되어 있는 사진을 수신측 단말기의 화면에 표시한다(S220).Thereafter, when the recipient selects to view the received message through execution of the application (S210), the receiving terminal displays the photograph included in the message on the screen of the receiving terminal (S220).

일 실시예에 있어서, 수신측 단말기는 수신측 단말기의 화면에 메시지에 포함된 사진을 표시함에 있어서, 메시지에 포함되어 있는 송신자의 음성의 재생방법을 가이드하기 위해, 수신된 사진상에 음성 재생을 가이드 하기 위한 가이드 메뉴를 오버랩 시켜 표시할 수 있다. 이때, 수신측 단말기는 수신된 사진과 오버랩되어 표시되는 가이드 메뉴의 시인성을 향상시키기 위해 수신된 사진의 선명도를 미리 정해진 값만큼 감소시켜 표시할 수 있다.In one embodiment, in displaying a picture included in a message on the screen of the receiving terminal, the receiving terminal may perform a voice reproduction on the received picture to guide the reproduction method of the voice of the sender included in the message The guide menu to be displayed can be displayed in an overlapped manner. At this time, the receiving terminal can reduce the sharpness of the received photograph by a predetermined value in order to improve the visibility of the guide menu displayed overlapping with the received photograph.

이후, 수신측 단말기는 수신된 메시지에 포함되어 있는 제1 터치패스의 정보를 구성하는 복수개의 터치 포인트들의 제2 좌표값을 수신측 단말기의 화면 해상도와 기준값의 비율에 따라 제3 좌표값으로 변환한다(S225). 이때, 제3 좌표값은 수신측 단말기 화면에서 제2 좌표값에 상응하는 터치포인트의 x좌표 및 y좌표로 구성된다.The receiving terminal then converts the second coordinate values of the plurality of touch points constituting the information of the first touch path included in the received message into the third coordinate value according to the ratio of the screen resolution and the reference value of the receiving terminal (S225). At this time, the third coordinate value is composed of the x-coordinate and the y-coordinate of the touch point corresponding to the second coordinate value on the receiving terminal screen.

일 실시예에 있어서, 수신측 단말기는 아래의 수학식 3 및 4를 이용하여 제2 좌표값을 제3 좌표값으로 변환할 수 있다.In one embodiment, the receiving terminal may convert the second coordinate value to the third coordinate value using Equations (3) and (4) below.

Figure pat00003
Figure pat00003

Figure pat00004
Figure pat00004

수학식3에서, XR은 제3 좌표값의 X좌표를 나타내고, WR은 수신측 단말기 화면의 수평 해상도인 폭을 나타내며, RV는 기준값을 나타내고, XT는 제2 좌표값의 X좌표를 나타낸다. 또한, 수학식 4에서, YR은 제3 좌표값의 Y좌표를 나타내고, HR은 수신측 단말기 화면의 수직 해상도인 높이를 나타내며, RV는 기준값을 나타내고, YT는 제2 좌표값의 Y좌표를 나타낸다.In Equation (3), X R denotes the X coordinate of the third coordinate value, W R denotes the width, which is the horizontal resolution of the receiving terminal screen, R V denotes the reference value, and X T denotes the X coordinate . In Equation (4), Y R denotes a Y coordinate of a third coordinate value, H R denotes a height that is a vertical resolution of the receiving terminal screen, R V denotes a reference value, and Y T denotes a second coordinate value Y coordinate.

다음으로, 수신측 단말기의 화면에 표시되고 있는 사진 상에 수신자에 의한 제2 터치신호의 입력이 감지되면(S230), 수신측 단말기 화면에 표시되고 있는 사진 상에 제3 좌표값에 따라 제1 터치패스를 표시하면서 녹음된 음성을 재생한다(S240).Next, when the input of the second touch signal by the receiver is sensed on the photograph displayed on the screen of the reception side terminal (S230), the first and second touch signals are displayed on the photograph displayed on the reception side terminal screen according to the third coordinate value The recorded voice is reproduced while displaying the touch path (S240).

이때, 수신측 단말기는 화면에 표시되는 제1 터치패스의 시인성을 향상시키기 위해 화면에 표시되는 사진의 선명도를 원본의 선명도보다 미리 정해진 값만큼 감소시켜 표시하고, 녹음된 음성이 재생되는 동안 사진의 선명도를 원래 값까지 단계적으로 증가시켜 표시할 수 있다.At this time, in order to improve the visibility of the first touch pass displayed on the screen, the receiving-side terminal reduces the sharpness of the picture displayed on the screen by a predetermined value smaller than the sharpness of the original, The sharpness can be displayed stepwise up to the original value.

일 실시예에 있어서, 제3 좌표값에 따라 제1 터치패스를 표시함에 있어서, 수신측 단말기는 도 4에 도시된 바와 같이, 미리 정해진 형상의 인디케이터(Indicator, 420)를 사진 상에서 제3 좌표값에 따른 제1 터치패스(430)에 따라 이동시킴에 의해 사진 상에 제1 터치패스를 표시할 수 있다.In one embodiment, in displaying the first touch path according to the third coordinate value, the receiving terminal may display an indicator (420) of a predetermined shape as shown in FIG. 4 on the photograph as a third coordinate value The first touch path 430 can be displayed on the photograph by moving the first touch path 430 in accordance with the first touch path 430.

한편, 수신측 단말기는 S240을 수행하는 과정 동안 제2 터치신호의 입력이 연속적으로 감지되는지 여부를 판단하여, S240을 수행하는 과정 동안 제2 터치신호의 입력이 연속적으로 감지되면 S240을 수행하지만, S240을 수행하는 과정 동안 제2 터치신호의 입력이 연속적으로 수행되지 않으면 제1 터치패스의 표시 및 녹음된 음성의 재생을 일시정지시킨다. 이후, 제2 터치 신호의 입력이 다시 감지되면 제1 터치패스를 표시하면서 녹음된 음성을 재생하게 된다.Meanwhile, the receiving terminal determines whether the input of the second touch signal is continuously sensed during the process of performing S240. If the input of the second touch signal is continuously sensed during S240, If the input of the second touch signal is not continuously performed during the process of performing S240, the display of the first touch pass and the reproduction of the recorded voice are temporarily stopped. Thereafter, when the input of the second touch signal is detected again, the recorded voice is reproduced while displaying the first touch pass.

한편, 수신측 단말기는 S240을 수행하는 과정 동안 연속적으로 입력되는 제2 터치신호에 따라 생성되는 제2 터치패스와 제1 터치패스가 교차하는지 여부를 판단하고(S250), 교차하면 미리 정해진 애니메니션 이펙트를 수신측 단말기의 화면 상에 표시한다(S260). Meanwhile, the receiving terminal determines whether or not the second touch path generated according to the second touch signal continuously input during the process of performing S240 intersects with the first touch path (S250). If the intersection is performed, On the screen of the receiving terminal (S260).

이후, 녹음된 음성의 재생이 완료되면(S270), 수신측 단말기는 수신된 메시지의 처리를 가이드 하기 위한 가이드 화면을 수신자에게 제공하고(S280), 수신자의 선택에 따라 해당 메시지를 처리한다. 일 실시예에 있어서, 수신된 메시지의 처리 방법에는 수신된 메시지의 저장, 삭제, 수신된 메시지에 대한 답장 메시지 생성, 및 수신된 메시지 다시 듣기 등이 포함될 수 있다 Thereafter, when the reproduction of the recorded voice is completed (S270), the receiving terminal provides a guide screen for guiding the processing of the received message to the receiver (S280), and processes the message according to the selection of the receiver. In one embodiment, the method of processing a received message may include storing the received message, deleting the message, generating a reply message for the received message, and replaying the received message

상술한 사진, 음성, 및 터치정보가 결합된 메시지 송수신 방법은 다양한 컴퓨터 수단을 이용하여 수행될 수 있는 프로그램 형태 자체로 구현될 수 있으며, 또한 사진, 음성, 및 터치정보가 결합된 메시지 송수신 방법을 수행하기 위한 프로그램은 하드 디스크, CD-ROM, DVD, 롬(ROM), 램, 또는 플래시 메모리와 같은 컴퓨터로 판독할 수 있는 기록 매체에 저장된다.The method of transmitting / receiving a message combined with the above-described photo, voice, and touch information may be implemented by a program form itself that can be performed by using various computer means. In addition, a method of transmitting / receiving a message combined with photo, voice, The program to be executed is stored in a computer-readable recording medium such as a hard disk, a CD-ROM, a DVD, a ROM, a RAM, or a flash memory.

본 명이 속하는 기술분야의 당업자는 상술한 본 발명이 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다.Those skilled in the art will appreciate that the invention described above may be embodied in other specific forms without departing from the spirit or essential characteristics thereof.

그러므로, 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적인 것이 아닌 것으로 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 등가 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다. It is therefore to be understood that the above-described embodiments are illustrative in all aspects and not restrictive. The scope of the present invention is defined by the appended claims rather than the detailed description and all changes or modifications derived from the meaning and scope of the claims and their equivalents are to be construed as being included within the scope of the present invention do.

Claims (1)

단말기의 화면에 표시된 사진 상에 사용자의 제1 터치신호가 입력되면 미리 정해진 녹음시간 동안 사용자의 음성을 녹음하는 단계;
사용자의 음성 녹음이 완료되면, 상기 사진, 녹음된 음성, 및 상기 녹음시간 동안 상기 제1 터치신호에 따라 생성된 제1 터치패스의 정보가 포함된 메시지를 생성하여 전송하거나,
메시지 수신시, 수신된 메시지에 포함된 사진 상에 사용자에 의한 제2 터치신호가 입력되는 시간 동안 상기 사진 상에 상기 제1 터치패스를 표시하면서 상기 녹음된 음성을 재생하는 단계를 포함하는 것을 특징으로 하는 사진, 음성, 및 터치정보가 결합된 메시지 송수신 방법.
Recording a voice of a user during a predetermined recording time when a first touch signal of a user is input on a picture displayed on a screen of the terminal;
When the voice recording of the user is completed, a message including the photo, the recorded voice, and the information of the first touch path generated according to the first touch signal during the recording time is generated and transmitted,
And reproducing the recorded voice while displaying the first touch pass on the photograph for a time period during which the second touch signal is inputted by the user on the photograph included in the received message when the message is received And the touch information is combined.
KR1020140053667A 2014-05-02 2014-05-02 Method for Transmitting and Receiving Message Incorporating Picture, Voice, and Touch Information KR102128631B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140053667A KR102128631B1 (en) 2014-05-02 2014-05-02 Method for Transmitting and Receiving Message Incorporating Picture, Voice, and Touch Information

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140053667A KR102128631B1 (en) 2014-05-02 2014-05-02 Method for Transmitting and Receiving Message Incorporating Picture, Voice, and Touch Information

Publications (2)

Publication Number Publication Date
KR20150126538A true KR20150126538A (en) 2015-11-12
KR102128631B1 KR102128631B1 (en) 2020-07-01

Family

ID=54609955

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140053667A KR102128631B1 (en) 2014-05-02 2014-05-02 Method for Transmitting and Receiving Message Incorporating Picture, Voice, and Touch Information

Country Status (1)

Country Link
KR (1) KR102128631B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102015121215A1 (en) 2015-09-07 2017-03-09 Hyundai Motor Company Adapter for internal combustion engine cooling system
KR20180098175A (en) * 2017-02-24 2018-09-03 토드핀(주) Method and apparatus for providing a multi-contents note

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009303209A (en) * 2008-06-11 2009-12-24 Pantech Co Ltd Data input method and mobile communication terminal
KR20100000744A (en) * 2008-06-25 2010-01-06 엘지전자 주식회사 Mobile terminal capable of previewing different channel
KR20100004754A (en) * 2008-07-04 2010-01-13 엘지전자 주식회사 Mobile terminal and file transmitting method therefor
KR20110057503A (en) * 2009-11-24 2011-06-01 이성호 Method and device for detecting touch input

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009303209A (en) * 2008-06-11 2009-12-24 Pantech Co Ltd Data input method and mobile communication terminal
KR20100000744A (en) * 2008-06-25 2010-01-06 엘지전자 주식회사 Mobile terminal capable of previewing different channel
KR20100004754A (en) * 2008-07-04 2010-01-13 엘지전자 주식회사 Mobile terminal and file transmitting method therefor
KR20110057503A (en) * 2009-11-24 2011-06-01 이성호 Method and device for detecting touch input

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102015121215A1 (en) 2015-09-07 2017-03-09 Hyundai Motor Company Adapter for internal combustion engine cooling system
KR20180098175A (en) * 2017-02-24 2018-09-03 토드핀(주) Method and apparatus for providing a multi-contents note

Also Published As

Publication number Publication date
KR102128631B1 (en) 2020-07-01

Similar Documents

Publication Publication Date Title
US10057731B2 (en) Image and message integration system and method
EP3195601B1 (en) Method of providing visual sound image and electronic device implementing the same
KR102306538B1 (en) Apparatus and method for editing content
US9639251B2 (en) Mobile terminal and method of controlling the mobile terminal for moving image playback
KR20160022286A (en) Method and apparatus for sharing video information
KR20140020112A (en) Method for providing message function and an electronic device thereof
JP2017526316A (en) Method, apparatus, program and recording medium for processing moving picture file identifier
CN110113251A (en) Message coalescing method and device
JP2016091057A (en) Electronic device
KR102128631B1 (en) Method for Transmitting and Receiving Message Incorporating Picture, Voice, and Touch Information
CN109756783B (en) Poster generation method and device
KR20150129182A (en) Method and apparatus of providing messages
CN112151041B (en) Recording method, device, equipment and storage medium based on recorder program
EP3633587A1 (en) An apparatus and associated methods for presentation of comments
KR101635967B1 (en) Touch ui portable device for sending message and message sending method performed by the touch ui portable device
KR100652659B1 (en) Service method for background picture and music in mobile phone
US9350943B2 (en) Video picker
CN113031781A (en) Augmented reality resource display method and device, electronic equipment and storage medium
US10845984B2 (en) System and a method for sending a touch message
KR101913616B1 (en) Instant message service method and user device for performing instant messaging service method for secret message
CN111654758A (en) Bullet screen display method, device, terminal and storage medium based on instant messaging
CN117939224A (en) Screen projection display method, device, storage medium and chip
KR20200121630A (en) Electronic device providing a note function and method thereof
KR20220146872A (en) Method for providing emoticon services and application for the same
KR101406846B1 (en) System for providing motion message service and method therefor

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant