WO2010027190A2 - 진동 정보를 전달하는 이동통신 단말기 및 방법 - Google Patents

진동 정보를 전달하는 이동통신 단말기 및 방법 Download PDF

Info

Publication number
WO2010027190A2
WO2010027190A2 PCT/KR2009/004938 KR2009004938W WO2010027190A2 WO 2010027190 A2 WO2010027190 A2 WO 2010027190A2 KR 2009004938 W KR2009004938 W KR 2009004938W WO 2010027190 A2 WO2010027190 A2 WO 2010027190A2
Authority
WO
WIPO (PCT)
Prior art keywords
vibration
information
mobile communication
communication terminal
voice
Prior art date
Application number
PCT/KR2009/004938
Other languages
English (en)
French (fr)
Other versions
WO2010027190A3 (ko
Inventor
이석건
김현욱
김남건
Original Assignee
에스케이텔레콤 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020080087644A external-priority patent/KR20100028764A/ko
Priority claimed from KR1020080088108A external-priority patent/KR101294214B1/ko
Priority claimed from KR1020090020054A external-priority patent/KR101376148B1/ko
Application filed by 에스케이텔레콤 주식회사 filed Critical 에스케이텔레콤 주식회사
Priority to EP09811689.0A priority Critical patent/EP2323351A4/en
Priority to US12/737,976 priority patent/US8581954B2/en
Priority to CN2009801436388A priority patent/CN102204225B/zh
Publication of WO2010027190A2 publication Critical patent/WO2010027190A2/ko
Publication of WO2010027190A3 publication Critical patent/WO2010027190A3/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/12Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/74Details of telephonic subscriber devices with voice recognition means

Definitions

  • the present invention relates to a mobile communication terminal and a method for transmitting vibration information. More specifically, when the user touches the screen of the terminal or shakes the terminal, the mobile terminal and the method for stimulating the user's tactile sense by providing various vibrations according to the corresponding terminal or the other terminal in the call, and the user's request during the video call.
  • the present invention also relates to a mobile communication terminal and a method for transmitting a vibration suitable for a situation to a counterpart mobile communication terminal when a specific condition occurs.
  • the present communication is not only intended to convey information, but is also recognized as a place for sharing culture and emotion.
  • the mobile communication terminal for using the mobile communication service is a medium for communication and space for communication with others. I was seated.
  • the mobile communication terminal has been developed to meet the needs of users from various angles as well as to provide a voice call function and an alarm function as in the past, in accordance with such a change in the use form, and as a result,
  • a function of stimulating the user's tactile sensation has been developed by providing various vibrations in the mobile communication terminal.
  • the functions of the mobile communication terminal interact with the mobile communication terminal and the user, that is, the mobile communication terminal only provides various vibrations to the user when the user touches or shakes his mobile communication terminal.
  • the mobile communication terminal only provides various vibrations to the user when the user touches or shakes his mobile communication terminal.
  • emotions and emotions between the counterpart and the user in a voice or video call cannot be transmitted through sharing of vibration information.
  • An object of the present invention is to detect a movement of a terminal generated by a terminal user in a voice call with a counterpart terminal, generate vibration information that is a digital signal corresponding to the movement of the terminal, and generate the generated vibration information to the counterpart terminal in the voice call. Transmit or receive vibration information generated by the counterpart terminal during the voice call from the counterpart terminal from the counterpart terminal in the voice call to generate a vibration corresponding to the movement of the counterpart terminal, thereby vibrating the emotions and emotions of the counterpart and the terminal user during the voice call. It is to provide a mobile communication terminal and method to share with the other terminal through.
  • Another object of the present invention is to compare any one of the analog voice signal and the digital voice signal of the other party and the voice information table previously stored in the terminal during the voice call with the other party.
  • vibration is generated according to a specific vibration pattern corresponding to the specific voice information, so that the terminal user can feel the emotion of the other party in the voice call with a tactile touch. It is to provide a communication terminal and method.
  • Still another object of the present invention is to transmit vibration information matching the condition set by the user to the counterpart mobile communication terminal according to a user's request, or generate a vibration matched to the recognized voice by recognizing the voice transmitted from the counterpart. It is to.
  • a mobile communication terminal including a display unit, a memory unit and an audio converter
  • vibration transmission which is a key for switching the mobile communication terminal to the vibration transmission mode
  • a key input unit including a mode switching key and generating and transmitting a vibration transmission mode switching key input signal when the vibration transmission mode switching key is input while the mobile communication terminal and the counterpart terminal are connected to each other
  • a motion sensor unit which detects a movement of the mobile communication terminal and generates and transmits a first motion detection signal which is an analog signal corresponding to the detected motion;
  • the first motion detection signal is converted into first vibration information, which is a digital signal, or the second vibration information, which is a digital signal generated and transmitted by the counterpart terminal, is converted into a second motion detection signal, which is an analog signal corresponding to the motion of the counterpart terminal.
  • a vibration generator which receives the first motion detection signal or the second motion detection signal and generates a vibration corresponding to the movement of the mobile communication terminal or the movement of the counterpart terminal;
  • a wireless circuit unit transmitting the first vibration information to the counterpart terminal and receiving the second vibration information from the counterpart terminal;
  • the vibration transfer mode switch key input signal is received from the key input unit, activates the motion sensor unit to receive the first motion detection signal from the motion sensor unit, and to the A / D converter and the vibration generator.
  • a control After transmitting the first motion detection signal, a control is performed to transmit the first vibration information to the counterpart terminal through the wireless circuit unit, and the second vibration information is communicated through the wireless circuit unit in a state of being connected to the counterpart terminal.
  • receiving a control unit for transmitting the second vibration information to the A / D converter and transmitting the second motion detection signal converted by the A / D converter to the vibration generator.
  • a mobile communication terminal for transmitting and receiving vibration information during a voice call can be provided.
  • a method for transmitting vibration information in a mobile communication terminal including a key input unit, a motion sensor unit, a controller, a vibration generator, an A / D converter, and a wireless circuit unit.
  • a method for receiving vibration information in a mobile communication terminal including a wireless circuit unit, an A / D converter, a controller, and a vibration generator.
  • Receiving vibration information which is a digital signal generated and transmitted by the counterpart terminal in a connected state, from the wireless circuit unit and transmitting the vibration information to the controller;
  • a mobile communication terminal including a display unit, a wireless circuit unit, a microphone, and a speaker includes any one of analog voice signal information and digital voice signal information corresponding to voice.
  • a memory unit for storing a voice information table including at least one voice information and at least one vibration pattern information corresponding to the voice information; Converts a user analog voice signal corresponding to the voice of the terminal user input from the microphone into a user digital voice signal, and receives a counterpart caller digital voice signal corresponding to the voice of the other party through the wireless circuit unit.
  • An audio converter converting the signal into a signal;
  • a key input unit including a voice recognition activation key for activating a voice recognition function of the mobile communication terminal and a voice information update key for updating the voice information table;
  • voice information table When one of the counterpart party digital voice signal and the counterpart party analog voice signal recognizes specific voice information included in the voice information table, specific vibration pattern information corresponding to the specific voice information is extracted from the voice information table.
  • Speech recognition unit for transmitting by; Activating the voice recognition unit when the voice recognition activation key is input, generating a vibration control signal corresponding to the specific vibration pattern information, and performing control to update the voice information table when the voice information update key is input.
  • Control unit And a vibration generator for generating a vibration corresponding to the generated vibration control signal.
  • a voice information table stored in the memory unit with any one of a counterpart party digital voice signal and a counterpart party analog voice signal corresponding to the voice of the counterpart party by a voice recognition unit; (b) when one of the other party's digital voice signal and the other party's analog voice signal recognizes specific voice information included in the voice information table, specific voice pattern information corresponding to the specific voice information is received.
  • a vibration is generated by comparing a signal input to a mobile communication terminal by a user or a signal transmitted from a counterpart mobile communication terminal to a preset vibration occurrence situation during a video call.
  • a vibration generating situation recognizing unit recognizing a situation;
  • a vibration condition search unit which searches whether there is vibration information matching the vibration occurrence situation information identified by the vibration occurrence situation recognition unit, and transmits the corresponding vibration information to the vibration information transmission unit when there is a matching vibration information;
  • a vibration information transmission unit for transmitting the vibration information received from the vibration condition search unit to a counterpart mobile communication terminal performing a video call.
  • the vibration occurrence situation recognition unit may include an accelerometer and gyro recognizing means for recognizing the movement of the mobile communication terminal to recognize the acceleration or rotation during the video call; Vocabulary recognition means for analyzing a voice signal input by a user during a video call and a voice signal transmitted from a counterpart mobile communication terminal to determine a corresponding vocabulary; And face recognition means for recognizing a facial expression of a user through a camera provided in the mobile communication terminal during a video call.
  • the vibration condition searching unit searches whether there is vibration information matching the acceleration information or the rotation information identified by the accelerometer and the gyro recognition means, and if there is a matching vibration information, the vibration information is sent to the vibration information transmitting unit. I can deliver it.
  • the accelerometer and gyro recognition means may recognize the movement, rotational force, and acceleration intensity in a linear direction of the mobile communication terminal.
  • the vibration condition search unit when the vocabulary input by the user during the video call and the vocabulary recognized by the vocabulary recognition means matches and compares with a preset vocabulary pattern to generate vibration, the vibration information of the vocabulary pattern is moved to the other party.
  • the vibration information transmitter may transmit the vibration information to the communication terminal.
  • the vibration condition search unit when the vocabulary received from the counterpart mobile communication terminal during the video call and analyzed by the vocabulary recognition means matches a vibration condition including a preset vocabulary pattern to generate vibration, Information may be transmitted to the vibration output unit to generate vibration.
  • the vibration condition search unit may determine whether the facial expression of the user identified through the face recognizing means matches a preset facial expression pattern in order to generate vibration, and indicates that the facial expression of the user matches the preset facial expression pattern. If it is determined, the vibration information about the facial expression may be transmitted to the vibration information transmitter.
  • a preset vibration condition setting menu is output and based on the input vibration condition A vibration condition setting unit generating vibration information;
  • the mobile communication terminal may include a vibration information transmission unit configured to transmit vibration information set by the vibration condition setting unit to a counterpart mobile communication terminal performing a video call.
  • the mobile communication terminal when receiving the vibration information transmitted from the other party's mobile communication terminal during the video call, the vibration information determiner for grasping the vibration to be analyzed and output; And a vibration output unit configured to generate the vibration identified by the vibration information grasping unit.
  • the vibration information determiner extracts vibration information matching the code from the prestored vibration information, and the vibration information transmitted from the counterpart mobile communication terminal is in the form of a vibration. Including detailed information including, it may be transmitted to the vibration output unit.
  • a method for transmitting vibration during a video call a) a signal corresponding to a vibration occurrence state of the first mobile communication terminal during a video call between the first mobile terminal and the second mobile communication terminal; Recognizing that it occurs; b) searching and extracting vibration information matching the vibration occurrence situation information by the first mobile communication terminal; And c) transmitting, by the first mobile communication terminal, the retrieved vibration information to a second mobile communication terminal which performs a video call.
  • step a) may be a step in which the first mobile communication terminal recognizes the movement of the mobile terminal to recognize the occurrence of acceleration or rotation.
  • Step b) may determine whether there is vibration information that matches the acceleration information or the rotation information, and if there is vibration information that matches with the result of the checking, extracting the vibration information.
  • the step a) may be a step in which the first mobile communication terminal analyzes a voice signal input from the outside to determine a corresponding vocabulary.
  • the first mobile communication terminal compares the vocabulary determined in step a) with a preset vocabulary pattern to generate vibration, and checks whether there is a matching vocabulary pattern, and confirms that the vocabulary pattern matches. If there is, it may be a step of extracting the vibration information for the vocabulary pattern.
  • the step a) may include recognizing the facial expression of the user through his camera during the video call between the first mobile terminal and the second mobile communication terminal.
  • the method may include checking whether the recognized facial expression of the user matches a preset facial expression to generate vibration.
  • the step b) when it is determined that the facial expression of the user matches the preset facial expression, the first mobile communication terminal may extract vibration information matched with the facial expression.
  • Another method for transmitting vibration during a video call is a) vibrating according to a user's selection by the first mobile terminal during a video call between the first mobile terminal and the second mobile communication terminal. Outputting a preset vibration condition setting menu when receiving a request; b) generating, by the first mobile communication terminal, vibration information based on the vibration condition input by the user, and transmitting the generated vibration information to the second mobile communication terminal performing the video call.
  • the first mobile communication terminal After the first mobile communication terminal transmits the vibration information to the second mobile communication terminal, if the vibration information transmitted from the first mobile communication terminal has a specific code format, the second mobile communication terminal and the code from the pre-stored vibration information Generating vibration by extracting the matching vibration information, and when the vibration information transmitted from the first mobile communication terminal includes detailed information including a vibration type, generating a vibration according to the vibration type by the second mobile communication terminal It may further include.
  • the vibration information is transmitted in the form of H.245, transmitted in UUS, generated by the specification in Unstructured Supplementary Services Data (USSD), and transmitted in the form of a message by distinguishing it from a general short message service (SMS) based on a specific port. Any one may be transmitted to the second mobile communication terminal.
  • Another method for generating a vibration during a video call is a) a second mobile communication terminal from the first mobile communication terminal during a video call between the first mobile terminal and the second mobile communication terminal; Analyzing the transmitted voice signal to determine a corresponding vocabulary; b) checking, by the second mobile communication terminal, whether there is a matching vocabulary pattern by comparing the vocabulary identified in step a) with a vibration condition including a preset vocabulary pattern for generating vibration; And c) generating a vibration of the corresponding vocabulary pattern when the matching vocabulary pattern is found.
  • the mobile communication terminal when a mobile communication terminal is shaken according to the emotion and emotion of the user of the mobile communication terminal during a voice call with the other party, the mobile communication terminal detects this and corresponds to the movement of the mobile communication terminal. Since the vibration information is transmitted to the counterpart terminal, the counterpart terminal may generate a vibration corresponding to the movement of the mobile communication terminal, so that the other party and the user of the mobile communication terminal can share emotions and emotions through the vibration. There is.
  • the mobile communication terminal recognizes it and attaches to the predetermined word or phrase. Accordingly, since the vibrations are generated in different vibration patterns, the terminal user can feel the emotion of the other party on the phone call.
  • the mobile communication terminal provides a voice information editing function, specific voice information and corresponding vibration pattern information can be edited, so that the user of the terminal can select an emotion of the other party to be delivered.
  • the vibration information to be delivered to the other party's mobile communication terminal there is an advantage that can recognize the voice transmitted from the other party to generate a vibration matched to the recognized voice.
  • FIG. 1 is a block diagram schematically showing an internal configuration of a mobile communication terminal according to a first embodiment of the present invention
  • FIG. 2 is a diagram schematically illustrating a configuration of a system for transmitting vibration information during a voice call using a mobile communication terminal according to a first embodiment of the present invention
  • FIG. 3 is a flowchart illustrating a process for transmitting vibration information during a voice call in a mobile communication terminal according to a first embodiment of the present invention
  • FIG. 4 is a flowchart illustrating a process of receiving vibration information during a voice call in a mobile communication terminal according to the first embodiment of the present invention
  • FIG. 5 is a block diagram schematically illustrating an internal configuration of a mobile communication terminal according to a second embodiment of the present invention.
  • FIG. 6 is a diagram illustrating a voice information table according to a second embodiment of the present invention.
  • FIG. 7 is a diagram illustrating a screen on which a voice information editing screen is displayed in a mobile communication terminal according to a second embodiment of the present invention.
  • FIG. 8 is a flowchart illustrating a process of transmitting a vibration of a counterpart caller in a mobile communication terminal by vibration according to a second embodiment of the present invention
  • FIG. 9 is a diagram illustrating an example of a configuration of a mobile communication terminal according to a third embodiment of the present invention.
  • FIG. 10 is a view showing in more detail the configuration of the vibration occurrence situation recognition unit according to a third embodiment of the present invention.
  • FIG. 11 is a view for explaining an example of the vibration generating method according to a third embodiment of the present invention.
  • FIG. 12 is a view for explaining another example of the vibration generating method according to the third embodiment of the present invention.
  • FIG. 13 is a view for explaining another example of the vibration generating method according to a third embodiment of the present invention.
  • FIG. 14 is a view showing another example of the configuration of a mobile communication terminal according to a third embodiment of the present invention.
  • 15 to 17 are flowcharts illustrating a method for transmitting vibration during a video call according to a third embodiment of the present invention.
  • FIG. 1 is a block diagram schematically illustrating an internal configuration of a mobile communication terminal according to a first embodiment of the present invention.
  • the mobile communication terminal 100 includes a key input unit 110, a display unit 120, a memory unit 130, a motion sensor unit 140, a controller 150, and an A / D conversion.
  • the unit 160, a vibration generator 170, an audio converter 180, and a wireless circuit unit 190 are included.
  • the key input unit 110 is an input unit for receiving a command of a mobile communication terminal user and transmitting the command to the control unit 150 and includes a function button for executing a function of the mobile communication terminal and a general button for inputting letters or numbers. .
  • the key input unit 110 includes a vibration transmission mode switching key, which is a key for causing the mobile communication terminal 100 to switch to the vibration transmission mode, and the mobile communication terminal 100 and the counterpart terminal (not shown).
  • the vibration transmission mode switch key is input by the mobile communication terminal user while the phone call is connected, the vibration transmission mode switch key input signal is generated and transmitted to the control unit 150.
  • the vibration transmission mode is a mode for generating vibration information and transmitting the vibration information to a counterpart terminal (not shown) while the mobile communication terminal is busy.
  • the display unit 120 may display an information screen informing information of the mobile communication terminal 100, a menu screen showing various functions, an input screen for inputting letters or numbers, a picture or a picture under the control of the controller 150. It provides an edit screen for editing and a screen for accessing the wireless Internet.
  • the memory unit 130 stores a program for driving a function processed by the controller 150, a predetermined program for implementing convenience and basic functions of a user, and the like.
  • the motion sensor unit 140 is activated by the control of the controller 150 to detect the movement of the mobile communication terminal 100 generated when the mobile communication terminal user shakes the mobile communication terminal 100 and correspond to the detected movement.
  • the first motion detection signal which is an analog signal, is generated and transmitted to the controller 150.
  • the motion sensor unit 140 includes one or more of an acceleration sensor, an angular velocity sensor, a geomagnetic sensor, and a gyro sensor.
  • the control unit 150 executes a driving program stored in the memory unit 130 according to the instruction of the mobile communication terminal user input through the key input unit 110 to execute a phone book, mobile phone setting, schedule management, game, screen setting, and volume bell. Various menu items such as sound and call service are controlled.
  • the motion sensor unit 140 when the control unit 150 receives the vibration transmission mode switching key input signal from the key input unit 110 while the voice terminal is connected to the counterpart terminal (not shown), the motion sensor unit 140 is connected. After activation, the motion detection signal is received from the motion sensor unit 140, the first motion detection signal is transmitted to the A / D converter 160 and the vibration generator 170, and then the A / D converter 160 Control to transmit the generated first vibration information to the other terminal (not shown) connected to the call through the mobile communication network 220 to be described later.
  • the controller 150 generates a first vibration information flag which is information for allowing the counterpart terminal (not shown) to recognize that the data transmitted through the mobile communication network 220 is the first vibration information in a busy state. It may be to be transmitted along with the first vibration information.
  • control unit 150 preferably transmits the first vibration information in any one of a User to User Signaling (UUS) message format and an Unstructured Supplementary Service Data (USSD) message format. no.
  • UUS User to User Signaling
  • USB Unstructured Supplementary Service Data
  • the controller 150 receives the second vibration information which is vibration information generated and transmitted by the counterpart terminal (not shown) through the wireless circuit unit 190 in a state of talking with the counterpart terminal (not shown), the A / D The converter 160 converts the second vibration information into a second motion detection signal, which is a motion detection signal of the counterpart terminal (not shown), and vibrates the second motion detection signal converted by the A / D converter 160. Transfer to the generation unit 170.
  • the controller 150 checks the second vibration information flag received together with the second vibration information to recognize that the data received from the counterpart terminal (not shown) is the second vibration information.
  • the second vibration information may be received from the counterpart terminal (not shown).
  • the second vibration information is preferably transmitted in any one of a UUS message format and an Unstructured Supplementary Service Data (USSD) format, but is not necessarily limited thereto.
  • UUS message format preferably transmitted in any one of a UUS message format and an Unstructured Supplementary Service Data (USSD) format, but is not necessarily limited thereto.
  • USB Unstructured Supplementary Service Data
  • the A / D converter 160 converts an analog signal into a digital signal or converts a digital signal into an analog signal.
  • the A / D converter 160 converts the first motion detection signal, which is an analog signal, into first vibration information, which is a digital signal, or is a digital signal generated and transmitted by a counterpart terminal (not shown).
  • the second vibration information is converted into a second motion detection signal which is an analog signal corresponding to the movement of the counterpart terminal (not shown).
  • the vibration generator 170 generates vibrations under the control of the controller 150.
  • the vibration generating unit 170 receives the first motion detection signal or the second motion detection signal from the control unit 150 and vibrates corresponding to the movement of the mobile communication terminal 100 or the movement of the counterpart terminal (not shown). Occurs.
  • the audio converter 180 modulates the voice signal input from the microphone 182 and converts the voice signal into voice data, demodulates the voice data input from the wireless circuit unit 190 into the voice signal, and outputs the voice signal through the speaker 184. .
  • the radio circuit unit 190 demodulates and amplifies an RF signal received through the antenna 195, modulates a transmission signal applied from the audio converter 180, and transmits the modulated signal to the mobile communication network 220.
  • the wireless circuit unit 190 transmits the first vibration information to the counterpart terminal (not shown) through the mobile communication network 220, and receives the second vibration information of the counterpart terminal (not shown) to control the controller. Pass in 150.
  • FIG. 2 is a diagram schematically illustrating a configuration of a system for transmitting vibration information during a voice call using a mobile communication terminal according to the first embodiment of the present invention.
  • the first terminal 210 and the second terminal 230 which are the mobile terminal 100 according to the first embodiment of the present invention, are connected to a voice call through the mobile communication network 220, the first terminal 210 is connected.
  • the first terminal 210 generates vibration information corresponding to the shaking of the terminal and transmits the vibration information corresponding to the shaking of the terminal to the second terminal 230 which is the other terminal through the mobile communication network 220,
  • the second terminal 230 generates a vibration corresponding to the shaking of the first terminal 210.
  • the vibration information generated in any one of the first terminal 210 and the second terminal 220 during a voice call can be shared with each other through the above-described embodiments, the emotion and the emotion between the first terminal user and the second terminal user can be shared. Emotion, etc. can be transmitted to the vibration of the terminal.
  • FIG. 3 is a flowchart illustrating a process for transmitting vibration information during a voice call in the mobile communication terminal according to the first embodiment of the present invention.
  • the control unit 150 receives the motion input unit 140 and receives the motion sensor unit 140. ) Is activated (S310 and S320).
  • the controller 150 transmits the first motion detection signal.
  • the A / D conversion unit 160 and the vibration generating unit 170 are transmitted (S330, S340).
  • the vibration generator 170 of the vibration generator 170 and the A / D converter 160 that receives the first motion detection signal from the controller 150 generates vibration corresponding to the movement of the mobile communication terminal 100.
  • the A / D converter 160 converts the first motion detection signal, which is an analog signal, into first vibration information, which is a digital signal, and transmits the first motion information to the controller 150 (S350 and S360).
  • the controller 150 performs control for transmitting the first vibration information received from the A / D converter 160 to the counterpart terminal (not shown) to which a voice call is connected through the wireless circuit unit 190 (S370). ).
  • the controller 150 generates a first vibration information flag which is information for allowing the counterpart terminal (not shown) to recognize that the data transmitted through the mobile communication network 220 is the first vibration information in a busy state. It is preferable to transmit together with the first vibration information.
  • the controller 150 may transmit the first vibration information in the UUS message format.
  • FIG. 4 is a flowchart illustrating a process of receiving vibration information during a voice call in the mobile communication terminal according to the first embodiment of the present invention.
  • the controller 150 transmits the second vibration information to the A / D conversion unit 160 (S410, S420).
  • the wireless circuit unit 190 receives the second vibration information flag along with the second vibration information, which is information for allowing the control unit 150 to recognize data received from the counterpart terminal (not shown) as the second vibration information. can do.
  • the controller 150 When the A / D converter 160 converts the second vibration information into a second motion detection signal, which is an analog signal corresponding to the movement of the counterpart terminal (not shown), the controller 150 generates a vibration of the second motion detection signal. By transmitting to the unit 170 to generate a vibration corresponding to the movement of the counterpart terminal (not shown) in the vibration generating unit 170 (S430, S440, S450).
  • the mobile communication terminal 100 may receive second vibration information from the counterpart terminal (not shown).
  • FIG. 5 is a block diagram schematically illustrating an internal configuration of a mobile communication terminal according to a second embodiment of the present invention.
  • the mobile communication terminal 500 includes a key input unit 510, a display unit 520, a memory unit 530, an audio converter 540, a voice recognition unit 550, and a controller ( 560, a vibration generator 570, and a wireless circuit unit 580.
  • the key input unit 510 is an input unit for receiving a command of a terminal user and transmitting the command to the control unit 560 and includes a function button for executing a function of the mobile communication terminal and a general button for inputting letters or numbers.
  • the key input unit 510 is a voice recognition activation key for activating the voice recognition function of the mobile communication terminal 500 and a voice for updating the voice information table stored in the memory unit 520 to be described later. Contains an information update key.
  • the key input unit 510 When the voice recognition activation key is input by the terminal user, the key input unit 510 generates a voice recognition activation key input signal and transmits it to the control unit 560, and inputs the voice information update key when the voice user update key is input by the terminal user. The signal is generated and transmitted to the controller 560.
  • the memory unit 520 stores a program for driving a function processed by the controller 560, a predetermined program for implementing convenience and basic functions of a user, and the like.
  • the memory unit 520 may include a voice information table including one or more voice information including at least one of analog voice signal information and digital voice signal information corresponding to voice and vibration pattern information corresponding thereto. Save it.
  • the voice is preferably a voice corresponding to a predetermined word or phrase as shown in FIG. 6, but is not necessarily limited thereto. In other words, it may be a voice corresponding to a sentence.
  • the display unit 530 may display an information screen that informs information of the mobile communication terminal 500, a menu screen showing various functions, an input screen for inputting letters or numbers, a picture or a picture under the control of the controller 560. It provides an edit screen for editing and a screen for accessing the wireless Internet.
  • the display unit 530 updates the voice information for updating the voice information table as shown in FIG. 7 under the control of the controller 560. Display the screen.
  • the audio converter 540 converts a user analog voice signal, which is an analog voice signal corresponding to the voice of the terminal user input from the microphone 542, into a user digital voice signal, and converts a counterpart caller connected to the mobile communication terminal 500.
  • the other party's digital voice signal which is the digital voice signal corresponding to the voice, is input through the wireless circuit unit 580, and converted to the other party's analog voice signal, which is an analog voice signal, to be output through the speaker 544.
  • the voice recognition unit 550 When the voice recognition unit 550 recognizes the specific voice information included in the voice information table from either the other party's digital voice signal or the other party's analog voice signal, the voice recognition unit 550 receives the specific vibration pattern information corresponding to the specific voice information. Extracted from the table and delivered to the control unit 560.
  • the voice recognition unit 550 is activated by the control of the control unit 560 when the voice recognition activation key of the key input unit 510 is inputted, and the voice recognition unit 550 is activated by one of the other party's digital voice signal and the other party's analog voice signal.
  • one of the other party's digital voice signal and the other party's analog voice signal is compared with the voice information table stored in the memory unit 520.
  • the voice recognition unit 550 recognizes the specific digital voice signal information included in the voice information table from the counterpart party digital voice signal, Specific vibration pattern information corresponding to the digital voice signal information is extracted from the voice information table and transmitted to the controller 560.
  • the voice recognition unit 550 compares the counterpart party digital voice signal with one or more digital voice signal information included in the voice information table, and the similarity between the counterpart party digital voice signal and the specific digital voice signal information is constant. When the above-mentioned digital voice signal is found, it can be recognized as specific digital voice signal information.
  • the voice recognition unit 550 recognizes the specific analog voice signal information included in the voice information table from the counterpart caller analog voice signal and corresponds to the specific analog voice signal information.
  • the specific vibration pattern information is extracted from the voice information table and transmitted to the controller 560.
  • the voice recognition unit 550 compares the counterpart caller analog voice signal with one or more analog voice signal information included in the voice information table, and the similarity between the counterpart caller analog voice signal and the specific analog voice signal information is constant. When the analog voice signal is found above, it can be recognized as specific analog voice signal information.
  • the controller 560 executes a driving program stored in the memory unit 530 according to the terminal user's instruction input through the key input unit 510 to execute a phone book, mobile phone setting, schedule management, game, screen setting, volume ringing, etc. Control various menu items and call services.
  • control unit 560 controls to update the voice information table as follows when the voice recognition activation key is input.
  • the control unit 560 When the voice information update key is input when the mobile communication terminal 500 is in a standby state, that is, when the call is not connected to the other party, the control unit 560 receives one of a user analog voice signal and a user digital voice signal. Extracted from the conversion unit 540 to generate user voice information, the user voice information and the user-selected vibration pattern information, which is vibration pattern information selected by the terminal user, are corresponded and updated in the voice information table.
  • the user voice information is one of digital voice signal information and analog voice signal information.
  • the controller 560 converts any one of the other party's digital voice signal and the other party's analog voice signal into the audio converter. Extracted from 540 to generate the other party's voice information, and the other party's voice information and the user's selected vibration pattern information are correlated and updated in the voice information table.
  • the other party's voice information is any one of digital voice signal information and analog voice signal information.
  • the vibration generator 570 generates vibrations under the control of the controller 560.
  • the vibration generator 570 receives the vibration control signal from the controller 560 and generates a vibration corresponding to the vibration control signal.
  • the wireless circuit unit 580 demodulates and amplifies a counterpart caller digital voice signal received through the antenna 585, modulates a user digital voice signal applied from the audio converter 540, and transmits the digital voice signal to a mobile communication network (not shown). do.
  • FIG. 6 is a diagram exemplarily illustrating a voice information table according to a second embodiment of the present invention.
  • the voice information table is a user analog corresponding to a predetermined word or phrase (for example, I love you, fool, say, annoying, wow!
  • It may include vibration pattern information corresponding to any one of the voice signal and the counterpart party digital voice signal.
  • the mobile communication terminal 500 may store a plurality of vibration pattern information in advance, and download and store one or more vibration pattern information through a mobile communication network (not shown).
  • FIG. 7 is a diagram illustrating a screen displaying a voice information editing screen in a mobile communication terminal according to a second embodiment of the present invention.
  • the mobile communication terminal 500 When the voice information update key of the mobile communication terminal 500 is input by the terminal user when the mobile communication terminal 500 is in a call connection state or a standby state with the other party, the mobile communication terminal 500 performs voice information such as 7A. After the start button is input by the terminal user and the voice of the terminal user corresponding to the predetermined word or phrase or the voice of the other party connected to the call is input, the screen is recorded as voice information.
  • the mobile communication terminal 500 displays a plurality of vibration pattern information as shown in 7B, and when the terminal user selects specific vibration pattern information among the plurality of vibration pattern information, the voice information And specific vibration pattern information are associated with each other, and the corresponding voice information and the specific vibration pattern information are updated in the voice information table.
  • FIG. 8 is a flowchart illustrating a process of transmitting the emotion of the other party in a call by vibration in the mobile communication terminal according to the second embodiment of the present invention.
  • the controller 560 activates the voice recognition unit 550 (S810 and S820).
  • the activated voice recognition unit 550 compares the voice information table stored in the memory unit 520 with one of the other party's digital voice signal and the other party's analog voice signal corresponding to the voice of the other party.
  • the controller 560 extracts specific vibration pattern information corresponding to the recognized voice information from the voice information table.
  • the voice information table may include voice information including any one of analog voice signal information corresponding to a voice corresponding to a predetermined word or phrase and digital voice signal information corresponding to the voice, and vibration pattern information corresponding to the voice information. It can include one or more.
  • the controller 560 generates a vibration control signal corresponding to the specific vibration pattern information and transmits the vibration control signal to the vibration generator 570 to generate the vibration corresponding to the vibration control signal in the vibration generator 570 (S860 and S870). ).
  • the mobile communication terminal 500 repeats steps S830 to S860 until the call with the other party is terminated or the voice recognition function of the mobile communication terminal is deactivated by the terminal user (S880).
  • the voice recognition unit 550 compares the counterpart party digital voice signal with one or more digital voice signal information included in the voice information table, and the voice information is analog. If the voice signal information is included, the voice recognition unit 550 compares the counterpart caller analog voice signal with one or more analog voice signal information included in the voice information table.
  • the mobile communication terminal 500 As described above, if the mobile communication terminal 500 according to the second embodiment of the present invention includes a predetermined word or phrase indicating the emotion of the other party in the voice of the other party in the call, the mobile communication terminal 500 recognizes the predetermined word or phrase and recognizes the predetermined word or phrase. According to each of the vibration patterns are generated in a different vibration pattern so that the terminal user can feel the emotion of the other party on the phone call.
  • FIG. 9 is a diagram illustrating an embodiment of a mobile communication terminal configuration according to a third embodiment of the present invention.
  • the mobile communication terminal 900 includes a wireless communication unit 910, an input unit 920, an output unit 930, a memory 940, a vibration occurrence situation recognition unit 950, and a vibration condition search unit 960. , A vibration information transmission unit 970 and a vibration output unit 980.
  • a wireless communication unit 910 for performing communication through a communication network an input unit 920 for performing input control, an output unit 930 for providing audio or visual data necessary for using a voice call service or a data service, and mobile communication.
  • the memory 940 for storing information related to the terminal is a general configuration and a detailed description thereof will be omitted.
  • the vibration occurrence situation recognizer 950 recognizes a vibration occurrence situation by comparing a signal input to a mobile communication terminal by a user or a signal transmitted from a counterpart mobile communication terminal to a preset vibration occurrence situation during a video call.
  • the vibration generating situation recognition unit 950 recognizes the movement of the mobile communication terminal during the video call to detect the acceleration or rotation, and the gyro recognition means 951 to the user during the video call. Recognizing the facial expression of the user through the camera provided in the mobile communication terminal and the vocabulary recognition means 953 to analyze the voice signal input by the voice signal transmitted from the mobile communication terminal and the corresponding vocabulary Face recognition means 955.
  • the accelerometer and gyro recognizing means 951 recognizes the movement, rotational force, and acceleration intensity in the linear direction of the mobile communication terminal.
  • the accelerometer and gyro recognition unit 951 detects acceleration based on one axis when one acceleration is provided, but when three accelerations are provided on the x, y, and z axes, the acceleration force can be measured in three axes. Measure the acceleration force at As such, when the gyro is arranged in three axes, three-axis angular velocity can be measured to check the angular velocity in three-dimensional space.
  • the method of recognizing the intensity is to implement a high-resolution acceleration and gyro, and to determine what information is the acceleration and angular velocity measured by the acceleration and the gyro.
  • the case of recognizing the vocabulary by the vocabulary recognizing means 953 the case of recognizing a voice input by a user through a microphone (for example, a voice input unit (not shown)) and a voice transmitted from the counterpart mobile communication terminal are used. It is classified as a case of recognition.
  • the lexical recognition unit 953 compares and analyzes a waveform of a voice input through a microphone (voice input unit) (not shown) of the mobile communication terminal with a lexical pattern which is stored in advance.
  • the waveform of the voice transmitted from the other party's mobile communication terminal is analyzed and compared with the previously stored vocabulary pattern to identify the vocabulary corresponding to the transmitted voice.
  • the face recognizing means 955 recognizes a user's face captured by the camera lens and grasps a moment when a predetermined facial expression pattern (for example, a smiling face, an angry face, a crying face, etc.) is made.
  • a predetermined facial expression pattern for example, a smiling face, an angry face, a crying face, etc.
  • the method of recognizing a user's face may be applied in addition to the above-described techniques, depending on the needs of the operator.
  • the vibration condition search unit 960 searches whether the vibration information matching the vibration occurrence situation information identified by the vibration occurrence situation recognition unit 950 exists, and if there is a matching vibration information, vibrates the corresponding vibration information. Transfer to the information transmission unit 970.
  • the vibration condition search unit 960 searches whether the vibration information matched with the acceleration information or the rotation information identified by the accelerometer and the gyro recognition unit 951 exists, and when there is a matching vibration information, The vibration information is transmitted to the vibration information transmitter 970.
  • the vibration condition search unit 960 retrieves and extracts vibration information matching ⁇ left, right, top, ...> respectively.
  • the vibration information may be in the form of a code such as ⁇ 0x01, 0x02, 0x03, etc.> or in a form including detailed information including vibration shape information, such as ⁇ short and weak vibration, long and weak vibration, and short and strong vibration>.
  • the vibration type information matching the vibration code should be stored in advance in the counterpart mobile communication terminal.
  • the vibration condition search unit 960 if the vocabulary input by the user during the video call and grasped by the vocabulary recognition unit 953 matches with the preset vocabulary pattern to generate vibration, the vibration condition search unit 960 corresponds to the vocabulary pattern.
  • the vibration information is transmitted to the vibration information transmitter 970 to transmit the vibration information to the counterpart mobile communication terminal.
  • the vibration condition search unit 960 vibrates matching the recognized vocabulary.
  • the information (vibration code or vibration form) is extracted and transmitted to the vibration information transmission unit 970.
  • the vibration condition retrieval unit 960 matches the vibration condition that the vocabulary received from the counterpart mobile communication terminal and analyzed by the vocabulary recognition means 953 during the video call includes a preset vocabulary pattern to generate vibration. In this case, information is transmitted to the vibration output unit 980 to generate vibration for the corresponding lexical pattern.
  • the vibration condition search unit 960 checks whether the facial expression of the user identified by the face recognizing means 955 matches the preset facial expression pattern to generate vibration, and the facial expression of the user is preset. When it is determined that the pattern matches, the vibration information about the facial expression is transmitted to the vibration information transmitting unit 970.
  • the vibration condition search unit 960 matches vibration codes 0x01, which are matched according to the user's facial expressions (pattern-smiling expression, frowning expression, angry expression, etc. of FIG. 13). 0x02, 0x03, etc.) or vibration type (short and weak vibration, long and weak vibration, short and strong vibration, etc.).
  • the vibration condition search unit 960 transmits the searched vibration information to the vibration output unit 980, and thus the mobile communication terminal 900. To output vibrations on the
  • the vibration condition search unit 960 when the vocabulary received and analyzed from the counterpart mobile communication terminal matches a vibration condition including a preset vocabulary pattern to generate vibration in a video call, Information is transmitted to the vibration output unit 980 to generate vibration. Thereafter, the vibration output unit 980 generates vibrations for the lexical pattern using the information received from the vibration condition search unit 960.
  • the vibration information transmitter 970 transmits the vibration information received from the vibration condition searcher 960 to the counterpart mobile communication terminal which performs the video call.
  • the vibration output unit 980 When the signal is a signal transmitted from the counterpart mobile communication terminal during the video call, the vibration output unit 980 generates a vibration that matches the vibration occurrence situation information retrieved by the vibration condition search unit 960.
  • FIG. 14 is a diagram illustrating another example of a configuration of a mobile communication terminal according to a third embodiment of the present invention.
  • FIG. 14 illustrates vibrations corresponding to vibration information transmitted from a counterpart mobile communication terminal and transmission of vibration information according to a user's setting. The case where it occurs will be described as an example.
  • the mobile communication terminal 1400 includes a wireless communication unit 1410, an input unit 1420, an output unit 1430, a memory 1440, a vibration condition setting unit 1450, a vibration information transmission unit 1460, And a vibration information grasping unit 1470 and a vibration output unit 1480.
  • a wireless communication unit 1410 for performing communication through a communication network an input unit 1420 for performing input control, an output unit 1430 for providing audio or visual data necessary for using a voice call service or a data service, mobile communication
  • the memory 1440 for storing information related to the terminal is a general configuration and a detailed description thereof will be omitted.
  • the vibration condition setting unit 1450 When the vibration condition setting unit 1450 receives a vibration request according to a user's selection during a video call, the vibration condition setting unit 1450 outputs a preset vibration condition setting menu and generates vibration information based on the input vibration condition.
  • the vibration condition setting menu is a menu for setting the strength, period, and the like of vibration.
  • the vibration information transmitting unit 1460 transmits the vibration information set by the vibration condition setting unit 1450 to the counterpart mobile communication terminal performing the video call.
  • the vibration information grasping unit 1470 identifies the vibration to be output.
  • the vibration information determiner 1470 extracts vibration information matching the corresponding code from the prestored vibration information, and the vibration information transmitted from the counterpart mobile communication terminal When the detailed information including the vibration form is transmitted, it is transmitted to the vibration output unit 1480.
  • the vibration output unit 1480 generates the vibration grasped by the vibration information grasping unit 1470.
  • FIG. 15 is a flowchart illustrating a method for transmitting vibration during a video call according to a third embodiment of the present invention. An operation in the mobile communication terminal of FIG. 14 will be described as an example.
  • the first mobile communication terminal outputs a preset vibration condition setting menu (S1501, S1503).
  • the vibration condition setting menu is a menu for setting the strength, period, and the like of vibration, and other items may be further added as necessary by an operator.
  • the first mobile communication terminal generates vibration information based on the vibration condition input by the user and transmits the vibration information to the second mobile communication terminal performing the video call (S1505 and S1507).
  • the vibration information is transmitted in H.245 format, transmitted to user to user signaling (UUS), generated by generating a specification in unstructured supplementary services data (USSD), or a general short message based on a specific port. Service) and transmitted to the second mobile communication terminal in one of the methods transmitted in the form of a message.
  • UUS user to user signaling
  • USSD unstructured supplementary services data
  • Service general short message based on a specific port. Service
  • the second mobile communication terminal When the second mobile communication terminal receives the vibration information transmitted from the first mobile communication terminal during the video call, the second mobile communication terminal analyzes the vibration information to identify the vibration to be output (S1509).
  • the second mobile communication terminal generates the vibration identified in step S1509 (S1511).
  • the second mobile communication terminal when the vibration information transmitted from the first mobile communication terminal has a specific code format, the second mobile communication terminal generates vibration by extracting vibration information corresponding to the corresponding code from previously stored vibration information.
  • the second mobile communication terminal when the vibration information transmitted from the first mobile communication terminal includes detailed information including the vibration type, the second mobile communication terminal generates vibration according to the vibration type.
  • 16 is a flowchart illustrating another method for transmitting vibration during a video call according to a third embodiment of the present invention.
  • the first mobile communication terminal recognizes that a signal corresponding to a vibration occurrence situation is generated (S1601 and S1603).
  • step S1603 is a step in which the first mobile communication terminal recognizes its own movement to recognize the occurrence of acceleration or rotation.
  • the first mobile communication terminal recognizes the strength of the movement, rotation, and acceleration in the linear direction of the mobile communication terminal.
  • the acceleration is detected based on one axis, but if three accelerations are provided on the x, y, and z axes, the acceleration force can be measured in three axes, and thus the acceleration force is measured in three-dimensional space.
  • the gyro is arranged in three axes, three-axis angular velocity can be measured to check the angular velocity in three-dimensional space.
  • the method of recognizing the intensity is to implement a high-resolution acceleration and gyro, and to determine what information is the acceleration and angular velocity measured by the acceleration and the gyro.
  • step S1603 is a step in which the first mobile communication terminal analyzes the voice signal input from the outside to determine the corresponding vocabulary.
  • the voice signal is input through a voice input unit (for example, a microphone not shown) provided in the mobile communication terminal, not a voice signal transmitted through a communication network.
  • a voice input unit for example, a microphone not shown
  • the first mobile communication terminal recognizes the user's facial expression through his camera during a video call between the first mobile communication terminal and the second mobile communication terminal.
  • the method may include checking whether the recognized facial expression of the user matches a preset facial expression in order to generate vibration.
  • the first mobile communication terminal checks whether the facial expression of the user changes to match the condition causing the vibration.
  • the first mobile communication terminal searches for and extracts vibration information matching the vibration occurrence situation information (S1605).
  • step S1605 checks whether there is vibration information that matches the acceleration information or the rotation information, and if the vibration result matches the result, Extracting the vibration information.
  • the first mobile communication terminal compares the vocabulary found in step S203 with a preset vocabulary pattern to generate a vibration, and the matching vocabulary pattern matches. If there is a matching lexical pattern, the step of extracting the vibration information for the lexical pattern.
  • step S1605 when the vibration occurrence situation information is a facial expression signal, step S1605, when the first mobile communication terminal determines that the user's facial expression matches the preset facial expression, the vibration information matching the facial expression is extracted. Step.
  • the first mobile communication terminal transmits the retrieved vibration information to the second mobile communication terminal performing a video call in operation S1607.
  • the second mobile communication terminal When the second mobile communication terminal receives the vibration information transmitted from the first mobile communication terminal during the video call, the second mobile communication terminal analyzes the vibration information to identify the vibration to be output (S1609).
  • the second mobile communication terminal generates the vibration identified in step S1609 (S1611).
  • the second mobile communication terminal when the vibration information transmitted from the first mobile communication terminal has a specific code format, the second mobile communication terminal generates vibration by extracting vibration information corresponding to the corresponding code from previously stored vibration information.
  • the second mobile communication terminal when the vibration information transmitted from the first mobile communication terminal includes detailed information including the vibration type, the second mobile communication terminal generates vibration according to the vibration type.
  • FIG. 17 is a flowchart illustrating another method of transmitting vibration during a video call according to a third embodiment of the present invention, and illustrates an example of outputting vibration on a voice signal transmitted from a counterpart mobile communication terminal. Let's do it.
  • the second mobile communication terminal analyzes a voice signal transmitted from the first mobile communication terminal to determine a corresponding vocabulary (S1701 and S1703).
  • the second mobile communication terminal compares the vocabulary identified in step S1703 with a vibration condition including a preset vocabulary pattern for generating vibration (S1705).
  • the second mobile communication terminal If a matching vocabulary pattern is found, the second mobile communication terminal generates a vibration for the corresponding vocabulary pattern (S1707).
  • the second mobile communication terminal presets and stores information including a vibration pattern matching the vocabulary pattern and refers to it when vibration is generated.
  • step S1705 the second mobile communication terminal performs the procedure after step S1701.
  • the vibration information transmitted to the counterpart mobile communication terminal disclosed in the present invention may further include sounds, animations, and the like, in addition to vibrations as required by an operator.
  • the data format of the vibration information transmitted to the counterpart mobile communication terminal is composed of a code indicating a vibration transmission service and a code indicating a service type such as vibration, sound, and animation.
  • the mobile communication terminal is limited to the above description, but may be changed to a wired terminal as required by an operator.
  • the embodiment of the present invention is applied to the field of mobile communication terminals, and when the mobile communication terminal is shaken according to the emotions and emotions of the user of the mobile communication terminal during a voice call with the other party, the mobile communication terminal detects it and detects it. Since vibration information corresponding to the movement of the mobile terminal can be generated by transmitting vibration information corresponding to the counterpart terminal, the counterpart and the mobile terminal user during the voice call share emotions and emotions through vibration. It is a very useful invention that produces an effect that can be achieved.
  • another embodiment of the present invention is applied to the field of the mobile communication terminal, if a predetermined word or phrase indicating the emotion of the other party in the voice of the other party in the call with the mobile communication terminal, the mobile communication terminal recognizes it And according to a predetermined word or phrase is a very useful invention that generates an effect that allows the terminal user to feel the emotion of the other party in the call with a touch because the vibration is generated in each different vibration pattern.
  • Another embodiment of the present invention is suitable for a high necessity of expecting an effect of transmitting a vibration indicating an emotional state of a user to a counterpart mobile communication terminal during a video call.

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Telephone Function (AREA)
  • Telephonic Communication Services (AREA)

Abstract

본 발명은 진동 정보를 전달하는 이동통신 단말기 및 방법에 관한 것으로, 본 발명의 일 실시예는 상대방 단말기와 음성 통화 중인 상태에서 단말기 사용자에 의해 발생한 단말기의 움직임을 감지하고 단말기의 움직임에 해당하는 디지털 신호인 진동 정보를 생성하고 생성한 진동 정보를 음성 통화 중인 상대방 단말기에 전송하거나, 상대방 단말기와 음성 통화 중에 상대방 단말기에서 생성한 진동 정보를 음성 통화 중인 상대방 단말기로부터 수신하여 상대방 단말기의 움직임에 상응하는 진동을 발생함으로써, 음성 통화 중인 상대방과 단말기 사용자의 감정 및 감성을 진동을 통해 상대방 단말기와 공유하는 이동통신 단말기 및 방법을 제공한다.

Description

진동 정보를 전달하는 이동통신 단말기 및 방법
본 발명은 진동 정보를 전달하는 이동통신 단말기 및 방법에 관한 것이다. 더욱 상세하게는 사용자가 단말기의 화면을 터치하거나 단말기를 흔들면 해당 단말기 또는 통화중인 상대방 단말기에서 이에 따른 진동을 다양하게 제공하여 사용자들의 촉각을 자극하는 이동통신 단말기 및 방법, 및 영상 통화 중에 사용자의 요청 또는 특정 조건이 발생한 경우 상황에 맞는 진동을 상대방 이동통신 단말기로 전송하기 위한 이동통신 단말기 및 방법에 관한 것이다.
과거와 달리 현재의 통신이라는 것은 단순히 정보의 전달을 목적으로 하는 것이 아니라, 문화와 감성 공유의 장으로 인식되고 있다. 특히 이동통신과 같은 경우 높은 이동성과 개인화의 영향으로 대부분의 국민들이 이용하고 있는 서비스이고, 이동통신 서비스를 이용하기 위한 이동통신 단말기는 타인과의 소통의 공간 및 감성의 전달 매체로 생활의 한가운데에 자리하게 되었다.
이동통신 단말기에서도 이와 같은 이용 형태의 변화에 맞추어 과거와 같이 단순히 음성 통화 기능, 알람 기능 등을 제공하는 것뿐만 아니라 다양한 각도에서 사용자들의 욕구를 충족하기 위해 발전해 왔으며, 그 결과 사용자가 이동통신 단말기의 화면을 터치하거나 이동통신 단말기를 흔들면 이동통신 단말기에서 이에 따른 진동을 다양하게 제공하여 사용자들의 촉각을 자극하는 기능이 개발되었다.
지금까지의 이동통신 단말기의 기능은 이동통신 단말기와 사용자를 교감시켜 주는 역할, 다시 말해서 사용자가 자신의 이동통신 단말기를 터치하거나 흔들었을 경우에만 이동통신 단말기가 다양한 진동을 사용자에게 제공하는 역할만을 수행할 뿐, 음성 또는 영상 통화 중인 상대방과 사용자 간의 감정 및 감성 등을 진동 정보의 공유를 통해 전달할 수 없는 문제점이 있었다.
본 발명의 목적은, 상대방 단말기와 음성 통화 중인 상태에서 단말기 사용자에 의해 발생한 단말기의 움직임을 감지하고 단말기의 움직임에 해당하는 디지털 신호인 진동 정보를 생성하고 생성한 진동 정보를 음성 통화 중인 상대방 단말기에 전송하거나, 상대방 단말기와 음성 통화 중에 상대방 단말기에서 생성한 진동 정보를 음성 통화 중인 상대방 단말기로부터 수신하여 상대방 단말기의 움직임에 상응하는 진동을 발생함으로써, 음성 통화 중인 상대방과 단말기 사용자의 감정 및 감성을 진동을 통해 상대방 단말기와 공유하는 이동통신 단말기 및 방법을 제공하는 것이다.
본 발명의 다른 목적은, 상대 통화자와 음성 통화 중에 상대 통화자의 아날로그 음성 신호 및 디지털 음성 신호 중 어느 하나와 단말기에 기 저장된 음성 정보 테이블을 비교하여 상대 통화자의 아날로그 음성 신호 및 디지털 음성 신호 중 어느 하나에서 음성 정보 테이블에 포함된 특정 음성 정보가 발견되면, 특정 음성 정보에 해당하는 특정 진동 패턴에 따라 진동을 발생함으로써, 단말기 사용자로 하여금 음성 통화 중인 상대 통화자의 감정을 촉감으로 느낄 수 있도록 하는 이동통신 단말기 및 방법을 제공하는 것이다.
본 발명의 또 다른 목적은 영상 통화 중에 상대방 이동통신 단말기로 사용자의 감정 상태를 나타내는 진동을 전달하기 위한 영상 통화 중 진동을 전달하기 위한 이동통신 단말기 및 방법을 제공하는 것이다.
본 발명의 또 다른 목적은 사용자의 요청에 따라, 사용자에 의해서 설정되는 조건과 매칭되는 진동 정보를 상대방 이동통신 단말기로 전달하거나, 상대방으로부터 전달되는 음성을 인식하여 인식된 음성에 매칭된 진동을 발생하기 위한 것이다.
상기한 목적을 달성하기 위해 본 발명의 제 1 실시예에 따르면, 디스플레이부, 메모리부 및 오디오 변환부를 포함하는 이동통신 단말기에 있어서, 상기 이동통신 단말기가 진동 전달 모드로 전환하도록 하기 위한 키인 진동 전달 모드 전환키를 포함하고, 상기 이동통신 단말기와 상대방 단말기가 통화 연결된 상태에서 상기 진동 전달 모드 전환키가 입력되면 진동 전달 모드 전환키 입력 신호를 생성하여 전달하는 키 입력부; 상기 이동통신 단말기의 움직임을 감지하고 감지된 움직임에 상응하는 아날로그 신호인 제 1 움직임 감지 신호를 생성하여 전달하는 모션 센서부; 상기 제 1 움직임 감지 신호를 디지털 신호인 제 1 진동 정보로 변환하거나 상기 상대방 단말기에서 생성 및 전송한 디지털 신호인 제 2 진동 정보를 상기 상대방 단말기의 움직임에 상응하는 아날로그 신호인 제 2 움직임 감지 신호로 변환하는 A/D 변환부; 상기 제 1 움직임 감지 신호 또는 상기 제 2 움직임 감지 신호를 전달받아 상기 이동통신 단말기의 움직임 또는 상기 상대방 단말기의 움직임에 상응하는 진동을 발생하는 진동 발생부; 상기 제 1 진동 정보를 상기 상대방 단말기로 송출하고, 상기 상대방 단말기로부터 상기 제 2 진동 정보를 수신하는 무선 회로부; 및 상기 키 입력부로부터 상기 진동 전달 모드 전환키 입력 신호를 전달받으면, 상기 모션 센서부를 활성화하여 상기 모션 센서부로부터 상기 제 1 움직임 감지 신호를 전달받고, 상기 A/D 변환부 및 상기 진동 발생부에 상기 제 1 움직임 감지 신호를 전달한 후 상기 무선 회로부를 통해 상기 제 1 진동 정보를 상기 상대방 단말기로 전달하기 위한 제어를 수행하고, 상기 상대방 단말기와 통화 연결된 상태에서 상기 무선 회로부를 통해 상기 제 2 진동 정보를 수신하면 상기 A/D 변환부에 상기 제 2 진동 정보를 전달하고, 상기 A/D 변환부에서 변환된 상기 제 2 움직임 감지 신호를 상기 진동 발생부에 전달하는 제어부를 포함하는 것을 특징으로 하는 음성 통화 중 진동 정보를 송수신하는 이동통신 단말기를 제공할 수 있다.
또한, 본 발명의 제 1 실시예에 따르면, 키 입력부, 모션 센서부, 제어부, 진동 발생부, A/D 변환부 및 무선 회로부를 포함하는 이동통신 단말기에서 진동 정보를 송신하기 위한 방법에 있어서, (a) 상대방 단말기와 음성 통화가 연결된 상태에서 상기 키 입력부가 진동 전달 모드 전환키 입력 신호를 생성하여 상기 제어부에 전달하는 단계; (b) 상기 제어부에서 상기 모션 센서부를 활성화하여 상기 모션 센서부에서 상기 이동통신 단말기의 움직임에 상응하는 아날로그 신호인 움직임 감지 신호를 생성하는 단계; (c) 상기 모션 센서부에서 상기 움직임 감지 신호를 상기 제어부에 전달하는 단계; (d) 상기 제어부에서 상기 움직임 감지 신호를 상기 A/D 변환부 및 상기 진동 발생부에 전달하는 단계; (e) 상기 진동 발생부에서 상기 이동통신 단말기의 움직임에 상응하는 진동을 발생하고, 상기 A/D 변환부에서 상기 움직임 감지 신호를 디지털 신호인 진동 정보로 변환하여 상기 제어부에 전달하는 단계; 및 (f) 상기 제어부가 상기 무선 회로부를 통해 상기 진동 정보를 상기 상대방 단말기에 전송하는 단계를 포함하는 것을 특징으로 하는 음성 통화 중 진동 정보를 송신하는 방법을 제공할 수 있다.
또한, 본 발명의 제 1 실시예에 따르면, 무선 회로부, A/D 변환부, 제어부 및 진동 발생부를 포함하는 이동통신 단말기에서 진동 정보를 수신하는 방법에 있어서, (a) 상대방 단말기와 음성 통화가 연결된 상태에서 상기 상대방 단말기에서 생성 및 전송한 디지털 신호인 진동 정보를 상기 무선 회로부에서 수신하여 상기 제어부에 전달하는 단계; (b) 상기 제어부에서 상기 진동 정보를 상기 A/D 변환부에 전달하는 단계; (c) 상기 A/D 변환부에서 상기 진동 정보를 상기 상대방 단말기의 움직임에 상응하는 아날로그 신호인 움직임 감지 신호로 변환하는 단계; (d) 상기 제어부에서 상기 움직임 감지 신호를 상기 진동 발생부에 전달하는 단계; 및 (e) 상기 진동 발생부에서 상기 상대방 단말기의 움직임에 상응하는 진동을 발생하는 단계를 포함하는 것을 특징으로 하는 음성 통화 중 진동 정보를 수신하는 방법을 제공할 수 있다.
상기한 목적을 달성하기 위해 본 발명의 제 2 실시예에 따르면, 디스플레이부, 무선 회로부, 마이크 및 스피커를 포함하는 이동통신 단말기에 있어서, 음성에 상응하는 아날로그 음성 신호 정보 및 디지털 음성 신호 정보 중 어느 하나를 포함하는 음성 정보 및 상기 음성 정보에 대응하는 진동 패턴 정보를 하나 이상 포함한 음성 정보 테이블을 저장하는 메모리부; 상기 마이크로부터 입력된 단말기 사용자의 음성에 상응하는 사용자 아날로그 음성 신호를 사용자 디지털 음성 신호로 변환하고, 상대 통화자의 음성에 상응하는 상대 통화자 디지털 음성 신호를 상기 무선 회로부를 통해 입력받아 상대 통화자 아날로그 신호로 변환하는 오디오 변환부; 상기 이동통신 단말기의 음성 인식 기능을 활성화하기 위한 음성 인식 활성화키 및 상기 음성 정보 테이블을 갱신하기 위한 음성 정보 갱신키를 포함하는 키 입력부; 상기 상대 통화자 디지털 음성 신호 및 상기 상대 통화자 아날로그 음성 신호 중 어느 하나에서 상기 음성 정보 테이블에 포함된 특정 음성 정보를 인식하면 상기 특정 음성 정보에 대응하는 특정 진동 패턴 정보를 상기 음성 정보 테이블에서 추출하여 전달하는 음성 인식부; 상기 음성 인식 활성화키의 입력시 상기 음성 인식부를 활성화하고, 상기 특정 진동 패턴 정보에 해당하는 진동 제어 신호를 생성하고, 상기 음성 정보 갱신키의 입력시 상기 음성 정보 테이블을 갱신하기 위한 제어를 수행하는 제어부; 및 상기 생성된 진동 제어 신호에 상응하는 진동을 발생하는 진동 발생부를 포함하는 것을 특징으로 하는 상대 통화자의 감정을 진동으로 전달하는 이동통신 단말기를 제공할 수 있다.
또한, 본 발명의 제 2 실시예에 따르면, 키 입력부, 음성 인식부, 제어부, 진동 발생부 및 메모리부를 포함하는 이동통신 단말기에서 통화 연결된 상대 통화자의 감정을 전달하는 방법에 있어서, (a) 상기 음성 인식부에서 상기 상대 통화자의 음성에 상응하는 상대 통화자 디지털 음성 신호 및 상대 통화자 아날로그 음성 신호 중 어느 하나와 상기 메모리부에 저장된 음성 정보 테이블을 비교하는 단계; (b) 상기 상대 통화자 디지털 음성 신호 및 상기 상대 통화자 아날로그 음성 신호 중 어느 하나에서 상기 음성 정보 테이블에 포함된 특정 음성 정보를 인식하면, 상기 특정 음성 정보에 대응하는 특정 진동 패턴 정보를 상기 음성 정보에서 추출하여 상기 제어부에 전달하는 단계; (c) 상기 제어부에서 상기 특정 진동 패턴 정보에 해당하는 진동 제어 신호를 생성하여 상기 진동 발생부에 전달하는 단계; 및 (d) 상기 진동 발생부에서 상기 진동 제어 신호에 해당하는 진동을 발생하는 단계를 포함하는 것을 특징으로 하는 상대 통화자의 감정을 진동으로 전달하는 방법을 제공할 수 있다.
상기한 목적을 달성하기 위해 본 발명의 제 3 실시예에 따르면, 영상 통화 중에 사용자에 의해서 이동통신 단말기로 입력되는 신호 또는 상대방 이동통신 단말기로부터 전송되는 신호를 기 설정된 진동 발생 상황과 비교하여 진동 발생 상황을 인식하는 진동 발생 상황 인식부; 진동 발생 상황 인식부에 의해서 파악된 진동 발생 상황 정보와 매칭되는 진동 정보가 존재하는지 여부를 검색하고, 매칭되는 진동 정보가 있는 경우, 해당 진동 정보를 진동 정보 전송부로 전달하는 진동 조건 검색부; 및 상기 진동 조건 검색부로부터 수신한 진동 정보를 영상 통화를 수행하는 상대방 이동통신 단말기로 전송하는 진동 정보 전송부;를 포함하는 이동통신 단말기를 제공할 수 있다. 상기 신호가 영상 통화 중에 상대방 이동통신 단말기로 전송된 신호인 경우, 상기 이동통신 단말기는, 상기 진동 조건 검색부에 의해서 검색된 진동 발생 상황 정보와 일치하는 진동을 발생하는 진동 출력부;를 더 포함할 수 있다. 상기 진동 발생 상황 인식부는, 영상 통화 중에 이동통신 단말기의 움직임을 인식하여 가속도 또는 회전을 파악하는 가속도계 및 자이로 인식 수단; 영상 통화 중 사용자에 의해서 입력되는 음성 신호와 상대방 이동통신 단말기로부터 전송되는 음성 신호를 분석하여 해당 어휘를 파악하는 어휘 인식 수단; 및 영상 통화 중 이동통신 단말기에 구비되어 있는 카메라를 통해 사용자의 얼굴 표정을 인식하는 얼굴 인식 수단;을 포함할 수 있다. 상기 진동 조건 검색부는, 상기 가속도계 및 자이로 인식 수단에 의해서 파악된 가속도 정보 또는 회전 정보와 매칭되는 진동 정보가 존재하는지 여부를 검색하고, 매칭되는 진동 정보가 있는 경우, 해당 진동 정보를 진동 정보 전송부로 전달할 수 있다. 상기 가속도계 및 자이로 인식 수단은, 이동통신 단말기의 직선 방향의 움직임, 회전성, 가속의 세기를 인식할 수 있다. 상기 진동 조건 검색부는, 영상 통화 중 사용자에 의해서 입력되어 상기 어휘 인식 수단에 의해서 파악된 어휘가 진동을 발생하기 위해 기 설정된 어휘 패턴과 비교하여 일치하는 경우, 해당 어휘 패턴에 대한 진동 정보를 상대방 이동통신 단말기로 전송하도록 진동 정보 전송부로 전달할 수 있다. 상기 진동 조건 검색부는, 영상 통화 중 상대방 이동통신 단말기로부터 수신하여 상기 어휘 인식 수단에 의해서 분석된 어휘가 진동을 발생하기 위해 기 설정된 어휘 패턴을 포함하는 진동 조건과 일치하는 경우, 해당 어휘 패턴에 대한 진동을 발생하도록 진동 출력부로 정보를 전달할 수 있다. 상기 진동 조건 검색부는, 상기 얼굴 인식 수단을 통해 파악되는 사용자의 얼굴 표정이 진동을 발생하기 위해 기 설정된 얼굴 표정 패턴과 일치하는지 여부를 확인하고, 사용자의 얼굴 표정이 기 설정된 얼굴 표정 패턴과 일치한다고 파악된 경우, 해당 얼굴 표정에 대한 진동 정보를 진동 정보 전송부로 전달할 수 있다.
본 발명의 제 3 실시예에 따른 이동통신 단말기의 다른 예에 따르면, 영상 통화 중 사용자에 의한 선택에 따라 진동 요청을 수신하면, 기 설정된 진동 조건 설정 메뉴를 출력하고, 입력되는 진동 조건을 기초로 진동 정보를 생성하는 진동 조건 설정부; 진동 조건 설정부에 의해서 설정된 진동 정보를 영상 통화를 수행하는 상대방 이동통신 단말기로 전송하는 진동 정보 전송부를 포함하는 이동통신 단말기를 제공할 수 있다. 상기 이동통신 단말기는, 영상 통화 중에 상대방 이동통신 단말기로부터 전송되는 진동 정보를 수신하면, 이를 분석하여 출력해야 하는 진동을 파악하는 진동 정보 파악부; 및 상기 진동 정보 파악부에 의해서 파악된 진동을 발생하는 진동 출력부를 더 포함할 수 있다. 상기 진동 정보 파악부는, 상대방 이동통신 단말기로부터 전송되는 진동 정보가 특정 코드 형식인 경우, 기 저장된 진동 정보로부터 해당 코드와 일치하는 진동 정보를 추출하고, 상대방 이동통신 단말기로부터 전송되는 진동 정보가 진동 형태를 비롯한 상세 정보를 포함하는 경우, 이를 진동 출력부로 전달할 수 있다.
본 발명의 제 3 실시예에 따른 영상 통화 중 진동을 전달하기 위한 방법은 a) 제1 이동통신 단말기와 제2 이동통신 단말기 간 영상 통화 중에 제1 이동통신 단말기가 진동 발생 상황에 해당하는 신호가 발생함을 인식하는 단계; b) 제1 이동통신 단말기가 진동 발생 상황 정보와 매칭되는 진동 정보를 검색하여 추출하는 단계; 및 c) 제1 이동통신 단말기가 검색된 진동 정보를 영상 통화를 수행하는 제2 이동통신 단말기로 전송하는 단계를 포함할 수 있다. 상기 진동 발생 상황 정보가 이동통신 단말기의 움직임을 나타내는 신호인 경우, 상기 a) 단계는, 제1 이동통신 단말기가 자신의 움직임을 인식하여 가속도 또는 회전의 발생을 인식하는 단계일 수 있다. 상기 b) 단계는, 가속도 정보 또는 회전 정보와 일치하는 진동 정보가 있는지 여부를 확인하고, 확인 결과 일치하는 진동 정보가 있는 경우, 해당 진동 정보를 추출하는 단계일 수 있다. 상기 진동 발생 상황 정보가 사용자에 의해서 입력되는 음성 신호인 경우, 상기 a) 단계는, 제1 이동통신 단말기가 외부로부터 입력되는 음성 신호를 분석하여 해당 어휘를 파악하는 단계일 수 있다. 상기 b) 단계는, 제1 이동통신 단말기가 상기 a) 단계에서 파악된 어휘를 진동을 발생하기 위해 기 설정된 어휘 패턴과 비교하여 일치하는 어휘 패턴이 있는지 여부를 확인하고, 확인 결과 일치하는 어휘 패턴이 있는 경우, 해당 어휘 패턴에 대한 진동 정보를 추출하는 단계일 수 있다. 상기 진동 발생 상황 정보가 얼굴 표정 신호인 경우, 상기 a) 단계는, 제1 이동통신 단말기와 제2 이동통신 단말기 간 영상 통화 중에 제1 이동통신 단말기가 자신의 카메라를 통해 사용자의 얼굴 표정을 인식하고, 인식된 사용자의 얼굴 표정이 진동을 발생하기 위해 기 설정된 얼굴 표정과 일치하는지 여부를 확인하는 단계일 수 있다. 상기 b) 단계는, 제1 이동통신 단말기가 사용자의 얼굴 표정이 기 설정된 얼굴 표정과 일치한다고 파악된 경우, 해당 얼굴 표정과 매칭된 진동 정보를 추출하는 단계일 수 있다.
본 발명의 제 3 실시예에 따른 영상 통화 중 진동을 전달하기 위한 다른 방법은 a) 제1 이동통신 단말기와 제2 이동통신 단말기 간 영상 통화 중에 제1 이동통신 단말기가 사용자에 의한 선택에 따라 진동 요청을 수신하면, 기 설정된 진동 조건 설정 메뉴를 출력하는 단계; b) 제1 이동통신 단말기가 사용자에 의해서 입력되는 진동 조건을 기초로 진동 정보를 생성하여 영상 통화를 수행하는 제2 이동통신 단말기로 전송하는 단계를 포함할 수 있다. 제1 이동통신 단말기가 제2 이동통신 단말기로 진동 정보를 전송한 이후, 제1 이동통신 단말기로부터 전송되는 진동 정보가 특정 코드 형식인 경우, 제2 이동통신 단말기가 기 저장된 진동 정보로부터 해당 코드와 일치하는 진동 정보를 추출하여 진동을 발생하고, 제1 이동통신 단말기로부터 전송되는 진동 정보가 진동 형태를 비롯한 상세 정보를 포함하는 경우, 제2 이동통신 단말기가 상기 진동 형태에 따라 진동을 발생하는 단계를 더 포함할 수 있다. 상기 진동 정보는, H.245 형태로 전송, UUS로 전송, USSD(Unstructured Supplementary Services Data)에 규격을 생성하여 전송 및 특정 포트를 기초로 일반 SMS(Short Message Service)와 구별하여 메시지 형태로 전송 중 어느 하나로 제2 이동통신 단말기로 전송될 수 있다.
본 발명의 제 3 실시예에 따른 영상 통화 중 진동을 발생하기 위한 또 다른 방법은 a) 제1 이동통신 단말기와 제2 이동통신 단말기 간에 영상 통화 중 제2 이동통신 단말기가 제1 이동통신 단말기로부터 전송되는 음성 신호를 분석하여 해당 어휘를 파악하는 단계; b) 제2 이동통신 단말기가 상기 a) 단계에서 파악된 어휘를 진동을 발생하기 위한 기 설정된 어휘 패턴을 포함하는 진동 조건과 비교하여 일치하는 어휘 패턴이 있는지 여부를 확인하는 단계; 및 c) 일치하는 어휘 패턴이 검색된 경우, 제2 이동통신 단말기가 해당 어휘 패턴에 대한 진동을 발생하는 단계를 포함할 수 있다.
이상에서 설명한 바와 같이 본 발명의 제 1 실시예에 의하면, 상대방과 음성 통화 중에 이동통신 단말기 사용자의 감정 및 감성 등에 따라 이동통신 단말기를 흔들면, 이동통신 단말기에서 이를 감지하고 이동통신 단말기의 움직임에 상응하는 진동 정보를 상대방 단말기에 전송하여 상대방 단말기에서 이동통신 단말기의 움직임에 상응하는 진동을 발생할 수 있기 때문에, 음성 통화 중인 상대방과 이동통신 단말기 사용자가 감정 및 감성 등을 진동을 통해 공유할 수 있는 효과가 있다.
본 발명의 제 2 실시예에 의하면, 이동통신 단말기와 통화 중인 상대 통화자의 음성 중에서 상대 통화자의 감정을 나타내는 소정의 단어 또는 문구가 포함되어 있으면, 이동통신 단말기에서 이를 인식하고 소정의 단어 또는 문구에 따라 각각 상이한 진동 패턴으로 진동을 발생하기 때문에 단말기 사용자로 하여금 통화 중인 상대 통화자의 감정을 촉감으로 느낄 수 있도록 하는 효과가 있다. 또한, 이동통신 단말기에서 음성 정보 편집 기능을 제공하여 특정 음성 정보 및 그에 해당하는 진동 패턴 정보를 편집할 수 있기 때문에 단말기 사용자가 전달받고 싶어하는 상대 통화자의 감정을 선택할 수 있는 효과가 있다.
본 발명의 제 3 실시예에 의하면, 영상 통화 중에 상대방 이동통신 단말기로 사용자의 감정 상태를 나타내는 진동을 전달할 수 있다는 효과를 기대할 수 있고, 또한, 사용자의 요청에 따라 사용자에 의해서 설정되는 조건에 매칭되는 진동 정보를 상대방 이동통신 단말기로 전달할 수 있다는 장점이 있으며, 상대방으로부터 전달되는 음성을 인식하여 그 인식된 음성에 매칭된 진동을 발생할 수 있다는 장점이 있다.
도 1은 본 발명의 제 1 실시예에 따른 이동통신 단말기의 내부 구성을 간략하게 나타낸 블록 구성도,
도 2는 본 발명의 제 1 실시예에 따른 이동통신 단말기를 사용하여 음성 통화 중 진동 정보를 전송하기 위한 시스템의 구성을 간략하게 나타낸 도면,
도 3은 본 발명의 제 1 실시예에 따른 이동통신 단말기에서 음성 통화 중 진동 정보를 전송하기 위한 과정을 나타낸 순서도,
도 4는 본 발명의 제 1 실시예에 따른 이동통신 단말기에서 음성 통화 중 진동 정보를 수신하는 과정을 나타낸 순서도,
도 5는 본 발명의 제 2 실시예에 따른 이동통신 단말기의 내부 구성을 간략하게 나타낸 블록 구성도,
도 6는 본 발명의 제 2 실시예에 따른 음성 정보 테이블을 예시적으로 나타낸 도면,
도 7은 본 발명의 제 2 실시예에 따른 이동통신 단말기에서 음성 정보 편집 화면을 디스플레이한 화면을 예시적으로 나타낸 도면,
도 8은 본 발명의 제 2 실시예에 따른 이동통신 단말기에서 통화 중인 상대 통화자의 감정을 진동으로 전달하는 과정을 나타낸 순서도,
도 9는 본 발명의 제 3 실시예에 따른 이동통신 단말기 구성의 일 예를 나타내는 도면,
도 10은 본 발명의 제 3 실시예에 따른 진동 발생 상황 인식부의 구성을 보다 상세하게 나타내는 도면,
도 11 본 발명의 제 3 실시예에 따른 진동 발생 방법의 일 예를 설명하기 위한 도면,
도 12는 본 발명의 제 3 실시예에 따른 진동 발생 방법의 다른 예를 설명하기 위한 도면,
도 13은 본 발명의 제 3 실시예에 따른 진동 발생 방법의 또 다른 예를 설명하기 위한 도면,
도 14는 본 발명의 제 3 실시예에 따른 이동통신 단말기 구성의 다른 예를 나타내는 도면,
도 15 내지 도 17은 본 발명의 제 3 실시예에 따른 영상 통화 중 진동을 전달하기 위한 방법을 설명하기 위한 흐름도이다.
이하, 본 발명의 일부 실시예들을 예시적인 도면을 통해 상세하게 설명한다. 각 도면의 구성요소들에 참조부호를 부가함에 있어서, 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 본 발명을 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다.
또한, 본 발명의 구성 요소를 설명하는 데 있어서, 제 1, 제 2, A, B, (a), (b) 등의 용어를 사용할 수 있다. 이러한 용어는 그 구성 요소를 다른 구성 요소와 구별하기 위한 것일 뿐, 그 용어에 의해 해당 구성 요소의 본질이나 차례 또는 순서 등이 한정되지 않는다. 어떤 구성 요소가 다른 구성요소에 "연결", "결합" 또는 "접속"된다고 기재된 경우, 그 구성 요소는 그 다른 구성요소에 직접적으로 연결되거나 또는 접속될 수 있지만, 각 구성 요소 사이에 또 다른 구성 요소가 "연결", "결합" 또는 "접속"될 수도 있다고 이해되어야 할 것이다.
도 1은 본 발명의 제 1 실시예에 따른 이동통신 단말기의 내부 구성을 간략하게 나타낸 블록 구성도이다.
본 발명의 제 1 실시예에 따른 이동통신 단말기(100)는 키 입력부(110), 디스플레이부(120), 메모리부(130), 모션 센서부(140), 제어부(150), A/D 변환부(160), 진동 발생부(170), 오디오 변환부(180) 및 무선 회로부(190)를 포함한다.
키 입력부(110)는 이동통신 단말기 사용자의 명령을 입력받아 제어부(150)에 전달하기 위한 입력수단으로서 이동통신 단말기의 기능을 실행하게 하는 기능버튼과 문자나 숫자를 입력하기 위한 일반 버튼으로 구성된다.
본 발명의 제1 실시예에서 키 입력부(110)는 이동통신 단말기(100)가 진동 전달 모드로 전환하도록 하기 위한 키인 진동 전달 모드 전환키를 포함하고, 이동통신 단말기(100)와 상대방 단말기(미도시)가 통화 연결된 상태에서 이동통신 단말기 사용자에 의해 진동 전달 모드 전환키가 입력되면 진동 전달 모드 전환키 입력 신호를 생성하여 제어부(150)에 전달한다. 여기서, 진동 전달 모드란 이동통신 단말기가 통화 중인 상태에서 진동 정보를 생성 및 통화 연결된 상대방 단말기(미도시)에 전송하기 위한 모드이다.
디스플레이부(120)는 제어부(150)의 제어에 따라 이동통신 단말기(100)의 정보를 알려주는 정보화면, 여러 가지 기능을 보여주는 메뉴화면, 문자나 숫자를 입력하도록 하는 입력화면, 그림이나 사진을 편집할 수 있도록 보여주는 편집화면, 무선 인터넷에 접속하는 화면 등을 제공한다.
메모리부(130)는 제어부(150)에 의해 처리된 기능을 구동하기 위한 프로그램, 사용자의 편리성과 기본적인 여러 기능을 구현하기 위한 소정의 프로그램 등을 저장한다.
모션 센서부(140)는 제어부(150)의 제어에 의해 활성화되어 이동통신 단말기 사용자가 이동통신 단말기(100)를 흔들었을 때에 발생하는 이동통신 단말기(100)의 움직임을 감지하고 감지된 움직임에 상응하는 아날로그 신호인 제 1 움직임 감지 신호를 생성하여 제어부(150)에 전달한다. 여기서, 모션 센서부(140)는 가속도 센서, 각속도 센서, 지자기 센서 및 자이로 센서 중 하나 이상을 포함한다.
제어부(150)는 키 입력부(110)를 통해 입력되는 이동통신 단말기 사용자의 지시에 따라 메모리부(130)에 저장된 구동 프로그램을 실행시켜 전화 번호부, 휴대폰 설정, 일정 관리, 게임, 화면 설정 및 음량 벨 소리 등의 각종 메뉴 항목과 통화 서비스 등의 제어를 수행한다.
본 발명의 제 1 실시예에서 제어부(150)는 상대방 단말기(미도시)와 음성 통화가 연결된 상태에서 키 입력부(110)로부터 진동 전달 모드 전환키 입력 신호를 전달받으면, 모션 센서부(140)를 활성화하여 모션 센서부(140)로부터 움직임 감지 신호를 전달받고, A/D 변환부(160) 및 진동 발생부(170)에 제 1 움직임 감지 신호를 전달한 후, A/D 변환부(160)에서 생성한 제 1 진동 정보를 후술할 이동통신망(220)을 통해 통화 연결되어 있는 상대방 단말기(미도시)로 전달하기 위한 제어를 수행한다. 여기서, 제어부(150)는 통화 중 상태에서 이동통신망(220)을 통해 전송한 데이터가 제 1 진동 정보라는 것을 상대방 단말기(미도시)에서 인식할 수 있도록 하기 위한 정보인 제 1 진동 정보 플래그를 생성하여 제 1 진동 정보와 함께 전송하도록 할 수 있다.
본 발명의 제 1 실시예에서 제어부(150)는 제 1 진동 정보를 UUS(User to User Signaling) 메시지 포맷 및 USSD(Unstructured Supplementary Service Data) 메시지 포맷 중 어느 하나로 전송하는 것이 바람직하나 반드시 이에 한정되는 것은 아니다.
또한, 제어부(150)는 상대방 단말기(미도시)와 통화 중인 상태에서 무선 회로부(190)를 통해 상대방 단말기(미도시)에서 생성 및 전송한 진동 정보인 제 2 진동 정보를 수신하면, A/D 변환부(160)에서 제 2 진동 정보를 상대방 단말기(미도시)의 움직임 감지 신호인 제 2 움직임 감지 신호로 변환하도록 하고, A/D 변환부(160)에서 변환된 제 2 움직임 감지 신호를 진동 발생부(170)에 전달한다. 여기서, 제어부(150)는 제 2 진동 정보와 함께 수신한 제 2 진동 정보 플래그를 확인함으로써, 상대방 단말기(미도시)로부터 수신한 데이터가 제 2 진동 정보라는 것을 인식하는 것이 바람직하고, 상대방 단말기(미도시)가 본 발명의 실시예에 따른 이동통신 단말기(100)일 때, 상대방 단말기(미도시)로부터 제 2 진동 정보를 수신할 수 있다.
본 발명의 제 1 실시예에서 제 2 진동 정보는 UUS 메시지 포맷 및 USSD(Unstructured Supplementary Service Data) 포맷 중 어느 하나로 전송되는 것이 바람직하나, 반드시 이에 한정되는 것은 아니다.
A/D 변환부(160)는 아날로그 신호를 디지털 신호로 변환하거나 디지털 신호를 아날로그 신호로 변환하는 기능을 수행한다.
본 발명의 제 1 실시예에서 A/D 변환부(160)는 아날로그 신호인 제 1 움직임 감지 신호를 디지털 신호인 제 1 진동 정보로 변환하거나 상대방 단말기(미도시)에서 생성 및 전송한 디지털 신호인 제 2 진동 정보를 상대방 단말기(미도시)의 움직임에 상응하는 아날로그 신호인 제 2 움직임 감지 신호로 변환한다.
진동 발생부(170)는 제어부(150)의 제어 하에 진동을 발생시킨다. 다시 말해서, 진동 발생부(170)는 제어부(150)로부터 제 1 움직임 감지 신호 또는 제 2 움직임 감지 신호를 전달받아 이동통신 단말기(100)의 움직임 또는 상대방 단말기(미도시)의 움직임에 상응하는 진동을 발생한다.
오디오 변환부(180)는 마이크(182)로부터 입력되는 음성 신호를 변조하여 음성 데이터로 변환하고, 무선 회로부(190)로부터 입력되는 음성 데이터를 음성 신호로 복조하여 스피커(184)를 통해 음성 출력한다.
무선 회로부(190)는 안테나(195)를 통해 수신한 RF 신호를 복조 및 증폭하고, 오디오 변환부(180)로부터 인가되는 전송 신호를 변조하여 이동통신망(220)으로 송출한다.
본 발명의 제 1 실시예에서 무선 회로부(190)는 제 1 진동 정보를 이동통신망(220)을 통해 상대방 단말기(미도시)로 송출하고, 상대방 단말기(미도시) 제 2 진동 정보를 수신하여 제어부(150)에 전달한다.
도 2는 본 발명의 제 1 실시예에 따른 이동통신 단말기를 사용하여 음성 통화 중 진동 정보를 전송하기 위한 시스템의 구성을 간략하게 나타낸 도면이다.
본 발명의 제 1 실시예에 따른 이동통신 단말기(100)인 제 1 단말기(210) 및 제 2 단말기(230)가 이동통신망(220)을 통해 음성 통화가 연결되어 있을 때, 제 1 단말기(210)의 진동 전달 모드 전환키가 입력된 상태에서 제 1 단말기(210)가 단말기의 흔들림에 상응하는 진동 정보를 생성하여 이동통신망(220)을 통해 상대방 단말기인 제 2 단말기(230)에 전송하면, 제 2 단말기(230)는 제 1 단말기(210)의 흔들림에 상응하는 진동을 발생하게 된다.
상기와 같은 실시예를 통해 음성 통화 중인 제 1 단말기(210) 및 제 2 단말기(220) 중 어느 하나에서 발생한 진동 정보를 상호 간에 공유할 수 있기 때문에 제 1 단말기 사용자와 제 2 단말기 사용자 간에 감정 및 감성 등을 단말기의 진동으로 전달할 수 있게 된다.
도 3은 본 발명의 제 1 실시예에 따른 이동통신 단말기에서 음성 통화 중 진동 정보를 전송하기 위한 과정을 나타낸 순서도이다.
상대방 단말기(미도시)와 음성 통화가 연결된 상태에서 키 입력부(110)로부터 진동 전달 모드 전환키 입력 신호를 생성하여 제어부(150)에 전달하면, 제어부(150)에서 이를 수신하고 모션 센서부(140)를 활성화한다(S310, S320).
활성화된 모션 센서부(140)에서 이동통신 단말기(100)의 움직임에 상응하는 아날로그 신호인 제 1 움직임 감지 신호를 생성하여 제어부(150)에 전달하면, 제어부(150)는 제 1 움직임 감지 신호를 A/D 변환부(160) 및 진동 발생부(170)에 전달한다(S330, S340).
제어부(150)로부터 제 1 움직임 감지 신호를 전달받은 진동 발생부(170) 및 A/D 변환부(160) 중 진동 발생부(170)는 이동통신 단말기(100)의 움직임에 상응하는 진동을 발생하고, A/D 변환부(160)는 아날로그 신호인 제 1 움직임 감지 신호를 디지털 신호인 제 1 진동 정보로 변환하여 제어부(150)에 전달한다(S350, S360).
제어부(150)는 A/D 변환부(160)로부터 전달받은 제 1 진동 정보를 무선 회로부(190)를 통해 음성 통화가 연결되어 있는 상대방 단말기(미도시)에 전송하기 위한 제어를 수행한다(S370). 여기서, 제어부(150)는 통화 중 상태에서 이동통신망(220)을 통해 전송한 데이터가 제 1 진동 정보라는 것을 상대방 단말기(미도시)에서 인식할 수 있도록 하기 위한 정보인 제 1 진동 정보 플래그를 생성하여 제 1 진동 정보와 함께 전송하는 것이 바람직하다. 또한, 제어부(150)는 제 1 진동 정보를 UUS 메시지 포맷으로 전송할 수 있다.
도 4는 본 발명의 제 1 실시예에 따른 이동통신 단말기에서 음성 통화 중 진동 정보를 수신하는 과정을 나타낸 순서도이다.
상대방 단말기(미도시)와 음성 통화가 연결된 상태에서 상대방 단말기(미도시)에서 생성 및 전송한 디지털 신호인 제 2 진동 정보를 무선 회로부(190)에서 수신하여 제어부(150)에 전달하면, 제어부(150)는 제 2 진동 정보를 A/D 변환부(160)에 전달한다(S410, S420). 여기서, 무선 회로부(190)는 상대방 단말기(미도시)부터 수신한 데이터가 제 2 진동 정보라는 제어부(150)에서 인식할 수 있도록 하기 위한 정보인 제 2 진동 정보 플래그를 제 2 진동 정보와 함께 수신할 수 있다.
A/D 변환부(160)에서 제 2 진동 정보를 상대방 단말기(미도시)의 움직임에 상응하는 아날로그 신호인 제 2 움직임 감지 신호로 변환하면, 제어부(150)는 제 2 움직임 감지 신호를 진동 발생부(170)에 전달하여 진동 발생부(170)에서 상대방 단말기(미도시)의 움직임에 상응하는 진동을 발생하도록 한다(S430, S440, S450).
여기서, 상대방 단말기(미도시)가 본 발명의 실시예에 따른 이동통신 단말기(100)일 때, 이동통신 단말기(100)가 상대방 단말기(미도시)로부터 제 2 진동 정보를 수신할 수 있다.
도 5은 본 발명의 제 2 실시예에 따른 이동통신 단말기의 내부 구성을 간략하게 나타낸 블록 구성도이다.
본 발명의 제 2 실시예에 따른 이동통신 단말기(500)는 키 입력부(510), 디스플레이부(520), 메모리부(530), 오디오 변환부(540), 음성 인식부(550), 제어부(560), 진동 발생부(570) 및 무선 회로부(580)를 포함한다.
키 입력부(510)는 단말기 사용자의 명령을 입력받아 제어부(560)에 전달하기 위한 입력수단으로서 이동통신 단말기의 기능을 실행하게 하는 기능버튼과 문자나 숫자를 입력하기 위한 일반 버튼으로 구성된다.
본 발명의 제 2 실시에에서 키 입력부(510)는 이동통신 단말기(500)의 음성 인식 기능을 활성화하기 위한 음성 인식 활성화키 및 후술할 메모리부(520)에 저장된 음성 정보 테이블을 갱신하기 위한 음성 정보 갱신키를 포함한다.
키 입력부(510)는 단말기 사용자에 의해 음성 인식 활성화키가 입력되면 음성 인식 활성화키 입력 신호를 생성하여 제어부(560)에 전달하고, 단말기 사용자에 의해 음성 정보 갱신키가 입력되면 음성 정보 갱신키 입력 신호를 생성하여 제어부(560)에 전달한다.
메모리부(520)는 제어부(560)에 의해 처리된 기능을 구동하기 위한 프로그램, 사용자의 편리성과 기본적인 여러 기능을 구현하기 위한 소정의 프로그램 등을 저장한다.
본 발명의 제 2 실시예에서 메모리부(520)는 음성에 상응하는 아날로그 음성 신호 정보 및 디지털 음성 신호 정보 중 어느 하나를 포함하는 음성 정보 및 이에 대응하는 진동 패턴 정보를 하나 이상 포함한 음성 정보 테이블을 저장한다. 여기서, 음성은 도 6과 같이 소정의 단어 또는 문구에 해당하는 음성인 것이 바람직하나, 반드시 이에 한정되는 것은 아니다. 다시 말해서 문장에 해당하는 음성일 수도 있다.
디스플레이부(530)는 제어부(560)의 제어에 따라 이동통신 단말기(500)의 정보를 알려주는 정보화면, 여러 가지 기능을 보여주는 메뉴화면, 문자나 숫자를 입력하도록 하는 입력화면, 그림이나 사진을 편집할 수 있도록 보여주는 편집화면, 무선 인터넷에 접속하는 화면 등을 제공한다.
본 발명의 제 2 실시예에서 디스플레이부(530)는 키 입력부(510)의 음성 정보 갱신키가 입력되면, 제어부(560)의 제어에 의해 도 7과 같이 음성 정보 테이블을 갱신하기 위한 음성 정보 갱신 화면을 디스플레이한다.
오디오 변환부(540)는 마이크(542)로부터 입력된 단말기 사용자의 음성에 상응하는 아날로그 음성 신호인 사용자 아날로그 음성 신호를 사용자 디지털 음성 신호로 변환하고, 이동통신 단말기(500)와 통화 연결된 상대 통화자의 음성에 상응하는 디지털 음성 신호인 상대 통화자 디지털 음성 신호를 무선 회로부(580)를 통해 입력받아 아날로그 음성 신호인 상대 통화자 아날로그 음성 신호로 변환하여 스피커(544)를 통해 음성 출력한다.
음성 인식부(550)는 상대 통화자 디지털 음성 신호 및 상대 통화자 아날로그 음성 신호 중 어느 하나에서 음성 정보 테이블에 포함된 특정 음성 정보를 인식하면, 특정 음성 정보에 대응하는 특정 진동 패턴 정보를 음성 정보 테이블에서 추출하여 제어부(560)에 전달한다. 여기서, 음성 인식부(550)는 키 입력부(510)의 음성 인식 활성화키가 입력되면 제어부(560)의 제어에 의해 활성화되고, 상대 통화자 디지털 음성 신호 및 상대 통화자 아날로그 음성 신호 중 어느 하나에서 특정 음성 정보를 인식하기 위해 상대 통화자 디지털 음성 신호 및 상대 통화자 아날로그 음성 신호 중 어느 하나와 메모리부(520)에 저장된 음성 정보 테이블을 비교한다.
본 발명의 제 2 실시예에서 음성 정보가 디지털 음성 신호 정보를 포함하는 경우, 음성 인식부(550)는 상대 통화자 디지털 음성 신호에서 음성 정보 테이블에 포함된 특정 디지털 음성 신호 정보를 인식하고, 특정 디지털 음성 신호 정보에 대응하는 특정 진동 패턴 정보를 음성 정보 테이블에서 추출하여 제어부(560)에 전달한다. 여기서, 음성 인식부(550)는 상대 통화자 디지털 음성 신호와 음성 정보 테이블에 포함된 하나 이상의 디지털 음성 신호 정보를 비교하고, 상대 통화자 디지털 음성 신호에서 특정 디지털 음성 신호 정보와의 유사성이 일정값 이상인 디지털 음성 신호를 발견한 경우에 이를 특정 디지털 음성 신호 정보로 인식할 수 있다.
한편, 음성 정보가 아날로그 음성 신호 정보를 포함하는 경우, 음성 인식부(550)는 상대 통화자 아날로그 음성 신호에서 음성 정보 테이블에 포함된 특정 아날로그 음성 신호 정보를 인식하고, 특정 아날로그 음성 신호 정보에 대응하는 특정 진동 패턴 정보를 음성 정보 테이블에서 추출하여 제어부(560)에 전달한다. 여기서, 음성 인식부(550)는 상대 통화자 아날로그 음성 신호와 음성 정보 테이블에 포함된 하나 이상의 아날로그 음성 신호 정보를 비교하고, 상대 통화자 아날로그 음성 신호에서 특정 아날로그 음성 신호 정보와의 유사성이 일정값 이상인 아날로그 음성 신호를 발견한 경우에 이를 특정 아날로그 음성 신호 정보로 인식할 수 있다.
제어부(560)는 키 입력부(510)를 통해 입력되는 단말기 사용자의 지시에 따라 메모리부(530)에 저장된 구동 프로그램을 실행시켜 전화 번호부, 휴대폰 설정, 일정 관리, 게임, 화면 설정 및 음량 벨 소리 등의 각종 메뉴 항목과 통화 서비스 등의 제어를 수행한다.
본 발명의 제 2 실시예에서 제어부(560)는 음성 인식 활성화키의 입력시 아래와 같이 음성 정보 테이블을 갱신하기 위한 제어를 수행한다.
이동통신 단말기(500)가 대기 상태일 때, 다시 말해서 상대 통화자와 통화 연결되지 않았을 때에 음성 정보 갱신키가 입력되면, 제어부(560)는 사용자 아날로그 음성 신호 및 사용자 디지털 음성 신호 중 어느 하나를 오디오 변환부(540)로부터 추출하여 사용자 음성 정보로 생성하고, 사용자 음성 정보와 단말기 사용자에 의해 선택된 진동 패턴 정보인 사용자 선택 진동 패턴 정보를 대응시켜서 음성 정보 테이블에 갱신한다. 여기서, 사용자 음성 정보는 디지털 음성 신호 정보 및 아날로그 음성 신호 정보 중 어느 하나이다.
한편, 이동통신 단말기(500)가 상대 통화자와 통화 중인 상태에서 음성 정보 갱신키가 입력되면, 제어부(560)는 상대 통화자 디지털 음성 신호 및 상대 통화자 아날로그 음성 신호 중 어느 하나를 오디오 변환부(540)로부터 추출하여 상대 통화자 음성 정보로 생성하고, 상대 통화자 음성 정보 및 사용자 선택 진동 패턴 정보를 대응시켜서 음성 정보 테이블에 갱신한다. 여기서, 상대 통화자 음성 정보는 디지털 음성 신호 정보 및 아날로그 음성 신호 정보 중 어느 하나이다.
진동 발생부(570)는 제어부(560)의 제어하에 진동을 발생시킨다. 다시 말해서, 진동 발생부(570)는 제어부(560)로부터 진동 제어 신호를 전달받아 진동 제어 신호에 상응하는 진동을 발생한다.
무선 회로부(580)는 안테나(585)를 통해 수신한 상대 통화자 디지털 음성 신호를 복조 및 증폭하고, 오디오 변환부(540)로부터 인가되는 사용자 디지털 음성 신호를 변조하여 이동통신망(미도시)으로 송출한다.
도 6은 본 발명의 제 2 실시예에 따른 음성 정보 테이블을 예시적으로 나타낸 도면이다.
본 발명의 실시예에 따른 음성 정보 테이블은 상대 통화자의 감정을 나타낼 수 있는 소정의 단어 또는 문구(예를 들어, 도 6의 사랑해, 바보, 뭐라고, 짜증나, 야!,좋아)에 해당하는 사용자 아날로그 음성 신호, 사용자 디지털 음성 신호, 상대 통화자 아날로그 음성 신호 및 상대 통화자 디지털 음성 신호 중 어느 하나를 포함하고, 소정의 단어 또는 문구에 해당하는 사용자 아날로그 음성 신호, 사용자 디지털 음성 신호, 상대 통화자 아날로그 음성 신호 및 상대 통화자 디지털 음성 신호 중 어느 하나와 대응하는 진동 패턴 정보를 포함할 수 있다. 여기서, 이동통신 단말기(500)는 다수의 진동 패턴 정보를 기저장하고, 이동통신망(미도시)을 통해 하나 이상의 진동 패턴 정보를 다운로드하여 저장할 수 있다.
도 7은 본 발명의 제 2 실시예에 따른 이동통신 단말기에서 음성 정보 편집 화면을 디스플레이한 화면을 예시적으로 나타낸 도면이다.
이동통신 단말기(500)가 상대 통화자와 통화 연결된 상태이거나 대기 상태일 때에 단말기 사용자에 의해 이동통신 단말기(500)의 음성 정보 갱신키가 입력되면, 이동통신 단말기(500)는 7A와 같이 음성 정보를 녹음하기 위한 화면을 디스플레이하고, 단말기 사용자에 의해 시작 버튼이 입력된 후, 소정의 단어 또는 문구에 해당하는 단말기 사용자의 음성 또는 통화 연결된 상대 통화자의 음성이 입력되면, 이를 음성 정보로 저장한다.
이후, 단말기 사용자에 의해 종료 버튼이 입력되면, 이동통신 단말기(500)는 7B와 같이 다수의 진동 패턴 정보를 디스플레이하고, 단말기 사용자가 다수의 진동 패턴 정보 중에서 특정 진동 패턴 정보를 선택하면, 음성 정보와 특정 진동 패턴 정보를 대응시키고, 대응된 음성 정보 및 특정 진동 패턴 정보를 음성 정보 테이블에 업데이트한다.
도 8은 본 발명의 제 2 실시예에 따른 이동통신 단말기에서 통화 중인 상대 통화자의 감정을 진동으로 전달하는 과정을 나타낸 순서도이다.
상대 통화자와 음성 통화가 연결된 상태에서 키 입력부(510)의 음성 인식 활성화키가 입력되면, 제어부(560)는 음성 인식부(550)를 활성화한다(S810, S820).
활성화된 음성 인식부(550)는 통화 연결된 상대 통화자의 음성에 상응하는 상대 통화자 디지털 음성 신호 및 상대 통화자 아날로그 음성 신호 중 어느 하나와 메모리부(520)에 저장된 음성 정보 테이블을 비교하고, 상대 통화자 디지털 음성 신호 및 상대 통화자 아날로그 음성 신호 중 어느 하나와 음성 정보 테이블에 포함된 특정 음성 정보를 인식하면 인식된 특정 음성 정보에 대응하는 특정 진동 패턴 정보를 음성 정보 테이블에서 추출하여 제어부(560)에 전달한다(S830, S840, S850). 여기서, 음성 정보 테이블은 소정의 단어 또는 문구에 해당하는 음성에 상응하는 아날로그 음성 신호 정보 및 상기 음성에 상응하는 디지털 음성 신호 정보 중 어느 하나를 포함하는 음성 정보 및 상기 음성 정보에 대응하는 진동 패턴 정보를 하나 이상 포함할 수 있다.
제어부(560)는 특정 진동 패턴 정보에 해당하는 진동 제어 신호를 생성한 후 진동 발생부(570)에 전달하여 진동 발생부(570)에서 진동 제어 신호에 해당하는 진동을 발생하도록 한다(S860, S870).
상대 통화자와의 통화가 종료되거나 단말기 사용자에 의해 이동통신 단말기의 음성 인식 기능이 비활성화되기 전까지 이동통신 단말기(500)는 상기 단계 S830 내지 S860 단계를 반복하여 수행한다(S880).
상기 단계 S840에서 음성 정보가 상기 디지털 음성 신호 정보를 포함하면, 음성 인식부(550)는 상대 통화자 디지털 음성 신호와 음성 정보 테이블에 포함된 하나 이상의 디지털 음성 신호 정보를 비교하고, 음성 정보가 아날로그 음성 신호 정보를 포함하면, 음성 인식부(550)는 상대 통화자 아날로그 음성 신호와 음성 정보 테이블에 포함된 하나 이상의 아날로그 음성 신호 정보를 비교한다.
상기와 같이 본 발명의 제 2 실시예에 따른 이동통신 단말기(500)는 통화 중인 상대 통화자의 음성 중에서 상대 통화자의 감정을 나타내는 소정의 단어 또는 문구가 포함되어 있으면, 이를 인식하고 소정의 단어 또는 문구에 따라 각각 상이한 진동 패턴으로 진동을 발생하여 단말기 사용자로 하여금 통화 중인 상대 통화자의 감정을 촉감으로 느낄 수 있도록 한다.
도 9는 본 발명의 제 3 실시예에 따른 이동통신 단말기 구성의 일 실시예를 나타내는 도면이다.
도시하는 것과 같이, 이동통신 단말기(900)는 무선 통신부(910), 입력부(920), 출력부(930), 메모리(940), 진동 발생 상황 인식부(950), 진동 조건 검색부(960), 진동 정보 전송부(970) 및 진동 출력부(980)를 포함한다.
통신망을 통해 통신을 수행하기 위한 무선 통신부(910), 입력 제어를 수행하기 위한 입력부(920), 음성 통화 서비스나 데이터 서비스 이용 시 필요한 데이터를 청각 또는 시각으로 제공하는 출력부(930), 이동통신 단말기와 관련된 정보를 저장하는 메모리(940)는 일반적인 구성으로 상세한 설명은 생략하기로 한다.
진동 발생 상황 인식부(950)는 영상 통화 중에 사용자에 의해서 이동통신 단말기로 입력되는 신호 또는 상대방 이동통신 단말기로부터 전송되는 신호를 기 설정된 진동 발생 상황과 비교하여 진동 발생 상황을 인식한다.
도 10를 참조하여 보다 상세히 설명하면, 진동 발생 상황 인식부(950)는 영상 통화 중에 이동통신 단말기의 움직임을 인식하여 가속도 또는 회전을 파악하는 가속도계 및 자이로 인식 수단(951), 영상 통화 중 사용자에 의해서 입력되는 음성 신호와 상대방 이동통신 단말기로부터 전송되는 음성 신호를 분석하여 해당 어휘를 파악하는 어휘 인식 수단(953) 및 영상 통화 중 이동통신 단말기에 구비되어 있는 카메라를 통해 사용자의 얼굴 표정을 인식하는 얼굴 인식 수단(955)을 포함한다.
가속도계 및 자이로 인식 수단(951)은 이동통신 단말기의 직선 방향의 움직임, 회전성, 가속의 세기를 인식한다.
가속도계 및 자이로 인식 수단(951)은 가속도가 한 개 구비되어 있으면 1축을 기준으로 가속도를 검지하지만 x, y, z 축으로 가속도가 3개 구비되어 있으면 3축으로 가속력을 측정할 수 있어 3차원 공간에서 가속력을 측정한다. 이와 같이, 자이로가 3축으로 배치될 경우 3축 각속도를 측정할 수 있어 3차원 공간에서의 각속도를 체크한다. 또한, 세기를 인식하는 방법은 고해상도의 가속도와 자이로를 구현하여, 가속도와 자이로를 통해서 측정되는 가속도와 각속력이 어느 정보의 세기인지를 파악하는 것이다.
한편, 어휘 인식 수단(953)에서 어휘를 인식하는 경우는 사용자에 의해서 마이크(예를 들어, 음성 입력부(도시하지 않음))로 입력되는 음성을 인식하는 경우와 상대방 이동통신 단말기로부터 전송되는 음성을 인식하는 경우로 구분한다.
예를 들어, 어휘 인식 수단(953)은 이동통신 단말기의 마이크(음성 입력부-도시하지 않음)를 통해 입력되는 음성의 파형을 미리 저장되어는 있는 어휘 패턴과 비교 분석하여 입력되는 음성에 해당하는 어휘를 파악하거나, 상대방 이동통신 단말기로부터 전송되는 음성의 파형을 미리 저장되어는 있는 어휘 패턴과 비교 분석하여 전송되는 음성에 해당하는 어휘를 파악한다.
얼굴 인식 수단(955)은 카메라 렌즈에 포착된 사용자의 얼굴을 인식하여 미리 설정된 얼굴 표정 패턴(예를 들어, 웃는 표정, 화난 표정, 우는 표정 등)을 짓는 순간을 파악하는 것이다.
사용자의 얼굴을 인식하는 방법은 상술한 기술 이외에도 운용자의 필요에 따라 다른 방법을 적용하는 것도 가능하다.
진동 조건 검색부(960)는 진동 발생 상황 인식부(950)에 의해서 파악된 진동 발생 상황 정보와 매칭되는 진동 정보가 존재하는지 여부를 검색하고, 매칭되는 진동 정보가 있는 경우, 해당 진동 정보를 진동 정보 전송부(970)로 전달한다.
보다 상세히 설명하면, 진동 조건 검색부(960)는 가속도계 및 자이로 인식 수단(951)에 의해서 파악된 가속도 정보 또는 회전 정보와 매칭되는 진동 정보가 존재하는지 여부를 검색하고, 매칭되는 진동 정보가 있는 경우, 해당 진동 정보를 진동 정보 전송부(970)로 전달한다.
예를 들어, 도 11에서 도시하는 것과 같이, 가속도계 및 자이로 인식 수단(950)에 의해서 인식된 가속도 정보 또는 회전 정보가 <왼쪽, 오른쪽, 위, ...>인 경우, 진동 조건 검색부(960)는 <왼쪽, 오른쪽, 위, ...>와 각각 매칭되는 진동 정보를 검색하여 추출한다.
여기에서, 진동 정보는 <0x01, 0x02, 0x03 등>과 같이 코드 형태이거나, <짧고 약한 진동, 길고 약한 진동, 짧고 강한 진동 등>과 같이 진동 형태 정보를 비롯한 상세 정보를 포함하는 형태가 모두 가능하다.
만약, 상대방 이동통신 단말기로 전송되는 진동 정보가 코드 형태인 경우, 상대방 이동통신 단말기에도 진동 코드와 매칭되는 진동 형태 정보가 미리 저장되어 있어야 한다.
또한, 진동 조건 검색부(960)는 영상 통화 중 사용자에 의해서 입력되어 어휘 인식 수단(953)에 의해서 파악된 어휘가 진동을 발생하기 위해 기 설정된 어휘 패턴과 비교하여 일치하는 경우, 해당 어휘 패턴에 대한 진동 정보를 상대방 이동통신 단말기로 전송하도록 진동 정보 전송부(970)로 전달한다.
예를 들어, 진동 조건 검색부(960)는 어휘 인식 수단(953)을 통해 인식된 어휘가 도 12에서 도시하는 것과 같이 <여보세요, 안녕, 잘자 등>인 경우, 인식된 어휘에 매칭된 진동 정보(진동 코드 또는 진동 형태)를 추출하여 진동 정보 전송부(970)로 전송한다.
이에 더하여, 진동 조건 검색부(960)는 영상 통화 중 상대방 이동통신 단말기로부터 수신하여 어휘 인식 수단(953)에 의해서 분석된 어휘가 진동을 발생하기 위해 기 설정된 어휘 패턴을 포함하는 진동 조건과 일치하는 경우, 해당 어휘 패턴에 대한 진동을 발생하도록 진동 출력부(980)로 정보를 전달한다.
진동 조건 검색부(960)는 얼굴 인식 수단(955)을 통해 파악되는 사용자의 얼굴 표정이 진동을 발생하기 위해 기 설정된 얼굴 표정 패턴과 일치하는지 여부를 확인하고, 사용자의 얼굴 표정이 기 설정된 얼굴 표정 패턴과 일치한다고 파악된 경우, 해당 얼굴 표정에 대한 진동 정보를 진동 정보 전송부(970)로 전달한다.
예를 들어, 진동 조건 검색부(960)는 도 13에서 도시하는 것과 같이, 사용자의 얼굴 표정(도 13의 패턴-웃는 표정, 찡그린 표정, 화난 표정 등)에 따라 각각 매칭된 진동 코드(0x01, 0x02, 0x03 등) 또는 진동 형태(짧고 약한 진동, 길고 약한 진동, 짧고 강한 진동 등)를 비롯한 상세 정보를 추출한다.
한편, 진동 조건 검색부(960)는 진동 발생 상황 정보에 대응되는 신호가 상대방 이동통신 단말기로부터 전송된 신호인 경우, 검색된 진동 정보를 진동 출력부(980)로 전달하여, 이동통신 단말기(900) 상에서 진동을 출력하도록 한다.
예를 들어, 진동 조건 검색부(960)는 영상 통화 중 상대방 이동통신 단말기로부터 수신하여 분석된 어휘가 진동을 발생하기 위해 기 설정된 어휘 패턴을 포함하는 진동 조건과 일치하는 경우, 해당 어휘 패턴에 대한 진동을 발생하도록 진동 출력부(980)로 정보를 전달한다. 이후, 진동 출력부(980)는 진동 조건 검색부(960)로부터 수신한 정보를 이용하여 어휘 패턴에 대한 진동을 발생한다.
진동 정보 전송부(970)는 진동 조건 검색부(960)로부터 수신한 진동 정보를 영상 통화를 수행하는 상대방 이동통신 단말기로 전송한다.
진동 출력부(980)는 신호가 영상 통화 중에 상대방 이동통신 단말기로부터 전송된 신호인 경우, 진동 조건 검색부(960)에 의해서 검색된 진동 발생 상황 정보와 일치하는 진동을 발생한다.
도 14는 본 발명의 제 3 실시예에 따른 이동통신 단말기 구성의 다른 예를 나타내는 도면으로서, 사용자의 설정에 따라 진동 정보를 전송하는 경우와 상대방 이동통신 단말기로부터 전송되는 진동 정보에 해당하는 진동을 발생하는 경우를 예로 들어 설명하기로 한다.
도시하는 것과 같이, 이동통신 단말기(1400)는 무선 통신부(1410), 입력부(1420), 출력부(1430), 메모리(1440), 진동 조건 설정부(1450), 진동 정보 전송부(1460), 진동 정보 파악부(1470) 및 진동 출력부(1480)를 포함한다.
통신망을 통해 통신을 수행하기 위한 무선 통신부(1410), 입력 제어를 수행하기 위한 입력부(1420), 음성 통화 서비스나 데이터 서비스 이용 시 필요한 데이터를 청각 또는 시각으로 제공하는 출력부(1430), 이동통신 단말기와 관련된 정보를 저장하는 메모리(1440)는 일반적인 구성으로 상세한 설명은 생략하기로 한다.
진동 조건 설정부(1450)는 영상 통화 중 사용자에 의한 선택에 따라 진동 요청을 수신하면, 기 설정된 진동 조건 설정 메뉴를 출력하고, 입력되는 진동 조건을 기초로 진동 정보를 생성한다.
상기 진동 조건 설정 메뉴는 진동의 강도, 주기 등을 설정할 수 있도록 하는 메뉴이다.
진동 정보 전송부(1460)는 진동 조건 설정부(1450)에 의해서 설정된 진동 정보를 영상 통화를 수행하는 상대방 이동통신 단말기로 전송한다.
진동 정보 파악부(1470)는 영상 통화 중에 상대방 이동통신 단말기로부터 전송되는 진동 정보를 수신하면, 이를 분석하여 출력해야 하는 진동을 파악한다.
진동 정보 파악부(1470)는 상대방 이동통신 단말기로부터 전송되는 진동 정보가 특정 코드 형식인 경우, 기 저장된 진동 정보로부터 해당 코드와 일치하는 진동 정보를 추출하고, 상대방 이동통신 단말기로부터 전송되는 진동 정보가 진동 형태를 비롯한 상세 정보를 포함하는 경우, 이를 진동 출력부(1480)로 전달한다.
진동 출력부(1480)는 진동 정보 파악부(1470)에 의해서 파악된 진동을 발생한다.
이하에서는 통화를 수행하는 발신측 이동통신 단말기와 착신측 이동통신 단말기를 구분하기 위하여 제1 이동통신 단말기와 제2 이동통신 단말기로 각각 구분하여 기재하기로 한다.
도 15은 본 발명의 제 3 실시예에 따른 영상 통화 중 진동을 전달하기 위한 방법을 설명하기 위한 흐름도로서, 도 14의 이동통신 단말기에서의 동작을 예로 들어 설명하기로 한다.
먼저, 제1 이동통신 단말기와 제2 이동통신 단말기 간에 영상 통화 중 제1 이동통신 단말기는 사용자에 의한 선택에 따라 진동 요청을 수신하면, 기 설정된 진동 조건 설정 메뉴를 출력한다(S1501, S1503).
상기 진동 조건 설정 메뉴는 진동의 강도, 주기 등을 설정할 수 있도록 하는 메뉴로서, 운용자의 필요에 따라 다른 항목이 더 추가되는 것도 가능하다.
이어서, 제1 이동통신 단말기는 사용자에 의해서 입력되는 진동 조건을 기초로 진동 정보를 생성하여 영상 통화를 수행하는 제2 이동통신 단말기로 전송한다(S1505, S1507).
여기에서, 진동 정보는 H.245 형태로 전송되거나, UUS(User to User signaling)로 전송되거나, USSD(Unstructured Supplementary Services Data)에 규격을 생성하여 전송되거나, 특정 포트를 기초로 일반 SMS(Short Message Service)와 구별하여 메시지 형태로 전송되는 방법 중 어느 하나로 제2 이동통신 단말기로 전송된다.
제2 이동통신 단말기는 영상 통화 중에 제1 이동통신 단말기로부터 전송되는 진동 정보를 수신하면, 이를 분석하여 출력해야 하는 진동을 파악한다(S1509).
이후, 제2 이동통신 단말기는 단계 S1509에서 파악된 진동을 발생한다(S1511).
여기에서, 제1 이동통신 단말기로부터 전송되는 진동 정보가 특정 코드 형식인 경우, 제2 이동통신 단말기는 기 저장된 진동 정보로부터 해당 코드와 일치하는 진동 정보를 추출하여 진동을 발생한다.
다른 한편, 제1 이동통신 단말기로부터 전송되는 진동 정보가 진동 형태를 비롯한 상세 정보를 포함하는 경우, 제2 이동통신 단말기는 진동 형태에 따라 진동을 발생한다.
도 16은 본 발명의 제 3 실시예에 따른 영상 통화 중 진동을 전달하기 위한 다른 방법을 설명하기 위한 흐름도이다.
먼저, 제1 이동통신 단말기와 제2 이동통신 단말기 간 영상 통화 중에 제1 이동통신 단말기는 진동 발생 상황에 해당하는 신호가 발생함을 인식한다(S1601, S1603).
예를 들어, 진동 발생 상황 정보가 이동통신 단말기의 움직임을 나타내는 신호인 경우, 단계 S1603은 제1 이동통신 단말기가 자신의 움직임을 인식하여 가속도 또는 회전의 발생을 인식하는 단계이다.
제1 이동통신 단말기는 이동통신 단말기의 직선 방향의 움직임, 회전성, 가속의 세기를 인식한다.
만약, 가속도가 한 개 구비되어 있으면 1축을 기준으로 가속도를 검지하지만 x, y, z 축으로 가속도가 3개 구비되어 있으면 3축으로 가속력을 측정할 수 있어 3차원 공간에서 가속력을 측정한다. 이와 같이, 자이로가 3축으로 배치될 경우 3축 각속도를 측정할 수 있어 3차원 공간에서의 각속도를 체크한다. 또한, 세기를 인식하는 방법은 고해상도의 가속도와 자이로를 구현하여, 가속도와 자이로를 통해서 측정되는 가속도와 각속력이 어느 정보의 세기인지를 파악하는 것이다.
또한, 진동 발생 상황 정보가 사용자에 의해서 입력되는 음성 신호인 경우, 단계 S1603은 제1 이동통신 단말기가 외부로부터 입력되는 음성 신호를 분석하여 해당 어휘를 파악하는 단계이다.
상기 음성 신호는 통신망을 통해 전송되는 음성 신호가 아닌 이동통신 단말기에 구비되어 있는 음성 입력부(예를 들어, 마이크- 도시하지 않음)를 통해 입력되는 것이다.
이에 더하여, 진동 발생 상황 정보가 얼굴 표정 신호인 경우, 단계 S1603은 제1 이동통신 단말기와 제2 이동통신 단말기 간 영상 통화 중에 제1 이동통신 단말기가 자신의 카메라를 통해 사용자의 얼굴 표정을 인식하고, 인식된 사용자의 얼굴 표정이 진동을 발생하기 위해 기 설정된 얼굴 표정과 일치하는지 여부를 확인하는 단계이다.
즉, 제1 이동통신 단말기는 사용자의 얼굴 표정이 진동 발생을 유발하는 조건과 일치하도록 변화 하는지 여부를 체크한다.
이어서, 제1 이동통신 단말기는 진동 발생 상황 정보와 매칭되는 진동 정보를 검색하여 추출한다(S1605).
예를 들어, 진동 발생 상황 정보가 이동통신 단말기의 움직임을 나타내는 신호인 경우, 단계 S1605는 가속도 정보 또는 회전 정보와 일치하는 진동 정보가 있는지 여부를 확인하고, 확인 결과 일치하는 진동 정보가 있는 경우, 해당 진동 정보를 추출하는 단계이다.
또한, 진동 발생 상황 정보가 사용자에 의해서 입력되는 음성 신호인 경우, 단계 S1605는 제1 이동통신 단말기가 단계 S203에서 파악된 어휘를 진동을 발생하기 위해 기 설정된 어휘 패턴과 비교하여 일치하는 어휘 패턴이 있는지 여부를 확인하고, 확인 결과 일치하는 어휘 패턴이 있는 경우, 해당 어휘 패턴에 대한 진동 정보를 추출하는 단계이다.
이에 더하여, 진동 발생 상황 정보가 얼굴 표정 신호인 경우, 단계 S1605는 제1 이동통신 단말기가 사용자의 얼굴 표정이 기 설정된 얼굴 표정과 일치한다고 파악된 경우, 해당 얼굴 표정과 매칭된 진동 정보를 추출하는 단계이다.
제1 이동통신 단말기는 검색된 진동 정보를 영상 통화를 수행하는 제2 이동통신 단말기로 전송한다(S1607).
제2 이동통신 단말기는 영상 통화 중에 제1 이동통신 단말기로부터 전송되는 진동 정보를 수신하면, 이를 분석하여 출력해야 하는 진동을 파악한다(S1609).
이후, 제2 이동통신 단말기는 단계 S1609에서 파악된 진동을 발생한다(S1611).
여기에서, 제1 이동통신 단말기로부터 전송되는 진동 정보가 특정 코드 형식인 경우, 제2 이동통신 단말기는 기 저장된 진동 정보로부터 해당 코드와 일치하는 진동 정보를 추출하여 진동을 발생한다.
다른 한편, 제1 이동통신 단말기로부터 전송되는 진동 정보가 진동 형태를 비롯한 상세 정보를 포함하는 경우, 제2 이동통신 단말기는 진동 형태에 따라 진동을 발생한다.
도 17은 본 발명의 제 3 실시예에 따른 영상 통화 중 진동을 전달하기 위한 또 다른 방법을 설명하기 위한 흐름도로서, 상대방 이동통신 단말기로부터 전송되는 음성 신호에 대한 진동을 출력하는 경우를 예로 들어 설명하기로 한다.
먼저, 제1 이동통신 단말기와 제2 이동통신 단말기 간에 영상 통화 중 제2 이동통신 단말기는 제1 이동통신 단말기로부터 전송되는 음성 신호를 분석하여 해당 어휘를 파악한다(S1701, S1703).
이어서, 제2 이동통신 단말기는 단계 S1703에서 파악된 어휘를 진동을 발생하기 위한 기 설정된 어휘 패턴을 포함하는 진동 조건과 비교하여 일치하는 어휘 패턴이 있는지 여부를 확인한다(S1705).
일치하는 어휘 패턴이 검색된 경우, 제2 이동통신 단말기는 해당 어휘 패턴에 대한 진동을 발생한다(S1707).
여기에서, 제2 이동통신 단말기는 어휘 패턴에 매칭되는 진동 형태를 비롯한 정보를 미리 설정 및 저장하여, 진동 발생 시 참조한다.
한편, 단계 S1705의 확인 결과 일치하는 어휘 패턴이 없는 경우, 제2 이동통신 단말기는 단계 S1701 이후 절차를 수행한다.
본 발명에서 개시하는 상대방 이동통신 단말기로 전송되는 진동 정보는 운용자의 필요에 따라 진동 이외에 소리, 애니메이션 등을 더 포함하는 것도 가능하다. 이를 위해, 상대방 이동통신 단말기로 전송되는 진동 정보의 데이터 포맷은 진동 전달 서비스임을 나타내는 코드와 진동, 소리, 애니메이션과 같이 서비스 형태를 나타내는 코드로 구성된다.
후술하는 특허청구범위에 기재되어 있는 a), b), c) 등은 특정 순서를 의미하는 것이 아니며, 운용자의 필요에 따라 해당 순서를 변경할 수 있다.
본 발명의 실시예에서는 이동통신 단말기로 한정하여 설명하였지만, 운용자의 필요에 따라 유선 단말기로 변경하는 것도 가능하다.
이상에서, 본 발명의 실시예를 구성하는 모든 구성 요소들이 하나로 결합되거나 결합되어 동작하는 것으로 설명되었다고 해서, 본 발명이 반드시 이러한 실시예에 한정되는 것은 아니다. 즉, 본 발명의 목적 범위 안에서라면, 그 모든 구성 요소들이 하나 이상으로 선택적으로 결합하여 동작할 수도 있다. 또한, 그 모든 구성 요소들이 각각 하나의 독립적인 하드웨어로 구현될 수 있지만, 각 구성 요소들의 그 일부 또는 전부가 선택적으로 조합되어 하나 또는 복수 개의 하드웨어에서 조합된 일부 또는 전부의 기능을 수행하는 프로그램 모듈을 갖는 컴퓨터 프로그램으로서 구현될 수도 있다. 그 컴퓨터 프로그램을 구성하는 코드들 및 코드 세그먼트들은 본 발명의 기술 분야의 당업자에 의해 용이하게 추론될 수 있을 것이다. 이러한 컴퓨터 프로그램은 컴퓨터가 읽을 수 있는 저장매체(Computer Readable Media)에 저장되어 컴퓨터에 의하여 읽혀지고 실행됨으로써, 본 발명의 실시예를 구현할 수 있다. 컴퓨터 프로그램의 저장매체로서는 자기 기록매체, 광 기록매체, 캐리어 웨이브 매체 등이 포함될 수 있다.
또한, 이상에서 기재된 "포함하다", "구성하다" 또는 "가지다" 등의 용어는, 특별히 반대되는 기재가 없는 한, 해당 구성 요소가 내재될 수 있음을 의미하는 것이므로, 다른 구성 요소를 제외하는 것이 아니라 다른 구성 요소를 더 포함할 수 있는 것으로 해석되어야 한다. 기술적이거나 과학적인 용어를 포함한 모든 용어들은, 다르게 정의되지 않는 한, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 사전에 정의된 용어와 같이 일반적으로 사용되는 용어들은 관련 기술의 문맥 상의 의미와 일치하는 것으로 해석되어야 하며, 본 발명에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
이상 설명한 바와 같이, 본 발명의 실시예는 이동통신 단말기 분야에 적용되어, 상대방과 음성 통화 중에 이동통신 단말기 사용자의 감정 및 감성 등에 따라 이동통신 단말기를 흔들면, 이동통신 단말기에서 이를 감지하고 이동통신 단말기의 움직임에 상응하는 진동 정보를 상대방 단말기에 전송하여 상대방 단말기에서 이동통신 단말기의 움직임에 상응하는 진동을 발생할 수 있기 때문에, 음성 통화 중인 상대방과 이동통신 단말기 사용자가 감정 및 감성 등을 진동을 통해 공유할 수 있는 효과를 발생하는 매우 유용한 발명이다.
또한, 본 발명의 다른 실시예는 이동통신 단말기 분야에 적용되어, 이동통신 단말기와 통화 중인 상대 통화자의 음성 중에서 상대 통화자의 감정을 나타내는 소정의 단어 또는 문구가 포함되어 있으면, 이동통신 단말기에서 이를 인식하고 소정의 단어 또는 문구에 따라 각각 상이한 진동 패턴으로 진동을 발생하기 때문에 단말기 사용자로 하여금 통화 중인 상대 통화자의 감정을 촉감으로 느낄 수 있도록 하는 효과를 발생하는 매우 유용한 발명이다.
또한, 본 발명의 또 다른 실시예는, 영상 통화 중에 상대방 이동통신 단말기로 사용자의 감정 상태를 나타내는 진동을 전달할 수 있다는 효과를 기대할 필요성이 높은 것에 적합하다.
CROSS-REFERENCE TO RELATED APPLICATION
본 특허출원은 2008년 9월 5일 한국에 출원한 특허출원번호 제10-2008-0087644호 및 2008년 9월 8일 한국에 출원한 특허출원번호 제 10-2008-0088108 호, 2009년 3월 10일 한국에 출원한 특허출원번호 제 10-2009-0020054 호에 대해 미국 특허법 119(a)조(35 U.S.C § 119(a))에 따라 우선권을 주장하면, 그 모든 내용은 참고문헌으로 본 특허출원에 병합된다. 아울러, 본 특허출원은 미국 이외에 국가에 대해서도 위와 동일한 동일한 이유로 우선권을 주장하면 그 모든 내용은 참고문헌으로 본 특허출원에 병합된다.

Claims (39)

  1. 디스플레이부, 메모리부 및 오디오 변환부를 포함하는 이동통신 단말기에 있어서,
    상기 이동통신 단말기가 진동 전달 모드로 전환하도록 하기 위한 키인 진동 전달 모드 전환키를 포함하고, 상기 이동통신 단말기와 상대방 단말기가 통화 연결된 상태에서 상기 진동 전달 모드 전환키가 입력되면 진동 전달 모드 전환키 입력 신호를 생성하여 전달하는 키 입력부;
    상기 이동통신 단말기의 움직임을 감지하고 감지된 움직임에 상응하는 아날로그 신호인 제 1 움직임 감지 신호를 생성하여 전달하는 모션 센서부;
    상기 제 1 움직임 감지 신호를 디지털 신호인 제 1 진동 정보로 변환하거나 상기 상대방 단말기에서 생성 및 전송한 디지털 신호인 제 2 진동 정보를 상기 상대방 단말기의 움직임에 상응하는 아날로그 신호인 제 2 움직임 감지 신호로 변환하는 A/D 변환부;
    상기 제 1 움직임 감지 신호 또는 상기 제 2 움직임 감지 신호를 전달받아 상기 이동통신 단말기의 움직임 또는 상기 상대방 단말기의 움직임에 상응하는 진동을 발생하는 진동 발생부;
    상기 제 1 진동 정보를 상기 상대방 단말기로 송출하고, 상기 상대방 단말기로부터 상기 제 2 진동 정보를 수신하는 무선 회로부; 및
    상기 키 입력부로부터 상기 진동 전달 모드 전환키 입력 신호를 전달받으면, 상기 모션 센서부를 활성화하여 상기 모션 센서부로부터 상기 제 1 움직임 감지 신호를 전달받고, 상기 A/D 변환부 및 상기 진동 발생부에 상기 제 1 움직임 감지 신호를 전달한 후 상기 무선 회로부를 통해 상기 제 1 진동 정보를 상기 상대방 단말기로 전달하기 위한 제어를 수행하고, 상기 상대방 단말기와 통화 연결된 상태에서 상기 무선 회로부를 통해 상기 제 2 진동 정보를 수신하면 상기 A/D 변환부에 상기 제 2 진동 정보를 전달하고, 상기 A/D 변환부에서 변환된 상기 제 2 움직임 감지 신호를 상기 진동 발생부에 전달하는 제어부
    를 포함하는 것을 특징으로 하는 진동 정보를 전달하는 이동통신 단말기.
  2. 제 1 항에 있어서,
    상기 제어부는 통화 중 상태에서 상기 이동통신망을 통해 전송한 데이터가 상기 제 1 진동 정보라는 것을 상기 상대방 단말기에서 인식할 수 있도록 하기 위한 정보인 제 1 진동 정보 플래그를 생성하여 상기 제 1 진동 정보와 함께 전송하는 것을 특징으로 하는 진동 정보를 전달하는 이동통신 단말기.
  3. 제 1 항에 있어서,
    상기 제어부는 상기 제 2 진동 정보와 함께 수신한 제 2 진동 정보 플래그를 확인하여 상대방 단말기로부터 수신한 데이터가 제 2 진동 정보라는 것을 인식하는 것을 특징으로 하는 진동 정보를 전달하는 이동통신 단말기.
  4. 제 1 항에 있어서,
    상기 모션 센서부는 가속도 센서, 각속도 센서, 지자기 센서 및 자이로 센서 중 하나 이상을 포함하는 것을 특징으로 하는 진동 정보를 전달하는 이동통신 단말기.
  5. 제 1 항에 있어서,
    상기 제어부는 제 1 진동 정보를 UUS(User to User Signaling) 메시지 포맷 및 USSD(Unstructured Supplementary Service Data) 메시지 포맷 중 어느 하나로 전송하는 것을 특징으로 하는 진동 정보를 전달하는 이동통신 단말기.
  6. 디스플레이부, 메모리부 및 오디오 변환부를 포함하는 이동통신 단말기에서 진동 정보를 전달하는 방법에 있어서,
    이동통신 단말기와 상대방 단말기가 통화 연결된 상태에서 상기 이동통신 단말기의 진동 전달 모드 전환키가 입력되면 진동 전달 모드로 전환하는 단계;
    상기 이동통신 단말기의 움직임을 감지하고 감지된 움직임에 상응하는 아날로그 신호인 제 1 움직임 감지 신호를 생성하여 전달하는 단계;
    상기 제 1 움직임 감지 신호를 디지털 신호인 제 1 진동 정보로 변환하여 상기 상대방 단말기로 송출하거나, 상기 상대방 단말기에서 생성 및 전송한 디지털 신호인 제 2 진동 정보를 수신하여 상기 상대방 단말기의 움직임에 상응하는 아날로그 신호인 제 2 움직임 감지 신호로 변환하는 단계; 및
    상기 제 1 움직임 감지 신호 또는 상기 제 2 움직임 감지 신호를 전달받아 상기 이동통신 단말기의 움직임 또는 상기 상대방 단말기의 움직임에 상응하는 진동을 발생하는 단계;
    를 포함하는 이동통신 단말기의 진동 정보를 전달하는 방법.
  7. 제 6 항에 있어서,
    상기 이동통신 단말기는 진동 정보 플래그를 생성하여 상기 제 1 진동 정보와 함께 상기 상대방 단말기로 전송하는 것을 특징으로 하는 이동통신 단말기의 진동 정보를 전달하는 방법.
  8. 제 6 항에 있어서,
    상기 제 1 진동 정보를 UUS(User to User Signaling) 메시지 포맷 및 USSD(Unstructured Supplementary Service Data) 메시지 포맷 중 어느 하나로 전송하는 것을 특징으로 하는 이동통신 단말기의 진동 정보를 전달하는 방법.
  9. 디스플레이부, 무선 회로부, 마이크 및 스피커를 포함하는 이동통신 단말기에 있어서,
    음성에 상응하는 아날로그 음성 신호 정보 및 디지털 음성 신호 정보 중 어느 하나를 포함하는 음성 정보 및 상기 음성 정보에 대응하는 진동 패턴 정보를 하나 이상 포함한 음성 정보 테이블을 저장하는 메모리부;
    상기 마이크로부터 입력된 단말기 사용자의 음성에 상응하는 사용자 아날로그 음성 신호를 사용자 디지털 음성 신호로 변환하고, 상대 통화자의 음성에 상응하는 상대 통화자 디지털 음성 신호를 상기 무선 회로부를 통해 입력받아 상대 통화자 아날로그 신호로 변환하는 오디오 변환부;
    상기 이동통신 단말기의 음성 인식 기능을 활성화하기 위한 음성 인식 활성화키 및 상기 음성 정보 테이블을 갱신하기 위한 음성 정보 갱신키를 포함하는 키 입력부;
    상기 상대 통화자 디지털 음성 신호 및 상기 상대 통화자 아날로그 음성 신호 중 어느 하나에서 상기 음성 정보 테이블에 포함된 특정 음성 정보를 인식하면 상기 특정 음성 정보에 대응하는 특정 진동 패턴 정보를 상기 음성 정보 테이블에서 추출하여 전달하는 음성 인식부;
    상기 음성 인식 활성화키의 입력시 상기 음성 인식부를 활성화하고, 상기 특정 진동 패턴 정보에 해당하는 진동 제어 신호를 생성하고, 상기 음성 정보 갱신키의 입력시 상기 음성 정보 테이블을 갱신하기 위한 제어를 수행하는 제어부; 및
    상기 생성된 진동 제어 신호에 상응하는 진동을 발생하는 진동 발생부
    를 포함하는 것을 특징으로 하는 상대 통화자의 감정을 진동으로 전달하는 이동통신 단말기.
  10. 제 9 항에 있어서,
    상기 음성 정보 갱신키가 입력되면, 상기 제어부는 상기 사용자 아날로그 음성 신호 및 상기 사용자 디지털 음성 신호 중 어느 하나를 상기 오디오 변환부로부터 추출하여 사용자 음성 정보로 생성하고, 상기 사용자 음성 정보와 상기 단말기 사용자에 의해 선택된 진동 패턴 정보인 사용자 선택 진동 패턴 정보를 대응시켜서 상기 음성 정보 테이블에 갱신하는 것을 특징으로 하는 상대 통화자의 감정을 진동으로 전달하는 이동통신 단말기.
  11. 제 9 항에 있어서,
    상기 상대 통화자와 통화 중인 상태에서 상기 음성 정보 갱신키가 입력되면, 상기 제어부는 상기 상대 통화자 디지털 음성 신호 및 상기 상대 통화자 아날로그 음성 신호 중 어느 하나를 상기 오디오 변환부로부터 추출하여 상대 통화자 음성 정보로 생성하고, 상기 상대 통화자 음성 정보 및 상기 단말기 사용자에 의해 선택된 진동 패턴 정보인 사용자 선택 진동 패턴 정보를 대응시켜서 상기 음성 정보 테이블에 갱신하는 것을 특징으로 하는 상대 통화자의 감정을 진동으로 전달하는 이동통신 단말기.
  12. 제 9 항에 있어서,
    상기 음성 정보가 상기 디지털 음성 신호 정보를 포함하면, 상기 음성 인식부는 상기 상대 통화자 디지털 음성 신호에서 상기 음성 정보 테이블에 포함된 특정 디지털 음성 신호 정보를 인식하고, 상기 특정 디지털 음성 신호 정보에 대응하는 상기 특정 진동 패턴 정보를 상기 음성 정보 테이블에서 추출하여 상기 제어부에 전달하는 것을 특징으로 하는 상대 통화자의 감정을 진동으로 전달하는 이동통신 단말기.
  13. 제 9 항에 있어서,
    상기 음성 정보가 상기 아날로그 음성 신호 정보를 포함하면, 상기 음성 인식부는 상기 상대 통화자 아날로그 음성 신호에서 상기 음성 정보 테이블에 포함된 특정 아날로그 음성 신호 정보를 인식하고, 상기 특정 아날로그 음성 신호 정보에 대응하는 상기 특정 진동 패턴 정보를 상기 음성 정보 테이블에서 추출하여 상기 제어부에 전달하는 것을 특징으로 하는 상대 통화자의 감정을 진동으로 전달하는 이동통신 단말기.
  14. 키 입력부, 음성 인식부, 제어부, 진동 발생부 및 메모리부를 포함하는 이동통신 단말기에서 통화 연결된 상대 통화자의 감정을 전달하는 방법에 있어서,
    (a) 상기 음성 인식부에서 상기 상대 통화자의 음성에 상응하는 상대 통화자 디지털 음성 신호 및 상대 통화자 아날로그 음성 신호 중 어느 하나와 상기 메모리부에 저장된 음성 정보 테이블을 비교하는 단계;
    (b) 상기 상대 통화자 디지털 음성 신호 및 상기 상대 통화자 아날로그 음성 신호 중 어느 하나에서 상기 음성 정보 테이블에 포함된 특정 음성 정보를 인식하면, 상기 특정 음성 정보에 대응하는 특정 진동 패턴 정보를 상기 음성 정보에서 추출하여 상기 제어부에 전달하는 단계;
    (c) 상기 제어부에서 상기 특정 진동 패턴 정보에 해당하는 진동 제어 신호를 생성하여 상기 진동 발생부에 전달하는 단계; 및
    (d) 상기 진동 발생부에서 상기 진동 제어 신호에 해당하는 진동을 발생하는 단계
    를 포함하는 것을 특징으로 하는 상대 통화자의 감정을 진동으로 전달하는 방법.
  15. 제 14 항에 있어서, 상기 단계 (a)에서
    상기 음성 정보 테이블은 음성에 상응하는 아날로그 음성 신호 정보 및 디지털 음성 신호 정보 중 어느 하나를 포함하는 음성 정보 및 상기 음성 정보에 대응하는 진동 패턴 정보를 하나 이상 포함하는 것을 특징으로 하는 상대 통화자의 감정을 진동으로 전달하는 방법.
  16. 제 15 항에 있어서,
    상기 음성 정보가 상기 디지털 음성 신호 정보를 포함하면, 상기 음성 인식부는 상기 상대 통화자 디지털 음성 신호와 상기 음성 정보 테이블에 포함된 하나 이상의 디지털 음성 신호 정보를 비교하는 것을 특징으로 하는 상대 통화자의 감정을 진동으로 전달하는 방법.
  17. 제 15 항에 있어서,
    상기 음성 정보가 상기 아날로그 음성 신호 정보를 포함하면, 상기 음성 인식부는 상기 상대 통화자 아날로그 음성 신호와 상기 음성 정보 테이블에 포함된 하나 이상의 아날로그 음성 신호 정보를 비교하는 것을 특징으로 하는 상대 통화자의 감정을 진동으로 전달하는 방법.
  18. 영상 통화 중에 사용자에 의해서 이동통신 단말기로 입력되는 신호 또는 상대방 이동통신 단말기로부터 전송되는 신호를 기 설정된 진동 발생 상황과 비교하여 진동 발생 상황을 인식하는 진동 발생 상황 인식부;
    진동 발생 상황 인식부에 의해서 파악된 진동 발생 상황 정보와 매칭되는 진동 정보가 존재하는지 여부를 검색하고, 매칭되는 진동 정보가 있는 경우, 해당 진동 정보를 진동 정보 전송부로 전달하는 진동 조건 검색부; 및
    상기 진동 조건 검색부로부터 수신한 진동 정보를 영상 통화를 수행하는 상대방 이동통신 단말기로 전송하는 진동 정보 전송부;
    를 포함하는 이동통신 단말기.
  19. 제 18 항에 있어서,
    상기 신호가 영상 통화 중에 상대방 이동통신 단말기로부터 전송된 신호인 경우,
    상기 이동통신 단말기는,
    상기 진동 조건 검색부에 의해서 검색된 진동 발생 상황 정보와 일치하는 진동을 발생하는 진동 출력부;
    를 더 포함하는 것을 특징으로 하는 이동통신 단말기.
  20. 제19항에 있어서,
    상기 진동 발생 상황 인식부는,
    영상 통화 중에 이동통신 단말기의 움직임을 인식하여 가속도 또는 회전을 파악하는 가속도계 및 자이로 인식 수단;
    영상 통화 중 사용자에 의해서 입력되는 음성 신호와 상대방 이동통신 단말기로부터 전송되는 음성 신호를 분석하여 해당 어휘를 파악하는 어휘 인식 수단; 및
    영상 통화 중 이동통신 단말기에 구비되어 있는 카메라를 통해 사용자의 얼굴 표정을 인식하는 얼굴 인식 수단;
    을 포함하는 것을 특징으로 하는 이동통신 단말기.
  21. 제20항에 있어서,
    상기 진동 조건 검색부는,
    상기 가속도계 및 자이로 인식 수단에 의해서 파악된 가속도 정보 또는 회전 정보와 매칭되는 진동 정보가 존재하는지 여부를 검색하고, 매칭되는 진동 정보가 있는 경우, 해당 진동 정보를 진동 정보 전송부로 전달하는 것을 특징으로 하는 이동통신 단말기.
  22. 제20항 또는 제21항에 있어서,
    상기 가속도계 및 자이로 인식 수단은,
    이동통신 단말기의 직선 방향의 움직임, 회전성, 가속의 세기를 인식하는 것을 특징으로 하는 이동통신 단말기.
  23. 제20항에 있어서,
    상기 진동 조건 검색부는,
    영상 통화 중 사용자에 의해서 입력되어 상기 어휘 인식 수단에 의해서 파악된 어휘가 진동을 발생하기 위해 기 설정된 어휘 패턴과 비교하여 일치하는 경우, 해당 어휘 패턴에 대한 진동 정보를 상대방 이동통신 단말기로 전송하도록 진동 정보 전송부로 전달하는 것을 특징으로 이동통신 단말기.
  24. 제20항에 있어서,
    상기 진동 조건 검색부는,
    영상 통화 중 상대방 이동통신 단말기로부터 수신하여 상기 어휘 인식 수단에 의해서 분석된 어휘가 진동을 발생하기 위해 기 설정된 어휘 패턴을 포함하는 진동 조건과 일치하는 경우, 해당 어휘 패턴에 대한 진동을 발생하도록 진동 출력부로 정보를 전달하는 것을 특징으로 하는 이동통신 단말기.
  25. 제20항에 있어서,
    상기 진동 조건 검색부는,
    상기 얼굴 인식 수단을 통해 파악되는 사용자의 얼굴 표정이 진동을 발생하기 위해 기 설정된 얼굴 표정 패턴과 일치하는지 여부를 확인하고, 사용자의 얼굴 표정이 기 설정된 얼굴 표정 패턴과 일치한다고 파악된 경우, 해당 얼굴 표정에 대한 진동 정보를 진동 정보 전송부로 전달하는 것을 특징으로 하는 이동통신 단말기.
  26. 영상 통화 중 사용자에 의한 선택에 따라 진동 요청을 수신하면, 기 설정된 진동 조건 설정 메뉴를 출력하고, 입력되는 진동 조건을 기초로 진동 정보를 생성하는 진동 조건 설정부;
    진동 조건 설정부에 의해서 설정된 진동 정보를 영상 통화를 수행하는 상대방 이동통신 단말기로 전송하는 진동 정보 전송부;
    를 포함하는 이동통신 단말기.
  27. 제26항에 있어서,
    상기 이동통신 단말기는,
    영상 통화 중에 상대방 이동통신 단말기로부터 전송되는 진동 정보를 수신하면, 이를 분석하여 출력해야 하는 진동을 파악하는 진동 정보 파악부; 및
    상기 진동 정보 파악부에 의해서 파악된 진동을 발생하는 진동 출력부;
    를 더 포함하는 이동통신 단말기.
  28. 제27항에 있어서,
    상기 진동 정보 파악부는,
    상대방 이동통신 단말기로부터 전송되는 진동 정보가 특정 코드 형식인 경우, 기 저장된 진동 정보로부터 해당 코드와 일치하는 진동 정보를 추출하고,
    상대방 이동통신 단말기로부터 전송되는 진동 정보가 진동 형태를 비롯한 상세 정보를 포함하는 경우, 이를 진동 출력부로 전달하는 것을 특징으로 하는 이동통신 단말기.
  29. a) 제1 이동통신 단말기와 제2 이동통신 단말기 간 영상 통화 중에 제1 이동통신 단말기가 진동 발생 상황에 해당하는 신호가 발생함을 인식하는 단계;
    b) 제1 이동통신 단말기가 진동 발생 상황 정보와 매칭되는 진동 정보를 검색하여 추출하는 단계; 및
    c) 제1 이동통신 단말기가 검색된 진동 정보를 영상 통화를 수행하는 제2 이동통신 단말기로 전송하는 단계;
    를 포함하는 영상 통화 중 진동을 전달하기 위한 방법.
  30. 제29항에 있어서,
    상기 진동 발생 상황 정보가 이동통신 단말기의 움직임을 나타내는 신호인 경우,
    상기 a) 단계는,
    제1 이동통신 단말기가 자신의 움직임을 인식하여 가속도 또는 회전의 발생을 인식하는 단계인 것을 특징으로 하는 영상 통화 중 진동을 전달하기 위한 방법.
  31. 제30항에 있어서,
    상기 b) 단계는,
    가속도 정보 또는 회전 정보와 일치하는 진동 정보가 있는지 여부를 확인하고, 확인 결과 일치하는 진동 정보가 있는 경우, 해당 진동 정보를 추출하는 단계인 것을 특징으로 하는 영상 통화 중 진동을 전달하기 위한 방법.
  32. 제29항에 있어서,
    상기 진동 발생 상황 정보가 사용자에 의해서 입력되는 음성 신호인 경우,
    상기 a) 단계는,
    제1 이동통신 단말기가 외부로부터 입력되는 음성 신호를 분석하여 해당 어휘를 파악하는 단계인 것을 특징으로 하는 영상 통화 중 진동을 전달하기 위한 방법.
  33. 제32항에 있어서,
    상기 b) 단계는,
    제1 이동통신 단말기가 상기 a) 단계에서 파악된 어휘를 진동을 발생하기 위해 기 설정된 어휘 패턴과 비교하여 일치하는 어휘 패턴이 있는지 여부를 확인하고, 확인 결과 일치하는 어휘 패턴이 있는 경우, 해당 어휘 패턴에 대한 진동 정보를 추출하는 단계;
    인 것을 특징으로 하는 영상 통화 중 진동을 전달하기 위한 방법.
  34. 제29항에 있어서,
    상기 진동 발생 상황 정보가 얼굴 표정 신호인 경우,
    상기 a) 단계는,
    제1 이동통신 단말기와 제2 이동통신 단말기 간 영상 통화 중에 제1 이동통신 단말기가 자신의 카메라를 통해 사용자의 얼굴 표정을 인식하고, 인식된 사용자의 얼굴 표정이 진동을 발생하기 위해 기 설정된 얼굴 표정과 일치하는지 여부를 확인하는 단계인 것을 특징으로 하는 영상 통화 중 진동을 전달하기 위한 방법.
  35. 제34항에 있어서,
    상기 b) 단계는,
    제1 이동통신 단말기가 사용자의 얼굴 표정이 기 설정된 얼굴 표정과 일치한다고 파악된 경우, 해당 얼굴 표정과 매칭된 진동 정보를 추출하는 단계인 것을 특징으로 하는 영상 통화 중 진동을 전달하기 위한 방법.
  36. a) 제1 이동통신 단말기와 제2 이동통신 단말기 간 영상 통화 중에 제1 이동통신 단말기가 사용자에 의한 선택에 따라 진동 요청을 수신하면, 기 설정된 진동 조건 설정 메뉴를 출력하는 단계;
    b) 제1 이동통신 단말기가 사용자에 의해서 입력되는 진동 조건을 기초로 진동 정보를 생성하여 영상 통화를 수행하는 제2 이동통신 단말기로 전송하는 단계;
    를 포함하는 영상 통화 중 진동을 전달하기 위한 방법.
  37. 제29항 또는 제30항에 있어서,
    제1 이동통신 단말기가 제2 이동통신 단말기로 진동 정보를 전송한 이후,
    제1 이동통신 단말기로부터 전송되는 진동 정보가 특정 코드 형식인 경우, 제2 이동통신 단말기가 기 저장된 진동 정보로부터 해당 코드와 일치하는 진동 정보를 추출하여 진동을 발생하고,
    제1 이동통신 단말기로부터 전송되는 진동 정보가 진동 형태를 비롯한 상세 정보를 포함하는 경우, 제2 이동통신 단말기가 상기 진동 형태에 따라 진동을 발생하는 단계;
    를 더 포함하는 것을 특징으로 하는 영상 통화 중 진동을 전달하기 위한 방법.
  38. 제29항 내지 제36항 중 어느 한 항에 있어서,
    상기 진동 정보는,
    H.245 형태로 전송, UUS로 전송, USSD(Unstructured Supplementary Services Data)에 규격을 생성하여 전송 및 특정 포트를 기초로 일반 SMS(Short Message Service)와 구별하여 메시지 형태로 전송 중 어느 하나로 제2 이동통신 단말기로 전송되는 것을 특징으로 하는 영상 통화 중 진동을 전달하기 위한 방법.
  39. a) 제1 이동통신 단말기와 제2 이동통신 단말기 간에 영상 통화 중 제2 이동통신 단말기가 제1 이동통신 단말기로부터 전송되는 음성 신호를 분석하여 해당 어휘를 파악하는 단계;
    b) 제2 이동통신 단말기가 상기 a) 단계에서 파악된 어휘를 진동을 발생하기 위한 기 설정된 어휘 패턴을 포함하는 진동 조건과 비교하여 일치하는 어휘 패턴이 있는지 여부를 확인하는 단계; 및
    c) 일치하는 어휘 패턴이 검색된 경우, 제2 이동통신 단말기가 해당 어휘 패턴에 대한 진동을 발생하는 단계;
    를 포함하는 영상 통화 중 진동을 발생하기 위한 방법.
PCT/KR2009/004938 2008-09-05 2009-09-02 진동 정보를 전달하는 이동통신 단말기 및 방법 WO2010027190A2 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP09811689.0A EP2323351A4 (en) 2008-09-05 2009-09-02 MOBILE COMMUNICATION TERMINAL PROVIDING VIBRATION INFORMATION AND ASSOCIATED METHOD
US12/737,976 US8581954B2 (en) 2008-09-05 2009-09-02 Mobile communication terminal that delivers vibration information, and method thereof
CN2009801436388A CN102204225B (zh) 2008-09-05 2009-09-02 传送振动信息的移动通信终端及其方法

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
KR1020080087644A KR20100028764A (ko) 2008-09-05 2008-09-05 음성 통화 중에 진동 정보를 송수신하는 이동통신 단말기 및 방법
KR10-2008-0087644 2008-09-05
KR10-2008-0088108 2008-09-08
KR1020080088108A KR101294214B1 (ko) 2008-09-08 2008-09-08 상대 통화자의 감정을 진동으로 전달하는 이동통신 단말기 및 방법
KR1020090020054A KR101376148B1 (ko) 2009-03-10 2009-03-10 영상 통화 중 진동을 전달하기 위한 방법과 이를 위한 이동통신 단말기
KR10-2009-0020054 2009-03-10

Publications (2)

Publication Number Publication Date
WO2010027190A2 true WO2010027190A2 (ko) 2010-03-11
WO2010027190A3 WO2010027190A3 (ko) 2010-06-17

Family

ID=41797647

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2009/004938 WO2010027190A2 (ko) 2008-09-05 2009-09-02 진동 정보를 전달하는 이동통신 단말기 및 방법

Country Status (4)

Country Link
US (1) US8581954B2 (ko)
EP (1) EP2323351A4 (ko)
CN (1) CN102204225B (ko)
WO (1) WO2010027190A2 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103312897A (zh) * 2010-09-02 2013-09-18 联想(北京)有限公司 一种移动终端及其发送处理方法
KR20200009636A (ko) 2018-07-19 2020-01-30 주식회사 어플라이 사용자 장치 간 통신을 통하여 사용자의 심장박동을 모사하는 장치 및 방법

Families Citing this family (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101708682B1 (ko) * 2010-03-03 2017-02-21 엘지전자 주식회사 영상표시장치 및 그 동작 방법.
US20120182211A1 (en) * 2011-01-14 2012-07-19 Research In Motion Limited Device and method of conveying emotion in a messaging application
US20120182309A1 (en) * 2011-01-14 2012-07-19 Research In Motion Limited Device and method of conveying emotion in a messaging application
GB2500362A (en) * 2011-02-03 2013-09-25 Research In Motion Ltd Device and method of conveying emotion in a messaging application
GB2500363A (en) * 2011-02-03 2013-09-25 Research In Motion Ltd Device and method of conveying emotion in a messaging application
US8717152B2 (en) 2011-02-11 2014-05-06 Immersion Corporation Sound to haptic effect conversion system using waveform
US9448626B2 (en) 2011-02-11 2016-09-20 Immersion Corporation Sound to haptic effect conversion system using amplitude value
KR101853277B1 (ko) * 2011-07-18 2018-04-30 삼성전자 주식회사 통화 중 응용 프로그램 실행 방법 및 이를 지원하는 모바일 단말기
US9762719B2 (en) * 2011-09-09 2017-09-12 Qualcomm Incorporated Systems and methods to enhance electronic communications with emotional context
KR101766281B1 (ko) * 2011-10-17 2017-08-08 인포뱅크 주식회사 무선단말 및 그 무선단말의 정보처리 방법
CN102681769B (zh) * 2012-02-24 2017-11-21 康佳集团股份有限公司 具有振动效果的ui界面变化方法及装置
WO2013131328A1 (zh) * 2012-03-07 2013-09-12 中兴通讯股份有限公司 终端动感互动的方法和系统
US9715276B2 (en) 2012-04-04 2017-07-25 Immersion Corporation Sound to haptic effect conversion system using multiple actuators
CN203278959U (zh) * 2012-06-11 2013-11-06 瑞声光电科技(常州)有限公司 触觉传输系统
CN102929909A (zh) * 2012-09-06 2013-02-13 北京天宇朗通通信设备股份有限公司 文本生成方法和装置及移动终端
CN103051786A (zh) * 2012-12-12 2013-04-17 深圳市三体科技有限公司 移动终端互动方法和装置
US9098984B2 (en) 2013-03-14 2015-08-04 Immersion Corporation Haptic effects broadcasting during a group event
US9619980B2 (en) * 2013-09-06 2017-04-11 Immersion Corporation Systems and methods for generating haptic effects associated with audio signals
US9711014B2 (en) 2013-09-06 2017-07-18 Immersion Corporation Systems and methods for generating haptic effects associated with transitions in audio signals
US9652945B2 (en) 2013-09-06 2017-05-16 Immersion Corporation Method and system for providing haptic effects based on information complementary to multimedia content
US9576445B2 (en) 2013-09-06 2017-02-21 Immersion Corp. Systems and methods for generating haptic effects associated with an envelope in audio signals
JP2015099468A (ja) * 2013-11-19 2015-05-28 セイコーエプソン株式会社 振動情報収集方法、振動情報収集装置、および固定機器
CN104811251A (zh) 2014-01-27 2015-07-29 腾讯科技(深圳)有限公司 信息传输方法、装置和系统
KR102245098B1 (ko) 2014-05-23 2021-04-28 삼성전자주식회사 휴대 단말 및 그 제어 방법
US9612664B2 (en) * 2014-12-01 2017-04-04 Logitech Europe S.A. Keyboard with touch sensitive element
CN104579919B (zh) * 2014-12-24 2019-07-16 腾讯科技(深圳)有限公司 消息交互方法以及相关装置和通信系统
CN105049327A (zh) * 2015-06-23 2015-11-11 惠州Tcl移动通信有限公司 一种触摸振动即时通讯的方法及系统
CN105227765B (zh) * 2015-09-10 2019-04-26 三星电子(中国)研发中心 通话过程中的互动方法及系统
EP3171578A1 (en) * 2015-11-18 2017-05-24 Siemens Aktiengesellschaft Method of improved finding someone or something within a larger group of people or things
CN105677336B (zh) * 2015-12-30 2019-05-21 Oppo广东移动通信有限公司 一种发送振动文件的方法及终端
US10438609B2 (en) * 2016-01-14 2019-10-08 George Brandon Foshee System and device for audio translation to tactile response
JP6835070B2 (ja) * 2016-04-07 2021-02-24 ソニー株式会社 システム、端末装置、方法及び記録媒体
CN108024011B (zh) * 2016-11-04 2020-07-31 宏达国际电子股份有限公司 通过振动建立无线连接的方法、电子设备和记录介质
CN106843469B (zh) * 2016-12-27 2020-09-04 广东小天才科技有限公司 一种控制穿戴设备报时的方法及穿戴设备
CN107943279A (zh) * 2017-10-27 2018-04-20 捷开通讯(深圳)有限公司 智能穿戴设备及工作方法、具有存储功能的装置
DK3477927T3 (da) * 2017-10-31 2021-06-21 Telia Co Ab Håndtering af opkaldsforbindelsesforsøg
JP7367671B2 (ja) * 2018-05-23 2023-10-24 ソニーグループ株式会社 情報処理装置、情報処理方法、およびプログラム
US10924894B2 (en) * 2018-09-20 2021-02-16 Avaya Inc. System and method for sending and receiving non-visual messages in an electronic audio communication session
JP7316664B2 (ja) * 2020-02-03 2023-07-28 マルコムホールディングス株式会社 対話ユーザの感情情報の提供装置
CN113542773B (zh) * 2021-07-19 2022-12-27 北京达佳互联信息技术有限公司 多媒体资源的分享方法、装置、电子设备及存储介质

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3953024B2 (ja) * 2003-11-20 2007-08-01 ソニー株式会社 感情算出装置及び感情算出方法、並びに携帯型通信装置
JP2005295170A (ja) * 2004-03-31 2005-10-20 Brother Ind Ltd 音声通信装置
JP2005332118A (ja) * 2004-05-19 2005-12-02 Nec Corp 携帯端末及び携帯端末の情報入力方法
GB2416962B (en) * 2004-08-05 2009-04-01 Vodafone Plc New communication type for mobile telecommunications networks
TWI253834B (en) * 2004-12-31 2006-04-21 Giga Byte Comm Inc Portable device with motion detection
US20070139366A1 (en) * 2005-12-21 2007-06-21 Dunko Gregory A Sharing information between devices
JP4138820B2 (ja) * 2006-05-22 2008-08-27 Sky株式会社 携帯端末
KR100744902B1 (ko) * 2006-05-24 2007-08-01 삼성전기주식회사 휴대 무선 조작기
EP1936929A1 (en) * 2006-12-21 2008-06-25 Samsung Electronics Co., Ltd Haptic generation method and system for mobile phone
JP2008295170A (ja) * 2007-05-23 2008-12-04 Canon Inc 充電装置及びその制御方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
None
See also references of EP2323351A4

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103312897A (zh) * 2010-09-02 2013-09-18 联想(北京)有限公司 一种移动终端及其发送处理方法
KR20200009636A (ko) 2018-07-19 2020-01-30 주식회사 어플라이 사용자 장치 간 통신을 통하여 사용자의 심장박동을 모사하는 장치 및 방법

Also Published As

Publication number Publication date
US8581954B2 (en) 2013-11-12
CN102204225A (zh) 2011-09-28
EP2323351A4 (en) 2015-07-08
US20110169908A1 (en) 2011-07-14
WO2010027190A3 (ko) 2010-06-17
CN102204225B (zh) 2013-12-11
EP2323351A2 (en) 2011-05-18

Similar Documents

Publication Publication Date Title
WO2010027190A2 (ko) 진동 정보를 전달하는 이동통신 단말기 및 방법
WO2018034552A1 (en) Language translation device and language translation method
WO2014007545A1 (en) Method and apparatus for connecting service between user devices using voice
WO2012169679A1 (ko) 디스플레이 장치, 디스플레이 장치의 제어 방법 및 디스플레이 장치의 음성인식 시스템
WO2014038916A1 (en) System and method of controlling external apparatus connected with device
WO2018026200A1 (en) Language translation device and language translation method
WO2020017754A1 (ko) 전자 장치 및 그의 동작 방법
WO2020045835A1 (ko) 전자 장치 및 그 제어 방법
WO2014157757A1 (ko) 이동식 입력 장치 및 그를 이용한 명령 입력 방법
WO2014078980A1 (zh) 一种语音响应的方法及移动设备
WO2017018552A1 (ko) 이어셋 및 그 제어 방법
WO2020080635A1 (ko) 동작 상태에 기반하여 선택한 마이크를 이용하여 음성 인식을 수행하는 전자 장치 및 그의 동작 방법
WO2018223520A1 (zh) 面向儿童的学习方法、学习设备及存储介质
WO2021060728A1 (ko) 사용자 발화를 처리하는 전자 장치 및 그 작동 방법
WO2018124355A1 (ko) 오디오 장치 및 그 제어방법
WO2015170799A1 (ko) 메시지 제공 방법 및 메시지 제공 장치
WO2013094987A1 (ko) 무선단말 및 그 무선단말의 정보처리 방법
WO2021071271A1 (en) Electronic apparatus and controlling method thereof
WO2020101174A1 (ko) 개인화 립 리딩 모델 생성 방법 및 장치
WO2014142391A1 (ko) 음성 메시지 생성 방법, 이를 위한 장치 및 시스템
WO2020080771A1 (ko) 변형 발화 텍스트를 제공하는 전자 장치 및 그것의 동작 방법
WO2021193991A1 (ko) 디스플레이 장치
WO2015005718A1 (en) Method of controlling operation mode and electronic device therefor
WO2011028051A2 (ko) 전자 기기 및 이를 이용한 음성인식 방법
WO2019035504A1 (ko) 이동 단말기 및 그 제어 방법

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 200980143638.8

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 09811689

Country of ref document: EP

Kind code of ref document: A2

WWE Wipo information: entry into national phase

Ref document number: 2009811689

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 12737976

Country of ref document: US