WO2017099338A1 - 사용자 단말 장치 및 그 제어 방법 - Google Patents

사용자 단말 장치 및 그 제어 방법 Download PDF

Info

Publication number
WO2017099338A1
WO2017099338A1 PCT/KR2016/010794 KR2016010794W WO2017099338A1 WO 2017099338 A1 WO2017099338 A1 WO 2017099338A1 KR 2016010794 W KR2016010794 W KR 2016010794W WO 2017099338 A1 WO2017099338 A1 WO 2017099338A1
Authority
WO
WIPO (PCT)
Prior art keywords
user terminal
user
voice
terminal device
order
Prior art date
Application number
PCT/KR2016/010794
Other languages
English (en)
French (fr)
Inventor
원설혜
라진
오석민
이강민
한철호
Original Assignee
삼성전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020160121375A external-priority patent/KR102540311B1/ko
Application filed by 삼성전자 주식회사 filed Critical 삼성전자 주식회사
Priority to US15/778,862 priority Critical patent/US11039000B2/en
Publication of WO2017099338A1 publication Critical patent/WO2017099338A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/725—Cordless telephones

Definitions

  • the present invention relates to a user terminal device and a control method thereof, and more particularly, to a user terminal device capable of group communication and a control method thereof.
  • a manager who manages a building such as a hotel instructs a person in charge of each area of the building and a person in each area by using a communication device such as a radio or requests a current situation.
  • the person in charge of each zone can report the work according to the manager's instructions by using the communication device possessed by him.
  • the frequency channel between the communication devices should not be used. That is, when a work related community is in progress between the manager and the A contact by using a communication device, the B contact may not have a work related community with the manager until the work related community is terminated between the manager and the A contact.
  • the present invention has been made to solve the above-described problems and at the same time to respond to the above-described technology development request, an object of the present invention is to facilitate the community by group.
  • an object of the present invention is to enable a community by group using a user terminal device without a separate communication device such as a radio used for a work-related community among employees in a building.
  • a user terminal device for achieving the above object is a communication unit for performing data communication with a plurality of other user terminal device group set, when a user voice is received from the plurality of other user terminal devices, And a controller configured to determine an output order of a voice message corresponding to the user voice according to a preset condition, and an output unit to output the voice message in the determined output order.
  • the controller may determine the output order of the voice messages corresponding to the user voices based on the order in which the user voices are received.
  • the controller may determine an output order of voice messages corresponding to user voices received from the plurality of other user terminal devices based on the order in which the plurality of other user terminal devices receive the speech request message.
  • the controller may analyze the similarity of voice messages corresponding to user voices received from the plurality of other user terminal devices, and determine the output order in the order of voice messages having different similarities.
  • the output unit may include a display unit and an audio output unit, and the controller may control the display unit to display an output UI including an execution icon for the voice message, and the output icon may be included in the output UI.
  • the controller may control the display unit to display an output UI including an execution icon for the voice message, and the output icon may be included in the output UI.
  • the output unit may include a display unit configured to display a channel list UI for each group.
  • the controller may select a group corresponding to the selected object as a contact group when one of the group objects included in the channel list UI is selected. Select and transmit the order voice to a plurality of user terminal devices included in the contact group.
  • the controller may control the display unit to display reception state information regarding a user voice received from another user terminal device for each group on an object for each group included in the channel list UI.
  • the controller transmits a speech request message to the first user terminal device according to a user request for a speech request in a state in which an order voice is received from a first user terminal device among the plurality of other user terminal devices.
  • a speaking authority is set from the first user terminal device, the user voice for the order voice may be transmitted to the first user terminal device.
  • the controller may provide a stateable service for speaking the order voice based on at least one of vibration feedback and event notification feedback.
  • a method of controlling a user terminal device may include receiving user voices from a plurality of grouped user terminals, and outputting a voice message corresponding to the user voice according to a preset condition. Determining an order and outputting the voice messages in the determined output order.
  • the output order of the voice message corresponding to the user voice may be determined based on the received order of the user voice.
  • the determining may include determining an output order of voice messages corresponding to user voices received from the plurality of other user terminal devices based on the order in which the plurality of user terminal devices receive the speech request messages. .
  • the determining may include analyzing similarities of voice messages corresponding to user voices received from the plurality of other user terminal devices, and determining output order in order of voice messages having different similarities.
  • the outputting may include displaying an output UI including an execution icon for the voice message, and displaying a voice message corresponding to the selection command in accordance with a selection command for the execution icon included in the output UI.
  • the audio signal may be output to at least one of the audio signals.
  • the method may further include transmitting the order voice to the plurality of other user terminal devices.
  • the displaying may include displaying reception state information of a user voice received from another user terminal device for each group on an object for each group included in the channel list UI.
  • the method may further include transmitting a user voice of the order voice to the first user terminal device.
  • the transmitting of the user voice may provide a voice state notification service for the order voice based on at least one of vibration feedback and event notification feedback. .
  • the user terminal device may provide a service that can facilitate the group community with a plurality of other user devices.
  • FIG. 1 is a first exemplary diagram of a system for providing group communication according to an embodiment of the present invention
  • FIG. 2 is a second exemplary diagram of a system for providing group communication according to another embodiment of the present invention.
  • FIG. 3 is a block diagram of a user terminal device according to an embodiment of the present invention.
  • FIG. 4 is a detailed block diagram of a user terminal device according to an embodiment of the present invention.
  • FIG. 5 is an exemplary diagram for determining an output order of voice messages in a user terminal device according to an exemplary embodiment of the present invention
  • FIG. 6 is an exemplary view of displaying a channel list UI in a user terminal device according to an embodiment of the present invention
  • FIG. 7 is an exemplary diagram for selecting a contact group in a user terminal device according to an embodiment of the present invention.
  • FIG. 8 is an exemplary diagram for selecting a contact person in a user terminal device according to an embodiment of the present invention.
  • FIG. 9 is a first exemplified diagram for providing a stateable service for speaking voice for order voice in a user terminal device according to an embodiment of the present invention.
  • FIG. 10 is a second exemplary view of providing a stateable service for speaking voice for order voice in a user terminal device according to another embodiment of the present invention.
  • FIG. 11 is a third exemplary view of providing a stateable service for speaking voice for order voice in a user terminal device according to another embodiment of the present invention.
  • FIG. 12 is an exemplary view of displaying an output UI in a user terminal device according to an embodiment of the present invention.
  • FIG. 13 is a flowchart illustrating a control method for group communication with another user terminal device in a user terminal device according to an embodiment of the present invention
  • FIG. 14 is a flowchart illustrating a method for transmitting a user voice to another user terminal device by the same group as the user terminal device in the user terminal device according to an embodiment of the present invention.
  • first and second may be used to describe various components, but the components should not be limited by the terms. The terms are only used to distinguish one component from another.
  • the module or unit performs at least one function or operation, and may be implemented by hardware or software, or a combination of hardware and software.
  • the plurality of modules or the plurality of units may be integrated into at least one module except for the modules or units that need to be implemented with specific hardware, and are implemented as at least one processor (not shown). Can be.
  • FIG. 1 is a first exemplary diagram of a system for providing group communication according to an embodiment of the present invention
  • FIG. 2 is a second exemplary diagram of a system for providing group communication according to another embodiment of the present invention.
  • a system for providing group communication includes a plurality of user terminal devices 100-1 to 100-4.
  • the plurality of user terminal devices 100-1 to 100-4 may be terminal devices grouped to allow group communication.
  • Such a plurality of grouped user terminal devices 100-1 to 100-4 may execute an application for push to talk (PTT).
  • the application for push-to-talk does not make a voice call between a plurality of grouped user terminal devices 100-1 through 100-4 through a wireless communication network, and voices in a one-to-one or one-to-one format through a specific frequency such as a radio. It is an application that can use the call service.
  • At least one of the plurality of user terminal devices 100-1 to 100-4 on which the application for push-to-talk is executed may transmit / receive voice data of the user with the remaining user terminal device 100.
  • the manager who manages the entire hotel may use the first user terminal device 100-1 on which the application for push-to-talk is executed, and the second to fourth user terminal devices of A to C persons in charge grouped with the manager. (100-2 ⁇ 100-4), you can request to check the status of the area managed by each person in charge.
  • a to C personnel can be grouped with the manager to be in charge of each floor of the hotel.
  • the manager may make an order of “Please check the status of abnormality of each floor” to the person in charge of each floor using the first user terminal device 100-1.
  • the first user terminal device 100-1 is the second to fourth user terminal devices 100-2 to 100-4 that are grouped with the first user terminal device 100-1. Please check the status. "You can send the voice data of the administrator's order voice.
  • the second to fourth user terminal devices 100-2 to 100-4 output voice messages for the order voices received from the first user terminal device 100-1. Accordingly, the person in charge A to C can check the order instructed by the administrator from the voice message output through the second to fourth user terminal devices 100-2 to 100-4 owned by the person in charge.
  • the A to C contact person who confirms the manager's order can report the current status of each floor in charge of the A to C contact person by using the second to fourth user terminal devices 100-2 to 100-4 owned by the manager. Can be.
  • the second to fourth user terminal devices 100-2 to 100-4 transmit the user voice reported by the A to C representatives to the first user terminal device 100-1. Accordingly, the first user terminal device 100-1 outputs a voice message for the user voice received from the second to fourth user terminal devices 100-2 to 100-4, and the administrator outputs the first user terminal.
  • the voice message output by the device 100-1 may determine the current situation of each floor.
  • the first user terminal device 100-1 may output a voice message for the user voice received from the second to fourth user terminal devices 100-2 to 100-4 through the following embodiments. have.
  • the first user terminal device 100-1 may transmit the second to fourth based on a time sequence in which the user voice is received from the second to fourth user terminal devices 100-2 to 100-4.
  • the voice message regarding the user voice received from the user terminal devices 100-2 to 100-4 may be output.
  • the first user terminal device 100-1 may receive a voice message for the received user voice.
  • the similarity of may be analyzed to first output a voice message having different similarities.
  • the person in charge A when an error occurs on the first floor managed by the person in charge A, the person in charge A sends the user voice “There is a problem on the first floor” through the second user terminal device 100-2 to the first user terminal device. If it is possible to transmit to (100-1), and there is no abnormality in each floor managed by B and C personnel, B and C personnel are "no abnormal" through the third and fourth user terminal devices 100-3,4. "" May be transmitted to the first user terminal device 100-1.
  • the first user terminal device 100-1 determines that the user voice received from the second user terminal device 100-2 is different from another user voice, and the second user terminal device ( It is possible to preferentially output the voice message for the user voice received from 100-2).
  • the manager can check the voice message output first, and quickly grasp the situation of the floor in charge of the person in charge A.
  • the first user terminal device 100-1 receives a speech request message from the second to fourth user terminal devices 100-2 to 100-4 with respect to an order instructed by an administrator.
  • the voice message for the user voice received from the second to fourth user terminal devices 100-2 to 100-4 may be output based on the order of the procedure.
  • a person in charge of A to C outputs a voice message regarding an order voice of an administrator received from the first user terminal device 100-1 through the second to fourth user terminal devices 100-2 to 100-4. In this case, they may request the right to speak to report the current situation at each floor.
  • the second to fourth user terminal devices 100-2 to 100-4 transmit a speaking request message to the first user terminal device 100-1, and the first user terminal device ( 100-1) sets a speaking authority for the second to fourth user terminal apparatuses 100-2 to 100-4 based on the order in which the speaking request message is received.
  • the speech request message transmitted from the second user terminal device 100-2 may be received first, and the speech request message transmitted from the fourth user terminal device 100-4 may be received last.
  • the first user terminal apparatus 100-1 sets the speaking authority of the second user terminal apparatus 100-2 that first transmitted the speech request message to the first rank, and the third user terminal apparatus 100-1.
  • the speaking authority of 3) is set to the second rank
  • the speaking authority of the third user terminal device 100-4 is set to the third rank.
  • the first user terminal device 100-1 transmits a notification message according to the speaking authority setting to the second user terminal device 100-2 set to the first rank.
  • the second user terminal device 100-2 in which the speaking authority is set to the first rank transmits the user voice of user A to the first user terminal device 100-1.
  • the first user terminal apparatus 100-1 may set the third user terminal apparatus 100-in which the speaking authority is set to the second ranking. 3) the notification message according to the speech authority setting is transmitted, and the third user terminal device 100-3 transmits the user voice of the B user to the first user terminal device 100-1.
  • the first user terminal device 100-1 may set the fourth user terminal apparatus 100-in which the speaking authority is set to the third ranking. 4) the notification message according to the speaking authority setting is transmitted, and the fourth user terminal device 100-4 transmits the user voice of the user C to the first user terminal device 100-1.
  • each person in charge is inconvenient to check in real time whether communication negotiations are in progress between the person in charge and the manager by reporting the current situation to the manager through his user terminal device 100 when the authority to speak. Can be solved.
  • the system for providing group communication may further include the management server 200 as well as the plurality of user terminal devices 100-1 to 100-4 described above.
  • the management server 200 may be a relay device for transmitting user voices transmitted and received between a plurality of grouped user terminal devices 100-1 to 100-4.
  • the management server 200 as described above, the second to fourth users grouped with the first user terminal device 100-1 by the manager's order voice received from the first user terminal device 100-1. Transmitting to the terminal devices 100-2 to 100-4, and receiving the user voices received from the second to fourth user terminal devices 100-2 to 100-4 based on the received order. 100-1).
  • FIG. 3 is a block diagram of a user terminal device according to an embodiment of the present invention
  • FIG. 4 is a detailed block diagram of the user terminal device according to an embodiment of the present invention.
  • the user terminal device 100 includes a communication unit 110, a control unit 120, and an output unit 130.
  • the communication unit 110 performs data communication with a plurality of grouped user terminal devices (hereinafter, referred to as other user terminal devices) 100.
  • the communication unit 110 includes a short range communication module 111 and a wireless communication module 113 such as a wireless LAN module, a high-definition multimedia interface (HDMI), and a universal serial bus (USB). It may include a connector 115 including at least one of a wired communication module, such as Institute of Electrical and Eletronics Engineers (IEEE) 1394.
  • IEEE Institute of Electrical and Eletronics Engineers
  • the short range communication module 111 is a component that wirelessly performs short range communication between a plurality of other user terminal apparatuses 100 grouped in the same group as the user terminal apparatus 100.
  • the short range communication module 111 includes at least one of a Bluetooth module, an infrared data association (IrDA) module, a Near Field Communication (NFC) module, a Wi-Fi (WIFI) module, and a Zigbee module. can do.
  • the wireless communication module 113 is a module connected to an external network and performing communication according to a wireless communication protocol such as IEEE.
  • the user terminal device 100 may perform data communication with a plurality of other user terminal devices 100 grouped into the same group through the above-described management server 200.
  • the wireless communication module further includes a mobile communication module for accessing and communicating with the mobile communication network according to various mobile communication standards such as 3rd generation (3G), 3rd generation partnership project (3GPP), long term evolution (LTE), and the like. You may.
  • 3G 3rd generation
  • 3GPP 3rd generation partnership project
  • LTE long term evolution
  • the communication unit 110 may be implemented by the various short-range communication schemes described above, and may employ other communication techniques not mentioned herein as needed.
  • the connector 115 is configured to provide an interface with various source devices such as USB 2.0, USB 3.0, HDMI, and IEEE 1394.
  • the connector 115 receives content data transmitted from an external server (not shown) through a wired cable connected to the connector 115 according to a control command of the controller 120 to be described later, or records externally stored content data. Can be transferred to the medium.
  • the connector 115 may receive power from a power source through a wired cable physically connected to the connector 115.
  • the plurality of other user terminal devices 100 When the user voice is received from the plurality of other user terminal devices 100 grouped with the user terminal device 100 through the communication unit 110, the plurality of other user terminal devices 100 according to a preset condition. The output order of the voice message corresponding to the user voice received from the user is determined.
  • the output unit 130 outputs a voice message corresponding to the user voices received from the plurality of other user terminal devices 100 based on the output sequence determined by the controller 120.
  • an output order of a voice message corresponding to a user voice received from the terminal device 100 may be determined.
  • the controller 120 when the user voices are received from the plurality of other user terminal devices 100, the controller 120 receives the user voices received from the plurality of other user terminal devices 100 based on the order in which the user voices are received.
  • the voice message corresponding to may be output.
  • the user voice transmitted from the second user terminal device 100-2 of the second to fourth user terminal devices 100-2 to 100-4 is first received.
  • the user voice transmitted from the fourth user terminal device 100-4 may be received at the latest.
  • the controller 120 first outputs a voice message for the user voice received from the second user terminal device 100-2, and outputs the user voice received from the third user terminal device 100-3.
  • the voice message may be output next, and the output order may be determined such that the voice message for the user voice received from the fourth user terminal device 100-4 is finally output.
  • the controller 120 may perform voice corresponding to user voices received from the plurality of other user terminal devices 100 based on the order in which the talk request messages are received from the plurality of other user terminal devices 100. You can determine the output order of the messages.
  • the speech request message transmitted from the second user terminal device 100-2 of the plurality of other user terminal devices 100 is first received, and the fourth user terminal is received.
  • the speech request message sent from the device 100-4 may be received at the latest.
  • user voices may be received from the second to fourth user terminal devices 100-2 to 100-4. That is, the user voice of the fourth user terminal device 100-4, which has transmitted the last request message, may be received first, and the second user terminal device 100-2 of the second user terminal device 100-2 having transmitted the first request message may be received first.
  • the user voice may be received at the latest.
  • the controller 120 determines that the user voice of the second user terminal device 100-2 is based on the order in which the speaking request message is received from the second to fourth user terminal devices 100-2 to 100-4. First, the user's voice of the third user terminal device 100-3 may be output, and the output order may be determined so that the user's voice of the fourth user terminal device 100-4 is output last.
  • a speech request message transmitted from the second user terminal device 100-2 among the plurality of other user terminal devices 100 is first received and transmitted from the fourth user terminal device 100-4.
  • Spoken request message may be received most recently.
  • the controller 120 sets the speaking authority based on the order in which the speaking request messages are received from the second to fourth user terminal devices 100-2 to 100-4. Thereafter, the controller 120 may control the communication unit 110 to receive a user voice from the second to fourth user terminal devices 100-2 to 100-4 based on the set talk authority order.
  • the communication unit 110 may receive a user voice from the second to fourth user terminal devices 100-2 to 100-4 based on the set talk authority order.
  • the controller 120 may analyze similarities of voice messages corresponding to user voices received from the plurality of other user terminal devices 100 and determine the output order in the order of voice messages having different similarities. .
  • a manager who manages an entire hotel can instruct each floor representative to report the current status of each floor.
  • the floor managers of the hotel can report the current status of their floors.
  • the A representative in charge of the first floor of the hotel transmits the user voice “There is a problem on the first floor” through the second user terminal device 100-2. 100, and the B and C personnel in charge of the remaining floors transmit the user voice “No abnormality” through the third and fourth user terminal devices 100-3 and 4 to the user terminal device 100-1. ) Can be sent.
  • the controller 120 analyzes the similarity of the voice message corresponding to the user voice received from the second to fourth user terminal devices 100-2 to 100-4. As a result of the analysis, when it is determined that the user voice received from the second user terminal device 100-2 is different from another user voice, the controller 120 may determine the user voice received from the second user terminal device 100-2. The output order may be determined to output the voice message first.
  • the output unit 130 may output voice messages corresponding to user voices received from the plurality of other user terminal devices 100 based on the determined output order.
  • the output unit 130 may output a voice message corresponding to the user's voice through at least one of the display unit 131 and the audio output unit 133.
  • the display unit 131 may display a voice message corresponding to the user's voice in a text form on the screen, and the audio output unit 133 may output the voice message corresponding to the user's voice as an audio signal in the form of an audible sound.
  • the display unit 131 may display content received from an external server such as a content server (not shown) or data stored in advance, or display various UI screens for controlling the operation of the user terminal 100. have.
  • the display unit 131 may be implemented as a liquid crystal display (LCD), an organic light emitting diode (OLED), a plasma display panel (PDP), or the like.
  • the display unit 1301 may be implemented in the form of a touch screen forming a mutual layer structure together with the touch input unit 145 for receiving a touch command of a user to be described later.
  • the control unit 120 outputs an output UI including an execution icon for the voice message corresponding to the user voice received from the plurality of user terminal devices 100.
  • the display unit 131 is controlled to display. According to the control command, the display unit 131 displays an output UI including an execution icon for the voice message.
  • the execution icons included in the output UI may be arranged in order of voice messages corresponding to a predetermined output order.
  • the control unit 120 When the selection command for the execution icon included in the output UI is input while the output UI is displayed, the control unit 120 outputs a voice message for the icon corresponding to the selection command. At least one of the output units 133 may be controlled.
  • At least one of the display unit 131 and the audio output unit 133 may output a voice message for an icon corresponding to the selection command in the form of a text or an audible sound.
  • the display unit 131 may display a channel list UI for each group.
  • the channel list UI may be list information in which objects for identifying a group to which the user belongs are listed.
  • the controller 120 selects a group corresponding to the selected object as the contact group, and the contact group.
  • the communication unit 110 may be controlled to transmit the order voice of the user to the plurality of other user terminal devices 100 included therein. Accordingly, the communication unit 110 may transmit voice data of the user's order voice to at least one of the plurality of other user terminal apparatuses 100 included in the conversation partner group.
  • the control unit 120 displays the reception state information on the received user voice.
  • the display unit 131 may display the reception state information on the user voice received from at least one other user terminal device 100 included in the corresponding chat partner group on the object selected as the chat partner group. Accordingly, the user may not only check whether the user voice is received from another user terminal device 100 included in the contact group based on the reception state information displayed on the object, but also how many user voices are currently received. You can check it.
  • control unit 120 in response to a user request for a request for speech in a state in which an order voice is received from the first user terminal device 100-1 among the plurality of other user terminal devices 100 set as a group,
  • the communication unit 110 is controlled to transmit a speech request message to the transmitted first user terminal device 100-1. Accordingly, the communication unit 110 transmits a speech request message to the first user terminal device 100-1 that has transmitted the order voice.
  • the controller 120 transmits a user's voice for the order voice to the first user terminal apparatus 100-1. 110). Accordingly, the communication unit 110 may transmit a user voice with respect to the order voice to the first user terminal device 100-1.
  • the first user terminal device 100-1 sets a user's speaking authority based on the speaking request message received from the user terminal device 100.
  • the first user terminal device 100-1 transmits a notification message according to the speaking authority setting to the user terminal device 100 based on the order in which the speaking authority is set.
  • the first user terminal apparatus 100-1 may notify the user terminal apparatus 100 according to the speaking authority setting. Send it.
  • the speaking authority is set so that the user of the user terminal device 100 can speak in the last order
  • the first user terminal device 100-1 is a user voice from another user terminal device 100 corresponding to the previous order
  • the user terminal device 100 may transmit a notification message according to the speaking authority setting.
  • the controller 120 may provide a voiceable state notification service for the order voice based on at least one of vibration feedback and notification feedback.
  • the controller 120 controls the communication unit 110 to transmit the user voice for the order voice to the first user terminal device 100-1. Accordingly, the communication unit 110 may transmit a user voice with respect to the order voice to the first user terminal device 100-1.
  • the input unit 140, the signal processing unit 150 May further include a photographing unit 160, a sensing unit 170, and a memory 180.
  • the input unit 140 is an input unit for receiving various user commands and transmitting them to the control unit 120, as shown in FIG. 4, the microphone 141, the operation unit 143, the touch input unit 145, and the user input unit ( 147).
  • the microphone 141 receives a user's voice command
  • the operation unit 143 may be implemented as a keypad including various function keys, numeric keys, special keys, text keys, and the like.
  • the touch input unit 145 may be implemented as a touch pad having a rare layer structure with the display unit 131. In this case, the touch input unit 145 may receive a selection command for various application-related icons displayed on the display unit 131.
  • the user input unit 147 may receive an IR signal or an RF signal for controlling an operation of the user terminal device 100 from at least one peripheral device such as a remote control device.
  • the signal processor 150 may be a component for processing image data and audio data of content received through the communication unit 110 or content stored in the memory 180 according to a control command of the controller 120.
  • the signal processor 150 may perform various image processing, such as decoding, scaling, noise filtering, frame rate conversion, and resolution conversion, on the image data included in the content.
  • the signal processor 150 may perform various audio signal processing such as decoding, amplification, noise filtering, and the like on the audio data included in the content.
  • the photographing unit 160 is for capturing a still image or a moving image according to a user command.
  • the photographing unit 160 may be implemented as a plurality of cameras such as a front camera and a rear camera.
  • the sensing unit 170 is a sensing sensor that detects a movement of the user terminal device 100, and according to an embodiment, may include an acceleration sensor, a geomagnetic sensor, a gravity sensor, a gyro sensor, and the like.
  • An accelerometer sensor is a sensor for measuring acceleration or impact strength of a moving user terminal device 100
  • a magnetic sensor is a sensor capable of detecting an azimuth angle using an earth magnetic field.
  • the Gravity Sensor is a sensor that detects in which direction gravity acts.
  • the Gravity Sensor automatically rotates according to the direction in which the user is holding the user terminal device 100 and detects a direction. Is a sensor that recognizes the 6-axis direction by inserting each rotation into the existing acceleration sensor and helps to recognize more detailed and precise motion.
  • the memory 180 stores execution programs, contents, and the like for various applications including the above-described application for push-to-talk.
  • the memory 180 may store a user voice, a speech request message, and the like, received from a plurality of other user terminal apparatuses 100 set as a group.
  • the memory 180 may further store an operation program for controlling the operation of the user terminal device 100.
  • the operation program may be a program that is read from the memory 180 and compiled to operate each component of the user terminal device 100.
  • the controller 120 may further include a CPU 121, a GPU 123, a ROM 125, and a RAM 127, and include a CPU 121, a GPU 123, a ROM 125, and a CPU 121.
  • the RAM 127 may be connected to each other via the bus 129.
  • the CPU 121 accesses the memory 180 and performs booting using an OS stored in the memory 180. In addition, the CPU 121 performs various operations using various programs, contents, data, and the like stored in the memory 180.
  • the GPU 123 generates a display screen including various objects such as icons, images, texts, and the like. Specifically, the GPU 123 calculates attribute values such as coordinate values, shapes, sizes, colors, and the like in which each object is to be displayed according to the layout of the screen based on the received control command, and calculates objects based on the associated attribute values. Create a display screen with various layouts to include.
  • the ROM 125 stores a command set for system booting.
  • the CPU 121 copies the OS stored in the memory 180 to the RAM 127 according to the command stored in the ROM 125, and executes the OS to boot the system.
  • the CPU 121 copies various programs stored in the memory 180 to the RAM 127 and executes the programs copied to the RAM 127 to perform various operations.
  • the controller 120 may be combined with each of the above-described components and implemented as a single-chip system (System-on-a-chip or System on chip, SOC, SoC).
  • the operation of the controller 120 may be performed by a program stored in the memory 180 described above.
  • the memory 180 may be a memory card (eg, an SD card or a memory stick) that may be attached to or detached from the ROM 125, the RAM 127, or the user terminal device 100, a nonvolatile memory, a volatile memory, or a hard disk drive. (HDD) or a solid state drive (SSD).
  • a memory card eg, an SD card or a memory stick
  • HDD hard disk drive.
  • SSD solid state drive
  • FIG. 5 is an exemplary diagram for determining an output order of voice messages in a user terminal device according to an exemplary embodiment of the present invention.
  • the user terminal device 100 transmits voice data regarding the user's order voice to a plurality of other user terminal devices 100 in a group. Accordingly, the plurality of grouped user terminal devices 100 transmits the user voice to the user terminal device 100 that has transmitted the voice data for the order voice.
  • the user requesting the order voice transmission may be an administrator for managing the entire hotel, and the user requesting the user voice transmission for the order voice may be a person in charge of each floor of the hotel.
  • the manager may use the user terminal device 100 to give an order to the person in charge of each floor, "Please check the status of abnormality for each floor.” Accordingly, the user terminal device 100 transmits voice data regarding the order voice of the administrator "Please check whether there is an abnormality for each floor" to the user terminal device 100 and a plurality of other user terminal devices 100 grouped together. Can be.
  • the plurality of other user terminal devices 100 outputs a voice message for the order voice received from the user terminal device 100. Accordingly, the A to D person in charge can check the order instructed by the administrator from the voice message output through the user terminal device 100 possessed by him.
  • a to D officers who have confirmed the manager's order may report the current situation of each floor in charge of the A to D officers by using their own user terminal device 100. Accordingly, the user terminal device 100 of each of the A to D representatives transmits the user voice reported by the A to D representative to the user terminal apparatus 100.
  • the user terminal device 100 determines the output order based on the order in which the user voice is received.
  • the user terminal device 100 is as shown in FIG. A voice message 510 corresponding to the user's voice, B voice message 520 corresponding to the user's voice of person B, C voice message 530 corresponding to the user's voice of person C, and user voice of the person in charge D
  • the output order may be determined to be output in order of the D voice message 540.
  • the user terminal device 100 analyzes the similarity of the voice messages corresponding to the user voices and determines the output order so as to first output voice messages having different similarities. Can be.
  • the user terminal device 100 may receive a user voice “There is a problem on the first floor” from the user device 100 of the person in charge D.
  • the user voices of "no problem”, “no problem”, and “no problem” may be received from the user terminal apparatus 100 of each of the remaining A to C personnel.
  • the user terminal device 100 determines that the voice message for the user voice received from the user terminal device 100 of the person in charge D is different from other voice messages.
  • the user terminal device 100 may determine a similarity level of a voice message corresponding to a user voice by using a similarity algorithm, or may determine that the voice message in which an event occurs among voice messages received through comparison with a pre-registered sentence. Can be determined.
  • the user terminal apparatus 100 is as shown in (b) of FIG. 5.
  • the output order is determined so as to first output the D voice message 540 'corresponding to the user voice of the user terminal device 100 of the person in charge D who has received the latest user voice, and the user terminal device of the other person A to C person.
  • the output order may be determined so that the A to C voice messages 510 'to 530' corresponding to the user voice received from the 100 are output based on the received order.
  • the D voice messages having similarities among the A to D voice messages may be output first, and the A to C voice messages may be sequentially output after the D voice message is output.
  • FIG. 6 illustrates an example of displaying a channel list UI in a user terminal device according to an exemplary embodiment.
  • the user terminal device 100 may display the channel list UI 610 for all groups to which the user belongs.
  • the user terminal device 100 may provide various types of channel list UI 610 according to a user setting.
  • the user terminal device 100 may provide a channel list UI 610 including an object for each group for the entire group to which the user belongs, according to the first user setting.
  • the user may more easily check in which group the user is registered through the channel list UI 610 displayed on the screen of the user terminal device 100.
  • the user terminal device 100 may display the channel list UI 610 for a frequently active group and a recently active group among all the groups to which the user belongs according to the second user setting. That is, the user terminal device 100 includes a channel list UI 610 including a first category menu 620 including an object of a frequently-activated group and a second category menu 630 including an object of a recently-active group. ) Can be displayed.
  • the user may more easily select a group in which the user frequently works through the first and second category menus 620 and 630 included in the channel list UI 610 displayed on the screen of the user terminal device 100.
  • FIG. 7 is an exemplary diagram for selecting a contact group in the user terminal device according to an embodiment of the present invention.
  • the user terminal device 100 contacts one group among groups included in the channel list UI 610 displayed on the screen of the user terminal device 100 according to a user command. Can be set with
  • the user may select one of the first and second category menus 620 and 630 from the channel list UI 610 displayed on the screen of the user terminal device 100.
  • the first category menu 620 is a menu including an object of a group in which the user frequently works among all the groups to which the user belongs
  • the second category menu 630 displays an object of a group in which the user has recently been active. It can be a menu that includes.
  • the user terminal device 100 When the first category menu 620 is selected among the first and second category menus 620 and 630, as illustrated in FIG. 7, the user terminal device 100 includes a group included in the first category menu 620.
  • the UI 710 including an object may be displayed.
  • the user selects the first object 720 among the plurality of objects included in the UI 710 and executes the selected first object 720 to set up a contact group. Drag to object 730.
  • the user terminal device 100 sets a group corresponding to the first object 720 as a chat partner group.
  • the user terminal device 100 transmits the user voice to the plurality of other user terminal devices 100 included in the group set as the contact group, and the plurality of other user terminal devices 100. ) May output a voice message for the received user voice in association with the corresponding user voice.
  • FIG. 8 is an exemplary diagram for selecting a chat partner in a user terminal device according to an embodiment of the present invention.
  • the user terminal device 100 may display a map UI 810 for a pre-registered building.
  • the user terminal device 100 receives location information from the user terminal device 100 and other user terminal devices 100 located in the vicinity of the user terminal device 100, the user terminal device 100 is displayed on the displayed map UI 810 based on the received location information.
  • the location where the user of the user terminal device 100 is located may be displayed.
  • the manager who manages the whole building may grasp the location of the person in charge of each zone through the map UI 810 displayed on the screen of the user terminal device 100.
  • the manager may instruct the person in charge of each zone through the map UI 810 displayed on the screen of the user terminal device 100.
  • the manager selects an object 820 for the person in charge of the work area from the person in charge of each zone through the map UI 810 displayed on the screen of the user terminal device 100, and one side of the map UI 810.
  • the UI 830 for adding a contact displayed on the screen may be dragged or selected to.
  • the user terminal device 100 adds a contact person for the selected object as a conversation partner.
  • the user terminal device 100 may transmit the manager's order voice to the user terminal device 100 of the person in charge who has been added as a conversation partner.
  • FIG. 9 is a first exemplary diagram for providing a stateable state notification service for an order voice in a user terminal device according to an embodiment of the present invention.
  • the user terminal device 100 may receive voice data for an order voice from another user terminal device 100 grouped into the same group as the user terminal device 100.
  • the user terminal device 100 outputs the voice message of the order voice. Therefore, the user can check the voice message output through the user terminal device 100, and in order to transmit a response message corresponding to the voice message to the other user terminal device 100, the speech displayed on the user terminal device 100
  • the permission request UI 910 may be selected.
  • the user terminal device 100 transmits a speaking authority request message to the other user terminal device 100 that has transmitted the order voice. Accordingly, the other user terminal apparatus 100 determines the order in which the speaking authority is granted based on the order in which the speaking authority request message is received from the user terminal apparatus 100 grouped into the same group as the other user terminal apparatus 100. .
  • the other user terminal device 100 transmits a notification message according to the speaking authority setting to the user terminal device 100 which is set in the same group as the other user terminal device 100 based on the determined speaking authority order.
  • the user terminal device 100 may transmit a user voice related to the response message to the other user terminal device 100.
  • the user terminal device 100 when the user terminal device 100 receives the notification message according to the speech authority setting from the other user terminal apparatus 100, as illustrated in FIG. 9B, the user terminal device 100 gives a speech authority to the user through vibration feedback. Can be informed. Accordingly, the user confirms that the speaking authority is granted through the vibration feedback, selects the speaking authority request UI 910 ′ displayed on the screen of the user terminal device 100, and then displays the user speech related to the response message for the ordering voice. You can enter
  • the user terminal device 100 inputs a user voice related to the response message for the order voice after a selection command for the speaking authority request UI 910 'is input, and then inputs the input user voice to another user terminal device ( 100).
  • FIG. 10 is a second exemplary view for providing a stateable state notification service for order voice in a user terminal device according to another embodiment of the present invention.
  • the speech authority request UI 1010 is received.
  • the user terminal device 100 transmits a speaking authority request message to the other user terminal device 100 that has transmitted the order voice.
  • the user may be informed that the speaking authority is granted to the user through event notification feedback. That is, when the user terminal device 100 receives the notification message according to the speaking authority setting from the other user terminal device 100, as shown in FIG. 10B, the user terminal device 100 notifies the event by voice through the speaker 1020. Feedback can be provided to inform the user that he is authorized to speak.
  • the user confirms that the speaking authority is granted through the event notification feedback, selects the speaking authority request UI 1010 ′ displayed on the screen of the user terminal device 100, and then responds to the order message. Can be entered.
  • the user terminal device 100 inputs a user voice related to the response message for the order voice after a selection command for the speaking authority request UI 1010 'is input, and then inputs the input user voice to another user terminal device ( 100).
  • FIG. 11 is a third exemplary view of providing a voice state notification service for order voice in a user terminal device according to another embodiment of the present invention.
  • the speech authority request UI 1110 is performed.
  • the user terminal device 100 transmits a speaking authority request message to the other user terminal device 100 that has transmitted the order voice.
  • the user may be informed that the speaking authority is granted to the user through event notification feedback. That is, when the notification message according to the speech authority setting is received from the other user terminal device 100, as shown in FIG. 11B, the user terminal device 100 has a text form of 'Please enter a message'.
  • the event notification feedback 1120 may be provided to inform the user that the speaking authority is granted.
  • the user confirms that the speaking authority is granted through the event notification feedback, selects the speaking authority request UI 1110 'displayed on the screen of the user terminal device 100, and then responds to the order message. Can be entered.
  • the user terminal device 100 receives a user voice related to the response message for the order voice after a selection command for the speaking authority request UI 1110 'is input, and then inputs the input user voice to another user terminal device ( 100).
  • FIG. 12 illustrates an example of displaying an output UI in a user terminal device according to an exemplary embodiment.
  • the administrator who manages the entire building may transmit an order voice “Please report the situation by floor” to a person in charge of each floor of the building through the user terminal device 100. Therefore, the person in charge of each floor may transmit a user voice of the current situation for each floor to the user terminal device 100 of the administrator who has transmitted the order voice through his user terminal device 100.
  • the person in charge of each floor photographs the video image of each floor in charge through his user terminal device 100, and the user terminal device of the administrator that transmits the ordered voice of the captured image image and the user voice ( 100).
  • the user terminal device 100 When such a user voice is received, the user terminal device 100 outputs a UI including execution icons 1220 and 1230 for executing a voice message corresponding to the user voice of each person in charge as shown in FIG. 1210 may be displayed.
  • the execution icons 1220 and 1230 of the voice message may be listed in the order in which the user voices are received.
  • the user terminal device 100 may display a voice message 1240 for the order voice “Please report the situation by floor” on the output UI 1210.
  • the user terminal device 100 outputs a UI 1210 including an execution icon 1230 including a thumbnail image of the voice message and the video image corresponding to the user voice. Can be displayed.
  • the administrator selects at least one of the plurality of execution icons 1220 and 1230 included in the output UI 1210 displayed on the screen of the user terminal device 100, and the user voice and video corresponding to the selected execution icon. You can check at least one of the images to see the current situation for each floor.
  • FIG. 13 is a flowchart illustrating a control method for group communication with another user terminal device in a user terminal device according to an embodiment of the present invention.
  • the user terminal device 100 sets up a contact group for group communication with the user terminal device 100 in operation S1310. Specifically, the user terminal device 100 displays the channel list UI for each group grouped with the user terminal device 100, and when one of the group objects included in the displayed channel list UI is selected, the user terminal device 100 corresponds to the selected object. You can set a group as a contact group.
  • the user terminal device 100 transmits the user's order voice to the plurality of user terminal devices (hereinafter, referred to as other user terminal devices) 100 included in the contact group (S1320).
  • the user terminal device 100 determines the output order of the voice message corresponding to the received user voice (S1330). , S1340).
  • the user terminal device 100 determines an output order of voice messages corresponding to the user voices based on the order in which the user voices are received. Can be.
  • the user terminal device 100 corresponds to user voices received from the plurality of other user terminal devices 100 based on the order in which the talk request messages are received from the plurality of other user terminal devices 100.
  • the order of output of voice messages to be determined may be determined.
  • the user terminal device 100 analyzes the similarity of voice messages corresponding to user voices received from a plurality of other user terminal devices 100 and determines the output order in the order of voice messages having different similarities. Can be.
  • the user terminal device 100 may output a response message corresponding to the user voices in the output order. Can be.
  • the user terminal device 100 is on the object of the group set as the contact group among the group-specific objects included in the channel list UI
  • the reception state information regarding the user voice received from the other user terminal device 100 may be displayed.
  • the user of the user terminal device 100 may determine the reception state of the response message for the order voice from the user of the other user terminal device 100 based on the object status for each group displayed in the channel list UI. Can be.
  • FIG. 14 is a flowchart illustrating a method for transmitting a user voice to another user terminal device by the same group as the user terminal device in the user terminal device according to an embodiment of the present invention.
  • 1 Speak request message is transmitted to the user terminal device (100-1) (S1410, S1420).
  • the user terminal device 100 transmits a user voice related to the response to the order voice to the first user terminal device 100-1 (S1430). ).
  • the user terminal device 100 when an order voice is received from the first user terminal device 100-1, the user terminal device 100 outputs a voice message corresponding to the received order voice. After the voice message is output for the order voice, if a user command for a request for speaking is input from the user, the user terminal device 100 transmits a speaking request message to the first user terminal device 100-1.
  • the first user terminal device 100-1 may make a speaking authority based on the speaking request message received from the plurality of other user terminal devices 100 belonging to the same group as the first user terminal device 100-1. Set it.
  • the first user terminal apparatus 100-1 speaks to another user terminal apparatus 100 belonging to the same group as the first user terminal apparatus 100-1 based on a different order from the set speaking authority. Send notification message according to authority setting.
  • the user terminal device 100 may speak the order voice based on at least one of the vibration feedback and the event notification feedback.
  • Provide status notification service Accordingly, the user may confirm that the speaking authority is granted through the notification service, and transmit a response message for the order voice to the user of the first user terminal device 100 through the user terminal device 100.
  • control method of the user terminal device may be coded in software and stored in a non-transitory readable medium.
  • Such non-transitory readable media can be mounted and used in a variety of devices.
  • the non-transitory readable medium refers to a medium that stores data semi-permanently and is readable by a device, not a medium storing data for a short time such as a register, a cache, a memory, and the like. Specifically, it may be a CD, a DVD, a hard disk, a Blu-ray disk, a USB, a memory card, a ROM, or the like.

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Telephonic Communication Services (AREA)

Abstract

사용자 단말 장치 및 그 제어 방법이 개시된다. 본 발명에 따르면, 사용자 단말 장치는 그룹 설정된 복수의 타 사용자 단말 장치와 데이터 통신을 수행하는 통신부, 복수의 타 사용자 단말 장치로부터 사용자 음성이 수신되면, 기설정된 조건에 따라 사용자 음성에 대응되는 음성 메시지의 출력 순서를 결정하는 제어부 및 결정된 출력 순서로 음성 메시지를 출력하는 출력부를 포함한다. 이에 따라, 사용자 단말 장치는 복수의 타 사용자 장치와의 그룹 커뮤니티가 원활히 이루어질 수 있는 서비스를 제공할 수 있다.

Description

사용자 단말 장치 및 그 제어 방법
본 발명은 사용자 단말 장치 및 그 제어 방법에 관한 것으로써, 보다 상세하게는 그룹 커뮤니케이션이 가능한 사용자 단말 장치 및 그 제어 방법에 관한 기술이다.
일반적으로, 호텔 등의 건물을 관리하는 관리자는 해당 건물의 각 구역을 담당하는 담당자와 무전기와 같은 통신 기기를 이용하여 각 구역별 담당자에게 업무를 지시하거나 현재 상황을 요청한다.
이에 따라, 각 구역별 담당자는 자신이 소지하고 있는 통신 기기를 이용하여 관리자의 지시에 따른 업무 보고를 할 수 있다.
그러나, 이 같은 통신 기기를 이용하여 관리자와 복수의 담당자 간에 업무 관련 커뮤니티를 할 경우, 통신 기기 간의 주파수 채널이 사용되지 않아야 한다. 즉, 통신 기기를 이용하여 관리자와 A 담당자 간에 업무 관련 커뮤니티가 진행 중인 경우, B 담당자는 관리자와 A 담당자 간에 업무 관련 커뮤니티가 종료될 때까지 관리자와 업무 관련 커뮤니티를 하지 못한다.
뿐만 아니라, 관리자와 A 담당자 간에 업무 관련 커뮤니티 종료 상황을 확인할 수 없으므로, 관리자와 A 담당자 간에 업무 관련 커뮤니티가 종료된 이후, 관리자와 C 담당자 간의 업무 관련 커뮤니티가 개시될 경우, B 담당자는 지속적으로 관리자와 업무 관련 커뮤니티를 하지 못하는 문제가 있다.
이와 같이, 통신 기기를 이용하여 관리자와 담당자 간의 업무 관련 커뮤니티 상황 여부 확인이 불가능함에 따라, 긴급 상황 발생에 따른 업무 보고가 신속이 이루어지지 못하는 문제가 있다.
본 발명은 상술한 문제점을 해결하는 동시에 상술한 기술 개발 요청에 응답하기 위하여 안출된 것으로, 본 발명의 목적은 그룹별 커뮤니티가 원활히 이루어지도록 함을 목적으로 한다.
나아가, 건물 내 직원들 간의 업무 관련 커뮤니티를 위하여 이용되는 무전기와 같은 별도의 통신 기기 없이 사용자 단말 장치를 이용하여 그룹별 커뮤니티가 원활히 이루어지도록 함을 목적으로 한다.
이상과 같은 목적을 달성하기 위한 본 발명의 일 실시예에 따른 사용자 단말 장치는 그룹 설정된 복수의 타 사용자 단말 장치와 데이터 통신을 수행하는 통신부, 상기 복수의 타 사용자 단말 장치로부터 사용자 음성이 수신되면, 기설정된 조건에 따라 상기 사용자 음성에 대응되는 음성 메시지의 출력 순서를 결정하는 제어부 및 상기 결정된 출력 순서로 상기 음성 메시지를 출력하는 출력부를 포함한다.
그리고, 상기 제어부는, 상기 복수의 타 사용자 단말 장치로부터 사용자 음성이 수신되면, 상기 사용자 음성이 수신된 순서에 기초하여 상기 사용자 음성에 대응되는 음성 메시지의 출력 순서를 결정할 수 있다.
또한, 상기 제어부는, 상기 복수의 타 사용자 단말 장치로부터 발언 요청 메시지가 수신된 순서에 기초하여 상기 복수의 타 사용자 단말 장치로부터 수신된 사용자 음성에 대응되는 음성 메시지의 출력 순서를 결정할 수 있다.
그리고, 상기 제어부는, 상기 복수의 타 사용자 단말 장치로부터 수신된 사용자 음성에 대응되는 음성 메시지의 유사도를 분석하고, 유사도가 상이한 음성 메시지 순으로 출력 순서를 결정할 수 있다.
또한, 상기 출력부는, 디스플레이부 및 오디오 출력부를 포함하며, 상기 제어부는, 상기 음성 메시지에 대한 실행 아이콘을 포함하는 출력 UI를 디스플레이하도록 상기 디스플레이부를 제어하며, 상기 출력 UI에 포함된 실행 아이콘에 대한 선택 명령이 입력되면, 상기 선택 명령에 대응되는 음성 메시지를 출력하도록 상기 디스플레이부 및 상기 오디오 출력부 중 적어도 하나를 제어할 수 있다.
그리고, 상기 출력부는, 그룹별 채널 리스트 UI를 디스플레이하는 디스플레이부를 포함하며, 상기 제어부는, 상기 채널 리스트 UI에 포함된 그룹별 오브젝트 중 하나가 선택되면, 선택된 오브젝트에 대응되는 그룹을 대화 상대 그룹으로 선택하고, 상기 대화 상대 그룹 내 포함된 복수의 사용자 단말 장치로 오더 음성을 전송할 수 있다.
또한, 상기 제어부는, 상기 채널 리스트 UI에 포함된 그룹별 오브젝트 상에 상기 그룹별 타 사용자 단말 장치로부터 수신된 사용자 음성에 대한 수신 상태 정보를 디스플레이하도록 상기 디스플레이부를 제어할 수 있다.
그리고, 상기 제어부는, 상기 복수의 타 사용자 단말 장치 중 제1 사용자 단말 장치로부터 오더 음성이 수신된 상태에서, 발언 요청을 위한 사용자 요청에 따라, 상기 제1 사용자 단말 장치로 발언 요청 메시지를 전송하고, 상기 제1 사용자 단말 장치로부터 발언 권한이 설정되면, 상기 제1 사용자 단말 장치로 상기 오더 음성에 대한 사용자 음성을 전송할 수 있다.
또한, 상기 제어부는, 상기 발언 권한 설정에 따른 알림 메시지가 수신되면, 진동 피드백 및 이벤트 알림 피드백 중 적어도 하나에 기초하여 상기 오더 음성에 대한 발언 가능 상태 알림 서비스를 제공할 수 있다.
한편, 본 발명의 또다른 실시 예에 따르면, 사용자 단말 장치의 제어 방법은 그룹 설정된 복수의 타 사용자 단말 장치로부터 사용자 음성을 수신하는 단계, 기설정된 조건에 따라 상기 사용자 음성에 대응되는 음성 메시지의 출력 순서를 결정하는 단계 및 상기 결정된 출력 순서로 상기 음성 메시지를 출력하는 단계를 포함한다.
그리고, 상기 결정하는 단계는, 상기 복수의 타 사용자 단말 장치로부터 사용자 음성이 수신되면, 상기 사용자 음성이 수신된 순서에 기초하여 상기 사용자 음성에 대응되는 음성 메시지의 출력 순서를 결정할 수 있다.
또한, 상기 결정하는 단계는, 상기 복수의 타 사용자 단말 장치로부터 발언 요청 메시지가 수신된 순서에 기초하여 상기 복수의 타 사용자 단말 장치로부터 수신된 사용자 음성에 대응되는 음성 메시지의 출력 순서를 결정할 수 있다.
그리고, 상기 결정하는 단계는, 상기 복수의 타 사용자 단말 장치로부터 수신된 사용자 음성에 대응되는 음성 메시지의 유사도를 분석하고, 유사도가 상이한 음성 메시지 순으로 출력 순서를 결정할 수 있다.
또한, 상기 출력하는 단계는, 상기 음성 메시지에 대한 실행 아이콘을 포함하는 출력 UI를 디스플레이하며, 상기 출력 UI에 포함된 실행 아이콘에 대한 선택 명령에 따라, 상기 선택 명령에 대응되는 음성 메시지를 텍스트 및 오디오 신호 중 적어도 하나로 출력할 수 있다.
그리고, 그룹별 채널 리스트 UI를 디스플레이하는 단계, 상기 채널 리스트 UI에 포함된 그룹별 오브젝트 중 하나가 선택되면, 상기 선택된 오브젝트에 대응되는 그룹을 대화 상대 그룹으로 설정하는 단계 및 상기 대화 상대 그룹 내 포함된 복수의 타 사용자 단말 장치로 오더 음성을 전송하는 단계를 더 포함할 수 있다.
또한, 상기 디스플레이하는 단계는, 상기 채널 리스트 UI에 포함된 그룹별 오브젝트 상에 상기 그룹별 타 사용자 단말 장치로부터 수신된 사용자 음성에 대한 수신 상태 정보를 디스플레이할 수 있다.
그리고, 상기 복수의 타 사용자 단말 장치 중 제1 사용자 단말 장치로부터 오더 음성을 수신하는 단계, 발언 요청을 위한 사용자 요청에 따라, 상기 제1 사용자 단말 장치로 발언 요청 메시지를 전송하는 단계 및 상기 제1 사용자 단말 장치로부터 발언 권한이 설정되면, 상기 제1 사용자 단말 장치로 상기 오더 음성에 대한 사용자 음성을 전송하는 단계를 더 포함할 수 있다.
또한, 상기 사용자 음성을 전송하는 단계는, 상기 발언 권한 설정에 따른 알림 메시지가 수신되면, 진동 피드백 및 이벤트 알림 피드백 중 적어도 하나에 기초하여 상기 오더 음성에 대한 발언 가능 상태 알림 서비스를 제공할 수 있다.
이상과 같이 다양한 실시예를 따르면, 본 발명에 따른 사용자 단말 장치는 복수의 타 사용자 장치와의 그룹 커뮤니티가 원활히 이루어질 수 있는 서비스를 제공할 수 있다.
도 1은 본 발명의 일 실시예에 따른 그룹 커뮤니케이션을 제공하는 시스템의 제1 예시도,
도 2는 본 발명의 또다른 실시예에 따른 그룹 커뮤니케이션을 제공하는 시스템의 제2 예시도,
도 3은 본 발명의 일 실시예에 따른 사용자 단말 장치의 블록도,
도 4는 본 발명의 일 실시예에 따른 사용자 단말 장치의 상세 블록도,
도 5는 본 발명의 일 실싱예에 따른 사용자 단말 장치에서 음성 메시지의 출력 순서를 결정하는 예시도,
도 6은 본 발명의 일 실시예에 따른 사용자 단말 장치에서 채널 리스트 UI를 디스플레이하는 예시도,
도 7은 본 발명의 일 실시예에 따른 사용자 단말 장치에서 대화 상대 그룹을 선택하는 예시도,
도 8은 본 발명의 일 실시예에 따른 사용자 단말 장치에서 대화 상대를 선택하는 예시도,
도 9는 본 발명의 일 실시예에 따른 사용자 단말 장치에서 오더 음성에 대한 발언 가능 상태 알림 서비스를 제공하는 제1 예시도,
도 10은 본 발명의 또다른 실시예에 따른 사용자 단말 장치에서 오더 음성에 대한 발언 가능 상태 알림 서비스를 제공하는 제2 예시도,
도 11은 본 발명의 또다른 실시예에 따른 사용자 단말 장치에서 오더 음성에 대한 발언 가능 상태 알림 서비스를 제공하는 제3 예시도,
도 12는 본 발명의 일 실시예에 따른 사용자 단말 장치에서 출력 UI를 디스플레이하는 예시도,
도 13은 본 발명의 일 실시예에 따른 사용자 단말 장치에서 타 사용자 단말 장치와의 그룹 커뮤니케이션을 위한 제어 방법의 흐름도,
도 14는 본 발명의 일 실시예에 따른 사용자 단말 장치에서 사용자 단말 장치와 동일 그룹이 타 사용자 단말 장치로 사용자 음성을 전송하는 방법의 흐름도이다.
-
본 실시 예들은 다양한 변환을 가할 수 있고 여러 가지 실시 예를 가질 수 있는바, 특정 실시 예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나 이는 특정한 실시 형태에 대해 범위를 한정하려는 것이 아니며, 개시된 사상 및 기술 범위에 포함되는 모든 변환, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 실시 예들을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.
제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 구성요소들은 용어들에 의해 한정되어서는 안 된다. 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
본 출원에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 권리범위를 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다." 또는 "구성되다." 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
실시예에 있어서 ‘모듈’ 혹은 ‘부’는 적어도 하나의 기능이나 동작을 수행하며, 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다. 또한, 복수의‘모듈’ 혹은 복수의‘부’는 특정한 하드웨어로 구현될 필요가 있는 ‘모듈’ 혹은 ‘부’를 제외하고는 적어도 하나의 모듈로 일체화되어 적어도 하나의 프로세서(미도시)로 구현될 수 있다.
도 1은 본 발명의 일 실시예에 따른 그룹 커뮤니케이션을 제공하는 시스템의 제1 예시도이며, 도 2는 본 발명의 또다른 실시예에 따른 그룹 커뮤니케이션을 제공하는 시스템의 제2 예시도이다.
도 1에 도시된 바와 같이, 그룹 커뮤니케이션을 제공하는 시스템은 복수의 사용자 단말 장치(100-1~100-4)를 포함한다. 여기서, 복수의 사용자 단말 장치(100-1~100-4)는 그룹 커뮤니케이션이 가능하도록 그룹 설정된 단말 장치가 될 수 있다.
이 같은 그룹 설정된 복수의 사용자 단말 장치(100-1~100-4)는 푸쉬 투 토크(Push to Talk : PTT)를 위한 어플리케이션을 실행될 수 있다. 여기서, 푸쉬 투 토크를 위한 어플리케이션은 그룹 설정된 복수의 사용자 단말 장치(100-1~100-4) 간에 무선 통신망을 통해 음성 통화를 하지 않고, 무전기와 같이 특정 주파수를 통해 일대일 또는 일대N 형식으로 음성 통화 서비스 이용이 가능한 어플리케이션이다.
이 같이, 푸쉬 투 토크를 위한 어플리케이션이 실행된 복수의 사용자 단말 장치(100-1~100-4) 중 적어도 하나는 나머지 사용자 단말 장치(100)와 사용자의 음성 데이터를 송수신할 수 있다.
예를 들어, 호텔 전체를 관리하는 관리자는 푸쉬 투 토크를 위한 어플리케이션이 실행된 제1 사용자 단말 장치(100-1)를 이용하여 관리자와 그룹 설정된 A 내지 C 담당자의 제2 내지 제4 사용자 단말 장치(100-2~100-4)로 각 담당자가 관리하는 구역의 이상 유무 상황 확인을 요청할 수 있다. 여기서, A 내지 C 담당자는 관리자와 그룹 설정되어 호텔의 각 층을 담당하는 담당자가 될 수 있다.
구체적으로, 관리자는 제1 사용자 단말 장치(100-1)를 이용하여 각 층별 담당자에게 "각 층별 이상 유무 상황 확인바랍니다."라는 오더를 내릴 수 있다. 이에 따라, 제1 사용자 단말 장치(100-1)는 제1 사용자 단말 장치(100-1)와 그룹 설정된 제2 내지 제4 사용자 단말 장치(100-2~100-4)로 "각 층별 이상 유무 상황 확인바랍니다."라는 관리자의 오더 음성에 대한 음성 데이터를 전송할 수 있다.
따라서, 제2 내지 제4 사용자 단말 장치(100-2~100-4)는 제1 사용자 단말 장치(100-1)로부터 수신된 오더 음성에 대한 음성 메시지를 출력한다. 이에 따라, A 내지 C 담당자는 자신이 소지한 제2 내지 제4 사용자 단말 장치(100-2~100-4)를 통해 출력된 음성 메시지로부터 관리자에 의해 지시된 오더를 확인할 수 있다.
관리자의 오더를 확인한 A 내지 C 담당자는 자신이 소지한 제2 내지 제4 사용자 단말 장치(100-2~100-4)를 이용하여 A 내지 C 담당자가 담당하는 각 층에 대한 현재 상황을 보고할 수 있다.
이에 따라, 제2 내지 제4 사용자 단말 장치(100-2~100-4)는 A 내지 C 담당자에 의해 보고된 사용자 음성을 제1 사용자 단말 장치(100-1)로 전송한다. 이에 따라, 제1 사용자 단말 장치(100-1)는 제2 내지 제4 사용자 단말 장치(100-2~100-4)로부터 수신된 사용자 음성에 대한 음성 메시지를 출력하며, 관리자는 제1 사용자 단말 장치(100-1)에 의해 출력된 음성 메시지를 통해 각 층별 현재 상황을 파악할 수 있다.
한편, 제1 사용자 단말 장치(100-1)는 다음과 같은 실시예를 통해 제2 내지 제4 사용자 단말 장치(100-2~100-4)로부터 수신된 사용자 음성에 대한 음성 메시지를 출력할 수 있다.
일 실시예에 따라, 제1 사용자 단말 장치(100-1)는 제2 내지 제4 사용자 단말 장치(100-2~100-4)로부터 사용자 음성이 수신되는 시간 순서에 기초하여 제2 내지 제4 사용자 단말 장치(100-2~100-4)로부터 수신된 사용자 음성에 대한 음성 메시지를 출력할 수 있다.
또다른 실시예에 따라, 제1 사용자 단말 장치(100-1)는 제2 내지 제4 사용자 단말 장치(100-2~100-4)로부터 사용자 음성이 수신되면, 수신된 사용자 음성에 대한 음성 메시지의 유사도를 분석하여 유사도가 상이한 음성 메시지를 우선 출력할 수 있다.
예를 들어, A 담당자가 관리하는 1 층에 이상이 발생한 경우, A 담당자는 제2 사용자 단말 장치(100-2)를 통해 "1 층에 문제 발생했습니다."라는 사용자 음성을 제1 사용자 단말 장치(100-1)로 전송할 수 있으며, B 및 C 담당자가 관리하는 각 층에 이상이 없는 경우, B 및 C 담당자는 제3 및 제4 사용자 단말 장치(100-3,4)를 통해 "이상 없습니다."라는 사용자 음성을 제1 사용자 단말 장치(100-1)로 전송할 수 있다.
이 같은 사용자 음성이 수신되면, 제1 사용자 단말 장치(100-1)는 제2 사용자 단말 장치(100-2)로부터 수신된 사용자 음성이 타 사용자 음성과 상이한 것으로 판단하고, 제2 사용자 단말 장치(100-2)로부터 수신된 사용자 음성에 대한 음성 메시지를 우선적으로 출력할 수 있다.
이에 따라, 관리자는 우선적으로 출력된 음성 메시지를 확인하고, A 담당자가 담당하는 층에 대한 상황을 신속하게 파악할 수 있다.
또다른 실시예에 따라, 제1 사용자 단말 장치(100-1)는 관리자에 의해 지시된 오더와 관련하여 제2 내지 제4 사용자 단말 장치(100-2~100-4)로부터 발언 요청 메시지가 수신된 순서에 기초하여 제2 내지 제4 사용자 단말 장치(100-2~100-4)로부터 수신된 사용자 음성에 대한 음성 메시지를 출력할 수 있다.
즉, A 내지 C 담당자는 제2 내지 제4 사용자 단말 장치(100-2~100-4)를 통해 제1 사용자 단말 장치(100-1)로부터 수신된 관리자의 오더 음성에 대한 음성 메시지가 출력되면, 각 층별 현재 상황을 보고하기 위한 발언 권한을 요청할 수 있다. 이 같은 발언 권한 요청에 따라, 제2 내지 제4 사용자 단말 장치(100-2~100-4)는 발언 요청 메시지를 제1 사용자 단말 장치(100-1)로 전송하며, 제1 사용자 단말 장치(100-1)는 발언 요청 메시지가 수신된 순서에 기초하여 제2 내지 제4 사용자 단말 장치(100-2~100-4)에 대한 발언 권한을 설정한다.
예를 들어, 제2 사용자 단말 장치(100-2)로부터 전송된 발언 요청 메시지가 가장 먼저 수신되고, 제4 사용자 단말 장치(100-4)로부터 전송된 발언 요청 메시지가 가장 늦게 수신될 수 있다. 이 경우, 제1 사용자 단말 장치(100-1)는 발언 요청 메시지를 가장 먼저 전송한 제2 사용자 단말 장치(100-2)의 발언 권한을 1 순위로 설정하고, 제3 사용자 단말 장치(100-3)의 발언 권한을 2 순위로 설정하며, 제3 사용자 단말 장치(100-4)의 발언 권한을 3 순위로 설정한다. 발언 권한에 대한 순서가 설정되면, 제1 사용자 단말 장치(100-1)는 제1 순위로 설정된 제2 사용자 단말 장치(100-2)로 발언 권한 설정에 따른 알림 메시지를 전송한다. 이에 따라, 1 순위로 발언 권한이 설정된 제2 사용자 단말 장치(100-2)는 A 사용자의 사용자 음성을 제1 사용자 단말 장치(100-1)로 전송한다.
1 순위로 발언 권한이 설정된 제2 사용자 단말 장치(100-2)로부터 사용자 음성이 수신되면, 제1 사용자 단말 장치(100-1)는 2 순위로 발언 권한이 설정된 제3 사용자 단말 장치(100-3)로 발언 권한 설정에 따른 알림 메시지를 전송하며, 제3 사용자 단말 장치(100-3)는 B 사용자의 사용자 음성을 제1 사용자 단말 장치(100-1)로 전송한다.
2 순위로 발언 권한이 설정된 제3 사용자 단말 장치(100-3)로부터 사용자 음성이 수신되면, 제1 사용자 단말 장치(100-1)는 3 순위로 발언 권한이 설정된 제4 사용자 단말 장치(100-4)로 발언 권한 설정에 따른 알림 메시지를 전송하며, 제4 사용자 단말 장치(100-4)는 C 사용자의 사용자 음성을 제1 사용자 단말 장치(100-1)로 전송한다.
따라서, 각 담당자는 자신에게 발언 권한이 부여된 시점에 자신의 사용자 단말 장치(100)를 통해 관리자에게 현재 상황을 보고함으로써, 담당자와 관리자 간에 통신 교섭이 진행되고 있는지 여부를 실시간으로 확인하는 불편함을 해소할 수 있다.
한편, 본 발명에 따른 그룹 커뮤니케이션을 제공하는 시스템은 전술한 복수의 사용자 단말 장치(100-1~100-4) 뿐만 아니라, 관리 서버(200)를 더 포함할 수 있다. 관리 서버(200)는 그룹 설정된 복수의 사용자 단말 장치(100-1~100-4) 간 송수시된 사용자 음성을 전송하는 중계 장치가 될 수 있다.
즉, 관리 서버(200)는 전술한 바와 같이, 제1 사용자 단말 장치(100-1)로부터 수신된 관리자의 오더 음성을 제1 사용자 단말 장치(100-1)와 그룹 설정된 제2 내지 제4 사용자 단말 장치(100-2~100-4)로 전송하며, 제2 내지 제4 사용자 단말 장치(100-2~100-4)로부터 수신된 사용자 음성을 수신된 순서에 기초하여 제1 사용자 단말 장치(100-1)로 전송한다.
이하에서는, 그룹 설정된 복수의 사용자 단말 장치(100-1~100-4) 간에 사용자 음성을 송수신하는 동작에 대해서 상세히 설명하도록 한다.
도 3은 본 발명의 일 실시예에 따른 사용자 단말 장치의 블록도이며, 도 4는 본 발명의 일 실시예에 따른 사용자 단말 장치의 상세 블록도이다.
도 3에 도시된 바와 같이, 사용자 단말 장치(100)는 통신부(110), 제어부(120) 및 출력부(130)를 포함한다.
통신부(110)는 그룹 설정된 복수의 사용자 단말 장치(이하 타 사용자 단말 장치라 함)(100)와 데이터 통신을 수행한다.
이 같은 통신부(110)는 도 4에 도시된 바와 같이, 근거리 통신 모듈(111), 무선 랜 모듈 등의 무선 통신 모듈(113)과, HDMI(High-Definition Multimedia Interface), USB(Universal Serial Bus), IEEE(Institute of Electrical and Eletronics Engineers) 1394 등의 유선 통신 모듈 중 적어도 하나를 포함하는 커넥터(115)를 포함할 수 있다.
근거리 통신 모듈(111)은 사용자 단말 장치(100)와 동일한 그룹으로 그룹 설정된 복수의 타 사용자 단말 장치(100) 사이에 무선으로 근거리 통신을 수행하는 구성이다. 이 같은 근거리 통신 모듈(111)은 블루투스(bluetooth)모듈, 적외선 통신(IrDA, infrared data association)모듈, NFC(Near Field Communication)모듈, 와이파이(WIFI)모듈, 지그비(Zigbee) 모듈 중 적어도 하나를 포함할 수 있다.
또한, 무선 통신 모듈(113)이란 IEEE 등과 같은 무선 통신 프로토콜에 따라 외부 네트워크에 연결되어 통신을 수행하는 모듈이다. 이 경우, 사용자 단말 장치(100)는 전술한 관리 서버(200)를 통해 동일한 그룹으로 그룹 설정된 복수의 타 사용자 단말 장치(100)와 데이터 통신을 수행할 수 있다.
이 밖에 무선 통신 모듈은 3G(3rd Generation), 3GPP(3rd Generation Partnership Project), LTE(Long Term Evoloution) 등과 같은 다양한 이동 통신 규격에 따라 이동 통신 망에 접속하여 통신을 수행하는 이동 통신 모듈을 더 포함할 수도 있다.
이처럼 통신부(110)는 상술한 다양한 근거리 통신 방식에 의해 구현될 수 있고, 필요에 따라 본 명세서에 언급되지 않은 다른 통신 기술을 채용할 수 있다.
한편, 커넥터(115)는 USB 2.0, USB 3.0, HDMI, IEEE 1394 등 다양한 소스 장치와의 인터페이스를 제공하는 구성이다. 이 같은 커넥터(115)는 후술할 제어부(120)의 제어 명령에 따라 커넥터(115)에 연결된 유선 케이블을 통해 외부 서버(미도시)로부터 전송된 컨텐츠 데이터를 수신하거나, 기저장된 컨텐츠 데이터를 외부 기록 매체로 전송할 수 있다. 또한, 커넥터(115)는 커넥터(115)와 물리적으로 연결된 유선 케이블을 통해 전원 소스로부터 전원을 입력받을 수 있다.
제어부(120)는 통신부(110)를 통해 사용자 단말 장치(100)와 그룹 설정된 복수의 타 사용자 단말 장치(100)로부터 사용자 음성이 수신되면, 기설정된 조건에 따라 복수의 타 사용자 단말 장치(100)로부터 수신된 사용자 음성에 대응되는 음성 메시지의 출력 순서를 결정한다.
출력부(130)는 제어부(120)를 통해 결정된 출력 순선에 기초하여 복수의 타 사용자 단말 장치(100)로부터 수신된 사용자 음성에 대응되는 음성 메시지를 출력한다.
구체적으로, 제어부(120)는 통신부(110)를 통해 사용자 단말 장치(100)와 그룹 설정된 복수의 타 사용자 단말 장치(100)로부터 사용자 음성이 수신되면, 다음과 같은 실시예를 통해 복수의 타 사용자 단말 장치(100)로부터 수신된 사용자 음성에 대응되는 음성 메시지의 출력 순서를 결정할 수 있다.
일 실시예에 따라, 제어부(120)는 복수의 타 사용자 단말 장치(100)로부터 사용자 음성이 수신되면, 사용자 음성이 수신된 순서에 기초하여 복수의 타 사용자 단말 장치(100)로부터 수신된 사용자 음성에 대응되는 음성 메시지를 출력할 수 있다.
예를 들어, 도 1에 도시된 바와 같이, 제2 내지 제4 사용자 단말 장치(100-2~100-4) 중 제2 사용자 단말 장치(100-2)로부터 전송된 사용자 음성이 가장 먼저 수신되고, 제4 사용자 단말 장치(100-4)로부터 전송된 사용자 음성이 가장 늦게 수신될 수 있다.
이 경우, 제어부(120)는 제2 사용자 단말 장치(100-2)로부터 수신된 사용자 음성에 대한 음성 메시지가 가장 먼저 출력되고, 제3 사용자 단말 장치(100-3)로부터 수신된 사용자 음성에 대한 음성 메시지가 다음에 출력되며, 제4 사용자 단말 장치(100-4)로부터 수신된 사용자 음성에 대한 음성 메시지가 마지막으로 출력되도록 출력 순서를 결정할 수 있다.
또다른 실시예에 따라, 제어부(120)는 복수의 타 사용자 단말 장치(100)로부터 발언 요청 메시지가 수신된 순서에 기초하여 복수의 타 사용자 단말 장치(100)로부터 수신된 사용자 음성에 대응되는 음성 메시지의 출력 순서를 결정할 수 있다.
예를 들어, 전술한 도 1에 도시된 바와 같이, 복수의 타 사용자 단말 장치(100) 중 제2 사용자 단말 장치(100-2)로부터 전송된 발언 요청 메시지가 가장 먼저 수신되고, 제4 사용자 단말 장치(100-4)로부터 전송된 발언 요청 메시지가 가장 늦게 수신될 수 있다. 이후, 제2 내지 제4 사용자 단말 장치(100-2~100-4)로부터 사용자 음성이 수신될 수 있다. 즉, 발언 요청 메시지를 가장 늦게 전송한 제4 사용자 단말 장치(100-4)의 사용자 음성이 가장 먼저 수신될 수 있으며, 발언 요청 메시지를 가장 먼저 전송한 제2 사용자 단말 장치(100-2)의 사용자 음성이 가장 늦게 수신될 수 있다.
이 경우, 제어부(120)는 제2 내지 제4 사용자 단말 장치(100-2~100-4)로부터 발언 요청 메시지가 수신된 순서에 기초하여 제2 사용자 단말 장치(100-2)의 사용자 음성이 가장 먼저 출력되고, 이후, 제3 사용자 단말 장치(100-3)의 사용자 음성이 출력되며, 제4 사용자 단말 장치(100-4)의 사용자 음성이 마지막에 출력되도록 출력 순서를 결정할 수 있다.
또다른 예를 들어, 복수의 타 사용자 단말 장치(100) 중 제2 사용자 단말 장치(100-2)로부터 전송된 발언 요청 메시지가 가장 먼저 수신되고, 제4 사용자 단말 장치(100-4)로부터 전송된 발언 요청 메시지가 가장 늦게 수신될 수 있다.
이 경우, 제어부(120)는 제2 내지 제4 사용자 단말 장치(100-2~100-4)로부터 발언 요청 메시지가 수신된 순서에 기초하여 발언 권한을 설정한다. 이후, 제어부(120)는 설정된 발언 권한 순서에 기초하여 제2 내지 제4 사용자 단말 장치(100-2~100-4)로부터 사용자 음성을 수신하도록 통신부(110)를 제어할 수 있다.
이에 따라, 통신부(110)는 설정된 발언 권한 순서에 기초하여 제2 내지 제4 사용자 단말 장치(100-2~100-4)로부터 사용자 음성을 수신할 수 있다.
또다른 실시예에 따라, 제어부(120)는 복수의 타 사용자 단말 장치(100)로부터 수신된 사용자 음성에 대응되는 음성 메시지의 유사도를 분석하고, 유사도가 상이한 음성 메시지 순으로 출력 순서를 결정할 수 있다.
예를 들어, 호텔 전체를 관리하는 관리자는 각 층별 담당자에게 각 층에 대한 현재 상황을 보고할 것을 지시할 수 있다. 이 같은 관리자의 지시에 따라, 호텔의 각 층 담당자는 자신이 담당하는 층에 대한 현재 상황을 보고할 수 있다.
만약, 호텔의 1 층에 이상이 발생한 경우, 호텔 1 층을 담당하는 A 담당자는 제2 사용자 단말 장치(100-2)를 통해 "1 층에 문제 발생했습니다."라는 사용자 음성을 사용자 단말 장치(100)로 전송할 수 있으며, 나머지 층을 담당하는 B 및 C 담당자는 제3 및 제4 사용자 단말 장치(100-3,4)를 통해 "이상 없습니다."라는 사용자 음성을 사용자 단말 장치(100-1)로 전송할 수 있다.
이 같은 사용자 음성이 수신되면, 제어부(120)는 제2 내지 제4 사용자 단말 장치(100-2~100-4)로부터 수신된 사용자 음성에 대응되는 음성 메시지의 유사도를 분석한다. 분석 결과, 제2 사용자 단말 장치(100-2)로부터 수신된 사용자 음성이 타 사용자 음성과 상이한 것으로 결정되면, 제어부(120)는 제2 사용자 단말 장치(100-2)로부터 수신된 사용자 음성에 대한 음성 메시지를 우선적으로 출력하도록 출력 순서를 결정할 수 있다.
이 같은 다양한 실시예를 통해 출력 순서가 결정되면, 출력부(130)는 그 결정된 출력 순서에 기초하여 복수의 타 사용자 단말 장치(100)로부터 수신된 사용자 음성에 대응되는 음성 메시지를 출력할 수 있다.
한편, 출력부(130)는 디스플레이부(131) 및 오디오 출력부(133) 중 적어도 하나를 통해 사용자 음성에 대응되는 음성 메시지를 출력할 수 있다.
디스플레이부(131)는 사용자 음성에 대응되는 음성 메시지를 텍스트 형태로 화면상에 디스플레이하며, 오디오 출력부(133)는 사용자 음성에 대응되는 음성 메시지를 가청음 형태의 오디오 신호로 출력할 수 있다.
특히, 디스플레이부(131)는 컨텐츠 서버(미도시)와 같은 외부 서버로부터 수신된 컨텐츠 혹은 기저장된 컨텐츠 관련 데이터를 디스플레이하거나, 사용자 단말(100)의 동작을 제어하기 위한 다양한 UI 화면을 디스플레이할 수 있다.
이 같은 디스플레이부(131)는 액정 표시 장치(Liquid Crystal Display, LCD), 유기 전기 발광 다이오드(Organic Light Emitting Display, OLED) 또는 플라즈마 표시 패널(Plasma Display Panel, PDP) 등으로 구현될 수 있다. 특히, 디스플레이부(1301는 후술할 사용자의 터치 명령을 입력받는 터치 입력부(145)와 함께 상호 레이어 구조를 이루는 터치 스크린 형태로 구현될 수 있다.
한편, 이 같은 사용자 음성에 대응되는 음성 메시지를 출력하기에 앞서, 제어부(120)는 복수의 사용자 단말 장치(100)로부터 수신된 사용자 음성에 대응되는 음성 메시지에 대한 실행 아이콘을 포함하는 출력 UI를 디스플레이하도록 디스플레이부(131)를 제어한다. 이 같은 제어 명령에 따라, 디스플레이부(131)는 음성 메시지에 대한 실행 아이콘을 포함하는 출력 UI를 디스플레이한다. 여기서, 출력 UI에 포함된 실행 아이콘은 기 결정된 출력 순서에 대응되는 음성 메시지 순으로 나열될 수 있다.
이 같은 출력 UI가 디스플레이된 상태에서, 출력 UI에 포함된 실행 아이콘에 대한 선택 명령이 입력되면, 제어부(120)는 선택 명령에 대응되는 아이콘에 대한 음성 메시지를 출력하도록 디스플레이부(131) 및 오디오 출력부(133) 중 적어도 하나를 제어할 수 있다.
이에 따라, 디스플레이부(131) 및 오디오 출력부(133) 중 적어도 하나는 선택 명령에 대응되는 아이콘에 대한 음성 메시지를 텍스트 혹은 가청음 형태로 출력할 수 있다.
한편, 본 발명의 추가적인 양상에 따라, 디스플레이부(131)는 그룹별 채널 리스트 UI를 디스플레이할 수 있다. 여기서, 채널 리스트 UI는 사용자가 속한 그룹을 식별하기 위한 오브젝트가 나열된 리스트 정보가 될 수 있다.
따라서, 이 같은 채널 리스트 UI가 디스플레이된 상태에서, 채널 리스트 UI에 포함된 그룹별 오브젝트 중 하나가 선택되면, 제어부(120)는 선택된 오브젝트에 대응되는 그룹을 대화 상대 그룹으로 선택하고, 대화 상대 그룹 내 포함된 복수의 타 사용자 단말 장치(100)로 사용자의 오더 음성을 전송하도록 통신부(110)를 제어할 수 있다. 이에 따라, 통신부(110)는 대화 상대 그룹 내 포함된 복수의 타 사용자 단말 장치(100) 중 적어도 하나로 사용자의 오더 음성에 대한 음성 데이터를 전송할 수 있다.
한편, 오더 음성에 대한 음성 데이터를 전송한 적어도 하나의 타 사용자 단말 장치(100)로부터 사용자 음성이 수신되면, 제어부(120)는 수신된 사용자 음성에 대한 수신 상태 정보를 디스플레이하도록 디스플레이부(131)를 제어한다. 이에 따라, 디스플레이부(131)는 대화 상대 그룹으로 선택된 오브젝트 상에 해당 대화 상대 그룹 내 포함된 적어도 하나의 타 사용자 단말 장치(100)로부터 수신된 사용자 음성에 대한 수신 상태 정보를 표시할 수 있다. 이에 따라, 사용자는 오브젝트 상에 표시된 수신 상태 정보에 기초하여 대화 상대 그룹 내 포함된 타 사용자 단말 장치(100)로부터 사용자 음성이 수신되었는지를 확인할 수 있을 뿐만 아니라, 현재 몇 개의 사용자 음성이 수신되었는지를 확인할 수 있다.
한편, 제어부(120)는 그룹 설정된 복수의 타 사용자 단말 장치(100) 중 제1 사용자 단말 장치(100-1)로부터 오더 음성이 수신된 상태에서, 발언 요청을 위한 사용자 요청에 따라, 오더 음성을 전송한 제1 사용자 단말 장치(100-1)로 발언 요청 메시지를 전송하도록 통신부(110)를 제어한다. 이에 따라, 통신부(110)는 오더 음성을 전송한 제1 사용자 단말 장치(100-1)로 발언 요청 메시지를 전송한다.
발언 요청 메시지를 전송한 제1 사용자 단말 장치(100-1)로부터 발언 권한이 설정되면, 제어부(120)는 제1 사용자 단말 장치(100-1)로 오더 음성에 대한 사용자 음성을 전송하도록 통신부(110)를 제어한다. 이에 따라, 통신부(110)는 제1 사용자 단말 장치(100-1)로 오더 음성에 대한 사용자 음성을 전송할 수 있다.
구체적으로, 제1 사용자 단말 장치(100-1)는 사용자 단말 장치(100)로부터 수신된 발언 요청 메시지에 기초하여 사용자의 발언 권한을 설정한다. 발언 권한이 설정되면, 제1 사용자 단말 장치(100-1)는 발언 권한이 설정된 순서에 기초하여 사용자 단말 장치(100)로 발언 권한 설정에 따른 알림 메시지를 전송한다.
예를 들어, 사용자 단말 장치(100)의 사용자가 가장 먼저 발언할 수 있도록 발언 권한이 설정되면, 제1 사용자 단말 장치(100-1)는 사용자 단말 장치(100)로 발언 권한 설정에 따른 알림 메시지를 전송한다.
한편, 사용자 단말 장치(100)의 사용자가 마지막 순서에 발언할 수 있도록 발언 권한이 설정되면, 제1 사용자 단말 장치(100-1)는 이전 순서에 해당하는 타 사용자 단말 장치(100)로부터 사용자 음성이 수신된 이후 사용자 단말 장치(100)로 발언 권한 설정에 따른 알림 메시지를 전송할 수 있다.
이 같은 알림 메시지가 수신되면, 제어부(120)는 진동 피드백 및 알림 피드백 중 적어도 하나에 기초하여 오더 음성에 대한 발언 가능 상태 알림 서비스를 제공할 수 있다. 발언 권한이 부여된 상태에서 사용자 음성이 입력되면, 제어부(120)는 제1 사용자 단말 장치(100-1)로 오더 음성에 대한 사용자 음성을 전송하도록 통신부(110)를 제어한다. 이에 따라, 통신부(110)는 제1 사용자 단말 장치(100-1)로 오더 음성에 대한 사용자 음성을 전송할 수 있다.
한편, 본 발명에 따른 사용자 단말 장치(100)가 스마트 폰, 테블릿 PC와 같은 휴대용 단말 장치로 구현될 경우, 전술한 구성 외에 도 4에 도시된 바와 같이, 입력부(140), 신호 처리부(150), 촬영부(160), 감지부(170) 및 메모리(180)를 더 포함할 수 있다.
입력부(140)는 다양한 사용자 명령을 입력받아 제어부(120)로 전달하기 위한 입력 수단으로써, 도 4에 도시된 바와 같이, 마이크(141), 조작부(143), 터치 입력부(145) 및 사용자 입력부(147)를 포함할 수 있다.
마이크(141)는 사용자의 음성 명령을 입력받으며, 조작부(143)는 각종 기능키, 숫자키, 특수키, 문자키 등을 구비한 키패드(Key Pad)로 구현될 수 있다. 그리고, 터치 입력부(145)는 전술한 디스플레이부(131)가 터치 스크린 형태로 구현될 경우, 디스플레이부(131)와 상호 레어어 구조를 이루는 터치 패드로 구현될 수 있다. 이 경우, 터치 입력부(145)는 디스플레이부(131)를 통해 디스플레이된 다양한 어플리케이션 관련 아이콘에 대한 선택 명령을 입력받을 수 있다.
사용자 입력부(147)는 원격 제어 장치와 같은 적어도 하나의 주변 기기(미도시)로부터 사용자 단말 장치(100)의 동작을 제어하기 위한 IR 신호 혹은 RF 신호를 입력받을 수 있다.
신호 처리부(150)는 제어부(120)의 제어 명령에 따라, 통신부(110)를 통해 수신된 컨텐츠 혹은 메모리(180)에 저장된 컨텐츠의 영상 데이터 및 오디오 데이터를 처리하기 위한 구성 요소가 될 수 있다. 구체적으로, 신호 처리부(150)는 컨텐츠에 포함된 영상 데이터에 대해서, 디코딩, 스케일링, 노이즈 필터링, 프레임 레이트 변환 및 해상도 변환 등과 같은 다양한 영상 처리를 수행할 수 있다. 또한, 신호 처리부(150)는 컨텐츠에 포함된 오디오 데이터에 대해서,디코딩, 증폭, 노이즈 필터링 등과 같은 다양한 오디오 신호 처리를 수행할 수 있다.
촬영부(160)는 사용자 명령에 따라, 정지 영상 또는 동영상을 촬영하기 위한 것으로써, 전면 카메라, 후면 카메라와 같이 복수 개로 구현될 수 있다.
감지부(170)는 사용자 단말 장치(100)의 움직임을 감지하는 감지 센서로써, 실시예에 따라, 가속도 센서, 지자기 센서, 중력 센서 및 자이로 센서 등을 포함할 수 있다.
가속도 센서(Accelerometer Sensor)는 이동하는 사용자 단말 장치(100)의 가속도나 충격의 세기를 측정하는 센서이며, 지자기 센서(Magnetic Sensor)는 지구 자기장을 이용하여 방위각을 탐지할 수 있는 센서이다. 그리고, 중력 센서(Gravity Sensor)는 중력이 어느 방향으로 작용하는지 탐지하는 센서로써, 사용자가 사용자 단말 장치(100)를 들고 있는 방향에 따라 자동으로 회전하여 방향을 감지하며, 자이로 센서(Gyroscope Sensor)는 기존의 가속도 센서에 각각 회전을 넣어 6축 방향을 인식하여 하여 좀더 세밀하고 정밀한 동작을 인식할 수 있도록 도와주는 센서이다.
메모리(180)는 전술한 푸쉬 투 토크에 대한 어플리케이션을 포함하는 다양한 어플리케이션에 대한 실행 프로그램, 컨텐츠 등을 저장한다. 뿐만 아니라, 메모리(180)는 그룹 설정된 복수의 타 사용자 단말 장치(100)로부터 수신된 사용자 음성, 발언 요청 메시지 등을 저장할 수 있다.
추가적으로, 메모리(180)는 사용자 단말 장치(100)의 동작을 제어하기 위한 운영 프로그램을 더 저장할 수 있다. 여기서, 운용 프로그램은 사용자 단말 장치(100)가 턴 온(Turn On)되는 경우, 메모리(180)에서 읽혀지고, 컴파일되어 사용자 단말 장치(100)의 각 구성을 동작시키는 프로그램이 될 수 있다.
한편, 전술한 제어부(120)는 CPU(121), GPU(123), ROM(125) 및 RAM(127)을 더 포함할 수 있으며, CPU(121), GPU(123), ROM(125) 및 RAM(127)은 버스(129)를 통해 서로 연결될 수 있다.
CPU(121)는 메모리(180)를 액세스하여, 메모리(180)에 저장된 OS를 이용하여 부팅을 수행한다. 또한 CPU(121)는 메모리(180)에 저장된 각종 프로그램, 컨텐츠, 데이터 등을 이용하여 다양한 동작을 수행한다.
GPU(123)는 아이콘, 이미지, 텍스트 등과 같은 다양한 객체를 포함하는 디스플레이 화면을 생성한다. 구체적으로, GPU(123)는 수신된 제어 명령에 기초하여 화면의 레이아웃에 따라 각 객체들이 표시될 좌표값, 형태, 크기, 컬러 등과 같은 속성값을 연산하고, 연상된 속성값에 기초하여 객체를 포함하는 다양한 레이아웃의 디스플레이 화면을 생성한다.
ROM(125)은 시스템 부팅을 위한 명령어 세트 등이 저장된다. 턴온 명령이 입력되어 전원이 공급되면, CPU(121)는 ROM(125)에 저장된 명령어에 따라 메모리(180)에 저장된 OS를 RAM(127)에 복사하고, OS를 실행시켜 시스템을 부팅시킨다. 부팅이 완료되면, CPU(121)는 메모리(180)에 저장된 각종 프로그램을 RAM(127)에 복사하고, RAM(127)에 복사된 프로그램을 실행시켜 각종 동작을 수행한다.
이 같은 제어부(120)는 전술한 각 구성들과 결합되어 단일칩 시스템(System-on-a-chip 또는 System on chip, SOC, SoC)으로 구현될 수 있다.
한편, 상술한 제어부(120)의 동작은 전술한 메모리(180)에 저장된 프로그램에 의해 이루어질 수 있다. 여기서, 메모리(180)는 ROM(125), RAM(127) 또는 사용자 단말 장치(100)에 탈착/장착 가능한 메모리 카드(예, SD 카드, 메모리 스틱), 비휘발성 메모리, 휘발성 메모리, 하드 디스크 드라이브(HDD) 또는 솔리드 스테이트 드라이브(SSD) 중 적어도 하나로 구현될 수 있다.
이하에서는, 다양한 실시예를 통해 그룹 커뮤니케이션을 수행하는 사용자 단말 장치(100)에 대해서보다 상세히 설명하도록 한다.
도 5는 본 발명의 일 실싱예에 따른 사용자 단말 장치에서 음성 메시지의 출력 순서를 결정하는 예시도이다.
사용자 단말 장치(100)는 그룹 설정된 복수의 타 사용자 단말 장치(100)로 사용자의 오더 음성에 대한 음성 데이터를 전송한다. 이에 따라, 그룹 설정된 복수의 사용자 단말 장치(100)는 오더 음성에 대한 음성 데이터를 전송한 사용자 단말 장치(100)로 사용자 음성을 전송한다.
전술한 예와 같이, 오더 음성 전송을 요청하는 사용자는 호텔 전체를 관리하는 관리자가 될 수 있으며, 오더 음성에 대한 사용자 음성 전송을 요청하는 사용자는 호텔의 각 층을 담당하는 담당자가 될 수 있다.
이 경우, 관리자는 사용자 단말 장치(100)를 이용하여 각 층별 담당자에게 "각 층별 이상 유무 상황 확인바랍니다."라는 오더를 내릴 수 있다. 이에 따라, 사용자 단말 장치(100)는 사용자 단말 장치(100)와 그룹 설정된 복수의 타 사용자 단말 장치(100)로 "각 층별 이상 유무 상황 확인바랍니다."라는 관리자의 오더 음성에 대한 음성 데이터를 전송할 수 있다.
따라서, 복수의 타 사용자 단말 장치(100)는 사용자 단말 장치(100)로부터 수신된 오더 음성에 대한 음성 메시지를 출력한다. 이에 따라, A 내지 D 담당자는 자신이 소지한 사용자 단말 장치(100)를 통해 출력된 음성 메시지로부터 관리자에 의해 지시된 오더를 확인할 수 있다.
관리자의 오더를 확인한 A 내지 D 담당자는 자신이 소지한 사용자 단말 장치(100)를 이용하여 A 내지 D 담당자가 담당하는 각 층에 대한 현재 상황을 보고할 수 있다. 이에 따라, A 내지 D 담당자 각각의 사용자 단말 장치(100)는 A 내지 D 담당자에 의해 보고된 사용자 음성을 사용자 단말 장치(100)로 전송한다.
이에 따라, 사용자 단말 장치(100)는 A 내지 D 담당자 각각의 사용자 단말 장치(100)로부터 사용자 음성이 수신되면, 사용자 음성이 수신된 순서에 기초하여 출력 순서를 결정한다. A 담당자의 사용자 음성, B 담당자의 사용자 음성, C 담당자의 사용자 음성 및 D 담당자의 사용자 음성 순으로 수신될 경우, 사용자 단말 장치(100)는 도 5의 (a)에 도시된 바와 같이, A 담당자의 사용자 음성에 대응되는 A 음성 메시지(510), B 담당자의 사용자 음성에 대응되는 B 음성 메시지(520), C 담당자의 사용자 음성에 대응되는 C 음성 메시지(530) 및 D 담당자의 사용자 음성에 대응되는 D 음성 메시지(540) 순으로 출력되도록 출력 순서를 결정할 수 있다.
한편, 사용자 단말 장치(100)는 사용자 음성이 수신되는 순서에 따라 출력 순서를 결정하기에 앞서, 사용자 음성에 대응되는 음성 메시지의 유사도를 분석하여 유사도가 상이한 음성 메시지를 우선 출력하도록 출력 순서를 결정할 수 있다.
예를 들어, D 담당자가 관리하는 1 층에 이상이 발생한 경우, 사용자 단말 장치(100)는 D 담당자의 사용자 단말 장치(100)로부터 "1 층에 문제 발생했습니다."라는 사용자 음성을 수신할 수 있으며, 나머지 A 내지 C 담당자 각각의 사용자 단말 장치(100)로부터 "이상 없습니다.", "문제없습니다.", "이상무'라는 사용자 음성을 수신할 수 있다.
이 경우, 사용자 단말 장치(100)는 D 담당자의 사용자 단말 장치(100)로부터 수신된 사용자 음성에 대한 음성 메시지가 타 음성 메시지와의 유사도가 상이한 것으로 판단한다.
실시예에 따라, 사용자 단말 장치(100)는 유사도 알고리즘을 이용하여 사용자 음성에 대응되는 음성 메시지의 유사도를 판단하거나, 기등록된 문장과의 비교를 통해 수신된 음성 메시지 중 이벤트가 발생한 음성 메시지가 있는지 여부를 판단할 수 있다.
이 같은 실시예를 통해 D 담당자의 사용자 단말 장치(100)로부터 수신된 사용자 음성이 타 사용자 음성의 유사도와 상이한 것으로 판단되면, 사용자 단말 장치(100)는 도 5의 (b)에 도시된 바와 같이, 사용자 음성이 가장 늦게 수신된 D 담당자의 사용자 단말 장치(100)의 사용자 음성에 대응되는 D 음성 메시지(540')를 가장 먼저 출력되도록 출력 순서를 결정하고, 나머지 A 내지 C 담당자의 사용자 단말 장치(100)로부터 수신된 사용자 음성에 대응되는 A 내지 C 음성 메시지(510'~530')를 수신된 순서에 기초하여 출력되도록 출력 순서를 결정할 수 있다.
이에 따라, A 내지 D 음성 메시지 중 유사도가 상이한 D 음성 메시지가 가장 먼저 출력되고, D 음성 메시지가 출력된 이후에 A 내지 C 음성 메시지가 순차적으로 출력될 수 있다.
도 6은 본 발명의 일 실시예에 따른 사용자 단말 장치에서 채널 리스트 UI를 디스플레이하는 예시도이다.
도 6에 도시된 바와 같이, 사용자 단말 장치(100)는 사용자가 속하는 모든 그룹에 대한 채널 리스트 UI(610)를 디스플레이할 수 있다.
사용자 단말 장치(100)는 사용자 설정에 따라 다양한 형태의 채널 리스트 UI(610)를 제공할 수 있다.
구체적으로, 사용자 단말 장치(100)는 제1 사용자 설정에 따라, 사용자가 속하는 그룹 전체에 대해서 각 그룹별 오브젝트를 포함하는 채널 리스트 UI(610)를 제공할 수 있다.
이 경우, 사용자는 사용자 단말 장치(100)의 화면상에 디스플레이된 채널 리스트 UI(610)를 통해 자신이 어느 그룹에 등록되어 있는지를 보다 쉽게 확인할 수 있다.
또한, 사용자 단말 장치(100)는 제2 사용자 설정에 따라 사용자가 속하는 그룹 전체 중 자주 활동하는 그룹 및 최근 활동한 그룹에 대한 채널 리스트 UI(610)를 디스플레이할 수 있다. 즉, 사용자 단말 장치(100)는 자주 활동하는 그룹의 오브젝트를 포함하는 제1 카테고리 메뉴(620)와 최근 활동한 그룹의 오브젝트를 포함하는 제2 카테고리 메뉴(630)를 포함하는 채널 리스트 UI(610)를 디스플레이할 수 있다.
이 경우, 사용자는 사용자 단말 장치(100)의 화면상에 디스플레이된 채널 리스트 UI(610) 상 포함된 제1 및 제2 카테고리 메뉴(620,630)를 통해 자신이 자주 활동하는 그룹을 보다 쉽게 선택할 수 있을 뿐만 아니라, 최근에 활동한 그룹이 어떠한 그룹인지를 쉽게 확인할 수 있다.
도 7은 본 발명의 일 실시예에 따른 사용자 단말 장치에서 대화 상대 그룹을 선택하는 예시도이다.
도 7에 도시된 바와 같이, 사용자 단말 장치(100)는 사용자 명령에 따라, 사용자 단말 장치(100)의 화면상에 디스플레이된 채널 리스트 UI(610)에 포함된 그룹 중 하나의 그룹을 대화 상대 그룹으로 설정할 수 있다.
구체적으로, 도 6에서 설명한 바와 같이, 사용자는 사용자 단말 장치(100)의 화면상에 디스플레이된 채널 리스트 UI(610)로부터 제1 및 제2 카테고리 메뉴(620,630) 중 하나를 선택할 수 있다. 전술한 바와 같이, 제1 카테고리 메뉴(620)는 사용자가 속하는 그룹 전체 중 사용자가 자주 활동하는 그룹의 오브젝트를 포함하는 메뉴이며, 제2 카테고리 메뉴(630)는 사용자가 최근 활동한 그룹의 오브젝트를 포함하는 메뉴가 될 수 있다.
이 같은 제1 및 제2 카테고리 메뉴(620,630) 중 제1 카테고리 메뉴(620)가 선택되면, 도 7에 도시된 바와 같이, 사용자 단말 장치(100)는 제1 카테고리 메뉴(620)에 포함된 그룹의 오브젝트를 포함하는 UI(710)를 디스플레이할 수 있다.
이 같은 UI(710)가 디스플레이된 상태에서, 사용자는 UI(710)에 포함된 복수의 오브젝트 중 제1 오브젝트(720)를 선택하고, 선택된 제1 오브젝트(720)를 대화 상대 그룹 설정을 위한 실행 오브젝트(730)로 드래그할 수 있다. 이 같은 사용자 명령이 입력되면, 사용자 단말 장치(100)는 제1 오브젝트(720)에 대응되는 그룹을 대화 상대 그룹으로 설정한다.
이후, 사용자로부터 사용자 음성이 입력되면, 사용자 단말 장치(100)는 대화 상대 그룹으로 설정된 그룹 내 포함된 복수의 타 사용자 단말 장치(100)로 사용자 음성을 전송하고, 복수의 타 사용자 단말 장치(100)로부터 해당 사용자 음성과 관련하여 수신된 사용자 음성에 대한 음성 메시지를 출력할 수 있다.
도 8은 본 발명의 일 실시예에 따른 사용자 단말 장치에서 대화 상대를 선택하는 예시도이다.
도 8에 도시된 바와 같이, 사용자 단말 장치(100)는 기등록된 건물에 대한 맵 UI(810)를 디스플레이할 수 있다. 그리고, 사용자 단말 장치(100)는 사용자 단말 장치(100)와 주변에 위치한 타 사용자 단말 장치(100)로부터 위치 정보가 수신되면, 수신된 위치 정보에 기초하여 디스플레이된 맵 UI(810) 상에 타 사용자 단말 장치(100)의 사용자가 위치한 지점을 표시할 수 있다.
따라서, 건물 전체를 관리하는 관리자는 사용자 단말 장치(100)의 화면상에 디스플레이된 맵 UI(810)를 통해 각 구역을 담당하는 담당자의 위치를 파악할 수 있다. 뿐만 아니라, 관리자는 사용자 단말 장치(100)의 화면상에 디스플레이된 맵 UI(810)를 통해 각 구역의 담당자에게 업무를 지시할 수 있다.
이를 위해, 관리자는 사용자 단말 장치(100)의 화면상에 디스플레이된 맵 UI(810)를 통해 각 구역의 담당자 중 업무 지시할 담당자에 대한 오브젝트(820)를 선택하고, 맵 UI(810) 일 측면에 디스플레이된 대화 상대 추가를 위한 UI(830)를 로 드래그하거나 선택할 수 있다. 이 같은 사용자 명령이 입력되면, 사용자 단말 장치(100)는 선택된 오브젝트에 대한 담당자를 대화 상대로 추가한다.
이후, 관리자로부터 업무 지시 관련 오더 음성이 입력되면, 사용자 단말 장치(100)는 대화 상대로 추가된 담당자의 사용자 단말 장치(100)로 관리자의 오더 음성을 전송할 수 있다.
이하에서는, 본 발명에 따른 사용자 단말 장치(100)에서 사용자 단말 장치(100)와 동일 그룹에 속하는 타 사용자 단말 장치(100)로부터 사용자 음성을 전송하기 위한 발언 권한이 설정되는 이벤트 환경을 제공하는 동작에 대해서 상세히 설명하도록 한다.
도 9는 본 발명의 일 실시예에 따른 사용자 단말 장치에서 오더 음성에 대한 발언 가능 상태 알림 서비스를 제공하는 제1 예시도이다.
도 9의 (a)에 도시된 바와 같이, 사용자 단말 장치(100)는 사용자 단말 장치(100)와 동일한 그룹으로 그룹 설정된 타 사용자 단말 장치(100)로부터 오더 음성에 대한 음성 데이터를 수신할 수 있다. 이 같은 오더 음성에 대한 음성 데이터가 수신되면, 사용자 단말 장치(100)는 오더 음성에 대한 음성 메시지를 출력한다. 따라서, 사용자는 사용자 단말 장치(100)를 통해 출력된 음성 메시지를 확인하고, 해당 음성 메시지에 대한 응답 메시지를 타 사용자 단말 장치(100)로 전송하기 위해서, 사용자 단말 장치(100)에 디스플레이된 발언 권한 요청 UI(910)를 선택할 수 있다.
이 같은 발언 권한 요청 UI(910)에 대한 선택 명령이 입력되면, 사용자 단말 장치(100)는 오더 음성을 전송한 타 사용자 단말 장치(100)로 발언 권한 요청 메시지를 전송한다. 이에 따라, 타 사용자 단말 장치(100)는 타 사용자 단말 장치(100)와 동일한 그룹으로 그룹 설정된 사용자 단말 장치(100)로부터 발언 권한 요청 메시지가 수신되는 순서에 기초하여 발언 권한을 부여한 순서를 결정한다.
이후, 타 사용자 단말 장치(100)는 결정된 발언 권한 순서에 기초하여 타 사용자 단말 장치(100)와 동일한 그룹으로 그룹 설정된 사용자 단말 장치(100)로 발언 권한 설정에 따른 알림 메시지를 전송한다.
이에 따라, 사용자 단말 장치(100)는 타 사용자 단말 장치(100)로부터 발언 권한 설정에 따른 알림 메시지가 수신되면, 오더 음성에 대한 응답 메시지 관련 사용자 음성을 타 사용자 단말 장치(100)로 전송할 수 있다.
이때, 사용자 단말 장치(100)는 타 사용자 단말 장치(100)로부터 발언 권한 설정에 따른 알림 메시지가 수신되면, 도 9의 (b)에 도시된 바와 같이, 진동 피드백을 통해 사용자에게 발언 권한이 부여되었음을 안내할 수 있다. 따라서, 사용자는 진동 피드백을 통해 발언 권한이 부여되었음을 확인하고, 사용자 단말 장치(100)의 화면상에 디스플레이된 발언 권한 요청 UI(910')를 선택 후, 오더 음성에 대한 응답 메시지 관련 사용자 음성을 입력할 수 있다.
이에 따라, 사용자 단말 장치(100)는 발언 권한 요청 UI(910')에 대한 선택 명령이 입력된 후, 오더 음성에 대한 응답 메시지 관련 사용자 음성이 입력되면, 입력된 사용자 음성을 타 사용자 단말 장치(100)로 전송할 수 있다.
도 10은 본 발명의 또다른 실시예에 따른 사용자 단말 장치에서 오더 음성에 대한 발언 가능 상태 알림 서비스를 제공하는 제2 예시도이다.
도 1-(a)에 도시된 바와 같이, 사용자 단말 장치(100)와 동일한 그룹으로 그룹 설정된 타 사용자 단말 장치(100)로부터 오더 음성에 대한 음성 데이터가 수신된 이후, 발언 권한 요청 UI(1010)에 대한 선택 명령이 입력되면, 사용자 단말 장치(100)는 오더 음성을 전송한 타 사용자 단말 장치(100)로 발언 권한 요청 메시지를 전송한다.
이후, 타 사용자 단말 장치(100)로부터 발언 권한 설정에 따른 알림 메시지가 수신되면, 이벤트 알림 피드백을 통해 사용자에게 발언 권한이 부여되었음을 안내할 수 있다. 즉, 사용자 단말 장치(100)는 타 사용자 단말 장치(100)로부터 발언 권한 설정에 따른 알림 메시지가 수신되면, 도 10의 (b)에 도시된 바와 같이, 스피커(1020)를 통해 음성으로 이벤트 알림 피드백을 제공하여 사용자에게 발언 권한이 부여되었음을 안내할 수 있다.
따라서, 사용자는 이벤트 알림 피드백을 통해 발언 권한이 부여되었음을 확인하고, 사용자 단말 장치(100)의 화면상에 디스플레이된 발언 권한 요청 UI(1010')를 선택 후, 오더 음성에 대한 응답 메시지 관련 사용자 음성을 입력할 수 있다.
이에 따라, 사용자 단말 장치(100)는 발언 권한 요청 UI(1010')에 대한 선택 명령이 입력된 후, 오더 음성에 대한 응답 메시지 관련 사용자 음성이 입력되면, 입력된 사용자 음성을 타 사용자 단말 장치(100)로 전송할 수 있다.
도 11은 본 발명의 또다른 실시예에 따른 사용자 단말 장치에서 오더 음성에 대한 발언 가능 상태 알림 서비스를 제공하는 제3 예시도이다.
도 11의 (a)에 도시된 바와 같이, 사용자 단말 장치(100)와 동일한 그룹으로 그룹 설정된 타 사용자 단말 장치(100)로부터 오더 음성에 대한 음성 데이터가 수신된 이후, 발언 권한 요청 UI(1110)에 대한 선택 명령이 입력되면, 사용자 단말 장치(100)는 오더 음성을 전송한 타 사용자 단말 장치(100)로 발언 권한 요청 메시지를 전송한다.
이후, 타 사용자 단말 장치(100)로부터 발언 권한 설정에 따른 알림 메시지가 수신되면, 이벤트 알림 피드백을 통해 사용자에게 발언 권한이 부여되었음을 안내할 수 있다. 즉, 사용자 단말 장치(100)는 타 사용자 단말 장치(100)로부터 발언 권한 설정에 따른 알림 메시지가 수신되면, 도 11의 (b)에 도시된 바와 같이, '메시지를 입력하세요'라는 텍스트 형태의 이벤트 알림 피드백(1120)을 제공하여 사용자에게 발언 권한이 부여되었음을 안내할 수 있다.
따라서, 사용자는 이벤트 알림 피드백을 통해 발언 권한이 부여되었음을 확인하고, 사용자 단말 장치(100)의 화면상에 디스플레이된 발언 권한 요청 UI(1110')를 선택 후, 오더 음성에 대한 응답 메시지 관련 사용자 음성을 입력할 수 있다.
이에 따라, 사용자 단말 장치(100)는 발언 권한 요청 UI(1110')에 대한 선택 명령이 입력된 후, 오더 음성에 대한 응답 메시지 관련 사용자 음성이 입력되면, 입력된 사용자 음성을 타 사용자 단말 장치(100)로 전송할 수 있다.
도 12는 본 발명의 일 실시예에 따른 사용자 단말 장치에서 출력 UI를 디스플레이하는 예시도이다.
건물 전체를 관리하는 관리자는 사용자 단말 장치(100)를 통해 건물의 각 층을 담당하는 담당자에게 '층별 상황 보고 바랍니다.'라는 오더 음성을 전송할 수 있다. 따라서, 각 층별 담당자는 자신의 사용자 단말 장치(100)를 통해 오더 음성을 전송한 관리자의 사용자 단말 장치(100)로 각 층에 대한 현재 상황에 대한 사용자 음성을 전송할 수 있다. 뿐만 아니라, 각 층별 담당자는 자신의 사용자 단말 장치(100)를 통해 자신이 담당하는 각 층에 대한 영상 이미지를 촬영하고, 촬영된 영상 이미지와 사용자 음성을 오더 음성을 전송한 관리자의 사용자 단말 장치(100)로 전송할 수 있다.
이 같은 사용자 음성이 수신되면, 사용자 단말 장치(100)는 도 12에 도시된 바와 같이, 각 담당자의 사용자 음성에 대응되는 음성 메시지의 실행을 위한 실행 아이콘(1220,1230)을 포함하는 출력 UI(1210)를 디스플레이할 수 있다. 이때, 음성 메시지의 실행 아이콘(1220,1230)은 사용자 음성이 수신된 순서로 나열될 수 있다.
추가적으로, 사용자 단말 장치(100)는 '층별 상황 보고 바랍니다.'라는 오더 음성에 대한 음성 메시지(1240)를 출력 UI(1210) 상에 디스플레이할 수 있다.
또한, 사용자 음성과 영상 이미지가 함께 수신된 경우, 사용자 단말 장치(100)는 사용자 음성에 대응되는 음성 메시지 및 영상 이미지에 대한 썸네일 이미지를 포함하는 실행 아이콘(1230)를 포함하는 출력 UI(1210)를 디스플레이할 수 있다.
따라서, 관리자는 사용자 단말 장치(100)의 화면상에 디스플레이된 출력 UI(1210)에 포함된 복수의 실행 아이콘(1220,1230) 중 적어도 하나를 선택하고, 선택된 실행 아이콘에 대응되는 사용자 음성 및 영상 이미지 중 적어도 하나를 확인하여 각 층에 대한 현재 상황을 확인할 수 있다.
지금까지, 본 발명에 따른 그룹 커뮤니케이션을 위한 사용자 단말 장치(100)의 각 구성 및 동작에 대해서 상세히 설명하였다. 이하에서는 본 발명에 따른 사용자 단말 장치(100)의 제어 방법에 대해서 상세히 설명하도록 한다.
도 13은 본 발명의 일 실시예에 따른 사용자 단말 장치에서 타 사용자 단말 장치와의 그룹 커뮤니케이션을 위한 제어 방법의 흐름도이다.
도 13에 도시된 바와 같이, 사용자 단말 장치(100)는 사용자 단말 장치(100)와 그룹 커뮤니케이션을 위한 대화 상대 그룹을 설정한다(S1310). 구체적으로, 사용자 단말 장치(100)는 사용자 단말 장치(100)와 그룹 설정된 그룹별 채널 리스트 UI를 디스플레이하며, 디스플레이된 채널 리스트 UI에 포함된 그룹별 오브젝트 중 하나가 선택되면, 선택된 오브젝트에 대응되는 그룹을 대화 상대 그룹으로 설정할 수 있다.
대화 상대 그룹이 설정되면, 사용자 단말 장치(100)는 대화 상대 그룹 내 포함된 복수의 사용자 단말 장치(이하 타 사용자 단말 장치라 함)(100)로 사용자의 오더 음성을 전송한다(S1320). 오더 음성을 수신한 타 사용자 단말 장치(100)로부터 오더 음성에 대한 응답 메시지 관련 사용자 음성이 수신되면, 사용자 단말 장치(100)는 수신된 사용자 음성에 대응되는 음성 메시지의 출력 순서를 결정한다(S1330,S1340).
일 실시예에 따라, 사용자 단말 장치(100)는 복수의 타 사용자 단말 장치(100)로부터 사용자 음성이 수신되면, 사용자 음성이 수신된 순서에 기초하여 사용자 음성에 대응되는 음성 메시지의 출력 순서를 결정할 수 있다.
또다른 실시예에 따라, 사용자 단말 장치(100)는 복수의 타 사용자 단말 장치(100)로부터 발언 요청 메시지가 수신된 순서에 기초하여 복수의 타 사용자 단말 장치(100)로부터 수신된 사용자 음성에 대응되는 음성 메시지의 출력 순서를 결정할 수 있다.
또다른 실시예에 따라, 사용자 단말 장치(100)는 복수의 타 사용자 단말 장치(100)로부터 수신된 사용자 음성에 대응되는 음성 메시지의 유사도를 분석하고, 유사도가 상이한 음성 메시지 순으로 출력 순서를 결정할 수 있다.
이 같은 다양한 실시예를 통해 복수의 타 사용자 단말 장치(100)로부터 수신된 사용자 음성에 대한 출력 순서가 결정되면, 사용자 단말 장치(100)는 출력 순서에 따라 사용자 음성에 대응되는 응답 메시지를 출력할 수 있다.
한편, 전술한 단계 S1330에서 복수의 타 사용자 단말 장치(100)로부터 사용자 음성이 수신되면, 사용자 단말 장치(100)는 채널 리스트 UI에 포함된 그룹별 오브젝트 중 대화 상대 그룹으로 설정된 그룹의 오브젝트 상에 타 사용자 단말 장치(100)로부터 수신된 사용자 음성에 대한 수신 상태 정보를 디스플레이할 수 있다.
따라서, 사용자 단말 장치(100)의 사용자는 채널 리스트 UI에 포함된 그룹별 오브젝트 상태 디스플레이된 수신 상태 정보에 기초하여 타 사용자 단말 장치(100)의 사용자로부터 오더 음성에 대한 응답 메시지의 수신 상태를 파악할 수 있다.
도 14는 본 발명의 일 실시예에 따른 사용자 단말 장치에서 사용자 단말 장치와 동일 그룹이 타 사용자 단말 장치로 사용자 음성을 전송하는 방법의 흐름도이다.
도 14에 도시된 바와 같이, 사용자 단말 장치(100)는 사용자 단말 장치(100)와 동일 그룹에 속하는 복수의 사용자 단말 장치 중 제1 사용자 단말 장치(100-1)로부터 오더 음성이 수신되면, 제1 사용자 단말 장치(100-1)로 발언 요청 메시지를 전송한다(S1410,S1420).
이후, 사용자 단말 장치(100)는 제1 사용자 단말 장치(100-1)로부터 발언 권한이 설정되면, 제1 사용자 단말 장치(100-1)로 오더 음성에 대한 응답 관련 사용자 음성을 전송한다(S1430).
구체적으로, 사용자 단말 장치(100)는 제1 사용자 단말 장치(100-1)로부터 오더 음성이 수신되면, 수신된 오더 음성에 대한 음성 메시지를 출력한다. 오더 음성에 대한 음성 메시지 출력 이후, 사용자로부터 발언 요청을 위한 사용자 명령이 입력되면, 사용자 단말 장치(100)는 제1 사용자 단말 장치(100-1)로 발언 요청 메시지를 전송한다.
이에 따라, 제1 사용자 단말 장치(100-1)는 제1 사용자 단말 장치(100-1)와 동일 그룹에 속하는 복수의 타 사용자 단말 장치(100)로부터 수신된 발언 요청 메시지에 기초하여 발언 권한을 설정한다.
발언 권한이 설정되면, 제1 사용자 단말 장치(100-1)는 설정된 발언 권한에 다른 순서에 기초하여 제1 사용자 단말 장치(100-1)와 동일 그룹에 속하는 타 사용자 단말 장치(100)로 발언 권한 설정에 따른 알림 메시지를 전송한다.
이에 따라, 사용자 단말 장치(100)는 제1 사용자 단말 장치(100-1)로부터 발언 권한 설정에 따른 알림 메시지가 수신되면, 진동 피드백 및 이벤트 알림 피드백 중 적어도 하나에 기초하여 오더 음성에 대한 발언 가능 상태 알림 서비스를 제공한다. 따라서, 사용자는 이 같은 알림 서비스를 통해 발언 권한이 부여되었음을 확인하고, 사용자 단말 장치(100)를 통해 제1 사용자 단말 장치(100)의 사용자에게 오더 음성에 대한 응답 메시지를 전송할 수 있다.
한편, 상술한 다양한 실시 예들에 따른 사용자 단말 장치의 제어 방법은 소프트웨어로 코딩되어 비일시적 판독 가능 매체(non-transitory readable medium)에 저장될 수 있다. 이러한 비일시적 판독 가능 매체는 다양한 장치에 탑재되어 사용될 수 있다.
비일시적 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등이 될 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안 될 것이다.

Claims (15)

  1. 그룹 설정된 복수의 타 사용자 단말 장치와 데이터 통신을 수행하는 통신부;
    상기 복수의 타 사용자 단말 장치로부터 사용자 음성이 수신되면, 기설정된 조건에 따라 상기 사용자 음성에 대응되는 음성 메시지의 출력 순서를 결정하는 제어부; 및
    상기 결정된 출력 순서로 상기 음성 메시지를 출력하는 출력부;
    를 포함하는 사용자 단말 장치.
  2. 제 1 항에 있어서,
    상기 제어부는,
    상기 복수의 타 사용자 단말 장치로부터 사용자 음성이 수신되면, 상기 사용자 음성이 수신된 순서에 기초하여 상기 사용자 음성에 대응되는 음성 메시지의 출력 순서를 결정하는 것을 특징으로 하는 사용자 단말 장치.
  3. 제 1 항에 있어서,
    상기 제어부는,
    상기 복수의 타 사용자 단말 장치로부터 발언 요청 메시지가 수신된 순서에 기초하여 상기 복수의 타 사용자 단말 장치로부터 수신된 사용자 음성에 대응되는 음성 메시지의 출력 순서를 결정하는 것을 특징으로 하는 사용자 단말 장치.
  4. 제 1 항에 있어서,
    상기 제어부는,
    상기 복수의 타 사용자 단말 장치로부터 수신된 사용자 음성에 대응되는 음성 메시지의 유사도를 분석하고, 유사도가 상이한 음성 메시지 순으로 출력 순서를 결정하는 것을 특징으로 하는 사용자 단말 장치.
  5. 제 1 항에 있어서,
    상기 출력부는,
    디스플레이부; 및
    오디오 출력부;를 포함하며,
    상기 제어부는,
    상기 음성 메시지에 대한 실행 아이콘을 포함하는 출력 UI를 디스플레이하도록 상기 디스플레이부를 제어하며, 상기 출력 UI에 포함된 실행 아이콘에 대한 선택 명령이 입력되면, 상기 선택 명령에 대응되는 음성 메시지를 출력하도록 상기 디스플레이부 및 상기 오디오 출력부 중 적어도 하나를 제어하는 것을 특징으로 하는 사용자 단말 장치.
  6. 제 1 항에 있어서,
    상기 출력부는,
    그룹별 채널 리스트 UI를 디스플레이하는 디스플레이부;를 포함하며,
    상기 제어부는,
    상기 채널 리스트 UI에 포함된 그룹별 오브젝트 중 하나가 선택되면, 선택된 오브젝트에 대응되는 그룹을 대화 상대 그룹으로 선택하고, 상기 대화 상대 그룹 내 포함된 복수의 사용자 단말 장치로 오더 음성을 전송하는 것을 특징으로 하는 사용자 단말 장치.
  7. 제 6 항에 있어서,
    상기 제어부는,
    상기 채널 리스트 UI에 포함된 그룹별 오브젝트 상에 상기 그룹별 타 사용자 단말 장치로부터 수신된 사용자 음성에 대한 수신 상태 정보를 디스플레이하도록 상기 디스플레이부를 제어하는 것을 특징으로 하는 사용자 단말 장치.
  8. 제 1 항에 있어서,
    상기 제어부는,
    상기 복수의 타 사용자 단말 장치 중 제1 사용자 단말 장치로부터 오더 음성이 수신된 상태에서, 발언 요청을 위한 사용자 요청에 따라, 상기 제1 사용자 단말 장치로 발언 요청 메시지를 전송하고,
    상기 제1 사용자 단말 장치로부터 발언 권한이 설정되면, 상기 제1 사용자 단말 장치로 상기 오더 음성에 대한 사용자 음성을 전송하는 것을 특징으로 하는 사용자 단말 장치.
  9. 제 8 항에 있어서,
    상기 제어부는,
    상기 발언 권한 설정에 따른 알림 메시지가 수신되면, 진동 피드백 및 이벤트 알림 피드백 중 적어도 하나에 기초하여 상기 오더 음성에 대한 발언 가능 상태 알림 서비스를 제공하는 것을 특징으로 하는 사용자 단말 장치.
  10. 사용자 단말 장치의 제어 방법에 있어서,
    그룹 설정된 복수의 타 사용자 단말 장치로부터 사용자 음성을 수신하는 단계;
    기설정된 조건에 따라 상기 사용자 음성에 대응되는 음성 메시지의 출력 순서를 결정하는 단계; 및
    상기 결정된 출력 순서로 상기 음성 메시지를 출력하는 단계;
    를 포함하는 제어 방법.
  11. 제 10 항에 있어서,
    상기 결정하는 단계는,
    상기 복수의 타 사용자 단말 장치로부터 사용자 음성이 수신되면, 상기 사용자 음성이 수신된 순서에 기초하여 상기 사용자 음성에 대응되는 음성 메시지의 출력 순서를 결정하는 것을 특징으로 하는 제어 방법.
  12. 제 10 항에 있어서,
    상기 결정하는 단계는,
    상기 복수의 타 사용자 단말 장치로부터 발언 요청 메시지가 수신된 순서에 기초하여 상기 복수의 타 사용자 단말 장치로부터 수신된 사용자 음성에 대응되는 음성 메시지의 출력 순서를 결정하는 것을 특징으로 하는 제어 방법.
  13. 제 10 항에 있어서,
    상기 결정하는 단계는,
    상기 복수의 타 사용자 단말 장치로부터 수신된 사용자 음성에 대응되는 음성 메시지의 유사도를 분석하고, 유사도가 상이한 음성 메시지 순으로 출력 순서를 결정하는 것을 특징으로 하는 제어 방법.
  14. 제 10 항에 있어서,
    상기 출력하는 단계는,
    상기 음성 메시지에 대한 실행 아이콘을 포함하는 출력 UI를 디스플레이하며, 상기 출력 UI에 포함된 실행 아이콘에 대한 선택 명령에 따라, 상기 선택 명령에 대응되는 음성 메시지를 텍스트 및 오디오 신호 중 적어도 하나로 출력하는 것을 특징으로 하는 제어 방법.
  15. 제 10 항에 있어서,
    그룹별 채널 리스트 UI를 디스플레이하는 단계;
    상기 채널 리스트 UI에 포함된 그룹별 오브젝트 중 하나가 선택되면, 상기 선택된 오브젝트에 대응되는 그룹을 대화 상대 그룹으로 설정하는 단계; 및
    상기 대화 상대 그룹 내 포함된 복수의 타 사용자 단말 장치로 오더 음성을 전송하는 단계;
    를 더 포함하는 것을 특징으로 하는 제어 방법.
PCT/KR2016/010794 2015-12-08 2016-09-27 사용자 단말 장치 및 그 제어 방법 WO2017099338A1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US15/778,862 US11039000B2 (en) 2015-12-08 2016-09-27 User terminal device and control method therefor

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR10-2015-0174109 2015-12-08
KR20150174109 2015-12-08
KR1020160121375A KR102540311B1 (ko) 2015-12-08 2016-09-22 사용자 단말 장치 및 그 제어 방법
KR10-2016-0121375 2016-09-22

Publications (1)

Publication Number Publication Date
WO2017099338A1 true WO2017099338A1 (ko) 2017-06-15

Family

ID=59013361

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2016/010794 WO2017099338A1 (ko) 2015-12-08 2016-09-27 사용자 단말 장치 및 그 제어 방법

Country Status (1)

Country Link
WO (1) WO2017099338A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109360559A (zh) * 2018-10-23 2019-02-19 三星电子（中国）研发中心 多智能设备同时存在时处理语音指令的方法和系统
CN109451147A (zh) * 2018-10-15 2019-03-08 麒麟合盛网络技术股份有限公司 一种信息展示方法及装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040001090A1 (en) * 2002-06-27 2004-01-01 International Business Machines Corporation Indicating the context of a communication
KR20050015638A (ko) * 2003-08-07 2005-02-21 주식회사 팬택앤큐리텔 무선통신단말기에서 단문메시지서비스를 이용한 자동 응답방법
JP2010522508A (ja) * 2007-03-21 2010-07-01 クゥアルコム・インコーポレイテッド 予めプログラムされた加入者応答
KR20120035190A (ko) * 2009-06-18 2012-04-13 퀄컴 인코포레이티드 무선 통신 디바이스들의 통신 그룹의 그룹 멤버들 간의 보이스 송신들의 레코딩을 허가하는 시스템 및 방법
KR20150124644A (ko) * 2014-04-29 2015-11-06 주식회사 비티비솔루션 PTT(Push To Talk) 통신을 이용하는 단말기의 메세지 송신방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040001090A1 (en) * 2002-06-27 2004-01-01 International Business Machines Corporation Indicating the context of a communication
KR20050015638A (ko) * 2003-08-07 2005-02-21 주식회사 팬택앤큐리텔 무선통신단말기에서 단문메시지서비스를 이용한 자동 응답방법
JP2010522508A (ja) * 2007-03-21 2010-07-01 クゥアルコム・インコーポレイテッド 予めプログラムされた加入者応答
KR20120035190A (ko) * 2009-06-18 2012-04-13 퀄컴 인코포레이티드 무선 통신 디바이스들의 통신 그룹의 그룹 멤버들 간의 보이스 송신들의 레코딩을 허가하는 시스템 및 방법
KR20150124644A (ko) * 2014-04-29 2015-11-06 주식회사 비티비솔루션 PTT(Push To Talk) 통신을 이용하는 단말기의 메세지 송신방법

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109451147A (zh) * 2018-10-15 2019-03-08 麒麟合盛网络技术股份有限公司 一种信息展示方法及装置
CN109451147B (zh) * 2018-10-15 2020-11-24 麒麟合盛网络技术股份有限公司 一种信息展示方法及装置
CN109360559A (zh) * 2018-10-23 2019-02-19 三星电子（中国）研发中心 多智能设备同时存在时处理语音指令的方法和系统

Similar Documents

Publication Publication Date Title
WO2017131335A1 (ko) 사용자 단말 장치 및 그 제어 방법
WO2019088802A1 (ko) 전자 장치 및 전자 장치 간 음성으로 기능을 실행하는 방법
WO2016072635A1 (en) User terminal device and method for control thereof and system for providing contents
WO2014081076A1 (en) Head mount display and method for controlling the same
WO2016060370A1 (en) Terminal for internet of things and operation method of the same
WO2014017858A1 (en) User terminal apparatus and control method thereof
WO2015041436A1 (en) Method of managing control right, client device therefor, and master device therefor
WO2016028025A1 (en) Self-diagnosing system and method of self-diagnosing of a display device
WO2018008823A1 (en) Electronic apparatus and controlling method thereof
WO2016204483A1 (ko) 산업용 통신 장치를 제어하는 전자 장치, 방법, 및 그 산업용 통신 장치
WO2018143711A1 (en) System and method of providing sensing data to electronic device
WO2014030889A1 (en) Method and apparatus for sharing content
WO2015167236A1 (en) Electronic device and method for providing emergency video call service
WO2014104733A1 (en) Method of receiving connection information from mobile communication device, computer-readable storage medium having recorded thereon the method, and digital image-capturing apparatus
WO2016204357A1 (ko) 이동 단말기 및 그 제어 방법
WO2016080747A1 (en) User terminal and method for controlling display apparatus
WO2020226289A1 (en) Electronic apparatus, user terminal, and method of controlling the electronic apparatus and the user terminal
WO2015056867A1 (en) Display apparatus and method of controlling display apparatus
WO2015034264A1 (en) Method and apparatus for scanning channel
WO2016052849A1 (en) Display apparatus and system for providing ui, and method for providing ui of display apparatus
WO2017090931A1 (ko) 이벤트 관리 서비스를 제공하는 전자 장치 및 방법
WO2014042357A1 (ko) 화면 동기 제어 시스템, 이를 이용한 화면 동기 방법 및 장치
WO2016076472A1 (ko) 통화 제어 방법 및 시스템
WO2017034178A1 (ko) 디스플레이 장치 및 그 제어 방법
WO2017099338A1 (ko) 사용자 단말 장치 및 그 제어 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16873204

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16873204

Country of ref document: EP

Kind code of ref document: A1