WO2014133231A1 - 이동 로봇에서의 퀴즈 게임 서비스 제공 방법 및 이를 위한 이동 로봇 - Google Patents

이동 로봇에서의 퀴즈 게임 서비스 제공 방법 및 이를 위한 이동 로봇 Download PDF

Info

Publication number
WO2014133231A1
WO2014133231A1 PCT/KR2013/006567 KR2013006567W WO2014133231A1 WO 2014133231 A1 WO2014133231 A1 WO 2014133231A1 KR 2013006567 W KR2013006567 W KR 2013006567W WO 2014133231 A1 WO2014133231 A1 WO 2014133231A1
Authority
WO
WIPO (PCT)
Prior art keywords
correct answer
user
voice
descriptor
mobile robot
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/KR2013/006567
Other languages
English (en)
French (fr)
Inventor
고건
손연주
안기환
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KT Corp
Original Assignee
KT Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KT Corp filed Critical KT Corp
Publication of WO2014133231A1 publication Critical patent/WO2014133231A1/ko
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Program-controlled manipulators
    • B25J9/16Program controls
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J11/00Manipulators not otherwise provided for
    • B25J11/003Manipulators for entertainment
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F9/00Games not otherwise provided for
    • A63F9/18Question-and-answer games
    • A63F9/183Question-and-answer games electric
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63HTOYS, e.g. TOPS, DOLLS, HOOPS OR BUILDING BLOCKS
    • A63H11/00Self-movable toy figures
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J13/00Controls for manipulators
    • B25J13/08Controls for manipulators by means of sensing devices, e.g. viewing or touching devices
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Program-controlled manipulators
    • B25J9/10Program-controlled manipulators characterised by positioning means for manipulator elements
    • B25J9/12Program-controlled manipulators characterised by positioning means for manipulator elements electric
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/40Transformation of program code
    • G06F8/54Link editing before load time
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F9/00Games not otherwise provided for
    • A63F9/24Games using electronic circuits not otherwise provided for
    • A63F2009/2401Detail of input, input devices
    • A63F2009/243Detail of input, input devices with other kinds of input
    • A63F2009/2432Detail of input, input devices with other kinds of input actuated by a sound, e.g. using a microphone
    • A63F2009/2433Voice-actuated
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F9/00Games not otherwise provided for
    • A63F9/24Games using electronic circuits not otherwise provided for
    • A63F2009/2448Output devices
    • A63F2009/245Output devices visual
    • A63F2009/2457Display screens, e.g. monitors, video displays
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F9/00Games not otherwise provided for
    • A63F9/24Games using electronic circuits not otherwise provided for
    • A63F2009/2448Output devices
    • A63F2009/2479Other kinds of output
    • A63F2009/2482Electromotor
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition

Definitions

  • the present invention relates to a mobile robot technology, and more particularly, to a method for providing a quiz game service in a mobile robot and a mobile robot for the same.
  • the mobile robot drives a display unit, a speaker, a wheel, or the like in the form of a touch screen, and moves according to a user's operation or outputs a content designated by the user to the display unit.
  • Korean Laid-Open Patent Publication No. 10-2011-0026560 discloses an educational mobile robot having an event editing function.
  • the conventional mobile robot does not provide a variety of contents to the user, there is a problem that provides only a uniform service to the user.
  • the conventional mobile robot has a main function of moving according to a user's command, playing an Internet game connected to the Internet, or outputting multimedia content on the screen such as an IPTV. Accordingly, research on services for mobile robots that can induce interest of users continues.
  • the present invention has been proposed to solve such a conventional problem, and provides a method of providing a quiz game service in a mobile robot that can enjoy a quiz game among a plurality of users through a mobile robot, and a mobile robot therefor. have.
  • a method of providing a quiz game service to a plurality of users in a mobile robot the first problem of outputting a problem on the screen at the position where the screen is exposed to the problem descriptor Output stage;
  • a next problem outputting step of outputting a next problem on the screen in the moved area the first problem of outputting a problem on the screen at the position where the screen is exposed to the problem descriptor Output stage.
  • a mobile robot for providing a quiz game service to a plurality of users, the display unit for outputting a problem;
  • a storage unit for storing a plurality of problems;
  • a problem providing unit for extracting a problem from the storage unit and outputting the problem to the display unit at a position where the display unit is exposed to a problem descriptor;
  • a correct answer determining unit for identifying whether a correct answer voice for the output problem is recognized and identifying a correct answer voice as a correct answer user when the correct answer voice is recognized; And reselecting the correct answer identified by the correct answer determining unit as a problem descriptor, recognizing the location of the reselected problem descriptor, and spaced apart from the recognized position by a predetermined distance to expose the display unit to the reselected problem descriptor.
  • a descriptor selecting unit for moving the mobile robot, wherein the problem providing unit extracts a next problem from the storage unit and outputs the next problem when the movement of the mobile robot is
  • a mobile robot providing a quiz game service to a plurality of users, the display unit for outputting a problem;
  • a storage unit for storing a plurality of problems;
  • a plurality of microphones installed on the left side and the right side of the mobile robot, respectively;
  • a problem providing unit for extracting a problem from the storage unit and outputting the problem to the display unit at a position where the display unit is exposed to a problem descriptor;
  • a correct answer determining unit for identifying whether a correct answer voice for the problem is recognized and identifying a correct answer voice as a correct answer user when the correct answer voice is recognized;
  • a voice direction analyzer for analyzing a frequency of the correct answer voice received by the plurality of microphones to determine a speech direction of the correct answer voice; And reselecting the correct answer identified by the correct answer determining unit as a problem descriptor, changing the photographing angle in the utterance direction of the correct answer analyzed by the voice direction analysis unit, and recognizing the face and position of the
  • a descriptor selector for moving the mobile robot to a position spaced apart from the recognized position by a predetermined distance so that the display unit is exposed to a selected problem descriptor, wherein the problem providing unit includes the mobile robot in the direction of the reselected problem descriptor.
  • the present invention implements a quiz game service that users can enjoy using a mobile robot, thereby not only diversifying the service of the mobile robot but also increasing the utilization of the mobile robot.
  • the present invention by moving the moving robot to the correct answer position of the quiz game and induces the correct answer to explain the next problem, not only induces interest of the user, but also improves the user's quiz game immersion.
  • FIG. 1 is a view showing the configuration of a mobile robot providing a quiz game service according to an embodiment of the present invention.
  • FIG. 2 is a flowchart illustrating a method of providing a quiz game service to a user in a mobile robot according to an embodiment of the present invention.
  • FIG. 3 is a diagram illustrating a mobile robot outputting a problem in front of a problem descriptor.
  • FIG. 4 is a view showing the configuration of a mobile robot according to another embodiment of the present invention.
  • FIG. 5 is a flowchart illustrating a method of providing a quiz game service to a user in a mobile robot according to another embodiment of the present invention.
  • FIG. 1 is a view showing the configuration of a mobile robot providing a quiz game service according to an embodiment of the present invention.
  • the mobile robot 100 includes a camera 101, a driving unit 102, a storage unit 103, a microphone 104, a display unit 105, and a participant recognition unit 106. , A descriptor selector 107, a problem provider 108, a correct answer determiner 109, and a game result provider 110.
  • the camera 101 includes a lens and photographs a surrounding image using the lens.
  • the camera 101 may be rotatable and may be photographed by enlarging or reducing a subject.
  • the driving unit 260 includes a moving means such as a wheel, and moves the mobile robot 100 under the control of the participant recognition unit 106 or the descriptor selection unit 107.
  • the storage unit 103 stores map data in which space-specific coordinate information of the home is recorded, and also stores location information of each user participating in the game.
  • the storage unit 103 also stores a plurality of quiz information in which the problem information and the correct answer information are recorded together.
  • the storage unit 103 stores user information in which face images, voice patterns, and names are mapped for each user.
  • the microphone 104 is a microphone that receives a voice of a user, and a plurality of microphones 104 may be mounted in the mobile robot 100. In the case of two microphones 104, the first microphone is installed on the left side of the mobile robot 100, and the second microphone is installed on the right side of the mobile robot 100.
  • the display unit 105 is a display means such as a liquid crystal display (LCD), an organic electroluminescence display, a light emitting diode (LED), and the like, and displays various information processed by the mobile robot 100. .
  • the display unit 105 is a touch screen, and additionally performs a function of an input means to receive an operation signal from a user.
  • the participant recognition unit 106 recognizes each user participating in the game, and performs a function of identifying the location of each user. Specifically, when the participant recognition unit 160 receives a quiz game start request from a specific user, the participant recognition unit 160 rotates the camera 101 to take a face image of each user participating in the game. The participant recognition unit 106 recognizes each user participating in the game by checking the user name mapped to the photographed face image of each user in the user information of the storage unit 103. In addition, the participant recognition unit 106 identifies the area where each user is located on the photographed image and analyzes the location area of each user by comparing with the map data of the storage unit 103, thereby determining the location in the space where each user is located. The information (that is, coordinate information) is checked and the user-specific location information is stored in the storage unit 103.
  • the participant recognition unit 106 determines that a new user who is not registered participates in the quiz game when a face image that is not matched with each face image stored in the user information of the storage unit 103 does not match or exceeds a threshold value.
  • a voice and a name are received from the new user, and the name, the voice pattern, and the face image of the new user which have been photographed are mapped and stored in the user information of the storage unit 103. That is, if the participant recognition unit 106 does not recognize the face of the user participating in the game, the participant recognition unit 106 obtains the name, voice pattern and face image of the user and stores it in the user information of the storage unit 103.
  • the descriptor selecting unit 107 selects a problem descriptor and controls the driving unit 102 to move the moving robot 100 to a position spaced apart from the selected problem descriptor by a predetermined distance (for example, 20 cm). That is, the descriptor selecting unit 107 checks the location information of the problem descriptor based on the user-specific location information of the storage unit 103, and controls the driving unit 102 to space the predetermined distance (eg, 20 cm) from the problem descriptor. The mobile robot 100 is moved to the positioned position.
  • a predetermined distance for example, 20 cm
  • the descriptor selecting unit 107 controls the driving unit 102 so that the display unit 105 of the mobile robot 100, which outputs a problem, is exposed only to the problem descriptor, thereby moving the mobile robot 100 to the front of the problem descriptor. Position it.
  • the descriptor selection unit 107 before the first problem is output, the user located near the front of the mobile robot 100 may be selected as a problem descriptor, randomly selecting a problem descriptor from the users participating in the game. Can be.
  • the descriptor selecting unit 107 reselects a user who has correct answer to the problem as a quiz descriptor, checks the location information of the reselected quiz descriptor in the storage unit 103, and then controls the driving unit 102 to re-select the user.
  • the mobile robot 100 is moved to a place spaced a predetermined distance (for example, 20 cm) from the selected problem descriptor.
  • the problem providing unit 108 extracts any one of a plurality of problems stored in the storage unit 103 and outputs the problem to the display unit 105. , Let the quiz game run between users.
  • the correct answer determining unit 109 includes a voice recognition module 109a for recognizing a user's voice, and uses the voice recognition module 109a to identify a user who has uttered a correct answer among users except for a problem descriptor. To perform. Specifically, the correct answer determination unit 109 checks the correct answer for the problem being output to the display unit 105 in the storage unit 103 and determines whether the voice corresponding to the correct answer is received from the microphone 104. Continuous monitoring using 109a. Preferably, the correct answer determination unit 109 checks the voice pattern of the problem descriptor in the storage unit 103 and continuously monitors the voices of other users except the voice pattern of the problem descriptor.
  • the correct answer determining unit 109 maps the user's name mapped to the voice pattern matching the voice pattern more than the threshold (for example, 70%). Check in the storage unit 103, and increases the number of correct answers for this user '1' or increase the quiz score.
  • the game result providing unit 110 checks the number of correct answers or quiz score for each user when the last problem is solved, and stores the correct number of answers or quiz score for each user in the storage unit 103 together with the current date and time. Save it. In addition, the game result providing unit 110 outputs the number of correct answers for each user or the quiz score to the display unit 105, thereby recognizing the result of the quiz game to a plurality of users.
  • FIG. 2 is a flowchart illustrating a method of providing a quiz game service to a user in a mobile robot according to an embodiment of the present invention.
  • FIG. 3 is a diagram illustrating a mobile robot outputting a problem in front of a problem descriptor.
  • the mobile robot 100 receives a quiz game start request from one user among a plurality of users participating in the game (S201).
  • the participant recognition unit 106 rotates the camera 101 in a predetermined direction (for example, clockwise or counterclockwise) to sequentially capture images of each user participating in the game, thereby obtaining a face image of each user.
  • the participant recognition unit 106 may control the driving unit 102 to rotate the mobile robot 100 by 360 ° to sequentially photograph the faces of the users participating in the game to obtain face images of each user.
  • the participant recognition unit 106 may obtain a face image of each user by enlarging and temporarily storing the face area of each user in the entire image photographed by the camera 101.
  • the participant recognition unit 106 determines whether the face image matching the captured face image of each user by more than a threshold value (for example, 70%) is stored in the user information of the storage unit 103 for each face image.
  • a threshold value for example, 70%
  • the participant recognition unit 106 determines that a new user who is not registered has participated in the quiz game when a face image which does not match each face image stored in the user information of the storage unit 103 is greater than or equal to a threshold value.
  • the display unit 105 outputs a message requesting input of the user's information.
  • the participant recognition unit 106 receives the name and voice of the new user through the microphone 104 and an input unit (for example, a touch screen), and analyzes the voice to determine the voice of the new user's voice, such as the height and frequency of the new user. After confirming the pattern, the new user's name, voice pattern, and the photographed face image of the new user are mapped and stored in the user information of the storage unit 103 to complete registration of the new user (S207).
  • the participant recognition unit 106 stores the user name mapped to each face image when the photographed face image of each user is registered in the user information of the storage unit 103 or the registration of a new user is completed. By identifying each in the user information, the game participants are identified. Next, the participant recognition unit 106 checks the area where each user is located on the photographed image, and analyzes the location area for each user by comparing the identified location area with the map data of the storage unit 103, where each user is located. The location information (ie, coordinate information) on the space is checked and stored in the storage unit 103 (S209).
  • the participant recognition unit 106 instructs the descriptor selection unit 107 to proceed with the quiz game.
  • the descriptor selector 107 selects any one user from among the users who participated in the game as the problem descriptor (S211).
  • the descriptor selector 107 may select a user located near the front of the user (ie, the front of the camera) as the problem descriptor, or may arbitrarily select any user among the plurality of users as the problem descriptor.
  • the descriptor selecting unit 107 checks the location information of the selected problem descriptor based on the location information for each user stored in the storage unit 103, and controls the driving unit 102 so as to have a predetermined distance (eg, 20 cm) from the problem descriptor. ) Move the mobile robot 100 to a spaced position. In this case, the descriptor selecting unit 107 controls the driving unit 102 to position the mobile robot 100 in front of the problem descriptor so that the display unit 105 of the mobile robot 100 having a problem is output is exposed only to the user. . For example, referring to FIG.
  • the descriptor selecting unit 107 selects the user 31 as the problem descriptor
  • the screen (that is, the display unit) of the mobile robot 100 is the problem descriptor
  • the driver 102 is controlled to position only the mobile robot 100 at a position spaced apart from the problem descriptor 31 by a predetermined distance (for example, 20 cm) so as to be exposed only to the 31.
  • the descriptor selection unit 107 thus moves the mobile robot 100 to the problem descriptor, and then requests the problem provider 108 to provide a problem.
  • the problem providing unit 108 extracts any one problem from among the plurality of problems stored in the storage unit 103 and outputs it to the display unit 105 (S213).
  • the problem may be the word itself, may be a question sentence explaining the correct answer, or may be an image of a person / animal or the like.
  • the problem descriptor explains the word or image (eg, animal, etc.) to another user and asks for a correct answer to the problem.
  • the problem descriptor may ask another user to solve the problem by reading the sentence output to the display unit 105.
  • the problem providing unit 108 outputs the word 'butterfly' to the display unit 105 that is only exposed to the problem descriptor (that is, the user of reference numeral 31).
  • the problem descriptor then describes the word 'butterfly' by another user (32, 33, 34) and induces another user (32, 33, 34) to speak the correct answer (ie, a butterfly).
  • the correct answer determination unit 109 checks the correct answer for the problem being output to the display unit 105 in the storage unit 103, and determines whether or not a voice matching the correct answer is recognized. By continuously monitoring using the voice recognition module 109a, it is determined whether a voice matching the correct answer is recognized (S215, S217).
  • the correct answer determination unit 109 checks the voice pattern of the problem descriptor in the storage unit 103 and continuously monitors the voices of other users except the voice pattern of the problem descriptor.
  • the correct answer determining unit 109 stores the voice pattern that matches the voice pattern more than a threshold value (for example, 70%) or more. Check in the user information.
  • the correct answer determining unit 109 identifies the user (ie, the correct answerer) who uttered the correct answer by confirming the user's name mapped to the confirmed speech pattern in the user information of the storage unit 103 (S219).
  • the correct answer determination unit 109 may output a voice message indicating that the identified user is the correct answer to the speaker (not shown).
  • the correct answer determination unit 109 increases the number of correct answers of the identified user by '1' (S221). Alternatively, the correct answer determination unit 109 may increase the quiz score of the identified user by the score assigned to the problem. Next, the correct answer determination unit 109 checks whether or not the corrected problem is the last problem based on the preset quiz number (S223), and if the last problem, instructs the game result output unit 110 to output the game result. do.
  • the game result providing unit 110 checks the number of correct answers or quiz scores for each user (S225), and stores the checked number of correct answers or quiz scores for each user in the storage unit 103 together with the current date and time.
  • the game result providing unit 110 outputs the number of correct answers for each user or the quiz score to the display unit 105 to recognize the quiz game result to a plurality of users (S227).
  • the game result providing unit 110 may output a voice message indicating that the user with the highest number of correct answers or the user with the highest quiz score is first place to a speaker (not shown).
  • step S223 the correct answer determination unit 109 transfers the name of the user identified as the correct answer to the descriptor selection unit 107, if the problem that was corrected is not the last problem, the descriptor selection unit to re-select the problem descriptor. To 107.
  • the descriptor selecting unit 107 checks the name of the user received from the correct answer determining unit 109, and reselects the user (that is, the correct answerer) as the quiz descriptor (S229).
  • the descriptor selection unit 107 checks the location information of the reselected quiz descriptor in the storage unit 103 (S231).
  • the descriptor selecting unit 107 controls the driving unit 102 to move the mobile robot 100 to a place spaced apart from the reselected problem descriptor by a predetermined distance (for example, 20 cm) (S233).
  • the descriptor selector 107 controls the driving unit 102 to expose only the problem descriptor that reselects the display unit 105 of the mobile robot 100 in which the problem is output. Position it in front of you.
  • the descriptor selecting unit 107 controls the driving unit 102 so that the mobile robot 100 looks in the direction of the reselected problem descriptor based on the position information of the reselected problem descriptor to control the mobile robot 100. After the rotation, the mobile robot 100 is moved to a position spaced apart from the position of the problem descriptor reselected by a predetermined distance (for example, 20 cm).
  • the correct answer determining unit 109 recognizes that the user 32 is the correct answer when the user 32 utters the correct answer 'butterfly'. Then, the descriptor selector 107 reselects the correct answerer 32 as a problem descriptor, and checks the location information of the correct answerer 32 in the user-specific location information of the storage 103. The descriptor selector 107 controls the driver 102 to move the mobile robot 100 to a position spaced apart from the position of the problem descriptor reselected by a predetermined distance (for example, 20 cm) (that is, reference numeral 40). .
  • a predetermined distance for example, 20 cm
  • the descriptor selecting unit 107 instructs the problem providing unit 108 to output a problem, and extracts a problem different from the previously output from the storage unit 103 to display the display unit ( 105) (S235).
  • the correct answer determination unit 109 checks the correct answer for the problem being output to the display unit 105 in the storage unit 103, and uses the speech recognition module 109a to determine whether or not the voice matching the correct answer is recognized. Rerun step S215 to continuously monitor.
  • the mobile robot 100 may analyze the voice phase and the intensity of the correct answer, to determine the position of the correct answer.
  • FIG. 4 is a view showing the configuration of a mobile robot according to another embodiment of the present invention.
  • FIG. 4 the components having the same reference numerals in FIG. 1 perform the same functions as the components described with reference to FIGS. 1 and 2. Therefore, only components having the same reference numerals as those of FIG. 1 among the components described in FIG. 4 will be described.
  • the mobile robot 400 includes a camera 101, a driving unit 102, a storage unit 103, a microphone 104, a display unit 105, and a voice direction analysis unit. 406, a descriptor selecting unit 407, a problem providing unit 108, a correct answer determining unit 109, and a game result providing unit 110.
  • the voice direction analyzer 406 analyzes the frequency, phase, and intensity of the voice recognized as the correct answer in cooperation with the voice recognition module 109a to determine the direction in which the correct voice is spoken. Specifically, the voice direction analyzer 406 checks the frequency range of the correct answer voice recognized by the voice recognition module 109a, and if the correct answer voice is a high frequency (eg, a frequency of 3000 Hz or more), each microphone 104 provided on both sides thereof. Calculates the difference in intensity of the correct answer received in In addition, the voice direction analysis unit 406 is a direction in which the correct voice is uttered when the difference in the voice intensity between the right microphone and the left microphone is greater than or equal to a preset threshold intensity.
  • a high frequency eg, a frequency of 3000 Hz or more
  • the voice direction analyzer 406 determines that the direction in which the correct voice is spoken is the rear of the mobile robot 400 when the difference in the correct voice intensity received from the two microphones 104 is less than a preset threshold intensity. In response, the backward direction information is transmitted to the descriptor selection unit 407.
  • the voice direction analyzer 406 determines that a time difference (ie, phase difference) when the correct voice is received from the right microphone and the left microphone when the correct voice recognized by the voice recognition module 109a is a low frequency (for example, a frequency of 1500 Hz or less). And determine whether the calculated time difference is less than a preset threshold time (eg, 0.8 milliseconds). In addition, the voice direction analyzer 406 determines that the direction in which the correct voice is first received is the direction in which the correct voice is uttered when the time difference between the right and left microphones is greater than or equal to a preset threshold time. After determining, the correct answer voice direction information is transmitted to the descriptor selection unit 407.
  • a time difference ie, phase difference
  • the voice direction analysis unit 406 is the direction of the correct answer voice is the rear direction of the mobile robot 400 if the time difference received by the correct answer voice from the left microphone 104 and the right microphone is less than a predetermined threshold time.
  • the backward direction information is transmitted to the descriptor selection unit 407.
  • the voice direction analyzer 406 transmits a message to the descriptor selector 407 indicating that direction confirmation is impossible when the voice recognized as the correct answer corresponds to an intermediate frequency (eg, a frequency exceeding 1500 Hz and below 3000 Hz). .
  • an intermediate frequency eg, a frequency exceeding 1500 Hz and below 3000 Hz.
  • the descriptor selector 407 selects a problem descriptor and recognizes the location of the problem descriptor based on the image captured by the camera 101 and the correct voice direction information received from the audio direction analyzer 406.
  • the mobile robot 400 is moved to a position spaced apart from the predetermined distance (for example, 20 cm).
  • the descriptor selecting unit 407 reselects the correct answer as the problem descriptor and describes the correct speech direction (that is, the problem of reselecting the camera 101) based on the correct speech direction information received from the voice direction analyzer 406.
  • Direction of the ruler to change the photographing angle of the camera 101 to the direction of the problem descriptor, and recognize the face of the problem descriptor reselected by the camera 101.
  • the descriptor selection unit 407 receives a message indicating that the direction confirmation is impossible to the descriptor selection unit 407, by rotating the camera 101 in a predetermined direction (for example, right or left), the game, After sequentially photographing the faces of all the users who participated in, the plurality of face images photographed as described above are analyzed to recognize the faces of the re-selected problem descriptors.
  • the descriptor selector 407 recognizes the position of the problem descriptor based on the direction in which the face of the problem descriptor is recognized and the distance of the problem descriptor, and then controls the driving unit 102 to determine the position and the predetermined distance of the problem descriptor.
  • the moving robot 400 is moved to a spaced position.
  • the descriptor selector 407 selects a user located in front of the mobile robot 400 as the problem descriptor when the first problem is outputted.
  • FIG. 5 is a flowchart illustrating a method of providing a quiz game service to a user in a mobile robot according to another embodiment of the present invention.
  • the mobile robot 400 receives a quiz game start request from the user in a state where the mobile robot 400 is located in front of the user who will explain the first problem (S501).
  • the display unit 105 of the mobile robot 400 that the problem is output is preferably exposed only to the user. That is, the user who described the first problem places the mobile robot 400 in front of the user with the display unit 105 of the mobile robot 400 exposed only to himself, and among the plurality of service menus implemented in the mobile robot 400.
  • To enter the quiz game start menu request the start of the quiz game to the mobile robot (400).
  • the mobile robot 400 is located in front of the user 31 who will explain the first problem among the plurality of users, and requests a quiz game start from the user 31. Receive an operation signal.
  • the descriptor selector 407 photographs the face image of the user located in front of the camera using the camera 101 (S503), and the face image whose similarity with the photographed face image is equal to or greater than a threshold value (for example, 70%). It is checked whether or not the information is stored in the user information of the storage unit 103 (S505).
  • a threshold value for example, 70%
  • the descriptor selector 407 determines that the user is an unregistered user at a position in front of the user when the face image having a similarity to the photographed face image having a threshold value or more is not stored in the user information of the storage unit 103.
  • a message requesting input i.e., name and voice
  • the descriptor selector 407 receives a user's name and voice from a user located in front of the mobile robot 400, analyzes the voice, and then checks a voice pattern such as height and frequency of the new user's voice.
  • the new user's name, voice pattern, and the photographed face image of the new user are mapped and stored in the user information of the storage unit 103 to complete registration of the new user (S507).
  • the descriptor selecting unit 407 stores the face image that matches the photographed user's face image more than a threshold value in the user information of the storage unit 103 or when the registration of the user located in front is completed.
  • the user mapped to the face image is identified in the user information of the storage unit 103 to identify a user located in front of the mobile robot 400 (S509).
  • the descriptor selector 407 selects the user thus identified as the quiz descriptor (S511), and then requests the problem provider 108 to provide a problem.
  • the problem providing unit 108 extracts any one problem from among the plurality of problems stored in the storage unit 103 and outputs it to the display unit 105 (S513).
  • the correct answer determination unit 109 confirms the correct answer to the problem being output to the display unit 105 in the storage unit 103, and the voice corresponding to the correct answer is the microphone 104. It is continuously monitored using the voice recognition module 109a whether it is recognized through (S515, S517). Preferably, the correct answer determination unit 109 checks the voice pattern of the problem descriptor in the storage unit 103 and continuously monitors the voices of other users except the voice pattern of the problem descriptor.
  • the correct answer determiner 109 stores the voice pattern that matches the voice pattern more than a threshold (eg, 70%) or more. Check in the user information of). Subsequently, the correct answer determination unit 109 identifies the user (ie, the correct answerer) who uttered the correct answer by confirming the user's name mapped to the confirmed speech pattern in the user information of the storage unit 103 (S519). .
  • a threshold eg, 70%
  • the correct answer determination unit 109 increases the number of correct answers of the identified user by '1' (S521). Alternatively, the correct answer determination unit 109 may increase the quiz score of the identified user by the score assigned to the problem. Next, the correct answer determination unit 109 checks whether or not the corrected problem is the last problem based on the preset quiz number (S523), and if the last problem, instructs the game result output unit 110 to output the game result. do.
  • the game result providing unit 110 checks the number of correct answers or quiz scores for each user (S525), and stores the identified number of correct answers or quiz scores for each user in the storage unit 103 together with the current date and time.
  • the game result providing unit 110 outputs the number of correct answers for each user or the quiz score to the display unit 105 to recognize the quiz game result to a plurality of users (S527).
  • step S523 the correct answer determination unit 109 transfers the name of the user identified as the correct answer to the descriptor selection unit 107, if the problem that is corrected is not the last problem, the descriptor selection unit to reselect the problem descriptor. To 107.
  • the descriptor selecting unit 107 checks the name of the user received from the correct answer determining unit 109 and reselects the user (that is, the correct answerer) as the quiz descriptor (S529), and answers the answer to the voice direction analyzing unit 406. Request an analysis of this uttered direction. Subsequently, the voice direction analyzer 406 analyzes the phase and intensity of the voice recognized as the correct answer, and analyzes the direction in which the voice is spoken (S531), and the analyzed direction (for example, backward direction, right direction or left side). Direction) to the descriptor selection unit 407.
  • the voice direction analyzer 406 determines whether the correct answer voice recognized by the voice recognition module 109a is a high frequency, an intermediate frequency, or a low frequency. In addition, when the voice corresponds to a high frequency (eg, a frequency of 3000 Hz or more), the voice direction analyzer 406 checks the strength of the correct answer voice received from each microphone 104 provided at both sides, and thus, the two microphones 104. Calculate the difference in voice intensity. Subsequently, when the difference between the voice intensities of the right microphone and the left microphone is equal to or greater than a preset threshold intensity, the voice direction analyzer 406 receives the loudest voice intensity (left or right) in which the correct voice is spoken.
  • a high frequency eg, a frequency of 3000 Hz or more
  • the voice direction analyzer 406 checks the strength of the correct answer voice received from each microphone 104 provided at both sides, and thus, the two microphones 104. Calculate the difference in voice intensity. Subsequently, when the difference between the voice intensities of
  • the voice direction analyzer 406 may have a difference between voice intensities of the right microphone and the left microphone, which is greater than or equal to a preset threshold strength, and the intensity of the correct answer received from the left microphone is greater than that of the correct answer received from the right microphone. In this case, it is determined that the correct answer voice is uttered in the left direction.
  • the voice direction analyzer 406 determines that the direction in which the correct answer is spoken is the rear direction of the mobile robot 400 when the difference between the voice intensities of the right and left microphones is less than a preset threshold difference.
  • the voice direction analyzer 406 determines a time difference between the right and left microphones. That is, it is checked whether the phase difference) is less than a preset threshold time (for example, 0.8 milliseconds). Next, the voice direction analysis unit 406 checks whether the microphone first received by the correct answer voice is the left or right microphone when the time difference in which the correct answer arrives at each of the right microphone and the left microphone is greater than or equal to a preset threshold time. The microphone is determined to be the direction in which the correct answer is spoken. On the other hand, the voice direction analyzer 406 indicates that the direction in which the correct answer is spoken is the rear of the mobile robot 400 when the time difference between the right and left microphones is less than a preset threshold time. To judge.
  • a preset threshold time for example, 0.8 milliseconds
  • the voice direction analyzer 406 transmits a message to the descriptor selector 407 indicating that direction confirmation is impossible when the voice recognized as the correct answer corresponds to an intermediate frequency (eg, a frequency exceeding 1500 Hz and below 3000 Hz). .
  • an intermediate frequency eg, a frequency exceeding 1500 Hz and below 3000 Hz.
  • the descriptor selecting unit 407 extracts the face image mapped to the name of the user reselected as the problem descriptor from the user information of the storage unit 103 and the camera in the direction received from the voice direction analyzing unit 406.
  • the photographing angle of the camera 101 is changed in the direction of the problem descriptor (i.e., the correct answer), which is reselected (S533).
  • the descriptor selector 407 rotates the camera 101 by 90 ° in the right direction when the right direction is transmitted from the voice direction analyzer 406, and rotates 90 ° in the left direction when the left direction is received, and backwards. If received, the camera 101 can be rotated 180 ° to photograph the rear direction.
  • the descriptor selector 407 acquires a face image of the user through the rotated camera 101 and checks the similarity between the face image and the face image of the extracted user (ie, a user reselected as a problem descriptor). By checking whether the similarity is equal to or greater than the threshold (eg, 70%), the user's face reselected as the problem descriptor is recognized (S535).
  • the threshold eg, 70%
  • the descriptor selection unit 407 receives a message indicating that the direction confirmation is impossible to the descriptor selection unit 407, by rotating the camera 101 in a predetermined direction (for example, right, left) by 360 °, the game Recognizing the face of the problem descriptor reselected by acquiring the face images of all the users who participated in the sequential order and checking the similarity between the face image of each user thus obtained and the face image of the user who is reselected as the problem descriptor.
  • a predetermined direction for example, right, left
  • the descriptor selection unit 407 recognizes the problem descriptor (reselected) from the image photographed by the camera 101 when the face image having a matching degree equal to or greater than the threshold image of the problem descriptor (ie, the correct answerer) reselected is recognized. That is, the direction of the correct face of the correct answerer is checked, and the distance of the correct answerer is measured.
  • the descriptor selecting unit 407 analyzes an image of a problem descriptor photographed for face recognition, and measures a distance between the mobile robot 400 and the problem descriptor, and has a self-contained distance measuring sensor (not shown in the drawing). May measure the distance between the mobile robot 400 and the problem descriptor.
  • the descriptor selecting unit 407 recognizes the position of the reselected problem descriptor based on the direction recognized by the face of the reselected problem descriptor and the distance of the problem descriptor (S537).
  • the descriptor selector 407 rotates the mobile robot 400 by controlling the driver 102 so that the mobile robot 400 looks in the direction in which the face of the reselected problem descriptor is recognized.
  • the descriptor selecting unit 407 controls the driving unit 102 to move the mobile robot 400 to a position spaced apart from the position of the problem descriptor reselected by a predetermined distance (for example, 20 cm) (S539).
  • the descriptor selecting unit 407 controls the driving unit 102 to move the mobile robot 400 by controlling the driving unit 102 so that the display unit 105 is positioned in front of the reselected user.
  • the descriptor selecting unit 407 instructs the problem providing unit 108 to output a problem, and extracts a problem different from the previously output problem from the storage unit 103 to display the display unit ( 105) (S541).
  • the correct answer determination unit 109 checks the correct answer for the problem being output to the display unit 105 in the storage unit 103, and uses the speech recognition module 109a to determine whether or not the voice matching the correct answer is recognized. The process continues to monitor S515 continuously.
  • the correct answer determination unit 109 It is determined that the user is an unregistered user, and outputs a message requesting input of user information to the display unit 105 or a speaker.
  • the correct answer determiner 109 captures a face from the user who uttered the correct answer and receives a name, and then maps the pattern of the voice recognized as the correct answer, the face image and the name of the user, and the user information of the storage 103.
  • the method of the present invention as described above may be implemented as a program and stored in a recording medium (CD-ROM, RAM, ROM, floppy disk, hard disk, magneto-optical disk, etc.) in a computer-readable form. Since this process can be easily implemented by those skilled in the art will not be described in more detail.
  • a recording medium CD-ROM, RAM, ROM, floppy disk, hard disk, magneto-optical disk, etc.

Landscapes

  • Engineering & Computer Science (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Manipulator (AREA)

Abstract

본 발명은 이동 로봇에서의 퀴즈 게임 서비스 제공 방법 및 이를 위한 이동 로봇에 관한 것이다. 본 발명에 따른, 이동 로봇에서 복수의 사용자에게 퀴즈 게임 서비스를 제공하는 방법은, 문제 설명자에게 화면이 노출된 위치에서, 문제를 상기 화면에 출력하는 첫 문제 출력 단계; 상기 출력중인 문제에 대한 정답 음성이 인식되는지 여부를 확인하는 정답 확인 단계; 상기 확인 결과 상기 정답 음성이 인식되면 이 정답 음성을 발화한 사용자를 문제 설명자로 재선정하고, 상기 재선정한 문제 설명자의 위치를 인식하는 위치 인식 단계; 상기 재선정한 문제 설명자에게 상기 화면이 노출되도록 상기 인식한 위치와 일정 거리만큼 이격된 위치로 이동하는 이동 단계; 및 상기 이동한 지역에서 다음 문제를 상기 화면에 출력하는 다음 문제 출력 단계를 포함한다.

Description

이동 로봇에서의 퀴즈 게임 서비스 제공 방법 및 이를 위한 이동 로봇
본 발명은 이동 로봇 기술에 관한 것으로서, 더욱 상세하게는 이동 로봇에서의 퀴즈 게임 서비스 제공 방법 및 이를 위한 이동 로봇에 관한 것이다.
본 발명은 2013년 02월 27일에 출원된 한국특허출원 제10-2013-0021133호에 기초한 우선권을 주장하며, 해당 출원의 명세서 및 도면에 개시된 모든 내용은 본 출원에 원용된다.
이동 가능한 로봇이 개발되어 출시됨에 따라, 사용자들은 댁내에서도 이동 로봇을 이용할 수 있게 되었다. 이러한 이동 로봇은 터치 스크린 형태의 표시부, 스피커, 바퀴 등을 구동하여, 사용자의 조작에 따라 이동하거나 사용자가 지정한 콘텐츠를 표시부에 출력한다. 한국공개특허공보 10-2011-0026560호는 이벤트 편집 기능을 가지는 교육용 이동 로봇에 대해서 개시하고 있다.
그런데 종래의 이동 로봇은 다양한 콘텐츠를 사용자에게 제공하지 못하고, 단지 획일적인 서비스만을 사용자에게 제공하고 있는 문제점이 있다. 즉, 종래의 이동 로봇은 사용자의 명령에 따라 이동하거나, 인터넷에 연결되어 인터넷 게임을 실행하거나, IPTV와 같이 멀티미디어 콘텐츠를 화면에 출력하는 것이 주된 기능이다. 이에 따라, 사용자의 흥미를 유발할 수 있는 이동 로봇에 대한 서비스 연구가 계속되고 있다.
본 발명은 이러한 종래의 문제점을 해결하기 위하여 제안된 것으로, 이동 로봇을 통하여 복수의 사용자들끼리 퀴즈 게임을 즐길 수 있는 이동 로봇에서의 퀴즈 게임 서비스 제공 방법 및 이를 위한 이동 로봇을 제공하는데 그 목적이 있다.
본 발명의 다른 목적 및 장점들은 하기의 설명에 의해서 이해될 수 있으며, 본 발명의 실시예에 의해 보다 분명하게 알게 될 것이다. 또한, 본 발명의 목적 및 장점들은 특허 청구 범위에 나타낸 수단 및 그 조합에 의해 실현될 수 있음을 쉽게 알 수 있을 것이다.
상기 목적을 달성하기 위한 본 발명의 제 1 측면에 따른, 이동 로봇에서 복수의 사용자에게 퀴즈 게임 서비스를 제공하는 방법은, 문제 설명자에게 화면이 노출된 위치에서, 문제를 상기 화면에 출력하는 첫 문제 출력 단계; 상기 출력중인 문제에 대한 정답 음성이 인식되는지 여부를 확인하는 정답 확인 단계; 상기 확인 결과 상기 정답 음성이 인식되면 이 정답 음성을 발화한 사용자를 문제 설명자로 재선정하고, 상기 재선정한 문제 설명자의 위치를 인식하는 위치 인식 단계; 상기 재선정한 문제 설명자에게 상기 화면이 노출되도록 상기 인식한 위치와 일정 거리만큼 이격된 위치로 이동하는 이동 단계; 및 상기 이동한 지역에서 다음 문제를 상기 화면에 출력하는 다음 문제 출력 단계를 포함하는 것을 특징으로 한다.
상기 목적을 달성하기 위한 본 발명의 제 2 측면에 따른 복수의 사용자에게 퀴즈 게임 서비스를 제공하는 이동 로봇은, 문제를 출력하는 표시부; 복수의 문제를 저장하는 저장부; 상기 표시부를 문제 설명자에게 노출한 위치에서, 상기 저장부에서 문제를 추출하여 상기 표시부에 출력하는 문제 제공부; 상기 출력중인 문제에 대한 정답 음성이 인식되는지 여부를 확인하여 정답 음성이 인식되면, 이 정답 음성을 발화한 사용자를 정답자로 식별하는 정답 판정부; 및 정답 판정부에 의해 식별된 정답자를 문제 설명자로 재선정하여 상기 재선정한 문제 설명자의 위치를 인식하고, 상기 재선정한 문제 설명자에게 상기 표시부가 노출되도록 상기 인식한 위치와 일정 거리만큼 이격된 위치로 상기 이동 로봇을 이동시키는 설명자 선정부를 포함하고, 상기 문제 제공부는 재선정된 문제 설명자의 방향으로 상기 이동 로봇의 이동이 완료되면, 다음 문제를 상기 저장부에서 추출하여 상기 표시부에 출력하는 것을 특징으로 한다.
상기 목적을 달성하기 위한 본 발명의 제 3 측면에 따른 복수의 사용자에게 퀴즈 게임 서비스를 제공하는 이동 로봇은, 문제를 출력하는 표시부; 복수의 문제를 저장하는 저장부; 상기 이동 로봇의 왼쪽 측면과 오른쪽 측면에 각각 설치된 복수의 마이크; 상기 표시부를 문제 설명자에게 노출한 위치에서, 상기 저장부에서 문제를 추출하여 상기 표시부에 출력하는 문제 제공부; 상기 문제에 대한 정답 음성이 인식되는지 여부를 확인하여 정답 음성이 인식되면, 이 정답 음성을 발화한 사용자를 정답자로 식별하는 정답 판정부; 상기 복수의 마이크에서 수신한 상기 정답 음성의 주파수를 분석하여 상기 정답 음성의 발화 방향을 판단하는 음성방향 분석부; 및 상기 정답 판정부에 의해 식별된 정답자를 문제 설명자로 재선정하고, 상기 음성방향 분석부에서 분석한 상기 정답 음성의 발화 방향으로 촬영각도를 변경시켜 문제 설명자의 얼굴과 위치를 인식한 후, 상기 재선정한 문제 설명자에게 상기 표시부가 노출되도록 상기 인식한 위치와 일정 거리만큼 이격된 위치로 상기 이동 로봇을 이동시키는 설명자 선정부;를 포함하고, 상기 문제 제공부는 재선정된 문제 설명자의 방향으로 상기 이동 로봇의 이동이 완료되면, 다음 문제를 상기 저장부에서 추출하여 상기 표시부에 출력하는 것을 특징으로 한다.
본 발명은 사용자들이 이동 로봇을 이용하여 즐길 수 있는 퀴즈 게임 서비스를 구현함으로써, 이동 로봇의 서비스를 다양화시킬 뿐만 아니라 이동 로봇의 활용도를 상승시키는 장점이 있다.
또한, 본 발명은 퀴즈 게임의 정답자 위치로 이동 로봇을 이동시키고 정답자로 하여금 다음 문제를 설명하도록 유도함으로써, 사용자의 흥미를 유발할 뿐만 아니라 사용자의 퀴즈 게임 몰입도를 향상시키는 효과도 있다.
본 명세서에 첨부되는 다음의 도면들은 본 발명의 바람직한 실시예를 예시하는 것이며, 발명을 실시하기 위한 구체적인 내용과 함께 본 발명의 기술사상을 더욱 이해시키는 역할을 하는 것이므로, 본 발명은 그러한 도면에 기재된 사항에만 한정되어 해석되어서는 아니 된다.
도 1은 본 발명의 일 실시예에 따른, 퀴즈 게임 서비스를 제공하는 이동 로봇의 구성을 나타내는 도면이다.
도 2는 본 발명의 일 실시예에 따른, 이동 로봇에서 퀴즈 게임 서비스를 사용자에게 제공하는 방법을 설명하는 흐름도이다.
도 3은 문제 설명자 앞에서 문제를 출력하는 이동 로봇을 나타내는 도면이다.
도 4는 본 발명의 다른 실시예에 따른, 이동 로봇의 구성을 나타내는 도면이다.
도 5는 본 발명의 다른 실시예에 따른, 이동 로봇에서 퀴즈 게임 서비스를 사용자에게 제공하는 방법을 설명하는 흐름도이다.
상술한 목적, 특징 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해 질 것이며, 그에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 또한, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 일 실시예를 상세히 설명하기로 한다.
명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다. 또한, 명세서에 기재된 "…부", "모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.
도 1은 본 발명의 일 실시예에 따른, 퀴즈 게임 서비스를 제공하는 이동 로봇의 구성을 나타내는 도면이다.
도 1에 도시된 바와 같이, 본 발명에 따른 이동 로봇(100)은 카메라(101), 구동부(102), 저장부(103), 마이크(104), 표시부(105), 참여자 인식부(106), 설명자 선정부(107), 문제 제공부(108), 정답 판정부(109) 및 게임결과 제공부(110)를 포함한다.
카메라(101)는 렌즈를 포함하고 이 렌즈를 이용하여 주변 영상을 촬영한다. 상기 카메라(101)는 회전 가능하며, 피사체를 확대하거나 축소하여 촬영할 수 있다.
구동부(260)는 바퀴 등과 같은 이동 수단을 구비하고, 참여자 인식부(106) 또는 설명자 선정부(107)의 제어에 따라 이동 로봇(100)을 이동시킨다.
저장부(103)는 댁내의 공간별 좌표정보가 기록된 맵 데이터를 저장하고, 더불어 게임에 참여한 사용자별 위치정보를 저장한다. 또한, 저장부(103)는 문제 정보와 정답 정보가 함께 기록된 복수의 퀴즈 정보를 저장한다. 게다가, 저장부(103)는 얼굴 이미지, 음성 패턴과 성명이 사용자별로 매핑된 사용자 정보를 저장한다.
마이크(104)는 사용자의 음성을 수신하는 마이크로폰으로서, 복수 개가 이동 로봇(100)에 탑재될 수 있다. 마이크(104)가 두 개인 경우, 제1마이크는 이동 로봇(100)의 왼쪽 측면에 설치되고, 제2마이크는 이동 로봇(100)의 오른쪽 측면에 설치된다.
표시부(105)는 액정 표시장치(LCD : Liquid Crystal Display), 유기 EL 디스플레이(organic electroluminescence display), LED(Light Emitting Diode) 등과 같은 디스플레이 수단으로서, 이동 로봇(100)에서 처리된 각종 정보를 디스플레이한다. 바람직하게, 표시부(105)는 터치 스크린으로서, 입력수단의 기능을 추가적으로 수행하여 사용자로부터 조작신호를 입력받는다.
참여자 인식부(106)는 게임에 참여한 각 사용자를 인식하고, 각 사용자의 위치를 파악하는 기능을 수행한다. 구체적으로, 참여자 인식부(160)는 특정 사용자로부터 퀴즈게임 시작 요청이 수신되면, 카메라(101)를 회전시켜 게임에 참여한 각 사용자의 얼굴 이미지를 촬영한다. 참여자 인식부(106)는 상기 촬영한 각 사용자의 얼굴 이미지와 매핑된 사용자 성명을 저장부(103)의 사용자 정보에 각각 확인함으로써, 게임에 참여한 각 사용자를 인식한다. 게다가, 참여자 인식부(106)는 상기 촬영한 이미지상에서 각 사용자가 위치한 영역을 확인하고 각 사용자의 위치 영역을 저장부(103)의 맵 데이터와 비교하여 분석함으로써, 각각의 사용자가 위치한 공간상의 위치정보(즉, 좌표정보)를 확인하여, 사용자별 위치정보를 저장부(103)에 저장한다.
한편, 참여자 인식부(106)는 저장부(103)의 사용자 정보에 저장된 각 얼굴 이미지와 임계값 이상으로 일치하지 않은 얼굴 이미지가 촬영된 경우, 등록되지 않은 신규 사용자가 퀴즈 게임에 참여한 것으로 판단하여, 상기 신규 사용자로부터 음성과 성명을 입력받아, 상기 신규 사용자의 성명, 음성 패턴 및 이미 촬영한 신규 사용자의 얼굴 이미지를 매핑하여 저장부(103)의 사용자 정보에 저장한다. 즉, 참여자 인식부(106)는 게임에 참여한 사용자의 얼굴이 인식되지 않으면, 이 사용자의 성명, 음성 패턴 및 얼굴 이미지를 획득하여 저장부(103)의 사용자 정보에 저장한다.
설명자 선정부(107)는 문제 설명자를 선정하고, 구동부(102)를 제어하여 선정한 문제 설명자와 일정 거리(예컨대, 20cm) 이격된 위치로 이동 로봇(100)을 이동시킨다. 즉, 설명자 선정부(107)는 저장부(103)의 사용자별 위치정보를 토대로, 문제 설명자의 위치정보를 확인하고, 구동부(102)를 제어하여 상기 문제 설명자와 일정 거리(예컨대, 20cm) 이격된 위치로 이동 로봇(100)을 이동시킨다. 바람직하게, 설명자 선정부(107)는 문제가 출력되는 이동 로봇(100)의 표시부(105)를 상기 문제 설명자에게만 노출되도록, 구동부(102)를 제어하여 이동 로봇(100)을 상기 문제 설명자 정면에 위치시킨다.
한편, 설명자 선정부(107)는 첫 번째 문제가 출력되기 전인 경우, 이동 로봇(100)의 정면 가까이에 위치한 사용자를 문제 설명자로 선정할 수 있으며, 게임에 참여한 사용자 중에서 무작위로 문제 설명자를 선정할 수 있다. 또한, 설명자 선정부(107)는 문제에 대한 정답을 맞힌 사용자를 퀴즈 설명자로서 재선정하고, 상기 재선정한 퀴즈 설명자의 위치 정보를 저장부(103)에서 확인한 후, 구동부(102)를 제어하여 상기 재선정한 문제 설명자와 일정 거리(예컨대, 20cm) 이격된 장소로 이동 로봇(100)을 이동시킨다.
문제 제공부(108)는 이동 로봇(100)이 문제 설명자와 일정 거리 이격된 장소에 위치하면, 저장부(103)에 저장된 복수의 문제 중에서 어느 하나의 문제를 추출하여 표시부(105)에 출력함으로써, 퀴즈 게임이 사용자들 간에 진행되게 한다.
정답 판정부(109)는 사용자의 음성을 인식하는 음성인식 모듈(109a)을 포함하고, 상기 음성인식 모듈(109a)을 이용하여 문제 설명자를 제외한 사용자들 중에서 정답을 발화한 사용자를 식별하는 기능을 수행한다. 구체적으로, 정답 판정부(109)는 표시부(105)에 출력중인 문제에 대한 정답을 저장부(103)에서 확인하고, 이 정답과 일치하는 음성이 마이크(104)에서 수신되는지 여부를 음성인식 모듈(109a)을 이용하여 지속적으로 모니터링한다. 바람직하게, 정답 판정부(109)는 문제 설명자의 음성 패턴을 저장부(103)에서 확인하고, 상기 문제 설명자의 음성 패턴을 제외한 다른 사용자의 음성을 지속적으로 모니터링한다. 정답 판정부(109)는 음성인식 모듈(109a)을 통해 상기 정답과 일치하는 음성이 인식되면, 이 음성의 패턴과 임계값(예컨대, 70%) 이상으로 일치하는 음성 패턴과 매핑된 사용자 성명을 저장부(103)에서 확인하고, 이 사용자에 대한 정답 횟수를 '1' 증가시키거나 퀴즈 점수를 증가시킨다.
게임결과 제공부(110)는 마지막 문제의 풀이가 완료되면, 사용자별 정답 횟수 또는 퀴즈 점수를 확인하고, 이렇게 확인된 사용자별 정답 횟수 또는 퀴즈 점수를 현재 날짜와 시간과 함께 저장부(103)에 저장한다. 또한, 게임결과 제공부(110)는 사용자별 정답 횟수 또는 퀴즈 점수를 표시부(105)에 출력함으로써, 퀴즈 게임 결과를 복수의 사용자에게 인지시킨다.
도 2는 본 발명의 일 실시예에 따른, 이동 로봇에서 퀴즈 게임 서비스를 사용자에게 제공하는 방법을 설명하는 흐름도이다.
도 3은 문제 설명자 앞에서 문제를 출력하는 이동 로봇을 나타내는 도면이다.
도 2 및 도 3을 참조하면, 이동 로봇(100)은 게임에 참여한 복수의 사용자 중에서 어느 한 사용자로부터 퀴즈게임 시작 요청을 수신한다(S201).
그러면, 참여자 인식부(106)는 카메라(101)를 일정 방향(예컨대, 시계방향 또는 반시계 방향)으로 회전시켜 게임에 참여한 각 사용자의 이미지를 순차적으로 촬영하여, 각 사용자의 얼굴 이미지를 획득한다(S203). 또는, 참여자 인식부(106)는 구동부(102)를 제어하여 이동 로봇(100)을 360°회전시켜, 게임에 참여한 사용자들의 얼굴을 순차적으로 촬영하여 각 사용자의 얼굴 이미지를 획득할 수도 있다. 바람직하게, 참여자 인식부(106)는 카메라(101)를 통해 촬영한 전체 이미지에서 사용자별 얼굴 영역을 확대하여 임시 저장함으로써, 각각의 사용자의 얼굴 이미지를 획득할 수 있다.
이어서, 참여자 인식부(106)는 상기 촬영한 각 사용자의 얼굴 이미지와 임계값 이상(예컨대, 70%)으로 일치하는 얼굴 이미지가 저장부(103)의 사용자 정보에 저장되어 있는지 여부를 얼굴 이미지별로 확인한다(S205). 즉, 참여자 인식부(106)는 게임에 참여한 사용자의 얼굴 이미지가 사전에 저장부(103)에 등록되어 있는지 여부를 확인한다.
이어서, 참여자 인식부(106)는 저장부(103)의 사용자 정보에 저장된 각 얼굴 이미지와 임계값 이상으로 일치하지 않은 얼굴 이미지가 촬영된 경우, 등록되지 않은 신규 사용자가 퀴즈 게임에 참여한 것으로 판단하여, 이 사용자의 정보 입력을 요청하는 메시지를 표시부(105)에 출력한다. 그리고 참여자 인식부(106)는 상기 신규 사용자의 성명과 음성을 마이크(104)와 입력수단(예컨대, 터치스크린)을 통해 입력받고, 상기 음성을 분석하여 신규 사용자의 음성의 고저, 주파수 등의 음성 패턴을 확인한 후, 신규 사용자의 성명, 음성 패턴 및 상기 촬영한 신규 사용자의 얼굴 이미지를 매핑하여 저장부(103)의 사용자 정보에 저장g함으로써 신규 사용자의 등록을 완료한다(S207).
참여자 인식부(106)는 상기 촬영한 각 사용자의 얼굴 이미지가 저장부(103)의 사용자 정보에 등록되거나 신규 사용자의 등록이 완료된 경우, 각각의 얼굴 이미지와 매핑된 사용자 성명을 저장부(103)의 사용자 정보에서 각각 확인함으로써, 게임 참여자를 식별한다. 다음으로, 참여자 인식부(106)는 상기 촬영한 이미지상에서 각 사용자가 위치한 영역을 확인하고, 이렇게 확인한 사용자별 위치 영역을 저장부(103)의 맵 데이터와 비교하여 분석함으로써, 각각의 사용자가 위치한 공간상의 위치정보(즉, 좌표정보)를 확인하여 저장부(103)에 저장한다(S209).
다음으로, 참여자 인식부(106)는 설명자 선정부(107)로 퀴즈 게임 진행을 지시한다.
그러면, 설명자 선정부(107)는 게임에 참여한 사용자 중에서 어느 한 사용자를 문제 설명자로 선정한다(S211). 이때, 설명자 선정부(107)는 자신의 정면(즉, 카메라 정면) 가까이에 위치한 사용자를 문제 설명자로 선정할 수 있으며, 또는 복수의 사용자 중에서 어느 한 사용자를 문제 설명자로서 임의로 선정할 수 있다.
이어서, 설명자 선정부(107)는 저장부(103)에 저장된 사용자별 위치정보를 토대로 상기 선정한 문제 설명자의 위치정보를 확인하고, 구동부(102)를 제어하여 상기 문제 설명자와 일정 거리(예컨대, 20cm) 이격된 위치로 이동 로봇(100)을 이동시킨다. 이때, 설명자 선정부(107)는 문제가 출력되는 이동 로봇(100)의 표시부(105)를 상기 사용자에서만 노출되도록, 구동부(102)를 제어하여 이동 로봇(100)을 상기 문제 설명자 정면에 위치시킨다. 도 3의 (a)를 참조하여 예를 들어 설명하면, 설명자 선정부(107)는 참조부호 31의 사용자를 문제 설명자로 선정한 경우, 이동 로봇(100)의 화면(즉, 표시부)이 문제 설명자(31)에게만 노출되도록, 구동부(102)를 제어하여 상기 문제 설명자(31)와 일정 거리(예컨대, 20cm) 이격된 위치로 이동 로봇(100)을 위치시킨다.
설명자 선정부(107)는 이렇게 이동 로봇(100)을 문제 설명자에게 이동시킨 다음, 문제 제공부(108)로 문제 제공을 요청한다.
그러면, 문제 제공부(108)는 저장부(103)에 저장된 복수의 문제 중에서 어느 하나의 문제를 추출하여 표시부(105)에 출력한다(S213). 상기 문제는 단어 자체일 수 있으며, 또한 정답을 설명한 의문문 문장일 수 있으며, 사람/동물 등의 이미지일 수도 있다. 부연하면, 상기 문제가 단어 또는 이미지일 경우, 문제 설명자는 단어 또는 이미지(예컨대, 동물 등)를 다른 사용자에게 설명하여 문제에 대한 정답을 요구한다. 또한, 상기 문제가 정답을 설명한 의문문의 문장인 경우, 문제 설명자는 표시부(105)에 출력된 문장을 읽음으로써, 다른 사용자에게 문제 풀이를 요구할 수 있다.
도 3의 (b)를 참조하여 예를 들어 설명하면, 문제 제공부(108)는 문제 설명자(즉, 참조 부호 31의 사용자)에게만 노출되는 '나비'라는 단어를 표시부(105)에 출력한다. 그러면, 문제 설명자는 상기 '나비' 단어를 다른 사용자(32, 33, 34)가 설명하여 다른 사용자(32, 33, 34)가 정답(즉, 나비)을 발성하도록 유도한다.
이렇게 표시부(105)에 문제가 출력되면, 정답 판정부(109)는 표시부(105)에 출력중인 문제에 대한 정답을 저장부(103)에서 확인하고, 이 정답과 일치하는 음성이 인식되는지 여부를 음성인식 모듈(109a)을 이용하여 지속적으로 모니터링함으로써, 정답과 일치하는 음성이 인식되는지 여부를 판별한다(S215, S217). 바람직하게, 정답 판정부(109)는 문제 설명자의 음성 패턴을 저장부(103)에서 확인하고, 상기 문제 설명자의 음성 패턴을 제외한 다른 사용자의 음성을 지속적으로 모니터링한다.
정답 판정부(109)는 음성인식 모듈(109a)을 통해 상기 정답과 일치하는 음성이 인식되면, 이 음성의 패턴과 임계값(예컨대, 70%) 이상으로 일치하는 음성 패턴을 저장부(103)의 사용자 정보에서 확인한다. 그리고 정답 판정부(109)는 상기 확인된 음성 패턴과 매핑된 사용자의 성명을 저장부(103)의 사용자 정보에서 확인함으로써, 상기 정답을 발화한 사용자(즉, 정답자)를 식별한다(S219). 이때, 정답 판정부(109)는 상기 식별한 사용자가 정답을 맞힌 사용자임을 알리는 음성 메시지를 스피커(도면에 도시되지 않음)로 출력할 수 있다.
다음으로, 정답 판정부(109)는 상기 식별한 사용자의 정답 횟수를 '1' 증가시킨다(S221). 또는, 정답 판정부(109)는 상기 식별한 사용자의 퀴즈 점수를 해당 문제에 배정된 점수만큼 증가시킬 수도 있다. 다음으로, 정답 판정부(109)는 사전에 설정된 퀴즈 횟수에 근거하여 정답 처리된 문제가 마지막 문제인지 여부를 확인하여(S223), 마지막 문제이면 게임결과 제공부(110)로 게임 결과 출력을 지시한다.
그러면, 게임결과 제공부(110)는 사용자별 정답 횟수 또는 퀴즈 점수를 확인하고(S225), 이렇게 확인된 사용자별 정답 횟수 또는 퀴즈 점수를 현재 날짜와 시간과 함께 저장부(103)에 저장한다. 그리고 게임결과 제공부(110)는 사용자별 정답 횟수 또는 퀴즈 점수를 표시부(105)에 출력함으로써, 퀴즈 게임 결과를 복수의 사용자에게 인지시킨다(S227). 이때, 게임결과 제공부(110)는 정답 횟수가 가장 많은 사용자 또는 퀴즈 점수가 가장 높은 사용자가 1등임을 알리는 음성 메시지를 스피커(도면에 도시되지 않음)로 출력할 수 있다.
반면에, S223 단계에서, 정답 판정부(109)는 정답 처리된 문제가 마지막 문제가 아니면, 정답자로 식별된 사용자의 성명을 설명자 선정부(107)로 전달하여 문제 설명자의 재선정을 설명자 선정부(107)로 요청한다.
그러면, 설명자 선정부(107)는 상기 정답 판정부(109)로부터 전달받은 사용자의 성명을 확인하고, 이 사용자(즉, 정답자)를 퀴즈 설명자로 재선정한다(S229). 이어서, 설명자 선정부(107)는 상기 재선정한 퀴즈 설명자의 위치 정보를 저장부(103)에서 확인한다(S231). 다음으로, 설명자 선정부(107)는 구동부(102)를 제어하여 상기 재선정한 문제 설명자와 일정 거리(예컨대, 20cm) 이격된 장소로 이동 로봇(100)을 이동시킨다(S233). 이때, 설명자 선정부(107)는 문제가 출력되는 이동 로봇(100)의 표시부(105)를 재선정한 문제 설명자에게만 노출되도록, 구동부(102)를 제어하여 이동 로봇(100)을 상기 재선정한 문제 설명자 정면에 위치시킨다. 바람직하게, 설명자 선정부(107)는 상기 재선정한 문제 설명자의 위치정보를 토대로, 재선정한 문제 설명자의 방향으로 이동 로봇(100)이 바라보도록 상기 구동부(102)를 제어하여 이동 로봇(100)을 회전시킨 다음, 재선정한 문제 설명자의 위치와 소정 거리(예컨대, 20cm) 이격된 위치로 이동 로봇(100)을 이동시킨다.
도 3의 (b)를 참조하여 예를 들어 설명하면, 정답 판정부(109)는 참조부호 32의 사용자가 정답 '나비'를 발화한 경우, 이 사용자(32)가 정답자인 것으로 인식한다. 그러면, 설명자 선정부(107)는 상기 정답자(32)를 문제 설명자로 재선정하고, 이 정답자(32)의 위치정보를 저장부(103)의 사용자별 위치정보에서 확인한다. 그리고 설명자 선정부(107)는 구동부(102)를 제어하여, 재선정한 문제 설명자의 위치와 소정 거리(예컨대, 20cm) 이격된 위치(즉, 참조부호 40 지점)로 이동 로봇(100)을 이동시킨다.
이동 로봇(100)의 이동이 완료되면, 설명자 선정부(107)는 문제 제공부(108)로 문제 출력을 지시하고, 이전에 출력된 문제와 다른 문제를 저장부(103)에서 추출하여 표시부(105)에 출력한다(S235).
그러면, 정답 판정부(109)는 표시부(105)에 출력중인 문제에 대한 정답을 저장부(103)에서 확인하고, 이 정답과 일치하는 음성이 인식되는지 여부를 음성인식 모듈(109a)을 이용하여 지속적으로 모니터링하는 S215 단계를 재진행한다.
한편, 본 발명에 따른 이동 로봇(100)은 정답자의 음성 위상과 강도를 분석하여, 정답자의 위치를 확인할 수도 있다.
도 4는 본 발명의 다른 실시예에 따른, 이동 로봇의 구성을 나타내는 도면이다.
도 4에 기재된 구성요소들 중에서, 도 1의 동일한 참조부호를 가지는 구성요소는 도 1 및 도 2를 참조하여 설명한 구성요소와 동일한 기능을 수행한다. 따라서 도 4에 기재된 구성요소들 중에서 도 1과 다른 참조부호를 가지는 구성요소들에 대해서만 설명하기로 한다.
도 4를 참조하면, 본 발명의 다른 실시예에 따른 이동 로봇(400)은 카메라(101), 구동부(102), 저장부(103), 마이크(104), 표시부(105), 음성방향 분석부(406), 설명자 선정부(407), 문제 제공부(108), 정답 판정부(109) 및 게임결과 제공부(110)를 포함한다.
음성방향 분석부(406)는 음성인식 모듈(109a)과 연동하여 정답으로 인식된 음성의 주파수, 위상 및 강도를 분석하여 정답 음성이 발화된 방향을 확인한다. 구체적으로, 음성방향 분석부(406)는 음성인식 모듈(109a)에서 인식된 정답 음성의 주파수 영역을 확인하고, 정답 음성이 고주파수(예컨대, 3000Hz 이상인 주파수)이면 양쪽 측면에 구비된 각 마이크(104)에서 수신된 상기 정답 음성의 세기 차이를 산출한다. 아울러, 음성방향 분석부(406)는 오른쪽 마이크와 왼쪽 마이크의 음성 세기의 차이가 사전에 설정된 임계세기 이상이면, 음성 세기가 더 크게 수신된 마이크(왼쪽 또는 오른쪽) 방향이 정답 음성이 발화된 방향인 것으로 판단하고, 이렇게 판단된 정답음성 방향 정보를 설명자 선정부(407)로 전달한다. 반면에, 음성방향 분석부(406)는 두 마이크(104)에서 수신된 정답 음성 세기의 차이가 사전에 설정된 임계세기 미만이면, 정답 음성이 발화된 방향이 이동 로봇(400)의 뒤쪽 방향인 것으로 판단하여, 뒤쪽 방향 정보를 설명자 선정부(407)로 전달한다.
또한, 음성방향 분석부(406)는 음성인식 모듈(109a)에서 인식된 정답 음성이 저주파수(예컨대, 1500Hz 이하인 주파수)이면, 오른쪽 마이크와 왼쪽 마이크에서 정답 음성이 수신된 시간 차이(즉, 위상차)를 산출하고, 상기 산출한 시간 차이가 사전에 설정된 임계시간(예컨대, 0.8 밀리미터 초) 미만인지 여부를 확인한다. 아울러, 음성방향 분석부(406)는 오른쪽 마이크와 왼쪽 마이크에서 정답 음성이 수신한 시간 차가 사전에 설정된 임계시간 이상이면, 상기 정답 음성이 먼저 수신된 마이크의 방향이 정답 음성이 발화된 방향인 것으로 판단하고 이렇게 판단된 정답음성 방향 정보를 설명자 선정부(407)로 전달한다. 반면에, 음성방향 분석부(406)는 왼쪽 마이크(104)와 오른쪽 마이크에서 정답 음성이 수신한 시간 차가 사전에 설정된 임계시간 미만이면 정답 음성이 발화된 방향이 이동 로봇(400)의 뒤쪽 방향인 것으로 판단하여, 뒤쪽 방향 정보를 설명자 선정부(407)로 전달한다.
한편, 음성방향 분석부(406)는 정답으로 인식된 음성이 중간 주파수(예컨대, 1500Hz 초과하고 3000Hz 미만인 주파수)에 해당하면, 방향 확인이 불가능함을 알리는 메시지를 설명자 선정부(407)로 전달한다.
설명자 선정부(407)는 문제 설명자를 선정하고, 카메라(101)에서 촬영된 영상과 음성방향 분석부(406)로부터 수신한 정답음성 방향 정보를 토대로, 문제 설명자의 위치를 인식하여 상기 선정한 문제 설명자와 일정 거리(예컨대, 20cm) 이격된 위치로 이동 로봇(400)을 이동시킨다.
구체적으로, 설명자 선정부(407)는 정답자를 문제 설명자로 재선정하고, 음성방향 분석부(406)로부터 전달받은 정답음성 방향 정보에 근거하여 카메라(101)를 정답음성 방향(즉, 재선정한 문제 설명자의 방향)으로 회전시켜 카메라(101)의 촬영각도를 문제 설명자의 방향으로 변경하고, 상기 카메라(101)를 통해 재선정한 문제 설명자의 얼굴을 인식한다. 한편, 설명자 선정부(407)는 방향 확인이 불가능함을 알리는 메시지를 설명자 선정부(407)로 전달받은 경우, 카메라(101)를 일정 방향(예컨대, 오른쪽 또는 왼쪽)으로 360°회전시켜, 게임에 참여한 모든 사용자의 얼굴을 순차적으로 촬영한 후, 이렇게 촬영된 복수의 얼굴 이미지를 분석하여 재선정된 문제 설명자의 얼굴을 인식한다. 아울러, 설명자 선정부(407)는 문제 설명자의 얼굴이 인식된 방향과 상기 문제 설명자의 거리에 근거하여 문제 설명자의 위치를 인식한 후, 구동부(102)를 제어하여 상기 문제 설명자의 위치와 소정 거리 이격된 위치로 이동 로봇(400)을 이동시킨다. 한편, 설명자 선정부(407)는 첫 번째 문제가 출력되기 전인 경우, 이동 로봇(400)의 정면에 위치한 사용자를 문제 설명자로 선정한다.
도 5는 본 발명의 다른 실시예에 따른, 이동 로봇에서 퀴즈 게임 서비스를 사용자에게 제공하는 방법을 설명하는 흐름도이다.
도 5를 참조하면, 이동 로봇(400)은 첫 문제를 설명할 사용자 앞에 위치한 상태에서, 상기 사용자로부터 퀴즈게임 시작 요청을 수신한다(S501). 이때, 문제가 출력되는 이동 로봇(400)의 표시부(105)는 상기 사용자에서만 노출되는 것이 바람직하다. 즉, 첫 문제를 설명한 사용자는 이동 로봇(400)의 표시부(105)가 자신에게만 노출 상태로 상기 이동 로봇(400)을 자신 앞에 위치시키고, 이 이동 로봇(400)에 구현된 복수의 서비스 메뉴 중에서, 퀴즈게임 시작 메뉴를 입력하여, 퀴즈게임 시작을 이동 로봇(400)으로 요청한다.
도 3의 (a)를 참조하여 예를 들어 설명하면, 이동 로봇(400)은 복수의 사용자들 중에서 첫 문제를 설명할 사용자(31) 앞에 위치한 상태에서, 이 사용자(31)로부터 퀴즈게임 시작 요청 조작신호를 수신한다.
그러면, 설명자 선정부(407)는 카메라(101)를 이용하여 정면에 위치한 사용자의 얼굴 이미지를 촬영하고(S503), 이 촬영한 얼굴 이미지와 유사도가 임계값(예컨대, 70%) 이상인 얼굴 이미지가 저장부(103)의 사용자 정보에 저장되어 있는지 여부를 확인한다(S505).
설명자 선정부(407)는 상기 촬영한 얼굴 이미지와 유사도가 임계값 이상인 얼굴 이미지가 저장부(103)의 사용자 정보에 미저장된 경우, 정면에 위치에 사용자가 미등록된 사용자인 것으로 판단하고, 사용자 정보 입력(즉, 성명과 음성)을 요구하는 메시지를 표시부(105)로 출력한다. 그리고 설명자 선정부(407)는 이동 로봇(400)의 정면에 위치한 사용자로부터 사용자의 성명과 음성을 입력받은 후, 상기 음성을 분석하여 신규 사용자의 음성의 고저, 주파수 등의 음성 패턴을 확인한 후, 신규 사용자의 성명, 음성 패턴 및 상기 촬영한 신규 사용자의 얼굴 이미지를 매핑하여 저장부(103)의 사용자 정보에 저장하여 신규 사용자의 등록을 완료한다(S507).
이어서, 설명자 선정부(407)는 상기 촬영한 사용자의 얼굴 이미지와 임계값 이상으로 일치하는 얼굴 이미지가 저장부(103)의 사용자 정보에 저장되거나 정면에 위치한 사용자의 등록이 완료된 경우, 이 사용자의 얼굴 이미지와 매핑된 성명을 저장부(103)의 사용자 정보에서 확인함으로써 이동 로봇(400)의 정면에 위치한 사용자를 식별한다(S509). 다음으로, 설명자 선정부(407)는 상기 식별한 이렇게 식별한 사용자를 퀴즈 설명자로 선정한 후(S511), 문제 제공부(108)로 문제 제공을 요청한다.
그러면, 문제 제공부(108)는 저장부(103)에 저장된 복수의 문제 중에서 어느 하나의 문제를 추출하여 표시부(105)에 출력한다(S513).
이렇게 표시부(105)에 문제가 출력되면, 정답 판정부(109)는 표시부(105)에 출력중인 문제에 대한 정답을 저장부(103)에서 확인하고, 이 정답과 일치하는 음성이 마이크(104)를 통해 인식되는지 여부를 음성인식 모듈(109a)을 이용하여 지속적으로 모니터링한다(S515, S517). 바람직하게, 정답 판정부(109)는 문제 설명자의 음성 패턴을 저장부(103)에서 확인하고, 상기 문제 설명자의 음성 패턴을 제외한 다른 사용자의 음성을 지속적으로 모니터링한다.
정답 판정부(109)는 음성인식 모듈(109a)을 통해 상기 정답과 일치하는 음성이 최초로 인식되면, 이 음성의 패턴과 임계값(예컨대, 70%) 이상으로 일치하는 음성 패턴을 저장부(103)의 사용자 정보에서 확인한다. 이어서, 정답 판정부(109)는 상기 확인된 음성 패턴과 매핑된 사용자의 성명을 저장부(103)의 사용자 정보에서 확인함으로써, 상기 정답을 발화한 사용자(즉, 정답자)를 식별한다(S519).
다음으로, 정답 판정부(109)는 상기 식별한 사용자의 정답 횟수를 '1' 증가시킨다(S521). 또는, 정답 판정부(109)는 상기 식별한 사용자의 퀴즈 점수를 해당 문제에 배정된 점수만큼 증가시킬 수도 있다. 다음으로, 정답 판정부(109)는 사전에 설정된 퀴즈 횟수에 근거하여 정답 처리된 문제가 마지막 문제인지 여부를 확인하여(S523), 마지막 문제이면 게임결과 제공부(110)로 게임 결과 출력을 지시한다.
그러면, 게임결과 제공부(110)는 사용자별 정답 횟수 또는 퀴즈 점수를 확인하고(S525), 이렇게 확인된 사용자별 정답 횟수 또는 퀴즈 점수를 현재 날짜와 시간과 함께 저장부(103)에 저장한다. 그리고 게임결과 제공부(110)는 사용자별 정답 횟수 또는 퀴즈 점수를 표시부(105)에 출력함으로써, 퀴즈 게임 결과를 복수의 사용자에게 인지시킨다(S527).
반면에, S523 단계에서, 정답 판정부(109)는 정답 처리된 문제가 마지막 문제가 아니면, 정답자로 식별된 사용자의 성명을 설명자 선정부(107)로 전달하여 문제 설명자의 재선정을 설명자 선정부(107)로 요청한다.
그러면 설명자 선정부(107)는 상기 정답 판정부(109)로부터 전달받은 사용자의 성명을 확인하여 이 사용자(즉, 정답자)를 퀴즈 설명자로 재선정하고(S529), 음성방향 분석부(406)로 정답이 발화된 방향에 대한 분석을 요청한다. 이어서, 음성방향 분석부(406)는 정답으로 인식된 음성의 위상과 강도를 분석하여, 이 음성이 발화된 방향을 분석하고(S531), 이 분석된 방향(예컨대, 뒤 방향, 오른쪽 방향 또는 왼쪽 방향)을 설명자 선정부(407)로 전달한다. 구체적으로, 음성방향 분석부(406)는 음성인식 모듈(109a)에서 인식된 정답 음성이 고 주파수, 중간 주파수 또는 저 주파수인지 여부를 확인한다. 그리고 음성방향 분석부(406)는 음성이 고주파수(예컨대, 3000Hz 이상인 주파수)에 해당하면, 양쪽 측면에 구비된 각 마이크(104)에서 수신된 상기 정답 음성의 세기를 확인하여, 두 마이크(104)의 음성 세기의 차이를 산출한다. 이어서, 음성방향 분석부(406)는 오른쪽 마이크와 왼쪽 마이크의 음성 세기의 차이가 사전에 설정된 임계세기 이상이면, 음성 세기가 더 크게 수신된 마이크(왼쪽 또는 오른쪽) 방향이 정답 음성이 발화된 방향인 것으로 판단한다. 예컨대, 음성방향 분석부(406)는 오른쪽 마이크와 왼쪽 마이크의 음성 세기의 차이가 사전에 설정된 임계세기 이상이고, 왼쪽 마이크에서 수신된 정답 음성의 세기가 오른쪽 마이크에서 수신된 정답 음성의 세기보다 큰 경우, 왼쪽 방향에서 정답 음성이 발화된 방향인 것으로 판단한다. 반면에, 음성방향 분석부(406)는 오른쪽 마이크와 왼쪽 마이크의 음성 세기의 차이가 사전에 설정된 임계 차이 미만이면, 정답 음성이 발화된 방향이 이동 로봇(400)의 뒤쪽 방향인 것으로 판단한다.
또한, 음성방향 분석부(406)는 음성인식 모듈(109a)에서 인식된 정답 음성이 저 주파수(예컨대, 1500Hz 이하인 주파수)에 해당하면, 오른쪽 마이크와 왼쪽 마이크 각각에 정답 음성이 도달한 시간 차(즉, 위상차)가 사전에 설정된 임계시간(예컨대, 0.8 밀리미터 초) 미만인지 여부를 확인한다. 다음으로, 음성방향 분석부(406)는 오른쪽 마이크와 왼쪽 마이크 각각에 정답 음성이 도달한 시간 차가 사전에 설정된 임계시간 이상이면, 상기 정답 음성이 먼저 수신한 마이크가 왼쪽 또는 오른쪽 마이크인지 여부를 확인하고, 이 마이크의 방향이 정답 음성이 발화된 방향인 것으로 판단한다. 반면에, 음성방향 분석부(406)는 오른쪽 마이크와 왼쪽 마이크 각각에 정답 음성이 도달한 시간 차가 사전에 설정된 임계시간 미만이면, 정답 음성이 발화된 방향이 이동 로봇(400)의 뒤쪽 방향인 것으로 판단한다.
한편, 음성방향 분석부(406)는 정답으로 인식된 음성이 중간 주파수(예컨대, 1500Hz 초과하고 3000Hz 미만인 주파수)에 해당하면, 방향 확인이 불가능함을 알리는 메시지를 설명자 선정부(407)로 전달한다.
다음으로, 설명자 선정부(407)는 문제 설명자로 재선정한 사용자의 성명과 매핑된 얼굴 이미지를 저장부(103)의 사용자 정보에서 추출하고, 상기 음성방향 분석부(406)로 전달받은 방향으로 카메라(101)를 회전시켜 카메라(101)의 촬영각도를 재선정한 문제 설명자(즉, 정답자)의 방향으로 변경한다(S533). 예컨대, 설명자 선정부(407)는 음성방향 분석부(406)로부터 오른쪽 방향을 전달받으면 카메라(101)를 오른쪽 방향으로 90°회전시키고, 왼쪽 방향을 전달받으면 왼쪽 방향으로 90°회전시키고, 뒤쪽 방향을 전달받은 경우 카메라(101)가 뒤쪽 방향을 촬영하도록 180°회전시킬 수 있다.
이어서, 설명자 선정부(407)는 상기 회전한 카메라(101)를 통해 사용자의 얼굴 이미지를 획득하고, 이 얼굴 이미지와 상기 추출한 사용자(즉, 문제 설명자로 재선정한 사용자)의 얼굴 이미지의 유사도를 확인하여 상기 유사도가 임계값(예컨대, 70%) 이상인지 여부를 확인함으로써, 문제 설명자로 재선정한 사용자의 얼굴을 인식한다(S535). 한편, 설명자 선정부(407)는 방향 확인이 불가능함을 알리는 메시지를 설명자 선정부(407)로 전달받은 경우, 카메라(101)를 일정 방향(예컨대, 오른쪽, 왼쪽)으로 360°회전시켜, 게임에 참여한 모든 사용자의 얼굴 이미지를 순차적으로 획득하고, 이렇게 획득한 각 사용자의 얼굴 이미지와 문제 설명자로 재선정한 사용자)의 얼굴 이미지의 유사도를 확인함으로써, 재선정한 문제 설명자의 얼굴을 인식한다.
다음으로, 설명자 선정부(407)는 재선정한 문제 설명자(즉, 정답자)의 얼굴 이미지와 일치도가 임계값 이상인 얼굴 이미지가 인식되면, 카메라(101)를 통해 촬영한 이미지에서 상기 재선정한 문제 설명자(즉, 정답자)의 얼굴이 인식된 방향을 확인하고, 상기 정답자의 거리를 측정한다. 이때, 설명자 선정부(407)는 얼굴 인식을 위해 촬영한 문제 설명자의 이미지를 분석하여, 이동 로봇(400)과 문제 설명자 간의 거리를 측정할 수 있으며, 자체 구비한 거리측정 센서(도면에 도시되지 않음)를 이용하여 이동 로봇(400)과 문제 설명자 간의 거리를 측정할 수도 있다. 다음으로, 설명자 선정부(407)는 상기 재선정한 문제 설명자의 얼굴이 인식한 방향과 이 문제 설명자의 거리에 근거하여, 상기 재선정한 문제 설명자의 위치를 인식한다(S537).
이어서, 설명자 선정부(407)는 상기 재선정한 문제 설명자의 얼굴을 인식한 방향으로 이동 로봇(400)이 바라보도록 상기 구동부(102)를 제어하여 이동 로봇(400)을 회전시킨다. 다음으로, 설명자 선정부(407)는 구동부(102)를 제어하여, 재선정한 문제 설명자의 위치와 소정 거리(예컨대, 20cm) 이격된 위치로 이동 로봇(400)을 이동시킨다(S539). 바람직하게, 설명자 선정부(407)는 구동부(102)를 제어하여, 표시부(105)가 상기 재선정한 사용자의 정면에 위치하도록 구동부(102)를 제어하여 이동 로봇(400)을 이동시킨다.
이동 로봇(400)의 이동이 완료되면, 설명자 선정부(407)는 문제 제공부(108)로 문제 출력을 지시하고, 이전에 출력된 문제와 다른 문제를 저장부(103)에서 추출하여 표시부(105)에 출력한다(S541).
그러면, 정답 판정부(109)는 표시부(105)에 출력중인 문제에 대한 정답을 저장부(103)에서 확인하고, 이 정답과 일치하는 음성이 인식되는지 여부를 음성인식 모듈(109a)을 이용하여 지속적으로 모니터링하는 S515 단계를 재진행한다.
한편, 정답 판정부(109)는 정답으로 인식된 음성의 패턴과 임계값(예컨대, 70%) 이상으로 일치하는 음성 패턴이 저장부(103)의 사용자 정보에 저장되지 되지 않은 경우, 이 사용자가 미등록된 사용자인 것으로 판단하여, 사용자 정보를 입력을 요구하는 메시지를 표시부(105) 또는 스피커로 출력한다. 그리고 정답 판정부(109)는 정답을 발화한 사용자로부터 얼굴을 촬영 받고 성명을 입력받아, 상기 정답으로 인식된 음성의 패턴, 상기 사용자의 얼굴 이미지 및 성명을 매핑하여 저장부(103)의 사용자 정보에 저장한다.
본 명세서는 많은 특징을 포함하는 반면, 그러한 특징은 본 발명의 범위 또는 특허청구범위를 제한하는 것으로 해석되어서는 안 된다. 또한, 본 명세서에서 개별적인 실시예에서 설명된 특징들은 단일 실시예에서 결합되어 구현될 수 있다. 반대로, 본 명세서에서 단일 실시예에서 설명된 다양한 특징들은 개별적으로 다양한 실시예에서 구현되거나, 적절히 결합되어 구현될 수 있다.
도면에서 동작들이 특정한 순서로 설명되었으나, 그러한 동작들이 도시된 바와 같은 특정한 순서로 수행되는 것으로, 또는 일련의 연속된 순서, 또는 원하는 결과를 얻기 위해 모든 설명된 동작이 수행되는 것으로 이해되어서는 안 된다. 특정 환경에서 멀티태스킹 및 병렬 프로세싱이 유리할 수 있다. 아울러, 상술한 실시예에서 다양한 시스템 구성요소의 구분은 모든 실시예에서 그러한 구분을 요구하지 않는 것으로 이해되어야 한다. 상술한 프로그램 구성요소 및 시스템은 일반적으로 단일 소프트웨어 제품 또는 멀티플 소프트웨어 제품에 패키지로 구현될 수 있다.
상술한 바와 같은 본 발명의 방법은 프로그램으로 구현되어 컴퓨터로 읽을 수 있는 형태로 기록매체(시디롬, 램, 롬, 플로피 디스크, 하드 디스크, 광자기 디스크 등)에 저장될 수 있다. 이러한 과정은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있으므로 더 이상 상세히 설명하지 않기로 한다.
이상에서 설명한 본 발명은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니다.

Claims (19)

  1. 이동 로봇에서 복수의 사용자에게 퀴즈 게임 서비스를 제공하는 방법으로서,
    문제 설명자에게 화면이 노출된 위치에서, 문제를 상기 화면에 출력하는 첫 문제 출력 단계;
    상기 출력중인 문제에 대한 정답 음성이 인식되는지 여부를 확인하는 정답 확인 단계;
    상기 확인 결과 상기 정답 음성이 인식되면 이 정답 음성을 발화한 사용자를 문제 설명자로 재선정하고, 상기 재선정한 문제 설명자의 위치를 인식하는 위치 인식 단계;
    상기 재선정한 문제 설명자에게 상기 화면이 노출되도록 상기 인식한 위치와 일정 거리만큼 이격된 위치로 이동하는 이동 단계; 및
    상기 이동한 지역에서 다음 문제를 상기 화면에 출력하는 다음 문제 출력 단계;를 포함하는 이동 로봇에서의 퀴즈 게임 서비스 제공 방법.
  2. 제 1 항에 있어서,
    상기 위치 인식 단계는,
    저장중인 사용자별 위치정보를 토대로, 상기 재선정한 문제 설명자의 위치를 인식하는 것을 특징으로 하는 이동 로봇에서의 퀴즈 게임 서비스 제공 방법.
  3. 제 2 항에 있어서,
    상기 첫 문제 출력 단계 이전에,
    카메라를 이용하여 게임에 참여한 각 사용자의 얼굴을 인식하여 각각의 사용자를 식별하는 단계; 및
    퀴즈 게임이 진행되는 공간의 좌표정보가 기록된 맵 데이터를 참조하여, 상기 인식한 각각의 사용자의 위치정보를 확인하여 저장하는 단계;를 더 포함하는 것을 특징으로 하는 이동 로봇에서의 퀴즈 게임 서비스 제공 방법.
  4. 제 3 항에 있어서,
    상기 식별하는 단계는,
    게임에 참여한 사용자의 얼굴이 인식되지 않으면, 인식되지 않은 사용자의 음성 패턴, 성명 및 얼굴 이미지를 획득하여 저장하는 것을 특징으로 하는 이동 로봇에서의 퀴즈 게임 서비스 제공 방법.
  5. 제 1 항에 있어서,
    상기 위치 인식 단계는,
    상기 정답 음성에 대한 패턴을 확인하고, 이 정답 음성의 패턴과 매핑된 사용자 성명을 자체 저장중인 사용자 정보에서 확인하여 정답을 발화한 사용자를 식별하는 단계; 및
    상기 식별한 사용자의 정답 횟수 또는 퀴즈 점수를 증가시키는 단계;를 포함하는 것을 특징으로 하는 이동 로봇에서의 퀴즈 게임 서비스 제공 방법.
  6. 제 5 항에 있어서,
    상기 다음 문제 출력 단계 이후에,
    퀴즈 게임이 종료되면 퀴즈 게임에 참여한 사용자별 정답 횟수 또는 퀴즈 점수를 확인하여 출력하는 단계;를 더 포함하는 것을 특징으로 하는 이동 로봇에서의 퀴즈 게임 서비스 제공 방법.
  7. 복수의 사용자에게 퀴즈 게임 서비스를 제공하는 이동 로봇으로서,
    문제를 출력하는 표시부;
    복수의 문제를 저장하는 저장부;
    상기 표시부를 문제 설명자에게 노출한 위치에서, 상기 저장부에서 문제를 추출하여 상기 표시부에 출력하는 문제 제공부;
    상기 출력중인 문제에 대한 정답 음성이 인식되는지 여부를 확인하여 정답 음성이 인식되면, 이 정답 음성을 발화한 사용자를 정답자로 식별하는 정답 판정부; 및
    정답 판정부에 의해 식별된 정답자를 문제 설명자로 재선정하여 상기 재선정한 문제 설명자의 위치를 인식하고, 상기 재선정한 문제 설명자에게 상기 표시부가 노출되도록 상기 인식한 위치와 일정 거리만큼 이격된 위치로 상기 이동 로봇을 이동시키는 설명자 선정부;를 포함하고,
    상기 문제 제공부는, 재선정된 문제 설명자의 방향으로 상기 이동 로봇의 이동이 완료되면, 다음 문제를 상기 저장부에서 추출하여 상기 표시부에 출력하는 것을 특징으로 하는 이동 로봇.
  8. 제 7 항에 있어서,
    상기 저장부는 사용자별 위치정보를 저장하고,
    상기 설명자 선정부는, 상기 사용자별 위치정보를 토대로 상기 재선정한 문제 설명자의 위치를 인식하는 것을 특징으로 하는 이동 로봇.
  9. 제 8 항에 있어서,
    카메라를 이용하여 게임에 참여한 각 사용자의 얼굴을 인식하여 각각의 사용자를 식별하고, 퀴즈 게임이 진행되는 공간의 좌표정보가 기록된 맵 데이터를 참조하여 상기 인식한 각 사용자의 위치정보를 확인하여 상기 저장부에 저장하는 참여자 인식부;를 더 포함하는 것을 특징으로 하는 이동 로봇.
  10. 제 9 항에 있어서,
    상기 참여자 인식부는,
    게임에 참여한 사용자의 얼굴이 인식되지 않으면, 인식되지 않은 사용자의 음성 패턴, 성명 및 얼굴 이미지를 획득하여, 상기 저장부에 저장하는 것을 특징으로 하는 이동 로봇.
  11. 제 8 항에 있어서,
    상기 정답 판정부는,
    상기 정답 음성의 패턴과 매핑된 사용자 성명을 상기 저장부에서 확인하여 정답을 발화한 사용자를 식별하고, 상기 식별한 사용자의 정답 횟수 또는 퀴즈 점수를 증가시키는 것을 특징으로 하는 이동 로봇.
  12. 제 11 항에 있어서,
    퀴즈 게임이 종료되면 퀴즈 게임에 참여한 사용자별 정답 횟수 또는 퀴즈 점수를 확인하여 출력하는 게임결과 제공부;를 더 포함하는 것을 특징으로 하는 이동 로봇.
  13. 복수의 사용자에게 퀴즈 게임 서비스를 제공하는 이동 로봇으로서,
    문제를 출력하는 표시부;
    복수의 문제를 저장하는 저장부;
    상기 이동 로봇의 왼쪽 측면과 오른쪽 측면에 각각 설치된 복수의 마이크;
    상기 표시부를 문제 설명자에게 노출한 위치에서, 상기 저장부에서 문제를 추출하여 상기 표시부에 출력하는 문제 제공부;
    상기 문제에 대한 정답 음성이 인식되는지 여부를 확인하여 정답 음성이 인식되면, 이 정답 음성을 발화한 사용자를 정답자로 식별하는 정답 판정부;
    상기 복수의 마이크에서 수신한 상기 정답 음성의 주파수를 분석하여 상기 정답 음성의 발화 방향을 판단하는 음성방향 분석부; 및
    상기 정답 판정부에 의해 식별된 정답자를 문제 설명자로 재선정하고, 상기 음성방향 분석부에서 분석한 상기 정답 음성의 발화 방향으로 촬영각도를 변경시켜 문제 설명자의 얼굴과 위치를 인식한 후, 상기 재선정한 문제 설명자에게 상기 표시부가 노출되도록 상기 인식한 위치와 일정 거리만큼 이격된 위치로 상기 이동 로봇을 이동시키는 설명자 선정부;를 포함하고,
    상기 문제 제공부는, 재선정된 문제 설명자의 방향으로 상기 이동 로봇의 이동이 완료되면, 다음 문제를 상기 저장부에서 추출하여 상기 표시부에 출력하는 것을 특징으로 하는 이동 로봇.
  14. 제 13 항에 있어서,
    상기 음성방향 분석부는,
    상기 정답 음성이 고주파수이고 왼쪽 측면에 설치된 마이크와 오른쪽 측면에 설치된 마이크에서 수신된 상기 정답 음성 세기의 차이가 사전에 설정된 임계세기 이상이면 상기 정답 음성의 세기가 더 크게 수신된 마이크 방향이 상기 정답 음성의 발화 방향인 것으로 판단하는 것을 특징으로 하는 이동 로봇.
  15. 제 13 항에 있어서,
    상기 음성방향 분석부는,
    상기 정답 음성이 고주파수이고 왼쪽 측면에 설치된 마이크와 오른쪽 측면에 설치된 마이크에서 수신된 상기 정답 음성 세기의 차이가 사전에 설정된 임계세기 미만이면, 상기 정답 음성의 발화 방향이 상기 이동 로봇의 뒤쪽 방향인 것으로 판단하는 것을 특징으로 하는 이동 로봇.
  16. 제 13 항에 있어서,
    상기 음성방향 분석부는,
    상기 정답 음성이 저주파수이고 왼쪽 측면에 설치된 마이크와 오른쪽 측면에 설치된 마이크에서 상기 정답 음성이 수신한 시간 차가 사전에 설정된 임계시간 이상이면, 상기 정답 음성이 먼저 수신된 마이크의 방향이 상기 정답 음성의 발화 방향인 것으로 판단하는 것을 특징으로 하는 이동 로봇.
  17. 제 13 항에 있어서,
    상기 음성방향 분석부는,
    상기 정답 음성이 저주파수이고 왼쪽 측면에 설치된 마이크와 오른쪽 측면에 설치된 마이크에서 상기 정답 음성이 수신한 시간 차가 사전에 설정된 임계시간 미만이면, 상기 정답 음성의 발화 방향이 상기 이동 로봇의 뒤쪽 방향인 것으로 판단하는 것을 특징으로 하는 이동 로봇.
  18. 제 13 항에 있어서,
    상기 정답 판정부는,
    상기 정답 음성의 패턴과 매핑된 사용자 성명을 상기 저장부에서 확인하여 정답을 발화한 사용자를 식별하고, 상기 식별한 사용자의 정답 횟수 또는 퀴즈 점수를 증가시키는 것을 특징으로 하는 이동 로봇.
  19. 제 13 항에 있어서,
    상기 설명자 선정부는,
    상기 정답 음성의 패턴과 매핑된 사용자의 얼굴 이미지를 상기 저장부에서 확인하여, 이 얼굴 이미지에 근거하여 상기 재선정한 문제 설명자의 얼굴을 인식하고, 상기 얼굴이 인식된 방향과 상기 문제 설명자 간의 거리를 토대로, 상기 재선정한 문제 설명자의 위치를 인식하는 것을 특징으로 하는 이동 로봇.
PCT/KR2013/006567 2013-02-27 2013-07-23 이동 로봇에서의 퀴즈 게임 서비스 제공 방법 및 이를 위한 이동 로봇 Ceased WO2014133231A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2013-0021133 2013-02-27
KR1020130021133A KR101505078B1 (ko) 2013-02-27 2013-02-27 이동 로봇에서의 퀴즈 게임 서비스 제공 방법 및 이를 위한 이동 로봇

Publications (1)

Publication Number Publication Date
WO2014133231A1 true WO2014133231A1 (ko) 2014-09-04

Family

ID=51428473

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2013/006567 Ceased WO2014133231A1 (ko) 2013-02-27 2013-07-23 이동 로봇에서의 퀴즈 게임 서비스 제공 방법 및 이를 위한 이동 로봇

Country Status (2)

Country Link
KR (1) KR101505078B1 (ko)
WO (1) WO2014133231A1 (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102616403B1 (ko) * 2016-12-27 2023-12-21 삼성전자주식회사 전자 장치 및 그의 메시지 전달 방법
KR102740847B1 (ko) * 2019-02-19 2024-12-13 삼성전자주식회사 사용자 입력 처리 방법 및 이를 지원하는 전자 장치
WO2024228606A1 (ko) * 2023-05-03 2024-11-07 카페24 주식회사 바둑 게임 콘텐트의 정보 표시 방법, 장치 및 시스템

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001310283A (ja) * 2000-02-14 2001-11-06 Sony Corp ロボットシステム、ロボット装置及びその制御方法、並びに情報処理装置及び方法
JP2003241833A (ja) * 2002-02-18 2003-08-29 Hitachi Ltd 移動型ロボットによる情報配信サービス及び情報収集システム
JP2003271773A (ja) * 2002-03-18 2003-09-26 Dainippon Printing Co Ltd ゲーム運営システム
KR20050044034A (ko) * 2003-11-07 2005-05-12 구지영 인터넷 퀴즈 시스템 및 그 운영 방법
KR20110103537A (ko) * 2010-03-15 2011-09-21 모빌토크(주) 이동로봇의 안내 서비스방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001310283A (ja) * 2000-02-14 2001-11-06 Sony Corp ロボットシステム、ロボット装置及びその制御方法、並びに情報処理装置及び方法
JP2003241833A (ja) * 2002-02-18 2003-08-29 Hitachi Ltd 移動型ロボットによる情報配信サービス及び情報収集システム
JP2003271773A (ja) * 2002-03-18 2003-09-26 Dainippon Printing Co Ltd ゲーム運営システム
KR20050044034A (ko) * 2003-11-07 2005-05-12 구지영 인터넷 퀴즈 시스템 및 그 운영 방법
KR20110103537A (ko) * 2010-03-15 2011-09-21 모빌토크(주) 이동로봇의 안내 서비스방법

Also Published As

Publication number Publication date
KR20140106891A (ko) 2014-09-04
KR101505078B1 (ko) 2015-03-23

Similar Documents

Publication Publication Date Title
Gates et al. Music perception and cerebral asymmetries
CN109192204B (zh) 一种基于智能设备摄像头的语音控制方法和智能设备
WO2012036424A2 (en) Method and apparatus for performing microphone beamforming
CN111156441B (zh) 用于辅助学习的台灯、系统和方法
WO2019147034A1 (ko) 사운드를 제어하는 전자 장치 및 그 동작 방법
WO2021066399A1 (ko) 관계 설정을 이용한 실감형 인공지능기반 음성 비서시스템
WO2016099052A1 (ko) 시각장애인을 위한 3차원 장애물 안내장치와 이를 이용한 주위 정보 안내시스템 및 그 방법
CN113380275B (zh) 语音处理方法、装置、智能设备及存储介质
WO2022080774A1 (ko) 말 장애 평가 장치, 방법 및 프로그램
WO2016060296A1 (ko) 음향 정보 녹음 장치 및 그 제어 방법
WO2014133231A1 (ko) 이동 로봇에서의 퀴즈 게임 서비스 제공 방법 및 이를 위한 이동 로봇
WO2010011092A2 (ko) 이동 단말에서 보드 게임 서비스를 제공하는 장치 및 방법
WO2014109422A1 (ko) 음성 추적 장치 및 그 제어 방법
WO2019190076A1 (ko) 시선 추적 방법 및 이를 수행하기 위한 단말
WO2021091145A1 (en) Electronic apparatus and method thereof
JP2018174439A (ja) 会議支援システム、会議支援方法、会議支援装置のプログラム、および端末のプログラム
KR100868638B1 (ko) 영상 통화 말풍선 제공 시스템 및 방법
WO2015037871A1 (ko) 텍스트 인식을 이용한 음성재생 서비스 제공 시스템, 서버 및 단말
CN211289676U (zh) 用于辅助学习的台灯和系统
CN110808075B (zh) 智能录播方法
JP6645779B2 (ja) 対話装置および対話プログラム
WO2023191322A1 (en) Method and apparatus for implementing virtual performance partner
WO2020067666A1 (ko) 버추얼 상담 시스템 및 이를 이용한 상담방법
WO2024053967A1 (ko) 디스플레이 기반 커뮤니케이션 시스템
US20230300444A1 (en) Image capturing system and method for adjusting focus

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 13876195

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

32PN Ep: public notification in the ep bulletin as address of the adressee cannot be established

Free format text: NOTING OF LOSS OF RIGHTS PURSUANT TO RULE 112(1) EPC (EPO FORM 1205 DATED 10/12/2015)

122 Ep: pct application non-entry in european phase

Ref document number: 13876195

Country of ref document: EP

Kind code of ref document: A1