WO2011019200A2 - 홍보 가능한 지능형 디스플레이 장치 및 그 홍보 방법 - Google Patents

홍보 가능한 지능형 디스플레이 장치 및 그 홍보 방법 Download PDF

Info

Publication number
WO2011019200A2
WO2011019200A2 PCT/KR2010/005261 KR2010005261W WO2011019200A2 WO 2011019200 A2 WO2011019200 A2 WO 2011019200A2 KR 2010005261 W KR2010005261 W KR 2010005261W WO 2011019200 A2 WO2011019200 A2 WO 2011019200A2
Authority
WO
WIPO (PCT)
Prior art keywords
information
image
image output
output means
voice
Prior art date
Application number
PCT/KR2010/005261
Other languages
English (en)
French (fr)
Other versions
WO2011019200A3 (ko
Inventor
송세경
Original Assignee
(주) 퓨처로봇
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주) 퓨처로봇 filed Critical (주) 퓨처로봇
Priority to US13/390,003 priority Critical patent/US20120146906A1/en
Publication of WO2011019200A2 publication Critical patent/WO2011019200A2/ko
Publication of WO2011019200A3 publication Critical patent/WO2011019200A3/ko

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F27/00—Combined visual and audible advertising or displaying, e.g. for public address
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q90/00—Systems or methods specially adapted for administrative, commercial, financial, managerial or supervisory purposes, not involving significant data processing
    • G06Q90/20—Destination assistance within a business structure or complex
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F27/00—Combined visual and audible advertising or displaying, e.g. for public address
    • G09F2027/001—Comprising a presence or proximity detector

Definitions

  • the present invention relates to an intelligent display device that can be promoted and a method of promoting the same. More specifically, the present invention relates to an intelligent display device that can be promoted using an image output means and a driving means for determining a promotion target based on context information grasped through the image recognition means 100, and a method for promoting the same.
  • various display devices are used for various promotions or guidance of stores, companies, and public places.
  • computers such as ATM machines for financial services installed in public places for the convenience of customers, terminals for ticketing, purchasing, and registration, and terminals for information retrieval that provide advertisements and information
  • the automation system, or kiosk is on the same line. Furthermore, even state-of-the-art service robots can perform these functions.
  • the promotional display device or the unmanned automatic device has the disadvantage of easily demonstrating that the provided service is uniform and repetitive, and it is also expensive to develop a hand and arm having the shape of a human face using a service robot or having multiple degrees of freedom. It is expensive and lacks expressiveness.
  • the body of the robot is also disadvantageous for the promotion of the small monitor.
  • the present invention has been made in accordance with the above needs, the object of the present invention is to determine the target and publicity of the promotion by using the image recognition means to provide publicity or guidance information, video, audio at the request of the user And to provide an intelligent display device that can promote the promotion and guidance effect, such as characters and methods for promoting the same.
  • Still another object of the present invention is to provide a driving means together with an image recognition means so that the display device can recognize the behavior of the promotion target and respond appropriately, thereby inducing a user-customized or human-friendly communication to the user.
  • the present invention provides a display device and a method of promoting the same.
  • An object of the present invention as described above is a first image output means 300 for outputting a character image of a predetermined character and a promotional image for a predetermined promotion;
  • a camera 110 positioned at one side of the first image output means 300 and photographing toward one or more persons;
  • Image recognition means 100 for receiving the captured image of the camera 110 and outputting at least one of the situation information of at least one person's location information, moving direction information, perspective information, number of people information and size information; Based on the recognized situation information of the image recognition means 100, the promotion target is specified at a predetermined time period, and the rotation or rotation of the first image output means 300 is performed based on the location information and the moving direction information of the specified promotion target.
  • Control means (600) for determining driving information about speed and direction, and for determining a publicity act according to the perspective information, the number of people information, and the size information of the subject to be promoted;
  • a voice output means 400 for outputting a character voice of the character and a promotional voice for promotion based on the promotional behavior determined by the control means 600;
  • the first image output means 300 and the predetermined first connection shaft 502 are interconnected to each other, and the first image output means 300 rotates through at least one axis based on the determined driving information and the determined publicity act.
  • a promotional intelligent display device comprising a; first drive means 500 to enable rotation.
  • the promotional video is preferably product information or store guide information.
  • the camera 110 is two or more cameras 110 having a constant distance from each other, the image recognition means 100 is a relative position of the same person, compared to the background image of the same person photographed at the same time through the two or more cameras 110 It may be to obtain perspective information.
  • the perspective information is preferably distance information from the first image output means 300 to one or more people.
  • the specified promotional object is a person having a minimum change in position among one or more people.
  • the publicity act is preferably at least one of a promotional image, a promotional voice, a movement of the first image output means 300, and a change in a character image.
  • the first driving unit 500 preferably includes at least one rotary motor unit continuously connected to the longitudinal end of the first connecting shaft 502 formed on the rear surface of the first image output unit 300.
  • the first connecting shaft 502 further includes a bearing sphere 510 formed at the longitudinal end, each of the at least one rotary motor portion is preferably rotatable in contact with the bearing sphere 510.
  • the first driving means 500, the motor coupling portion 520 is further formed on the first connecting shaft 502, it is preferable to include at least one linear drive motor coupled to the motor coupling portion 520.
  • the promotional intelligent display device further includes microphones 210a and 210b for receiving sound information and voice recognition means 200 for recognizing one or more persons' voices based on the sound information received by the microphones 210a and 210b.
  • the control means 600 preferably specifies a promotion target based on the recognized context information and the recognized speech information.
  • the first driving means 500 is positioned below the first image output means 300, and the second image output means 350 is disposed below the first driving means 500; And second driving means 550 connected to the second connection shaft 552 formed on the rear surface of the second image output means 350 to enable rotation and rotation of the second image output means 350. It is desirable to.
  • the second image output means 350 is preferably a touch screen for receiving a touch input of a predetermined user.
  • the intelligent display apparatus that can be promoted is the first image output means 300 and the second image output means 350 and outputs a detection signal to the control means 600 when a target or a predetermined object approaches within a predetermined area.
  • the apparatus further comprises at least one proximity sensor 700, 750 for preventing the driving means and the second driving means.
  • an object of the present invention is another category, the image recognition means 100 receives the captured image of the camera 110 at least any one of the location information, moving direction information, perspective information, number of people information and size information of one or more people Image recognition step (S110) for recognizing one piece of situation information; A first determining step S120 of specifying, by the control means 600, the promotional target at a predetermined time period based on the recognized situation information; A second determining step (S130), wherein the control means (600) determines driving information regarding the speed and direction of rotation or rotation of the first image output means (300) based on the position information and the movement direction information of the promotion target; A third determining step S140 in which the control means 600 determines a publicity act based on the perspective information, the number of people information, and the size information of the target audience; The first image output means through the control of at least one axis on the basis of the determined driving information and the determined publicity act by the first driving means 500 interconnected with the first image output means 300 and the predetermined first connecting shaft 5
  • Rotating or rotating the 300 (S150); An image output step S160 of the first image output means 300 outputting a character image or a promotional image based on the promotional activity; And a voice output step (S170) in which the voice output means 400 outputs a character voice or a promotional voice based on the promotional activity.
  • the image recognition means 100 receives the captured image of the camera 110, at least any one of the situation information of the position information, moving direction information, perspective information, the number of people information and size information of one or more people Image recognition step of recognizing (S210); A voice recognition step (S215) in which the voice recognition means 200 recognizes one or more human voices based on the sounds received by the microphones 210a and 210b; A first determination step S220 of the control means 600 specifying a promotion target at a predetermined time period based on the recognized situation information and the recognized voice information of the recognized voice; A second determining step (S230), wherein the control means (600) determines the rotation speed and the driving information of the first image output means (300) based on the position information and the movement direction information of the promotion target; A third determination step (S240) of the control means 600 determining a publicity act based on the perspective information, the number of people information, and the magnitude information of the target to be promoted; The first image output means through the control of at least
  • Rotating or rotating the 300 S250; An image output step (S260) of the first image output means 300 outputting a character image or a promotional image based on the promotional activity; And a voice output step (S270) in which the voice output means 400 outputs a character voice or a promotional voice based on the promotional activity.
  • a driving means is provided along with the image recognition means so that the display apparatus can recognize the behavior of the promotion target and respond appropriately, thereby inducing a user-customized or human-friendly interaction with the user.
  • FIG. 1 is a schematic view showing a configuration of an embodiment according to the present invention.
  • FIG. 2 is a front view showing the front of a first embodiment of the promoteable intelligent display device according to the present invention and an operating state diagram schematically showing a driving state of the first driving means of the 3-axis control;
  • FIG. 3 is a front view showing a first modification of the first drive means of the three-axis control in one embodiment according to the present invention
  • FIG. 4 is a front view showing a second modification of the first drive means of the three-axis control in one embodiment according to the present invention
  • Figure 5 is a front view showing the front of a second embodiment of the promotional intelligent display device according to the present invention and a partially enlarged view schematically showing the first drive means and the second drive means of the three-axis control,
  • FIG. 6 is a flowchart showing a first embodiment of a public relations method according to the present invention.
  • FIG. 7 is a flowchart illustrating a second embodiment of a public relations method according to the present invention.
  • 210a, 210b microphone
  • Figure 1 is a schematic diagram showing the configuration of an embodiment according to the present invention.
  • the first embodiment of the present invention capable intelligent display device includes a camera 110, an image recognition means 100, a first image output means 300, an audio output means 400, 1 drive means 500 and the control means 600 has a basic configuration, the microphone (210a, 210b) and the voice recognition means 200 may be added.
  • the second embodiment of the present invention described in FIG. 5 is configured by adding the second image output means 350 and the second driving means 550 to the first embodiment.
  • the image recognition means 100 outputs the situation information to the control means 600 based on the captured image.
  • the control unit 600 specifies the promotion target at a predetermined time period based on the situation information, determines the driving information of the first image output unit 300, and also performs a promotional activity (eg, product information or Video / audio output of the store guide, video / audio output of the character, and various gestures).
  • a promotional activity eg, product information or Video / audio output of the store guide, video / audio output of the character, and various gestures.
  • control means 600 is connected to the first image output means 300, the audio output means 400, the first driving means 500 and outputs a control command for the promotional action to each.
  • first driving means 500 which receives the control command of the control means 600 rotates or rotates to give the first image output means 300 a movement, and receives the control command of the control means 600.
  • the first image output means 300 outputs various character images or promotional images.
  • the voice output means 400 receiving the control command of the control means 600 outputs a character voice or a promotional voice.
  • the second image output means 350 and the second driving means 550 are also controlled by receiving a control command for the publicity action from the control means 600.
  • the voice recognition means 200 analyzes the voice information and controls it when it includes the specific voice information.
  • the control unit 600 is output to the means 600 so that the control means 600 can be used to specify the promotion target together with the situation information.
  • the camera 110 may use a multi-million-pixel digital camera to double the image recognition effect as a means of obtaining an image by photographing one or more people. It is an essential component for extracting situation information (eg, one or more people's location information, moving direction information, perspective information, headcount information, and size information) and is connected to the image recognition means 100.
  • situation information eg, one or more people's location information, moving direction information, perspective information, headcount information, and size information
  • the image recognition means 100 is a means for obtaining and analyzing a captured image (eg, a background image and one or more people) and obtaining desired situation information therefrom.
  • the processor may have a processor for image processing and a memory for storing images.
  • the situation information is obtained by using the algorithm means suitable for the purpose of analysis.
  • a two-dimensional location may be determined based on data change of a background image frame based on a background image stored in advance or stored through periodic updating.
  • two or more cameras 110 may be synchronized to each other, and data of each image frame may be obtained and compared to determine a three-dimensional position including perspective information.
  • the movement direction information of the person it is determined as the change of the position described above through periodic image processing.
  • the movement speed information of a person is also determined similarly to the movement direction information.
  • rough headcount information is determined by giving a step-by-step division (eg, singular or plural two-step divisions) rather than an exact headcount.
  • large and small information it is to differentiate adult or children and to promote publicity.
  • the key information corresponding to a person's height is extracted by comparing with the background image by reflecting the change in the size of the image according to the perspective information.
  • One microphone 210a, 210b may be used as a means for obtaining sound information and transmitting the same to the voice recognition means 200. However, two microphones 210a and 210b may be spaced apart from each other by a predetermined distance in order to determine a promotion target from the direction of sound generation. desirable.
  • the voice recognition means 200 extracts voice information corresponding to the human voice from the sound information received from the microphones 210a and 210b through a noise removing filter (for example, a Wiener filter or a Kalman filter).
  • the voice information may be voice information output by a user using the intelligent display apparatus according to the present invention through speech, and in this case, the voice information may be a specific product name or a specific guide term. In this case, a function of searching for predetermined voice information stored in advance through a predetermined voice recognition algorithm is also performed.
  • the control means 600 outputs a control command based on the situation information analyzed by the image recognition means 100 and the voice information analyzed by the voice recognition means 200.
  • the person located in the direction of generation of the voice analyzed by the voice recognition means 200 may be specified as a promotion target.
  • control unit 600 determines the rotational speed and the driving information of the rotational direction of the first image output means 300 based on the specified positional information and the movement direction information of the promotional target.
  • the first image output means 300 outputting the character face is to calculate the driving information of the first driving means 500 in order to face the promotion target.
  • control unit 600 may determine the specific publicity to be regarded as a user of an embodiment of the present invention when the specified publicity target comes within a certain distance. Specifically, it is determined to output an image of a character's facial expression change or a character's gesture that induces a friendliness to the first image output means.
  • image output of the product information and the output of the product promotion voice through the audio output means 400 is determined, and in the case of outputting the guide information, the guidance information of the store, company or public institution, etc. Decide on audio output.
  • a predetermined user uses the touch screen provided in the second image output means 300 determines the output of a programmed process (eg, product description or guide information) according to the touch input signal.
  • the first image output means 300 outputs a character image or a promotional image (eg, product information, store or company guide information) based on the determination of the control means 600 described above.
  • a flat panel display device such as an LCD, an LED, a PDP, or the like may be used, and various expressions of a character are output by a control command of the control means 600. Smiley face, crying face if the publicity target is far away)
  • the voice output means 400 outputs product information or guide information of a store (or company) as a voice.
  • a voice eg, a greeting voice or a voice for a guest
  • a voice eg, a greeting voice or a voice for a guest
  • the first driving means 500 is a means for a gesture through the rotation of the front and rear or left and right and the rotation of the first image output means 300 as an aspect of the public relations.
  • the first driving means 500 is driven based on the driving information determined by the control means 600 (eg, speed and direction required for rotation and rotation).
  • the control means 600 eg, speed and direction required for rotation and rotation.
  • the detailed configuration will be described later with reference to FIGS. 2 to 5.
  • one embodiment of the present invention is a driving method through three-axis control, but simple driving through one or two-axis control is also possible.
  • the second image output means 350 and the second driving means 550 are additional components of the second embodiment, which will be described later with reference to FIG. 5.
  • Figure 2 is a front view showing the front of the first embodiment of the intelligent display device can be promoted according to the present invention and an operating state diagram schematically showing the driving state of the first drive means of the three-axis control.
  • the first exemplary embodiment of the present invention is a flat panel display (eg, LCD) as a first image output device 300 on a front surface thereof, and a camera 110 and microphones 210a and 210b on an edge thereof.
  • the voice output means 400 is provided, and the first connection shaft 502 and the support means 800 are formed below the rear surface of the first image output apparatus 300.
  • the first driving means 500 described with reference to FIG. 1 includes a connecting shaft 502 and a connecting shaft 502 for transmitting power to the first image output means 300.
  • Each material may be made of a wear-resistant material (eg stainless steel or carbon fiber) to withstand friction due to rotation and rotation, and rubber may be used to enable power transmission by friction.
  • FIG. 2 schematically shows an operation state in which the configuration is omitted, and the first image output unit 300 is reciprocated from side to side by receiving power by the rotation of the third rotary motor unit 512c when viewed from the front. Indicates.
  • the first image output means 300 may be rotated about the first connecting shaft 502 by the rotation of the first rotary motor unit 512a.
  • FIG. 2 schematically shows an operation state in which the first image output unit 300 is reciprocated back and forth by receiving power from the rotation of the second rotary motor unit 512b when viewed from the side. It is shown.
  • the first image output means 300 may be rotated about the first connecting shaft 502 by the rotation of the first rotary motor unit 512a.
  • the first drive means 500 is composed of three rotary motor units (512a, 512b, 512c) and rotates front and rear and right and left by the three-axis control and the first connecting shaft Enables rotational movement about 502.
  • the proximity sensor 700 detects the user's hand or other object approaching the first image output means 300 to drive the first driving means 500 to protect the first image output means 300 or prevent malfunction. To stop the operation.
  • an ultrasonic sensor, an infrared sensor, or the like may be used, and a plurality of proximity sensors 700 may be provided according to the size of the first image output means 300.
  • infrared sensors are commercially available in various types, such as using reflection and sensing heat changes, so that an appropriate method can be used.
  • the support means 800 may cause a change in the center of gravity due to the movement of the first image output means 300.
  • the support means 800 is a means for resolving the instability of the first embodiment of the present invention, which may occur from the image recognition means.
  • 100 also serves as a housing including the voice recognition means 200, the first driving means 500, the control means 600 therein.
  • the contact area with the material or the bottom of the support means 800 may be appropriately determined.
  • FIG. 3 is a front view showing a first modification of the first drive means of the three-axis control in one embodiment according to the present invention
  • Figure 4 is a first view of the first drive means of the three-axis control in one embodiment according to the present invention It is a front view which showed 2 modifications.
  • the first driving means 500 of the present invention is not limited to a specific method and may make various modifications. Among them, in the first modified example consisting of the first connecting shaft 520 and the three rotating motor parts 522a, 522b, and 522c shown in FIG. 3, the central rotation shaft of the first rotating motor part 522a is directly the first.
  • the second rotary motor unit 522b is directly or indirectly connected to the first rotary motor unit 522a to rotate left and right of the first image output unit 300.
  • the third rotary motor unit 522c is directly or indirectly connected to the second rotary motor unit 522b to rotate back and forth to allow the first image output unit 300 to rotate back and forth.
  • a second modified example consisting of the motor coupling part 530 and three linear drive motor parts 532a, 532b, and 532c shown in FIG. 4 includes a first linear drive motor part 532a and a third linear drive motor part 532c. Piston linear driving in opposite directions to implement the left and right rotation of the first image output means (300). The piston linear driving of the second linear driving motor unit 532b enables forward and backward rotation of the first image output means 300.
  • the first, second, and third linear driving motor parts 532a, 532b, and 532c are incompletely adjusted by adjusting the angles of coupling to the motor coupling part 530, a rotational motion about the motor coupling part 530 is realized. .
  • Fig. 5 is a front view showing the front of a second embodiment of the promoteable intelligent display device according to the present invention and a partially enlarged view schematically showing the first drive means and the second drive means of the 3-axis control.
  • the second embodiment of the intelligent display apparatus includes a camera 110, image recognition means 100, microphones 210a and 210b, voice recognition means 200, and first image output means 300.
  • the audio output means 400, the first driving means 500, the control means 600, the proximity sensor 700 and the support 800 is the same as the first embodiment, the proximity sensor 750 ),
  • the second image output means 350 and the second driving means 550 are further added.
  • description of the overlapping configuration will be omitted and the additional configuration will be described.
  • the proximity sensor 750 is mounted on the edge of the second image output means 350 to protect the second image output means 350 and to prevent malfunction. Therefore, the configuration is the same as in the first embodiment of the intelligent display device.
  • the second image output means 350 is the same as the first image output means 300 except for the size and use of the screen.
  • the first image output means 300 since the first image output means 300 mainly outputs an image of the character's face, the first image output means 300 is configured to have a size enough to be recognized as the body of the character in order to implement a human-friendly device.
  • the first image output means 300 is mainly used as a means for communicating with a person, such as outputting a character's face and expressing a facial expression of the character, while the second image output means 350 is a product information. And means for outputting image information of the shop (or company).
  • the second embodiment has both a first drive means 500 and a second drive means 550.
  • the second driving means 550 is composed of a second connecting shaft 552, a bearing sphere 560 and a plurality of rotary motor parts 562a, 562b, 562c, the first connection shaft 572, the bearing sphere 580 )
  • the first driving means 500 constituted by the plurality of rotary motor parts 582a, 582b, and 582c. Therefore, the above-described modification of the first driving means 500 can be equally applicable.
  • the first driving means 500 is a means for expressing a greeting (eg, a scenic), a gesture, or the like of the character output to the first image output means 300, whereas in the case of the second driving means 550. It is a means for expressing the greetings and gestures of the character accompanied by the bending of the waist by enabling the front and rear, right and left rotation of the second image output means 350 and the rotational movement of the center of the second connection shaft 552.
  • FIG. 6 is a flowchart illustrating a first embodiment of a public relations method according to the present invention.
  • One embodiment of the intelligent display device of the present invention may be located in the show window of the store or the entrance or the building lobby of the building to implement the following publicity method.
  • the image recognizing means 100 receives the captured image of the camera 110 to detect at least one of the location information, the moving direction information, the perspective information, the number of people information, and the size information of at least one person. Recognize the situation information (S110).
  • control unit 600 performs a first determination step (S120) of specifying a promotion target at a predetermined time period based on the recognized situation information.
  • the person to be promoted is identified as a person closest to the location information of one or more people in the situation information and within a distance below a certain standard through the perspective information.
  • the number of people is large through the number of people information (e.g., two or more)
  • a large number of people are designated as one group to be promoted, and when the number of people is small (e.g., one person), one person is promoted.
  • the number of people is small (e.g., one person)
  • a second determining step (S130) in which the control means 600 determines driving information regarding the speed and direction of rotation or rotation of the first image output means 300 based on the position information and the movement direction information of the promotion target. Do this. However, when applying to the second embodiment of the intelligent display device in this step (S130), the drive information about the speed and direction of the rotation or rotation of the second image output means 350 is also determined.
  • control unit 600 performs a third determination step (S140) for determining a publicity act based on the perspective information, the number of people information, and the size information of the target audience.
  • S140 third determination step
  • the first image output unit 300 and the first driving unit 500 interconnected to the predetermined first connecting shaft 502 are controlled by the at least one axis based on the determined driving information and the determined publicity act.
  • Rotating or rotating the output means 300 S150.
  • the second driving means 550 when applied to the second embodiment of the intelligent display device in this step (S150), the second driving means 550 also rotates or rotates the second image output means 350.
  • the first image output unit 300 performs an image output step S160 of outputting a character image or a promotional image based on the promotional activity.
  • the second image output means 350 outputs an image.
  • the voice output means 400 performs a voice output step S170 of outputting a character voice or a promotional voice based on the promotional action.
  • an expression indicating that the number of persons is recognized through the number of persons information (for example, a gesture through a movement or output character of the first image output unit 300 or a voice expression such as 'you') is performed.
  • a character corresponding thereto may be output.
  • the size of the image output through the first image output means 300 or the volume of the audio output through the audio output means 400 is adjusted.
  • the image recognizing means 100 receives an image captured by the camera 110 to detect at least one of location information, moving direction information, perspective information, headcount information, and size information of one or more persons.
  • An image recognition step (S210) of recognizing one piece of situation information is performed.
  • the voice recognition means 200 performs a voice recognition step (S215) for recognizing the voice of one or more people based on the sound received by the microphones 210a and 210b.
  • control unit 600 performs a first determination step (S220) of specifying a promotion target at a predetermined time period based on the recognized situation information and the recognized voice information of the recognized voice.
  • a first determination step S220 of specifying a promotion target at a predetermined time period based on the recognized situation information and the recognized voice information of the recognized voice.
  • control means 600 performs a second determination step S230 of determining the rotational speed and the driving information of the first image output means 300 based on the position information and the movement direction information of the promotion target. .
  • control unit 600 performs a third determination step (S240) for determining the promotion behavior according to the perspective information, the number of people information, and the size information of the target.
  • the first image output unit 300 and the first driving unit 500 interconnected to the predetermined first connecting shaft 502 are controlled by the at least one axis based on the determined driving information and the determined publicity act. Rotating or rotating the output means 300 (S250).
  • the first image output means 300 performs an image output step S260 of outputting a character image or a promotional image based on the promotional activity.
  • the voice output means 400 performs a voice output step S270 of outputting a character voice or a promotional voice based on the promotional action.

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Accounting & Taxation (AREA)
  • Development Economics (AREA)
  • General Physics & Mathematics (AREA)
  • Finance (AREA)
  • Strategic Management (AREA)
  • Economics (AREA)
  • General Business, Economics & Management (AREA)
  • Game Theory and Decision Science (AREA)
  • Marketing (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Tourism & Hospitality (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

영상인식수단(100)을 통해 파악되는 상황 정보를 기초로 홍보 대상을 결정하고 홍보를 위해 영상출력수단 및 구동수단을 이용하여 홍보 및 안내 효과를 증진시킴과 동시에, 인간친화적인 교감을 유도할 수 있는 홍보 가능한 지능형 디스플레이 장치 및 그 홍보 방법에 관한 것이다. 이를 위해 특히, 소정 캐릭터의 캐릭터 영상 및 소정 홍보를 위한 홍보 영상을 출력하는 제 1 영상출력수단(300); 제 1 영상출력수단(300)의 일측에 위치하여 하나 이상의 사람을 향하여 촬상하는 카메라(110); 카메라(110)의 촬상된 영상을 수신하여 하나 이상의 사람의 위치 정보, 이동 방향 정보, 원근 정보, 인원수 정보 및 대소 정보 중 적어도 어느 하나의 상황 정보를 출력하는 영상인식수단(100); 영상인식수단(100)의 인식된 상황 정보를 기초로 일정 시간 주기로 홍보 대상을 특정하고, 특정된 홍보 대상의 위치 정보 및 이동 방향 정보에 기초하여 제 1 영상출력수단(300)의 회동 또는 회전의 속도 및 방향에 관한 구동 정보를 결정하며, 홍보 대상의 원근 정보, 인원수 정보 및 대소 정보에 따른 홍보 행위를 결정하는 제어수단(600); 제어수단(600)에 의해 결정된 홍보 행위에 기초하여 캐릭터의 캐릭터 음성 및 홍보를 위한 홍보 음성을 출력하는 음성출력수단(400); 및 제 1 영상출력수단(300)과 소정의 제 1 연결축(502)으로 상호 연결되고, 결정된 구동 정보 및 결정된 홍보 행위에 기초하여 적어도 1축의 제어를 통해 제 1 영상출력수단(300)의 회동 또는 회전을 가능케 하는 제 1 구동수단(500);을 포함하는 것을 특징으로 하는 홍보 가능한 지능형 디스플레이 장치가 개시된다.

Description

홍보 가능한 지능형 디스플레이 장치 및 그 홍보 방법
홍보 가능한 지능형 디스플레이 장치 및 그 홍보 방법에 관한 것이다. 보다 상세하게는 영상인식수단(100)을 통해 파악되는 상황 정보를 기초로 홍보 대상을 결정하고 홍보를 위해 영상출력수단 및 구동수단을 이용하는 홍보 가능한 지능형 디스플레이 장치 및 그 홍보 방법에 관한 것이다.
일반적으로 여러 가지 홍보 또는 매장/회사/공공장소의 안내 등을 위해 각종 디스플레이 장치를 사용하는 경우가 많다. 이런 측면에서 볼 때 고객의 편의를 위하여 공공장소 등에 설치되는 금융 업무를 위한 현금 자동 입출금기(ATM) 단말기나 발권, 구매, 등록을 대행하는 단말기, 광고 및 정보를 제공하는 정보 검색용 단말기 등의 컴퓨터 자동화 시스템, 즉 키오스크도 같은 선상에 있다. 나아가 최첨단 서비스 로봇도 이러한 기능을 수행할 수 있음 물론이다.
그러나 홍보용 디스플레이 장치 또는 무인자동화기기 등은 제공 서비스가 일률적이고 반복적이므로 쉽게 실증을 느끼는 단점이 있으며, 또한 서비스 로봇을 사용하여 사람 얼굴 모습으로 형상화하거나 다자유도를 갖는 손과 팔을 제작하는 것은 개발비가 고비용이며, 표현력이 미흡한 것이 흠이다. 그리고 로봇의 몸통의 경우 모니터가 작아서 홍보에 불리한 점도 있다.
기존 홍보를 위한 디스플레이 장치의 경우에도 고정된 장소와 정해진 방향으로 설치되고 정보를 일방적으로 재생하며, 단순 반복 정보 제공에 불과하다는 점에서 홍보의 대상이나 이용자를 배려하지 않는 단점이 있다.
따라서 이용자 인식을 통한 맞춤형 정보를 제공하고 이용자 요청에 따라 음성, 제스처 및 케릭터 등으로 흥미와 친밀감을 표현함으로 정보습득 효과를 배가시킬 수 있으며 홍보 및 안내 효과를 증진시킬 수 있는 지능형 디스플레이 장치의 필요성이 대두 된다.
따라서, 본 발명은 상기와 같은 필요에 의하여 안출된 것으로서, 본 발명의 목적은 홍보 또는 안내 정보를 제공하기 위해 영상인식수단을 이용하여 홍보 대상 및 홍보 행위를 결정하고 이용자의 요청에 따라 영상, 음성 및 케릭터 등으로 홍보 및 안내 효과를 증진시킬 수 있는 홍보 가능한 지능형 디스플레이 장치와 그 홍보 방법을 제공하는 데 있다.
본 발명의 또 다른 목적은 영상인식수단과 함께 구동수단을 구비하여 디스플레이 장치가 홍보 대상의 행동을 인식하여 적절히 대응할 수 있도록 하여 이용자에게 이용자 맞춤형 방식 내지는 인간친화적인 교감을 유도할 수 있는 홍보 가능한 지능형 디스플레이 장치와 그 홍보 방법을 제공하는 데 있다.
상기와 같은 본 발명의 목적은 소정 캐릭터의 캐릭터 영상 및 소정 홍보를 위한 홍보 영상을 출력하는 제 1 영상출력수단(300); 제 1 영상출력수단(300)의 일측에 위치하여 하나 이상의 사람을 향하여 촬상하는 카메라(110); 카메라(110)의 촬상된 영상을 수신하여 하나 이상의 사람의 위치 정보, 이동 방향 정보, 원근 정보, 인원수 정보 및 대소 정보 중 적어도 어느 하나의 상황 정보를 출력하는 영상인식수단(100); 영상인식수단(100)의 인식된 상황 정보를 기초로 일정 시간 주기로 홍보 대상을 특정하고, 특정된 홍보 대상의 위치 정보 및 이동 방향 정보에 기초하여 제 1 영상출력수단(300)의 회동 또는 회전의 속도 및 방향에 관한 구동 정보를 결정하며, 홍보 대상의 원근 정보, 인원수 정보 및 대소 정보에 따른 홍보 행위를 결정하는 제어수단(600); 제어수단(600)에 의해 결정된 홍보 행위에 기초하여 캐릭터의 캐릭터 음성 및 홍보를 위한 홍보 음성을 출력하는 음성출력수단(400); 및 제 1 영상출력수단(300)과 소정의 제 1 연결축(502)으로 상호 연결되고, 결정된 구동 정보 및 결정된 홍보 행위에 기초하여 적어도 1축의 제어를 통해 제 1 영상출력수단(300)의 회동 또는 회전을 가능케 하는 제 1 구동수단(500);을 포함하는 것을 특징으로 하는 홍보 가능한 지능형 디스플레이 장치를 제공함으로써 달성될 수 있다.
홍보 영상은 제품 정보 또는 매장 안내 정보인 것이 바람직하다.
카메라(110)는 서로 일정한 이격 거리를 갖는 둘 이상의 카메라(110)이며, 영상인식수단(100)은 둘 이상의 카메라(110)를 통해 동일한 시각에 촬상된 동일한 사람의, 배경 영상과 대비되는 상대적 위치로 원근 정보를 획득하는 것일 수 있다.
그리고 원근 정보는 제 1 영상출력수단(300)으로부터 하나 이상의 사람까지의 거리 정보인 것이 바람직하다.
특정된 홍보 대상은 하나 이상의 사람 중 위치의 변화가 최소인 사람인 것이 바람직하다.
홍보 행위는 홍보 영상, 홍보 음성, 제 1 영상출력수단(300)의 움직임 및 캐릭터 영상의 변화 중 적어도 어느 하나인 것이 바람직하다.
제 1 구동수단(500)은, 제 1 영상출력수단(300)의 후면에 형성된 제 1 연결축(502)의 길이방향 단부에 연속적으로 연결된 적어도 하나의 회전 모터부를 포함하는 것이 바람직하다.
제 1 연결축(502)은 길이방향 단부에 형성된 베어링구(510)를 더 포함하고, 적어도 하나의 회전 모터부 각각은 베어링구(510)에 접하여 회전 가능한 것이 바람직하다.
제 1 구동수단(500)은, 제 1 연결축(502)에 모터결합부(520)가 더 형성되고, 모터결합부(520)에 결합된 적어도 하나의 선형구동 모터부를 포함하는 것이 바람직하다.
홍보 가능한 지능형 디스플레이 장치는 소리 정보를 수신하는 마이크(210a, 210b) 및 마이크(210a, 210b)에 수신된 소리 정보를 기초로 하나 이상의 사람의 음성을 인식하는 음성인식수단(200)을 더 포함하고, 제어수단(600)은 인식된 상황 정보와 함께 인식된 음성의 음성 정보를 기초로 홍보 대상을 특정하는 것이 바람직하다.
제 1 영상출력수단(300) 하부로 제 1 구동수단(500)이 위치하고, 제 1 구동수단(500) 하부에 제 2 영상출력수단(350); 및 제 2 영상출력수단(350)의 후면에 형성된 제 2 연결축(552)과 상호 연결되어 제 2 영상출력수단(350)의 회전 및 회동을 가능케 하는 제 2 구동수단(550);을 더 포함하는 것이 바람직하다.
제 2 영상출력수단(350)은 소정 이용자의 터치 입력을 수신하는 터치스크린인 것이 바람직하다.
홍보 가능한 지능형 디스플레이 장치는 제 1 영상출력수단(300)과 제 2 영상출력수단(350)으로 홍보 대상 또는 소정 물체가 일정 영역 내로 접근할 경우 제어수단(600)에 감지신호를 출력하여 제 1 구동수단과 제 2 구동수단의 구동을 방지하기 위한 적어도 하나의 근접센서(700, 750)를 더 포함하는 것이 바람직하다.
한편 본 발명의 목적은 다른 카테고리로서, 영상인식수단(100)이 카메라(110)의 촬상된 영상을 수신하여 하나 이상의 사람의 위치 정보, 이동 방향 정보, 원근 정보, 인원수 정보 및 대소 정보 중 적어도 어느 하나의 상황 정보를 인식하는 영상인식단계(S110); 제어수단(600)이 인식된 상황 정보를 기초로 일정 시간 주기로 홍보 대상을 특정하는 제 1 결정단계(S120); 제어수단(600)이 홍보 대상의 위치 정보 및 이동 방향 정보에 기초하여 제 1 영상출력수단(300)의 회동 또는 회전의 속도 및 방향에 관한 구동 정보를 결정하는 제 2 결정단계(S130); 제어수단(600)이 홍보 대상의 원근 정보, 인원수 정보 및 대소 정보에 따른 홍보 행위를 결정하는 제 3 결정단계(S140); 제 1 영상출력수단(300)과 소정의 제 1 연결축(502)으로 상호 연결된 제 1 구동수단(500)이 결정된 구동 정보 및 결정된 홍보 행위에 기초하여 적어도 1축의 제어를 통해 제 1 영상출력수단(300)을 회동 또는 회전시키는 단계(S150); 제 1 영상출력수단(300)이 홍보 행위에 기초하여 캐릭터 영상 또는 홍보 영상을 출력하는 영상출력단계(S160); 및 음성출력수단(400)이 홍보 행위에 기초하여 캐릭터 음성 또는 홍보 음성을 출력하는 음성출력단계(S170);를 포함하는 것을 특징으로 하는 지능형 디스플레이 장치의 홍보 방법을 제공함으로써 달성될 수 있다.
또한 본 발명의 목적은 영상인식수단(100)이 카메라(110)의 촬상된 영상을 수신하여 하나 이상의 사람의 위치 정보, 이동 방향 정보, 원근 정보, 인원수 정보 및 대소 정보 중 적어도 어느 하나의 상황 정보를 인식하는 영상인식단계(S210); 음성인식수단(200)이 마이크(210a, 210b)로 수신되는 소리를 기초로 하나 이상의 사람의 음성을 인식하는 음성인식단계(S215); 제어수단(600)이 인식된 상황 정보 및 인식된 음성의 음성 정보를 기초로 일정 시간 주기로 홍보 대상을 특정하는 제 1 결정단계(S220); 제어수단(600)이 홍보 대상의 위치 정보 및 이동 방향 정보에 기초하여 제 1 영상출력수단(300)의 회전속도 및 회전방향의 구동 정보를 결정하는 제 2 결정단계(S230); 제어수단(600)이 홍보 대상의 원근 정보, 인원수 정보 및 대소 정보에 따른 홍보 행위를 결정하는 제 3 결정단계(S240); 제 1 영상출력수단(300)과 소정의 제 1 연결축(502)으로 상호 연결된 제 1 구동수단(500)이 결정된 구동 정보 및 결정된 홍보 행위에 기초하여 적어도 1축의 제어를 통해 제 1 영상출력수단(300)을 회동 또는 회전시키는 단계(S250); 제 1 영상출력수단(300)이 홍보 행위에 기초하여 캐릭터 영상 또는 홍보 영상을 출력하는 영상출력단계(S260); 및 음성출력수단(400)이 홍보 행위에 기초하여 캐릭터 음성 또는 홍보 음성을 출력하는 음성출력단계(S270);를 포함하는 것을 특징으로 하는 지능형 디스플레이 장치의 홍보 방법을 제공함으로써 달성될 수 있다.
상기와 같은 본 발명의 일 실시예에 따르면 홍보 또는 안내 정보를 제공하기 위해 영상인식수단을 이용하여 홍보 대상 및 홍보 행위를 결정하고 이용자의 요청에 따라 영상, 음성 및 케릭터 등으로 홍보 및 안내 효과를 증진시킬 수 있는 효과가 있다.
또한, 영상인식수단과 함께 구동수단을 구비하여 디스플레이 장치가 홍보 대상의 행동을 인식하여 적절히 대응할 수 있도록 하여 이용자에게 이용자 맞춤형 방식 내지는 인간친화적인 교감을 유도할 수 있는 효과가 있다.
도 1은 본 발명에 따른 일 실시예의 구성을 간략하게 나타낸 구성도,
도 2는 본 발명에 따른 홍보 가능한 지능형 디스플레이 장치의 제 1 실시예 정면을 나타낸 정면도 및 3축 제어의 제 1 구동수단의 구동 상태를 개략적으로 나타낸 동작 상태도,
도 3은 본 발명에 따른 일 실시예 중 3축 제어의 제 1 구동수단의 제 1변형예를 나타낸 정면도,
도 4는 본 발명에 따른 일 실시예 중 3축 제어의 제 1 구동수단의 제 2변형예를 나타낸 정면도,
도 5는 본 발명에 따른 홍보 가능한 지능형 디스플레이 장치의 제 2 실시예 정면을 나타낸 정면도 및 3축 제어의 제 1 구동수단 및 제 2 구동수단을 개략적으로 나타낸 부분확대도,
도 6은 본 발명에 따른 홍보 방법의 제 1 실시예를 나타낸 순서도,
도 7은 본 발명에 따른 홍보 방법의 제 2 실시예를 나타낸 순서도이다.
<도면의 주요 부분에 대한 부호의 설명>
100: 영상인식수단
110: 카메라
200: 음성인식수단
210a, 210b: 마이크
300: 제 1 영상출력수단
350: 제 2 영상출력수단
400: 음성출력수단
500: 제 1 구동수단
502, 520, 530, 572: 제 1 연결축
510, 560, 580: 베어링구
512a, 522a, 562a, 582a: 제 1 회전 모터부
512b, 522b, 562b, 582b: 제 2 회전 모터부
512c, 522c, 562c, 582c: 제 3 회전 모터부
530: 모터결합부
532a: 제 1 선형구동 모터부
532b: 제 2 선형구동 모터부
532c: 제 3 선형구동 모터부
550: 제 2 구동수단
552: 제 2 연결축
600: 제어수단
700, 750: 근접센서
800: 지지수단
<지능형 디스플레이 장치의 제 1실시예>
도 1은 본 발명에 따른 일 실시예의 구성을 간략하게 나타낸 구성도이다. 도 1에 도시된 바와 같이, 본 발명인 홍보 가능한 지능형 디스플레이 장치의 제 1 실시예는 카메라(110), 영상인식수단(100), 제 1 영상출력수단(300), 음성출력수단(400), 제 1 구동수단(500) 및 제어수단(600)을 기본 구성으로 가지며, 여기에 마이크(210a, 210b) 및 음성인식수단(200)이 부가될 수 있다. 또한, 제 1 실시예에 제 2 영상출력수단(350) 및 제 2 구동수단(550)을 추가하여 도 5에서 설명할 본 발명의 제 2 실시예가 구성된다.
도 1을 참조하여 본 발명을 이루는 구성 간의 연결 및 작용에 대해 간단히 설명하면 다음과 같다.
우선 카메라(110)가 하나 이상의 사람을 촬상하여 영상인식수단(100)에 영상을 전송하면 영상인식수단(100)은 촬상된 영상을 기초로 상황 정보를 제어수단(600)에 출력한다. 그리고 제어수단(600)은 상황 정보에 기초하여 일정 시간 주기로 홍보 대상을 특정하고, 제 1 영상출력수단(300)의 구동 정보를 결정할 뿐만 아니라 지능형 디스플레이 장치가 수행할 홍보 행위(예: 제품정보 또는 매장안내의 영상/음성 출력, 캐릭터의 영상/음성 출력, 각종 제스처)를 결정한다.
또한 제어수단(600)은 제 1 영상출력수단(300), 음성출력수단(400), 제 1 구동수단(500)과 연결되어 각각에 홍보 행위를 위한 제어 명령을 출력한다. 그렇게 하여 제어수단(600)의 제어 명령을 수신한 제 1 구동수단(500)은 회동 또는 회전하여 제 1 영상출력수단(300)에 움직임을 부여하며, 제어수단(600)의 제어 명령을 수신한 제 1 영상출력수단(300)은 각종 캐릭터 영상 또는 홍보 영상을 출력한다. 그리고 제어수단(600)의 제어 명령을 수신한 음성출력수단(400)은 캐릭터 음성 또는 홍보 음성을 출력한다. 그리고 제 2 영상출력수단(350) 및 제 2 구동수단(550)의 경우에도 제어수단(600)으로부터 홍보 행위를 위한 제어 명령을 수신하여 제어된다.
이에 더하여 마이크(210a, 210b)로 사람들의 음성을 포함한 소리 정보를 수신하여 음성인식수단(200)에 전송하면, 음성인식수단(200)은 음성 정보를 분석하여 특정 음성 정보를 포함하는 경우 이를 제어수단(600)에 출력하여 제어수단(600)으로 하여금 상황 정보와 함께 홍보 대상을 특정하는데 이용토록 한다.
이하, 도 1에 도시된 세부 구성에 대해 설명한다.
카메라(110)는 하나 이상의 사람을 촬영하여 영상을 얻어내는 수단으로서 영상인식 효과를 배가시키기 위해 수백만 화소의 디지털 카메라를 사용할 수 있다. 상황 정보(예: 하나 이상의 사람의 위치 정보, 이동 방향 정보, 원근 정보, 인원수 정보 및 대소 정보)를 추출하기 위한 필수 구성이며 영상인식수단(100)과 연결된다.
영상인식수단(100)은 촬영된 영상(예: 배경 영상과 하나 이상의 사람)을 획득하여 분석하고 이로부터 원하는 상황 정보를 얻고자 하는 수단이다. 따라서 영상 처리를 위한 프로세서, 영상 저장을 위한 메모리를 기본 구성으로 가질 수 있다. 그리고 분석 목적에 부합되는 알고리즘 수단을 이용하여 상황 정보를 얻어낸다.
구체적으로 사람의 위치 정보의 경우 미리 저장되어 있거나 주기적인 갱신을 통해 저장되는 배경 영상을 기반으로, 배경 영상 프레임의 데이터 변화로 2차원적 위치를 결정할 수 있다. 또한 둘 이상의 카메라(110)를 구비하여 이를 동기화하고 각각의 영상 프레임의 데이터를 얻어 이를 비교함으로써 원근 정보를 포함한 3차원적 위치를 결정할 수도 있다.
또한, 사람의 이동 방향 정보의 경우 주기적인 영상처리를 통해 상술한 위치의 변화로서 결정된다. 사람의 이동 속도 정보도 이동 방향 정보의 경우와 마찬가지로 결정된다. 인원수 정보의 경우 정확한 인원수보다는 단계별 구분(예: 단수 또는 복수의 2단계 구분)을 두어 개략적인 인원수 정보를 결정한다. 마지막으로 대소 정보의 경우 어른 또는 어린이를 구분하여 홍보 행위를 달리하기 위한 것으로서 원근 정보에 따른 영상의 크기 변화를 반영하여 배경 영상과 비교를 통해 사람의 키에 대응하는 키 정보를 추출하여 결정한다.
마이크(210a, 210b)는 소리 정보를 얻어 음성인식수단(200)으로 전송하는 수단으로서 1개를 사용할 수도 있으나 소리의 발생 방향으로부터 홍보 대상을 결정하기 위해 일정 거리를 이격하여 2개를 사용하는 것이 바람직하다.
음성인식수단(200)은 마이크(210a, 210b)로부터 수신한 소리 정보를 잡음 제거용 필터(예: Wiener 필터 또는 Kalman 필터)를 통해 사람의 음성에 대응하는 음성 정보를 추출한다. 음성 정보는 특히, 본 발명인 지능형 디스플레이 장치를 이용하는 이용자가 발성을 통해 출력하는 음성 정보일 수 있으며 이 경우에 음성 정보는 특정 제품명 또는 특정 안내 용어가 될 수 있다. 이때 소정의 음성 인식 알고리즘을 통해 미리 저장된 특정 음성 정보를 탐색하는 기능도 수행한다.
제어수단(600)은 상술한 영상인식수단(100)에서 분석된 상황 정보와 음성인식수단(200)에서 분석된 음성 정보를 토대로 제어 명령을 출력한다. 홍보 대상 특정의 경우 사람의 원근 정보, 즉 제 1 영상출력수단(300)과 사람 간의 거리 정보를 기초로 일정 주기 동안 제일 가까운 거리에 있는 사람을 홍보 대상으로 특정하는 방식을 사용한다. 이 경우 거리 정보를 얻기 어려운 경우에는 음성인식수단(200)에서 분석된 음성의 발생 방향에 위치한 사람을 홍보 대상으로 특정할 수도 있다.
또한, 제어수단(600)은 특정된 홍보 대상의 위치 정보 및 이동 방향 정보에 기초하여 제 1 영상출력수단(300)의 회전속도 및 회전방향의 구동 정보를 결정한다. 캐릭터 얼굴이 출력된 제 1 영상출력수단(300)이 홍보 대상을 향하도록 하기 위해 제 1 구동수단(500)의 구동 정보를 산출하는 것이다.
그리고, 제어수단(600)은 특정된 홍보 대상이 일정 거리 내로 들어올 때 본 발명 일 실시예의 이용자로 간주하여 특정 홍보 행위를 결정할 수 있다. 구체적으로 제 1 영상출력수단에 친근감을 유도하는 캐릭터의 표정 변화 또는 캐릭터의 제스처를 영상 출력하도록 결정한다. 또한 제품의 홍보인 경우에는 제품 정보의 영상 출력 및 음성출력수단(400)을 통한 제품 홍보 음성의 출력을 결정하며, 안내 정보를 출력하는 경우에는 매장, 회사 또는 공공기관 등의 안내 정보를 영상 및 음성으로 출력토록 결정한다. 한편, 소정 이용자가 제 2 영상출력수단(300)에 구비된 터치스크린을 이용하는 경우에는 터치 입력신호에 따른 프로그램화 된 과정(예: 제품 설명 또는 안내 정보)의 출력을 결정한다.
제 1 영상출력수단(300)은 상술한 제어수단(600)의 결정에 기초하여 캐릭터 영상 또는 홍보 영상(예: 제품 정보, 매장 또는 회사 안내 정보)을 출력한다. 제 1 영상출력수단(300)으로서 LCD, LED 및 PDP 등의 평판표시장치를 사용할 수 있으며, 또한 제어수단(600)의 제어 명령에 의해 캐릭터의 다양한 표정을 출력한다.(예: 인사 음성 출력시는 웃는 표정, 홍보 대상이 멀어지는 경우에는 우는 표정 등)
음성출력수단(400)은 제품 정보 또는 매장(또는 회사)의 안내 정보를 음성으로 출력한다. 또한 상술한 캐릭터의 다양한 표정에 따른 음성(예: 인사 음성 또는 호객을 위한 음성 등)을 출력한다.
제 1 구동수단(500)은 홍보 행위의 일 태양으로서 제 1 영상출력수단(300)의 전후 또는 좌우의 회동, 그리고 회전 구동을 통한 제스처를 위한 수단이다. 제 1 구동수단(500)은 제어수단(600)이 결정한 구동 정보(예: 회동 및 회전에 필요한 속도 및 방향)에 기초하여 구동된다. 세부 구성은 도 2 내지 도 5에서 후술한다. 다만 본 발명의 일 실시예는 3 축 제어를 통한 구동방식이지만 1 축 또는 2 축 제어를 통한 간단한 구동도 가능하다.
제 2 영상출력수단(350) 및 제 2 구동수단(550)은 제 2 실시예의 추가 구성으로서 이에 대해서는 도 5를 참조하여 후술한다.
도 2는 본 발명에 따른 홍보 가능한 지능형 디스플레이 장치의 제 1 실시예 정면을 나타낸 정면도 및 3축 제어의 제 1 구동수단의 구동 상태를 개략적으로 나타낸 동작 상태도이다. 도 2에 도시된 바와 같이, 본 발명의 제 1 실시예는 전면에 제 1 영상출력장치(300)로서 평판표시장치(예: LCD)와 그 테두리에 카메라(110), 마이크(210a, 210b), 음성출력수단(400)이 구비되고 제 1 영상출력장치(300)의 후면 아래로 형성된 제 1 연결축(502) 및 지지수단(800)이 구비된다.
여기서는 도 1에서 이미 상술한 바 있는 카메라(110), 마이크(210a, 210b), 음성출력수단(400) 및 제 1 영상출력장치(300)에 대해서는 설명을 생략한다.
도 1에서 설명된 제 1 구동수단(500)은 도 2의 동작상태를 나타낸 도면에서 알 수 있듯이, 제 1 영상출력수단(300)에 동력을 전달하기 위한 연결축(502), 연결축(502) 단부에 베어링구(510), 베어링구(510)에 접하여 회전동력을 전달하는 적어도 하나의 회전 모터부(512a, 512b, 512c)로 구성된다. 각각의 재질은 회전 및 회동에 의한 마찰에 견딜 수 있도록 내마모성 재질(예: 스테인리스강 또는 카본섬유 등)을 사용하고 마찰력에 의한 동력 전달을 가능하게 하도록 고무를 사용할 수도 있다.
도 2에서 일부 구성을 생략하여 개략적으로 나타낸 동작 상태는 정면에서 바라볼 때 제 1 영상출력수단(300)이 제 3 회전 모터부(512c)의 회전에 의해 동력을 전달받아 좌우로 왕복 회동하는 모습을 나타내고 있다. 또한, 제 1 회전 모터부(512a)의 회전에 의해 제 1 영상출력수단(300)이 제 1 연결축(502)을 중심으로 회전할 수도 있음을 보여준다.
도 2에서 일부 구성을 생략하여 개략적으로 나타낸 동작 상태는 측면에서 바라볼 때 제 1 영상출력수단(300)이 제 2 회전 모터부(512b)의 회전에 의해 동력을 전달받아 전후로 왕복 회동하는 모습을 나타내고 있다. 또한, 제 1 회전 모터부(512a)의 회전에 의해 제 1 영상출력수단(300)이 제 1 연결축(502)을 중심으로 회전할 수도 있음을 보여준다. 결국, 도 2에 도시된 동작상태로 알 수 있듯이 제 1 구동수단(500)은 3 개의 회전 모터부(512a, 512b, 512c)로 구성되고 3축 제어에 의해 전후좌우의 회동과 제 1 연결축(502)을 중심으로 한 회전 동작을 가능하게 한다.
근접센서(700)는 제 1 영상출력수단(300)에 접근하는 이용자의 손 또는 기타 물체를 감지하도록 하여 제 1 영상출력수단(300) 보호 또는 오작동 방지를 위해 제 1 구동수단(500)의 구동을 정지시키기 위한 구성이다. 근접센서(700)로는 초음파 센서나 적외선 센서 등을 사용할 수 있으며 제 1 영상출력수단(300)의 크기에 따라 다수를 구비할 수 있다. 또한 적외선 센서도 반사를 이용한 것과 열 변화를 감지하는 것 등, 다양한 종류가 상품화되어 있으므로 적절한 방식을 이용할 수 있다. 이 밖에도 다양한 센서를 본 발명에서의 근접센서(700)로 이용하는 것이 가능하다.
지지수단(800)은 제 1 영상출력수단(300)의 움직임으로 인해 무게중심의 변화를 초래할 수 있는데, 이로부터 발생할 수 있는 본 발명 제 1 실시예의 불안정을 해소하기 위한 수단임과 동시에 영상인식수단(100), 음성인식수단(200), 제 1 구동수단(500), 제어수단(600)을 내부에 포함하는 함체의 역할도 한다. 제 1 영상출력수단(300)의 무게를 고려하여 지지수단(800)의 재료 또는 바닥과의 접촉면적은 적절히 결정될 수 있다.
<3축 제어되는 제 1 구동수단의 변형예>
도 3은 본 발명에 따른 일 실시예 중 3축 제어의 제 1 구동수단의 제 1변형예를 나타낸 정면도이며, 도 4는 본 발명에 따른 일 실시예 중 3축 제어의 제 1 구동수단의 제 2변형예를 나타낸 정면도이다. 도 3 및 도 4에 도시된 바와 같이, 본 발명의 제 1 구동수단(500)은 특정 방법으로 국한되지 않으며 다양한 변형예를 만들 수 있다. 그 중에, 도 3에 도시된 제 1 연결축(520)과 3 개의 회전 모터부(522a, 522b, 522c)로 구성된 제 1 변형예는 제 1 회전 모터부(522a)의 중심회전축이 직접 제 1 연결축(520)과 연결되어 제 1 영상출력수단(300)의 회전 운동을 가능케 하며, 이때 축간 결합을 위해 풀리 또는 기어가 사용될 수도 있다. 그리고 제 2 회전 모터부(522b)는 제 1 회전 모터부(522a)와 직간접적으로 연결되어 제 1 영상출력수단(300)의 좌우 회동이 가능하도록 회전한다. 또한 제 3 회전 모터부(522c)는 제 2 회전 모터부(522b)와 직간접적으로 연결되어 제 1 영상출력수단(300)의 전후 회동이 가능하도록 회전한다.
도 4에 도시된 모터결합부(530)와 3 개의 선형구동 모터부(532a, 532b, 532c)로 구성된 제 2 변형예는 제 1 선형구동 모터부(532a) 및 제 3 선형구동 모터부(532c)의 서로 반대 방향의 피스톤 선형 구동이 제 1 영상출력수단(300)의 좌우 회동을 구현한다. 그리고 제 2 선형구동 모터부(532b)의 피스톤 선형 구동은 제 1 영상출력수단(300)의 전후 회동을 가능하게 한다. 또한 제 1, 2, 3 선형구동 모터부(532a, 532b, 532c)가 모터결합부(530)에 결합되는 각을 조절함으로써 불완전하지만 모터결합부(530)를 중심축으로 하는 회전 운동이 구현된다.
<지능형 디스플레이 장치의 제 2실시예>
도 5는 본 발명에 따른 홍보 가능한 지능형 디스플레이 장치의 제 2 실시예 정면을 나타낸 정면도 및 3축 제어의 제 1 구동수단 및 제 2 구동수단을 개략적으로 나타낸 부분확대도이다. 도 5에 도시된 바와 같이, 지능형 디스플레이 장치의 제 2실시예는 카메라(110), 영상인식수단(100), 마이크(210a, 210b), 음성인식수단(200), 제 1 영상출력수단(300), 음성출력수단(400), 제 1 구동수단(500), 제어수단(600), 근접센서(700) 및 지지대(800)의 구성이 제 1 실시예와 동일하며, 여기에 근접센서(750), 제 2 영상출력수단(350) 및 제 2 구동수단(550)이 더 추가된 구성이다. 이하, 중복되는 구성의 설명은 생략하며 추가 구성에 대해 설명한다.
근접센서(750)는 제 2 영상출력수단(350)의 테두리에 장착되어 제 2 영상출력수단(350)의 보호 및 오작동 방지를 위한 구성이다. 따라서 지능형 디스플레이 장치의 제 1 실시예에서와 동일한 목적을 위한 구성이다.
제 2 영상출력수단(350)은 스크린의 크기 및 용도를 제외하고는 제 1 영상출력수단(300)과 동일하다. 스크린의 크기의 경우 제 1 영상출력수단(300)이 주로 캐릭터의 얼굴을 영상출력하므로 인간친화적 장치를 구현하기 위해 캐릭터의 몸통으로 인식될 정도의 크기를 갖도록 구성한다. 용도의 경우 제 1 영상출력수단(300)이 주로 캐릭터의 얼굴을 영상출력하고 캐릭터의 표정을 표현하는 등의 사람과 교감하기 위한 수단으로 사용되는 반면, 제 2 영상출력수단(350)은 제품 정보 및 매장(또는 회사)의 안내 정보를 영상출력하는 수단으로 사용된다.
제 2 실시예는 제 1 구동수단(500)과 제 2 구동수단(550) 모두를 갖는다. 여기서 제 2 구동수단(550)은 제 2 연결축(552), 베어링구(560) 및 복수의 회전모터부(562a, 562b, 562c)로 구성되며 제 1 연결축(572), 베어링구(580) 및 복수의 회전모터부(582a, 582b, 582c)로 구성되는 제 1 구동수단(500)과 동일한 구성을 갖는다. 따라서 상술한 제 1 구동수단(500)의 변형예도 동일하게 적용가능하다. 제 1 구동수단(500)의 경우 제 1 영상출력수단(300)에 출력되는 캐릭터의 인사(예: 목례), 제스처 등을 표현하기 위한 수단인 반면, 제 2 구동수단(550)의 경우는 제 2 영상출력수단(350)의 전후좌우 회동 및 제 2 연결축(552) 중심의 회전 운동을 가능케 하여 허리의 굽힘을 동반한 캐릭터의 인사 및 제스처 등을 표현하기 위한 수단이 된다.
<홍보 방법의 제 1 실시예>
도 6은 본 발명에 따른 홍보 방법의 제 1 실시예를 나타낸 순서도이다. 본 발명의 지능형 디스플레이 장치의 일 실시예는 매장의 쇼 윈도우에 위치시키거나 건물의 출입구 또는 건물 로비 등에 위치시켜 다음과 같은 홍보 방법을 실시할 수 있다. 도 6를 참조하여 설명하면, 영상인식수단(100)이 카메라(110)의 촬상된 영상을 수신하여 하나 이상의 사람의 위치 정보, 이동 방향 정보, 원근 정보, 인원수 정보 및 대소 정보 중 적어도 어느 하나의 상황 정보를 인식한다(S110).
다음, 제어수단(600)이 인식된 상황 정보를 기초로 일정 시간 주기로 홍보 대상을 특정하는 제 1 결정단계(S120)를 수행한다.
제 1 예로서, 상황 정보 중 하나 이상의 사람의 위치 정보를 통해 가장 가까운 사람이면서 원근 정보를 통해 일정 기준 이하의 거리 내에 있는 사람을 홍보 대상으로 특정한다. 제 2 예로서, 인원수 정보를 통해 인원수가 많은 경우(예: 2인 이상)에는 다수를 1군의 홍보 대상으로 특정하며, 인원수가 적은 경우(예: 1인인 경우)에는 그 1인을 홍보 대상으로 특정한다. 제 3 예로서 대소 정보를 통해 어른에 대한 홍보의 경우에는 어른을 홍보 대상으로 특정하며, 어린이에 대한 홍보의 경에는 어린이를 홍보 대상으로 특정한다.
다음, 제어수단(600)이 홍보 대상의 위치 정보 및 이동 방향 정보에 기초하여 제 1 영상출력수단(300)의 회동 또는 회전의 속도 및 방향에 관한 구동 정보를 결정하는 제 2 결정단계(S130)를 수행한다. 다만, 이 단계(S130)에서 지능형 디스플레이 장치의 제 2 실시예에 적용하는 경우에는 제 2 영상출력수단(350)의 회동 또는 회전의 속도 및 방향에 관한 구동 정보도 결정된다.
다음, 제어수단(600)이 홍보 대상의 원근 정보, 인원수 정보 및 대소 정보에 따른 홍보 행위를 결정하는 제 3 결정단계(S140)를 수행한다.
다음, 제 1 영상출력수단(300)과 소정의 제 1 연결축(502)으로 상호 연결된 제 1 구동수단(500)이 결정된 구동 정보 및 결정된 홍보 행위에 기초하여 적어도 1축의 제어를 통해 제 1 영상출력수단(300)을 회동 또는 회전시킨다(S150). 다만, 이 단계(S150)에서 지능형 디스플레이 장치의 제 2 실시예에 적용하는 경우에는 제 2 구동수단(550)이 제 2 영상출력수단(350)도 회동 또는 회전시킨다.
다음, 제 1 영상출력수단(300)이 홍보 행위에 기초하여 캐릭터 영상 또는 홍보 영상을 출력하는 영상출력단계(S160)를 수행한다. 다만, 이 단계(S160)에서 지능형 디스플레이 장치의 제 2 실시예에 적용하는 경우에는 제 1 영상출력수단(300) 뿐만 아니라 제 2 영상출력수단(350)도 영상을 출력한다.
다음, 음성출력수단(400)이 홍보 행위에 기초하여 캐릭터 음성 또는 홍보 음성을 출력하는 음성출력단계(S170)를 수행한다.
예를 들어, 인원수 정보를 통해 인원수를 인식하고 있다는 표현(예: 제 1 영상출력수단(300)의 움직 또는 출력되는 캐릭터를 통한 제스처, '여러분'과 같은 음성 표현)을 한다. 또한 어른 또는 어린이인 경우 그에 맞는 캐릭터를 영상 출력할 수 있다. 또한 원근 정보를 통해 제 1 영상출력수단(300)을 통해 출력되는 영상의 크기를 조절하거나 음성출력수단(400)을 통해 출력되는 음성의 크기를 조절한다.
<홍보 방법의 제 2 실시예>
도 7은 본 발명에 따른 홍보 방법의 제 2 실시예를 나타낸 순서도이다. 도 7을 참조하여 설명하면, 우선, 영상인식수단(100)이 카메라(110)의 촬상된 영상을 수신하여 하나 이상의 사람의 위치 정보, 이동 방향 정보, 원근 정보, 인원수 정보 및 대소 정보 중 적어도 어느 하나의 상황 정보를 인식하는 영상인식단계(S210)를 수행한다.
다음, 음성인식수단(200)이 마이크(210a, 210b)로 수신되는 소리를 기초로 하나 이상의 사람의 음성을 인식하는 음성인식단계(S215)를 수행한다.
다음, 제어수단(600)이 인식된 상황 정보 및 인식된 음성의 음성 정보를 기초로 일정 시간 주기로 홍보 대상을 특정하는 제 1 결정단계(S220)를 수행한다. 즉 인식되는 영상과 인식되는 음성을 비교하여 홍보 대상을 결정하는데 기본적으로 영상으로 주어지는 상황 정보가 우선시 되며 음성 정보는 이를 보충하는 역할을 한다.
다음, 제어수단(600)이 홍보 대상의 위치 정보 및 이동 방향 정보에 기초하여 제 1 영상출력수단(300)의 회전속도 및 회전방향의 구동 정보를 결정하는 제 2 결정단계(S230)를 수행한다.
다음, 제어수단(600)이 홍보 대상의 원근 정보, 인원수 정보 및 대소 정보에 따른 홍보 행위를 결정하는 제 3 결정단계(S240)를 수행한다.
다음, 제 1 영상출력수단(300)과 소정의 제 1 연결축(502)으로 상호 연결된 제 1 구동수단(500)이 결정된 구동 정보 및 결정된 홍보 행위에 기초하여 적어도 1축의 제어를 통해 제 1 영상출력수단(300)을 회동 또는 회전시킨다(S250).
다음, 제 1 영상출력수단(300)이 홍보 행위에 기초하여 캐릭터 영상 또는 홍보 영상을 출력하는 영상출력단계(S260)를 수행한다.
다음, 음성출력수단(400)이 홍보 행위에 기초하여 캐릭터 음성 또는 홍보 음성을 출력하는 음성출력단계(S270)를 수행한다.

Claims (15)

  1. 소정 캐릭터의 캐릭터 영상 및 소정 홍보를 위한 홍보 영상을 출력하는 제 1 영상출력수단(300);
    상기 제 1 영상출력수단(300)의 일측에 위치하여 하나 이상의 사람을 향하여 촬상하는 카메라(110);
    상기 카메라(110)의 촬상된 영상을 수신하여 상기 하나 이상의 사람의 위치 정보, 이동 방향 정보, 원근 정보, 인원수 정보 및 대소 정보 중 적어도 어느 하나의 상황 정보를 출력하는 영상인식수단(100);
    상기 영상인식수단(100)의 상기 인식된 상황 정보를 기초로 일정 시간 주기로 홍보 대상을 특정하고, 상기 특정된 홍보 대상의 위치 정보 및 이동 방향 정보에 기초하여 상기 제 1 영상출력수단(300)의 회동 또는 회전의 속도 및 방향에 관한 구동 정보를 결정하며, 상기 홍보 대상의 원근 정보, 인원수 정보 및 대소 정보에 따른 홍보 행위를 결정하는 제어수단(600);
    상기 제어수단(600)에 의해 결정된 홍보 행위에 기초하여 상기 캐릭터의 캐릭터 음성 및 상기 홍보를 위한 홍보 음성을 출력하는 음성출력수단(400);및
    상기 제 1 영상출력수단(300)과 소정의 제 1 연결축(502)으로 상호 연결되고, 상기 결정된 구동 정보 및 상기 결정된 홍보 행위에 기초하여 적어도 1축의 제어를 통해 상기 제 1 영상출력수단(300)의 회동 또는 회전을 가능케 하는 제 1 구동수단(500);을 포함하는 것을 특징으로 하는 홍보 가능한 지능형 디스플레이 장치.
  2. 제 1항에 있어서,
    상기 홍보 영상은 제품 정보 또는 매장 안내 정보인 것을 특징으로 하는 홍보 가능한 지능형 디스플레이 장치.
  3. 제 1항에 있어서,
    상기 카메라(110)는 서로 일정한 이격 거리를 갖는 둘 이상의 카메라(110)이며,
    상기 영상인식수단(100)은 상기 둘 이상의 카메라(110)를 통해 동일한 시각에 촬상된 동일한 사람의, 배경 영상과 대비되는 상대적 위치로 상기 원근 정보를 획득하는 것을 특징으로 하는 홍보 가능한 지능형 디스플레이 장치.
  4. 제 3항에 있어서,
    상기 원근 정보는 상기 제 1 영상출력수단(300)으로부터 상기 하나 이상의 사람까지의 거리 정보인 것을 특징으로 하는 홍보 가능한 지능형 디스플레이 장치.
  5. 제 1항에 있어서,
    상기 특정된 홍보 대상은 상기 하나 이상의 사람 중 상기 위치의 변화가 최소인 사람인 것을 특징으로 하는 홍보 가능한 지능형 디스플레이 장치.
  6. 제 1항에 있어서,
    상기 홍보 행위는 상기 홍보 영상, 상기 홍보 음성, 상기 제 1 영상출력수단(300)의 움직임 및 상기 캐릭터 영상의 변화 중 적어도 어느 하나인 것을 특징으로 하는 홍보 가능한 지능형 디스플레이 장치.
  7. 제 1항에 있어서,
    상기 제 1 구동수단(500)은, 상기 제 1 영상출력수단(300)의 후면에 형성된 상기 제 1 연결축(502)의 길이방향 단부에 연속적으로 연결된 적어도 하나의 회전 모터부를 포함하는 것을 특징으로 하는 홍보 가능한 지능형 디스플레이 장치.
  8. 제 7항에 있어서,
    상기 제 1 연결축(502)은 길이방향 단부에 형성된 베어링구(510)를 더 포함하고,
    상기 적어도 하나의 회전 모터부 각각은 상기 베어링구(510)에 접하여 회전 가능한 것을 특징으로 하는 홍보 가능한 지능형 디스플레이 장치.
  9. 제 1항에 있어서, 상기 제 1 구동수단(500)은,
    상기 제 1 연결축(502)에 모터결합부(520)가 더 형성되고,
    상기 모터결합부(520)에 결합된 적어도 하나의 선형구동 모터부를 포함하는 것을 특징으로 하는 홍보 가능한 지능형 디스플레이 장치.
  10. 제 1항에 있어서,
    소리 정보를 수신하는 마이크(210a, 210b) 및 상기 마이크(210a, 210b)에 수신된 상기 소리 정보를 기초로 상기 하나 이상의 사람의 음성을 인식하는 음성인식수단(200)을 더 포함하고,
    상기 제어수단(600)은 상기 인식된 상황 정보와 함께 상기 인식된 음성의 음성 정보를 기초로 홍보 대상을 특정하는 것을 특징으로 하는 홍보 가능한 지능형 디스플레이 장치.
  11. 제 1항에 있어서,
    상기 제 1 영상출력수단(300) 하부로 상기 제 1 구동수단(500)이 위치하고,
    상기 제 1 구동수단(500) 하부에 제 2 영상출력수단(350);및
    상기 제 2 영상출력수단(350)의 후면에 형성된 제 2 연결축(552)과 상호 연결되어 상기 제 2 영상출력수단(350)의 회전 및 회동을 가능케 하는 제 2 구동수단(550);을 더 포함하는 것을 특징으로 하는 홍보 가능한 지능형 디스플레이 장치.
  12. 제 11항에 있어서,
    상기 제 2 영상출력수단(350)은 소정 이용자의 터치 입력을 수신하는 터치스크린인 것을 특징으로 하는 홍보 가능한 지능형 디스플레이 장치.
  13. 제 11항에 있어서,
    상기 제 1 영상출력수단(300)과 상기 제 2 영상출력수단(350)으로 상기 홍보 대상 또는 소정 물체가 일정 영역 내로 접근할 경우 상기 제어수단(600)에 감지신호를 출력하여 상기 제 1 구동수단과 상기 제 2 구동수단의 구동을 방지하기 위한 적어도 하나의 근접센서(700, 750)를 더 포함하는 것을 특징으로 하는 홍보 가능한 지능형 디스플레이 장치.
  14. 영상인식수단(100)이 카메라(110)의 촬상된 영상을 수신하여 하나 이상의 사람의 위치 정보, 이동 방향 정보, 원근 정보, 인원수 정보 및 대소 정보 중 적어도 어느 하나의 상황 정보를 인식하는 영상인식단계(S110);
    제어수단(600)이 상기 인식된 상황 정보를 기초로 일정 시간 주기로 홍보 대상을 특정하는 제 1 결정단계(S120);
    상기 제어수단(600)이 상기 홍보 대상의 위치 정보 및 이동 방향 정보에 기초하여 상기 제 1 영상출력수단(300)의 회동 또는 회전의 속도 및 방향에 관한 구동 정보를 결정하는 제 2 결정단계(S130);
    상기 제어수단(600)이 상기 홍보 대상의 원근 정보, 인원수 정보 및 대소 정보에 따른 홍보 행위를 결정하는 제 3 결정단계(S140);
    상기 제 1 영상출력수단(300)과 소정의 제 1 연결축(502)으로 상호 연결된 제 1 구동수단(500)이 상기 결정된 구동 정보 및 상기 결정된 홍보 행위에 기초하여 적어도 1축의 제어를 통해 상기 제 1 영상출력수단(300)을 회동 또는 회전시키는 단계(S150);
    상기 제 1 영상출력수단(300)이 상기 홍보 행위에 기초하여 캐릭터 영상 또는 홍보 영상을 출력하는 영상출력단계(S160);및
    음성출력수단(400)이 상기 홍보 행위에 기초하여 캐릭터 음성 또는 홍보 음성을 출력하는 음성출력단계(S170);를 포함하는 것을 특징으로 하는 지능형 디스플레이 장치의 홍보 방법.
  15. 영상인식수단(100)이 카메라(110)의 촬상된 영상을 수신하여 하나 이상의 사람의 위치 정보, 이동 방향 정보, 원근 정보, 인원수 정보 및 대소 정보 중 적어도 어느 하나의 상황 정보를 인식하는 영상인식단계(S210);
    음성인식수단(200)이 마이크(210a, 210b)로 수신되는 소리를 기초로 상기 하나 이상의 사람의 음성을 인식하는 음성인식단계(S215);
    제어수단(600)이 상기 인식된 상황 정보 및 상기 인식된 음성의 음성 정보를 기초로 일정 시간 주기로 홍보 대상을 특정하는 제 1 결정단계(S220);
    상기 제어수단(600)이 상기 홍보 대상의 위치 정보 및 이동 방향 정보에 기초하여 상기 제 1 영상출력수단(300)의 회전속도 및 회전방향의 구동 정보를 결정하는 제 2 결정단계(S230);
    상기 제어수단(600)이 상기 홍보 대상의 원근 정보, 인원수 정보 및 대소 정보에 따른 홍보 행위를 결정하는 제 3 결정단계(S240);
    상기 제 1 영상출력수단(300)과 소정의 제 1 연결축(502)으로 상호 연결된 제 1 구동수단(500)이 상기 결정된 구동 정보 및 상기 결정된 홍보 행위에 기초하여 적어도 1축의 제어를 통해 상기 제 1 영상출력수단(300)을 회동 또는 회전시키는 단계(S250);
    상기 제 1 영상출력수단(300)이 상기 홍보 행위에 기초하여 캐릭터 영상 또는 홍보 영상을 출력하는 영상출력단계(S260);및
    음성출력수단(400)이 상기 홍보 행위에 기초하여 캐릭터 음성 또는 홍보 음성을 출력하는 음성출력단계(S270);를 포함하는 것을 특징으로 하는 지능형 디스플레이 장치의 홍보 방법.
PCT/KR2010/005261 2009-08-11 2010-08-11 홍보 가능한 지능형 디스플레이 장치 및 그 홍보 방법 WO2011019200A2 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US13/390,003 US20120146906A1 (en) 2009-08-11 2010-08-11 Promotable intelligent display device and promoting method thereof

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020090073739A KR101088083B1 (ko) 2009-08-11 2009-08-11 홍보 가능한 지능형 디스플레이 장치 및 그 홍보 방법
KR10-2009-0073739 2009-08-11

Publications (2)

Publication Number Publication Date
WO2011019200A2 true WO2011019200A2 (ko) 2011-02-17
WO2011019200A3 WO2011019200A3 (ko) 2011-06-30

Family

ID=43586641

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2010/005261 WO2011019200A2 (ko) 2009-08-11 2010-08-11 홍보 가능한 지능형 디스플레이 장치 및 그 홍보 방법

Country Status (3)

Country Link
US (1) US20120146906A1 (ko)
KR (1) KR101088083B1 (ko)
WO (1) WO2011019200A2 (ko)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101392931B1 (ko) * 2013-07-24 2014-05-08 주식회사 글로브포인트 컨텐츠 반응형 키오스크 및 그 구동 방법
TWI542215B (zh) * 2013-09-06 2016-07-11 鴻海精密工業股份有限公司 帶有攝像頭的顯示裝置
CN104424849B (zh) * 2013-09-06 2018-02-02 鸿富锦精密工业（深圳）有限公司 带有摄像头的显示设备
FR3027439A1 (fr) * 2014-10-16 2016-04-22 Patrick Maitzaingue Systeme support d'information orientable
FR3036220B1 (fr) * 2015-05-12 2023-07-14 Ergylink Tableau d'affichage electronique, systeme et procede associes.
KR102355759B1 (ko) * 2015-11-05 2022-01-26 삼성전자주식회사 사용자의 위치를 결정하는 전자 장치 및 그 제어 방법
US10546015B2 (en) * 2015-12-01 2020-01-28 Facebook, Inc. Determining and utilizing contextual meaning of digital standardized image characters
US9950897B2 (en) * 2016-01-28 2018-04-24 Wipro Limited Apparatus for holding a card
US11087489B2 (en) * 2019-06-03 2021-08-10 Disney Enterprises, Inc. Systems and methods to facilitate interaction by one or more participants with content presented across multiple distinct physical locations
KR20210081107A (ko) 2019-12-23 2021-07-01 삼성전자주식회사 디스플레이 장치 및 이의 제어 방법
KR102313875B1 (ko) 2021-04-14 2021-10-18 주식회사 파이엇 투명 엘시디 디스플레이적용 로봇 및 그 제어방법
US20230032760A1 (en) * 2021-08-02 2023-02-02 Bear Robotics, Inc. Method, system, and non-transitory computer-readable recording medium for controlling a serving robot

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030078182A (ko) * 2002-03-28 2003-10-08 김선향 전광판 광고로봇 및 전광판 광고로봇의 운전방법
KR20050116192A (ko) * 2004-06-07 2005-12-12 조열 광고 콘텐츠 제공방법
JP2006293999A (ja) * 2005-03-15 2006-10-26 Kyushu Institute Of Technology 画像表示方法およびその装置
JP2009116510A (ja) * 2007-11-05 2009-05-28 Fujitsu Ltd 注目度算出装置、注目度算出方法、注目度算出プログラム、情報提供システム、及び、情報提供装置

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030018531A1 (en) * 2000-09-08 2003-01-23 Mahaffy Kevin E. Point-of-sale commercial transaction processing system using artificial intelligence assisted by human intervention
US20020098001A1 (en) * 2000-10-11 2002-07-25 Dahl Andrew A. Large scale electronic display combined with an interactive terminal
US20060071135A1 (en) * 2002-12-06 2006-04-06 Koninklijke Philips Electronics, N.V. Apparatus and method for automated positioning of a device
US20040193313A1 (en) * 2003-01-14 2004-09-30 Benoit Cornet Kiosk system
CN100532842C (zh) * 2005-03-28 2009-08-26 三菱电机株式会社 涡旋压缩机
US7545108B2 (en) * 2006-01-31 2009-06-09 Andy Flessas Robotically controlled display
US7916129B2 (en) * 2006-08-29 2011-03-29 Industrial Technology Research Institute Interactive display system
WO2008087621A1 (en) * 2007-01-16 2008-07-24 Mobilesolid Ltd. An apparatus and method for animating emotionally driven virtual objects
US8416981B2 (en) * 2007-07-29 2013-04-09 Google Inc. System and method for displaying contextual supplemental content based on image content
IL189251A0 (en) * 2008-02-05 2008-11-03 Ehud Gal A manned mobile platforms interactive virtual window vision system

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030078182A (ko) * 2002-03-28 2003-10-08 김선향 전광판 광고로봇 및 전광판 광고로봇의 운전방법
KR20050116192A (ko) * 2004-06-07 2005-12-12 조열 광고 콘텐츠 제공방법
JP2006293999A (ja) * 2005-03-15 2006-10-26 Kyushu Institute Of Technology 画像表示方法およびその装置
JP2009116510A (ja) * 2007-11-05 2009-05-28 Fujitsu Ltd 注目度算出装置、注目度算出方法、注目度算出プログラム、情報提供システム、及び、情報提供装置

Also Published As

Publication number Publication date
WO2011019200A3 (ko) 2011-06-30
US20120146906A1 (en) 2012-06-14
KR101088083B1 (ko) 2011-11-30
KR20110016165A (ko) 2011-02-17

Similar Documents

Publication Publication Date Title
WO2011019200A2 (ko) 홍보 가능한 지능형 디스플레이 장치 및 그 홍보 방법
WO2014106977A1 (en) Head mounted display and method for controlling the same
WO2014107068A1 (en) Method for controlling camera operation based on haptic function and terminal supporting the same
WO2016099052A1 (ko) 시각장애인을 위한 3차원 장애물 안내장치와 이를 이용한 주위 정보 안내시스템 및 그 방법
WO2018082626A1 (zh) 虚拟现实系统的实现方法及虚拟现实装置
WO2012002603A1 (ko) 외부 장치의 동작 상태 제공 방법 및 그 장치
WO2016126110A1 (ko) 가상현실 멀미를 감소시키는 전기 자극 헤드 마운트 디스플레이 장치
KR20160113857A (ko) 로봇 청소기 및 이를 구비하는 로봇 청소 시스템
WO2019093646A1 (en) Electronic device capable of moving and operating method thereof
WO2020130689A1 (ko) 놀이 컨텐츠를 추천하는 전자 장치 및 그의 동작 방법
WO2018124633A1 (ko) 전자 장치 및 그의 메시지 전달 방법
WO2015034130A1 (ko) 원격 존재 장치
WO2014109422A1 (ko) 음성 추적 장치 및 그 제어 방법
WO2012102507A2 (ko) 동작인식 맞춤형 광고시스템
WO2016076461A1 (ko) 웨어러블 디바이스
WO2019151734A1 (ko) 카메라 구동 방식 변경 기반의 음성 및 얼굴 인식 장치 및 방법
WO2020116888A1 (ko) 네트워크 기반의 이동형 식당 테이블
WO2018124397A1 (ko) 증강현실을 이용한 경로 안내 장치 및 이를 이용한 경로 안내 방법
WO2022182096A1 (en) Real-time limb motion tracking
WO2018124476A1 (ko) 투명 디스플레이 기반의 지능화 상품 전시 시스템 및 그 방법
WO2022108106A1 (ko) 이동 로봇 장치 및 이의 제어 방법
Fuchs et al. SmartLobby: Using a 24/7 remote head-eye-tracking for content personalization
WO2018038337A1 (ko) Hmd 유저와 복수의 일반인들 간에 상호작용이 가능한 가상현실 컨텐츠 시스템 및 그 제어방법
WO2021045386A1 (ko) 크래들을 이용한 도우미 시스템
WO2022080549A1 (ko) 이중 라이다 센서 구조의 모션 트래킹 장치

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 10808349

Country of ref document: EP

Kind code of ref document: A2

WWE Wipo information: entry into national phase

Ref document number: 13390003

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 10808349

Country of ref document: EP

Kind code of ref document: A2