WO2013051153A1 - 課金電子広告システム - Google Patents

課金電子広告システム Download PDF

Info

Publication number
WO2013051153A1
WO2013051153A1 PCT/JP2011/073221 JP2011073221W WO2013051153A1 WO 2013051153 A1 WO2013051153 A1 WO 2013051153A1 JP 2011073221 W JP2011073221 W JP 2011073221W WO 2013051153 A1 WO2013051153 A1 WO 2013051153A1
Authority
WO
WIPO (PCT)
Prior art keywords
data
billing
computer
electronic advertisement
program
Prior art date
Application number
PCT/JP2011/073221
Other languages
English (en)
French (fr)
Inventor
徳原　庸美
Original Assignee
Tokuhara Tsunemi
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tokuhara Tsunemi filed Critical Tokuhara Tsunemi
Priority to JP2011552107A priority Critical patent/JP4966436B1/ja
Priority to US14/239,414 priority patent/US10410254B2/en
Priority to PCT/JP2011/073221 priority patent/WO2013051153A1/ja
Publication of WO2013051153A1 publication Critical patent/WO2013051153A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • G06Q30/0273—Determination of fees for advertising
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • G06Q30/0272—Period of advertisement exposure
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/04—Billing or invoicing

Definitions

  • the present invention relates to an Internet-compatible electronic advertisement system in which an advertisement fee is charged to a sponsor only when a predetermined advertisement effect desired by the sponsor is confirmed.
  • Electronic signboards that transmit various video and text information over the Internet are conventionally known.
  • a camera is installed, an image of a customer's face is analyzed based on video taken by the camera, and an advertisement is switched based on the analysis result.
  • an information processing apparatus including a video analysis unit that extracts and quantifies a human facial expression taken with a digital camera is conventionally known (see, for example, Patent Document 1).
  • a program technique for generating a two-dimensional or three-dimensional object based on video data by a computer program and controlling the generated object is conventionally known (see, for example, Patent Document 2).
  • an electronic advertisement system is known in which an advertisement fee is charged to a sponsor only when a predetermined advertisement effect desired by the sponsor is confirmed (see, for example, Patent Document 3).
  • An object of the present invention is to provide a chargeable electronic advertisement system suitable for advertising to a large number of Internet terminal computers.
  • the present invention provides an advertiser computer that generates electronic advertisement data with a charge tag including a tag including information describing a charge condition, and an electronic apparatus that captures the situation in front of the screen as input data.
  • the electronic advertisement data output from the advertiser computer under the control of the advertising agency side computer is sent to the member side terminal computer with a modified billing tag added thereto,
  • a system in which electronic advertisement data is displayed on the screen of a member side terminal computer, wherein the member side terminal computer
  • the computer has a built-in advertisement data reception processing program for processing the electronic advertisement data, and the program analyzes the input data from the electronic device to determine whether the corrected billing condition for the received electronic advertisement data has been achieved.
  • the program incorporated in the advertising agency side computer has an input video analysis means for judging, and the billing conditions for the electronic advertisement data are achieved by aggregating the corrected billing condition judgment data transmitted from the member side terminal computer. And a billing request data to be processed by the advertiser computer when the billing condition is achieved.
  • a program for creating the electronic advertisement data with the charge tag is prepared on a website of the advertising agency side computer, and the electronic advertisement data creation program with the charge tag from the website is the advertiser. It is designed to be downloaded to the side computer.
  • a billing data settlement program that processes the billing data and settles the billing described in the data is provided on a website of the advertising agency-side computer, and the program is downloaded from the website. The data is downloaded to the advertiser side computer.
  • the present invention provides an advertisement data reception processing program for processing advertisement data with a modified charging tag having the input video analysis means, provided on the website of the advertising agency-side computer, and receives the advertisement data reception process from the website.
  • the program is downloaded to the member terminal computer.
  • the present invention is characterized in that the member side terminal computer is registered in a member list database of a website of the advertising agency side computer.
  • the charging condition is that the computer owner's gaze time for the electronic advertisement data display screen of the member side terminal computer is a predetermined time or more, and the number of member side terminal computers satisfying the gaze time is a predetermined number. The content is to exceed.
  • the present invention is characterized in that the corrected charging condition is that the computer owner's gaze time for the electronic advertisement data display screen of the member terminal computer is a predetermined time or more.
  • the present invention can perform an effective advertisement to a large number of owners of Internet terminals without taking the risk that the sponsor pays an advertisement fee for an advertisement that has not had an advertisement effect.
  • FIG. 1 and 3 are hardware configuration diagrams of the present system, and the central computer 1 on the advertising agency side that controls the system is composed of workstations.
  • the central processing unit 15 of the central computer 1 connects to the Internet 2 via the network interface 16, and operates the system, which is disclosed to the Internet 2 by the website construction program 3.
  • a billing electronic advertisement website 11 is constructed.
  • the storage device 23 of the central computer 1 includes an electronic advertisement data creation program 4 with a billing tag, a tabulation program 6, an advertisement data reception processing program 7 with a modified billing tag, a billing billing data settlement program 8, a member list database 9, a modified billing tag.
  • the creation program 10 and other various programs and data necessary for the operation of this system are stored.
  • a large number of member-side terminal computers 12 are connected to the Internet 2 via various networks.
  • the member-side terminal computer 12 includes a personal computer, a computer built-in mobile phone, a portable information terminal, and the like.
  • a video display input screen 22 with 142 is provided.
  • the touch panel 142 is configured to be controlled by a touch panel control program 145.
  • a plurality of advertiser side computers 13 and a digital advertisement video creator side computer 14 are connected to the Internet 2 via various networks.
  • FIGS. 7 to 10 show formats of tagged data used in the present system
  • FIG. 7 shows electronic advertising data 28 with billing tags sent from the advertiser side computer to the advertising agency side central computer. Shows the data 30 with the billing tag sent from the advertising agency supervising computer to the advertiser computer.
  • FIG. 9 shows electronic advertisement data 29 with a modified billing tag sent from the advertising agency central computer to the member terminal computer
  • FIG. 10 shows the correction sent from the member terminal computer to the advertising agent central computer.
  • Data 31 with charging tag is shown.
  • the data structure of the tagged data in FIGS. 8 and 10 is the same.
  • the tagged electronic advertisement data 28 and 29 in FIGS. 7 and 9 have the same data structure except that the correction tag 35 is added to the tagged electronic advertisement data 29 in FIG. 9.
  • data 28 includes a unique word 32, a tag 34, and a data block 36
  • the tag 34 includes a header 38, an authentication data unit 40, a charging guarantee data unit 42, and a tag / check code 44.
  • the charging guarantee data unit 42 includes a header 50 and charging guarantee data 52.
  • the data block 36 includes a header 54, advertising video / audio data 56, and a data block / check code 58.
  • the advertising video / audio data 56 includes a main scenario 60 and a large number of unit data 62.
  • the main scenario 60 includes a header. 64 and data 66, and each unit of the unit data 62 includes a header 68 and data 70.
  • the unique word 32 is composed of an identification synchronization code of the data 28 with charging tag.
  • the header 38 indicates the number of bytes of the tag 34.
  • the authentication data 48 includes an advertiser ID code and an advertising agency ID code. In FIG. 9, the authentication data 48 'includes an advertisement agency ID code and a member terminal ID code.
  • the header 50 indicates the number of bytes of the charging guarantee data 52.
  • the charging guarantee data 52 is composed of the serial number of the charging tagged data 28, the charging amount, and the charging conditions.
  • the billing condition is a condition for obtaining the advertising effect desired by the advertiser, for example, “the number of members watching the advertisement video screen for 0.5 seconds or more exceeds 100,000”.
  • the modified charging condition of the charging guarantee data 52 ′ is “watch the advertisement video screen for 0.5 seconds or longer” or the like.
  • the tag check code 44 is composed of an error detection and correction code of the tag header 38, the authentication data part 40, and the charge guarantee data part 42.
  • the header 54 is composed of the number of bytes of the data block 36.
  • the header 64 is composed of the number of bytes of the main scenario 60.
  • the data 66 includes an execution procedure of the unit data 62 and link information to the unit data 62.
  • the header 68 indicates the number of bytes of each unit data 62
  • the data 70 is composed of video / audio data of the unit data 62.
  • the data block check code 58 includes a header 54 of the data block 36 and an error detection / correction code of the advertisement video data 56.
  • the tagged data 30 includes a unique word 72, a tag 74, and a data block 76
  • the tag 74 includes a header 75, authentication data 78, billing data 80, and tag check code 82.
  • the authentication data part 78 is composed of a header 84 and authentication data 86.
  • the billing data section 80 includes a header 88 and billing data 90.
  • the data block 76 includes a header 92, an advertisement result data portion 94, and a data block check code 96.
  • the advertisement result data section 94 includes a header 98 and advertisement result data 100.
  • the unique word 72 is composed of the identification synchronization code of the data 30 with the charging tag
  • the header 75 indicates the number of bytes of the tag 74
  • the header 84 indicates the number of bytes of the authentication data 86
  • the authentication data 86 includes the advertisement agency ID. Code and advertiser ID code.
  • the authentication data 86 includes a member terminal ID code and an advertising agency ID code.
  • the header 88 indicates the number of bytes of the billing data 90
  • the billing data 90 is composed of the serial number of the billing-tagged data 28, the billing amount, and billing conditions.
  • the charge billing data 90 ′ is composed of the serial number of the electronic advertisement data 29 with amendment charge tag and the amendment charge condition.
  • the tag check code 82 includes a header 75 of the tag 74, authentication data 78, and an error detection / correction code of the billing request data unit 80.
  • the header 92 indicates the number of bytes of the data block 76
  • the header 98 indicates the number of bytes of the advertisement result data 100
  • the advertisement result data 100 includes a recognition result, an advertisement effect, and a log.
  • the data block check code 96 includes a header of the data block 76 and an error detection / correction code of the advertisement result data portion 94.
  • FIG. 11 shows the structure of data used in this system.
  • the data structure of the video / sound recognition data 102 shown in FIG. 11 is as follows.
  • the background data 102a is video data from a camera input other than video information that seems to be a human image, and is background extraction data subjected to statistical processing and the like.
  • the person model data 102b is a person model having a universal feature amount obtained from a large number of person images by statistical processing or the like.
  • the face model data 102c is a face model having a universal feature amount obtained from a large number of human face images by statistical processing or the like.
  • the eye / pupil model data 102d is an eye / pupil model having a universal feature amount obtained by statistical processing or the like from a large number of human eyes and pupil images.
  • the smile model data 102e is a smile model having a universal feature amount obtained by statistical processing or the like from smile images of a large number of persons.
  • the face object data 102f is various pieces of object recognition information for each face tracking processing unit.
  • the face object data 102f includes member face object data, and the member face object data is an object recognition history and recognition information of the member face tracking process.
  • the feature amount is a numerical value of the shape feature such as a person, face, eyes, smile, etc., and the relative position of each organ such as eyelid, eyelid, pupil, lip, tooth of human face , Shape, degree of correlation, speed of change, etc.
  • the data structure of the recognition analysis result data 104 is as follows. Recognition analysis data serial No .: 00000001 Project code: PrjctCd00-01 Electronic advertising media No .: EastStreet97 Date: 20100808-23: 00.00-20100808-23: 59.59 Screen gaze time: xxxx
  • the data structure of the advertisement result data 100 is as follows.
  • Block 106a Output correction data serial No .: 00000001 Project code: PrjctCd00-01 Scenario code: ABCD-0001 Scenario / script link information: Correction video / audio information for stimulation Parent link information: 00000001 Child link information: 00000003 Video / audio data block 106b: Output correction data serial No .: 00000002 Project code: PrjctCd00-01 Scenario code: ABCD-0001 Scenario / script link information: Correction video / audio information for stimulation Parent link information: 00000001 Child link information: 00000003 Video / audio data
  • Block 106c Output correction data serial No .: 00000003 Project code: PrjctCd00-01 Scenario code: ABCD-0001 Scenario / script link information: Correction video / audio information for stimulation Parent link information: 00000001 Child link information: None Video / audio data
  • Block 108a Output data serial number: T00000001 Creation process ID: PC00001 Video / audio link address information: T00000002, T00000003 Video / audio data
  • Block 108b Output data serial No .: T00000002 Creation process ID: PC00001
  • Block 108c Output data serial No .: T00000003 Creation process ID: PC00001
  • the data structure of the authentication data 48 is as follows.
  • Authentication data The data structure of the advertiser ID code and the advertising agency ID code billing guarantee data 52 is as follows. Data serial number with charging tag: KTD0001 Billing amount: ⁇ 200,000- Billing conditions: Screen gaze time: 0.5 seconds Gaze time satisfaction number threshold: N
  • the data structure of the billing request data 90 is as follows. Data serial number with charging tag: KTD0001 Billing amount: ⁇ 200,000- Billing conditions: Screen gaze time: 0.5 seconds Gaze time satisfaction number threshold: N judgment result:
  • the advertisement agency manager recruits Internet terminal members who cooperate with the billing electronic advertisement system through the website 11.
  • a membership contract is concluded between the advertising agency side and the member side, and a predetermined price for the cooperation is paid from the advertising agency side to the member side in the form of a point system or the like.
  • Data for identifying members is recorded in the member list database 9 of the general computer 1 on the advertisement agency side.
  • the advertising data processing program 7 with a modified charging tag is downloaded from the central computer 1 to the member side terminal computer 12, and the advertisement data processing program 7 causes the member side terminal computer 12 to receive the data as shown in FIG.
  • An electronic advertisement posting system will be constructed.
  • the electronic advertisement data creation program 4 with charging tag including the general program 112 from the central computer 1 on the advertising agency side is sent to the advertiser side.
  • a billing electronic advertisement creation system is constructed in the advertiser side computer 13 by these programs.
  • the advertiser computer 13 creates an electronic billing advertisement based on the advertisement video / audio data provided from the computer 14 of the advertisement video creator through the Internet 2.
  • the billing electronic advertisement creation operation by the advertiser computer 13 will be described below with reference to the flowchart shown in FIG.
  • step S1 the operations related to the creation of the advertisement video / audio data, tag addition, and transmission in the advertiser side system 2 are entered from the label R1.
  • step S2 the advertiser-side system 2 creates the story information 110 based on the story information of the advertisement.
  • the story information 110 is composed of a plurality of stages (strokes).
  • step S 2 the video / audio creation program 114 creates video / audio unit data 62 constituting each stage based on each stage of the story information 110.
  • step S3 the scenario creation program 116 creates a main scenario 66 developed for each stage based on the story information.
  • step S ⁇ b> 4 the overall program 112 synthesizes the main scenario 66 and the video / audio unit data 62 to create advertisement video / audio data 56.
  • step S5 the billing program 118 creates a billing guarantee data unit 52 based on the input data related to billing guarantee.
  • the authentication program 120 creates authentication data 48 based on the input data related to authentication.
  • step S 7 the overall program 112 creates the tag 34 from the charging guarantee data 52 and the authentication data 48.
  • step S8 the overall program 112 generates accounting tag-attached data 28 from the advertisement video / audio data block 36 and the tag 34.
  • step S9 the overall program 112 sends the charging-tagged data 28 to the charging electronic advertisement posting system 6 via the network, and the transmission processing of the advertiser side computer 13 is completed.
  • FIG. 13 shows the billing request data reception processing of the advertiser side system of the advertiser side computer 13.
  • the advertiser side system enters the start of billing data network reception processing from label R2.
  • step S ⁇ b> 1 the advertiser-side system verifies the authentication data 86 received from the overall computer 1.
  • the authentication program 120 determines whether or not the authentication data 86 has been verified in step S2. If a negative determination is made in step S2, the process returns to step S1 and if a positive determination is made, the charging program 118 separates the charging billing data 90 from the tag 74 in step S3.
  • step S5 the result verification program 122 verifies the advertisement result data 100.
  • the result verification program 122 determines whether or not the advertisement result data 100 has been verified in step S6. If a negative determination is made in step S6, the advertiser side system 2 ends the process. If the result verification program 122 determines affirmative in the determination step S6, in step S7, the overall program 112 settles the charge request and ends the processing.
  • the advertising agency side supervising computer 1 receives the electronic advertisement data 28 with the accounting tag from the advertiser side computer 13 through the Internet 2, the accounting conditions are suitable for the single member side terminal computer 12 as shown in FIG.
  • the correction tag 35 corrected to the charging condition is created, and the electronic billing data 29 with the corrected charging tag for the member side terminal computer 12 is created.
  • the billing condition is that the billing condition is “the number of members watching the advertisement video screen for 0.5 seconds or more exceeds 100,000”, the total part is deleted and the “advertising video screen Watch for 0.5 seconds or more.
  • the advertising agency supervising computer 1 transmits the corrected billing advertisement electronic data 29 to each member terminal computer 12 through the Internet 2.
  • the corrected billing electronic advertisement data 29 is transmitted to each member terminal computer 12 by repeating about 5 seconds once every 30 minutes.
  • FIG. 18 shows a state in which the electronic advertisement data 29 is transmitted from the advertising agency supervising computer 1 to each member terminal computer 12 and the initial screen is displayed on the member terminal computer 12.
  • the initial screen data is set in advance on the member side so as to be displayed about once a day.
  • reject 23 and accept 25 buttons are displayed.
  • the member terminal computer 12 displays an advertisement video / audio data image.
  • the member-side terminal computer 12 recognizes the face of the person 204 in front of the camera 24 based on the input from the video camera 24 and the downloaded program, identifies these persons, and identifies the member contractor. Further, the line of sight is recognized from the movement of the eyes of the person, and the gaze time for the advertisement video data such as animation displayed on the screen 22 of the terminal computer 12 is counted. It also recognizes human emotions and interests from facial expressions. It also recognizes acceptance, refusal, and questions from gestures. In addition, through the input from the microphone 26, the voice and emotion of a person are recognized.
  • the terminal computer 12 enters the processing operation for receiving data with a billing tag from the label R3.
  • the authentication program 124 separates and verifies the authentication data 48 of the received data 28 with the modified charging tag.
  • the authentication program 124 determines whether or not the authentication data 48 has been verified. If the determination is affirmative, in step S3, the charging program 126 receives the charging guarantee data 52 of the received data with the corrected charging tag. Separate, verify, and save.
  • step S ⁇ b> 4 the overall program 128 sets a determination item and a threshold from the corrected charging condition of the charging guarantee data 52 as a charging determination condition.
  • step S 5 the overall program 128 separates and stores the received advertisement video / audio data 56 of the modified charging-tagged data 28 and stores the main scenario 60 and the video / audio unit data 62 from the advertisement video / audio data 56. Isolate and save.
  • step S6 the overall program 128 builds a story from the main scenario 60 and the corrected billing conditions.
  • step S7 based on the unit data 62, an output object is generated under the output control program 130, and video, Based on the voice input, an input object is generated under the analysis program 132, and communication between these objects is managed.
  • the input object is generated by recognizing and analyzing input video data of the camera 24.
  • a method for generating an output object and an input object based on output data and input data is a conventionally known program technology (see Patent Document 2).
  • a conventionally known program generation technology is used. Yes.
  • a program part in charge of object generation / control in the overall program 128 is referred to as a story manager for convenience.
  • step S7 The process of step S7 will be described in detail below with reference to the flowchart shown in FIG.
  • the start of step S7 shown in FIG. 14 is entered from label R5 in FIG.
  • the overall program 128 organizes the video / audio unit 62 based on the scenario, configures each stage, sets a threshold value for reactivity, and starts the first stage.
  • step S2 the scene of the output object corresponding to each stage is managed.
  • the output control program 130 constitutes a scene.
  • step S3 the display / sound output program 134 generates a display / sound output for each object in the scene.
  • step S ⁇ b> 5 the display / sound output program 134 outputs the synthesized screen to the display input unit 22 and outputs the output synthesized sound to the speaker 20.
  • step S ⁇ b> 6 the overall program 128 checks the reactivity of the person object (input object) generated by the analysis program 132.
  • the degree of reaction means a screen gaze time or the like.
  • step S7 the output control program 130 determines whether or not the stage has ended, and if it determines affirmative, it proceeds to step S9. If a negative determination is made in step S7, it is determined in step S8 whether or not the reactivity is equal to or higher than a threshold value. If a positive determination is made, the process proceeds to step S9.
  • step S13 the output control program 130 searches the output correction data 106 for appearance scenes based on the stage, object, stimulus level, and response level.
  • step S14 the output control program 130 determines whether or not there is a scene with a high degree of stimulation and reactivity in the output correction data 106. If a negative determination is made, the output control program 130 determines the brightness, contrast, and volume. The animation morphing or the like is changed to further correct the current stimulation scene, and the process proceeds to step S16. If affirmative determination is made in step S14, in step S16, the output control program 130 reconstructs the story in a scene with a high degree of stimulation and reactivity, and proceeds to step S4. If the determination in step S8 is affirmative, the output control program 130 registers the scene as the output correction data 106 together with the reactivity.
  • step S10 the output control program 130 determines whether or not the story is at the end stage. If the determination is negative, the output control program 130 starts the next stage in step S11 and proceeds to step S2. If affirmative determination is made in step S10, a log including the advertisement effect data 100, that is, a screen including the person object's screen gaze time is generated in step S12, which is sent to the overall program 128, and the process ends. In the person object reactivity check in step S6, parallel processing of face recognition and face tracking is executed.
  • step S1 the human face detection process by the video / sound recognition program 136 starts (step S1).
  • step S2 the video / sound recognition program 136 starts the person recognition process from the video data by the camera input and the sound data by the microphone input.
  • step S3 the background is erased from the video input data, and an object having a large number of universal feature amounts based on the person model data above the threshold is detected as a person object.
  • step S4 an object having a universal feature amount based on face model data greater than a threshold value is detected as a face object.
  • step S5 face tracking processing corresponding to each face object is generated as an object that is generated, disappeared, moved, or changed.
  • step S6 an object having a universal feature amount by eye / pupil model data larger than a threshold value is detected as an eye / pupil object.
  • step S7 the line of sight and the direction thereof are detected based on the position of the pupil in the eye / pupil object with respect to the eyes.
  • step S8 the face tracking process detects an object having a universal feature amount based on smile model data more than a threshold value as a smile object.
  • step S9 the video / sound recognition program 136 investigates whether or not the face object tracked by the face tracking process has a universal feature amount based on the face model data greater than a threshold value.
  • step S10 the video / sound recognition program 136 determines whether or not the universal feature amount of the face object is equal to or greater than a threshold value. If negative determination is made, in step S11, the process of tracking an object less than the threshold value is deleted. Then, the process proceeds to step S12.
  • step S12 the overall program 28 acquires parameters such as the degree of response of the person object from the video / sound recognition program, and analyzes the face object, its line-of-sight direction, and smile object. It passes to 132 and a process is complete
  • step S8 the overall program 128 determines whether or not the story has ended. If affirmation is determined, it is then determined in step S9 whether or not the number of stories has ended. If determination is negative, the process returns to step S7. If determination is affirmative, the process proceeds to step S10.
  • step S10 the overall program 128 receives the advertisement result data 100 from the story manager.
  • step S11 the overall program 128 determines whether the advertisement result data 100 satisfies a corrected charging condition, for example, a screen watching time.
  • step S12 it is determined whether or not the determination result is satisfactory. If the determination is affirmative, in step S13, the analysis program 132 analyzes the recognition analysis result data analyzed based on the video / sound recognition data 140. 138 is saved and a charging start event is generated. If a negative determination is made in step S12, the process ends.
  • the charging program 126 creates charging request data 90 in step S1.
  • the authentication program 124 creates authentication data 86.
  • the overall program 128 creates a tag 74 from the billing request data 90 and the authentication data 86.
  • the overall program 128 creates advertisement result data 100 from the recognition analysis result data 138.
  • the overall program 128 creates the data 30 with the modified charging tag from the data block 76 including the advertisement result data 100 and the tag 74.
  • the overall program 128 sends the corrected charging-tagged data 30 to the overall computer 1 on the advertising agency side through the network, and ends the process.
  • the central computer 1 on the advertising agency side totals the data 31 with the corrected charging tag from each member side terminal computer 12 based on the totaling program 6, and when the totaling data satisfies the charging condition, the data 30 with the charging tag is networked. 2 is sent to the billing settlement system of the advertiser computer 13, and the process is terminated.

Abstract

　課金条件に見合う広告効果が出なかった場合には広告料を支払う義務がないようにして、広告主が経済的リスクを負うことなくインターネット端末に広告を掲載できる電子広告システムを提供する。課金条件が記載された課金タグ付きの電子広告データを送信する広告主側コンピュータと、多数の会員側端末コンピュータと、広告代理店側統括コンピュータとがインターネットを介して接続している。広告代理店側統括コンピュータのコントロール下で、広告主側コンピュータから出力された課金タグ付き電子広告データが、その課金タグが修正されて各会員側端末コンピュータに送信される。会員側端末コンピュータは、受信した電子広告データの修正課金条件が達成されたか否かを電子機器からの入力データを解析して判断する。広告代理店側統括コンピュータは、会員側端末コンピュータからの修正課金条件判断データを集計し、広告主側コンピュータに処理させるための課金請求データを生成する。

Description

課金電子広告システム
　本発明は、スポンサーの希望した所定の広告効果が確認できたときのみスポンサーに広告料が課金されるようにしたインターネット対応の電子広告システムに関する。
　インターネットを通して様々な映像や文字情報を発信する電子看板が従来知られている。この電子看板において、カメラを設置し、カメラが撮影した映像に基づいて客の顔の画像を分析し、この分析結果に基づいて広告を切り替えるようにしたものが従来知られている。また、デジタルカメラで撮った人物の表情を抽出し定量化する映像解析手段を備えた情報処理装置が従来知られている（例えば特許文献１参照）。また、コンピュータプログラムによって、映像データに基づき、２次元または３次元のオブジェクトを生成し、生成したオブジェクトを制御するプログラム技術が従来知られている（例えば特許文献２参照）。また、スポンサーの希望した所定の広告効果が確認できたときのみスポンサーに広告料が課金されるようにした電子広告システムが従来知られている（例えば特許文献３参照）。
特許第３５５８２３号公報 特開２００２－３６６９７３号公報 特許第４６９８７７０号公報
　従来の課金型電子広告システムは大型のディスプレイに不特定多数の通行人を対象として広告映像を表示するものであり、多数のインターネット端末である小型パーソナルコンピュータ、携帯電話等の所有者に向けた広告に対応していない。
　本発明は、多数のインターネット端末コンピュータに広告を行うのに適した課金型電子広告システムを提供することを目的とする。
　上記目的を達成するため、本発明は、課金条件が記載された情報からなるタグを備えた課金タグ付き電子広告データを生成する広告主側コンピュータと、画面の前方の情況を入力データとして取り込む電子機器を備えた多数の会員側端末コンピュータと、前記課金タグ付き電子広告データを受信し、前記課金条件の中、集計部分を削除した修正課金タグを生成する広告代理店側統括コンピュータとがインターネットを介して接続し、前記広告代理店側統括コンピュータのコントロール下で、前記広告主側コンピュータから出力された電子広告データが、これに修正課金タグが付加されて前記会員側端末コンピュータに送信され、該電子広告データが会員側端末コンピュータの画面に表示されるようにしたシステムであって、前記会員側端末コンピュータは、前記電子広告データを処理する広告データ受信処理プログラムを内蔵し、該プログラムは、受信した電子広告データの修正課金条件が達成されたか否かを前記電子機器からの入力データを解析して判断する入力映像解析手段を有し、前記広告代理店側統括コンピュータに内蔵されたプログラムは、前記会員側端末コンピュータから送信された修正課金条件判断データを集計し電子広告データの課金条件が達成されたか否かを判断するプログラムを有し、前記課金条件が達成されたとき、前記広告主側コンピュータに処理させるための課金請求データを生成するようにしたことを特徴とする。
　また本発明は、前記課金タグ付き電子広告データを作成するためのプログラムが前記広告代理店側統括コンピュータのウエブサイトに用意され、該ウエブサイトから前記課金タグ付き電子広告データ作成プログラムが前記広告主側コンピュータにダウンロードされるようにしたことを特徴とする。
　また本発明は、前記課金請求データを処理し、該データに記載された課金を精算する課金請求データ精算プログラムが前記広告代理店側統括コンピュータのウエブサイトに用意され、該プログラムが前記ウエブサイトから前記広告主側コンピュータにダウンロードされるようにしたことを特徴とする。
　また本発明は、前記入力映像解析手段を有する修正課金タグ付き広告データを処理する広告データ受信処理プログラムが前記広告代理店側統括コンピュータのウエブサイトに用意され、該ウエブサイトから前記広告データ受信処理プログラムが前記会員側端末コンピュータにダウンロードされるようにしたことを特徴とする。
　また本発明は、前記会員側端末コンピュータは、前記広告代理店側統括コンピュータのウエブサイトの会員リストデータベースに登録されていることを特徴とする。
　また本発明は、前記課金条件が、前記会員側端末コンピュータの電子広告データ表示画面に対する該コンピュータ所有者の注視時間が所定時間以上であり、該注視時間を満足する会員側端末コンピュータ数が所定数を超えるということを内容とする。
　また本発明は、前記修正課金条件が、前記会員側端末コンピュータの電子広告データ表示画面に対する該コンピュータ所有者の注視時間が所定時間以上であることを内容とするものである。
　本発明は、スポンサーが広告効果のなかった広告に対して広告料を支払うというリスクを負うことなく、多数のインターネット端末の所有者に対して効果的な広告を行うことができる。
本発明の説明図である。 本発明に使用される端末コンピュータの説明図である。 本発明のブロック説明図である。 本発明のブロック説明図である。 本発明のブロック説明図である。 本発明のブロック説明図である。 本発明の説明図である。 本発明の説明図である。 本発明の説明図である。 本発明の説明図である。 本発明の説明図である。 本発明の動作を示すフローチャートである。 本発明の動作を示すフローチャートである。 本発明の動作を示すフローチャートである。 本発明の動作を示すフローチャートである。 本発明の動作を示すフローチャートである。 本発明の動作を示すフローチャートである。 本発明の説明図である。
　以下に本発明の構成を添付した図面を参照して詳細に説明する。
図１，３は、本システムのハードウエア構成図を示し、システムを統括する広告代理店側の統括コンピュータ１は、ワークステーションから構成される。統括コンピュータ１の中央処理装置１５は、図４に示すように、ネットワークインターフェイス１６を介してインターネット２に接続し、ウエブサイト構築プログラム３によって、インターネット２に公開される、本システムを運営するための課金電子広告ウエブサイト１１を構築している。統括コンピュータ１の記憶装置２３には、課金タグ付き電子広告データ作成プログラム４、集計プログラム６、修正課金タグ付き広告データ受信処理プログラム７、課金請求データ精算プログラム８、会員リストデータベース９、修正課金タグ作成プログラム１０、その他本システムの運営に必要な各種のプログラムやデータが格納されている。
インターネット２には、種々のネットワークを介して、多数の会員側端末コンピュータ１２が、接続している。会員側端末コンピュータ１２は、パソコン、コンピュータ内蔵携帯電話、携帯型情報端末などから構成され、それぞれ図２に示すようにスピーカ２０、マイクロフォン２６、動画及び静止画撮影用のデジタルビデオカメラ２４，及びタッチパネル１４２の付いた映像表示入力画面２２を備えている。タッチパネル１４２は図５に示すように、タッチパネル制御プログラム１４５により制御されるように構成されている。また、インターネット２には、種々のネットワークを介して、複数の広告主側コンピュータ１３と、デジタル広告映像作成業者側コンピュータ１４が接続している。
図７～１０は、本システムに使用されるタグ付きデータのフォーマットであり、図７は、広告主側コンピュータから広告代理店側統括コンピュータに送られる課金タグ付き電子広告データ２８を示し、図８は、広告代理店側統括コンピュータから広告主側コンピュータに送られる課金タグ付きデータ３０を示している。
また、図９は、広告代理店側統括コンピュータから会員側端末コンピュータに送られる修正課金タグ付き電子広告データ２９を示し、図１０は、会員側端末コンピュータから広告代理店側統括コンピュータに送られる修正課金タグ付きデータ３１を示している。図８と１０のタグ付きデータのデータ構造は同一である。また、図７と図９のタグ付き電子広告データ２８，２９は、図９のタグ付き電子広告データ２９に修正タグ３５が付加された以外は、同一のデータ構造となっている。図７において、データ２８は、ユニークワード３２、タグ３４、データブロック３６から成り、タグ３４は、ヘッダ３８、認証データ部４０、課金保証データ部４２、タグ・チェックコード４４から成り、認証データ４０は、ヘッダ４６、認証データ４８から構成され、課金保証データ部４２は、ヘッダ５０、課金保証データ５２から構成されている。
データブロック３６は、ヘッダ５４、広告映像音声データ５６、データブロック・チェックコード５８から成り、広告映像音声データ５６は、メインシナリオ６０、多数のユニットデータ６２とから構成され、メインシナリオ６０は、ヘッダ６４、データ６６から成り、ユニットデータ６２の各ユニットは、ヘッダ６８、データ７０とから構成されている。前記ユニークワード３２は、課金タグ付きデータ２８の識別同期符号から成る。ヘッダ３８は、タグ３４のバイト数を示す。認証データ４８は、広告主IDコード、広告代理店IDコードから成る。尚、図９においては、認証データ４８’は、広告代理店IDコード、会員端末IDコードから成る。
ヘッダ５０は、課金保証データ５２のバイト数を示す。課金保証データ５２は、課金タグ付きデータ２８のシリアル番号、課金金額、課金条件から構成される。課金条件は、広告主の希望する広告効果を得るための条件であり、例えば、「広告映像画面を０．５秒以上注視する会員の数が１０万を超えること」等である。尚、図９において、課金保証データ５２’の修正課金条件は「広告映像画面を０．５秒以上注視すること」等である。タグ・チェックコード４４は、タグのヘッダ３８、認証データ部４０、課金保証データ部４２の誤り検出訂正符号から構成される。ヘッダ５４は、データ・ブロック３６のバイト数から構成される。ヘッダ６４はメインシナリオ６０のバイト数から構成される。データ６６は、ユニットデータ６２の実行手順、ユニットデータ６２へのリンク情報から構成される。
ヘッダ６８は各ユニットデータ６２のバイト数を示し、データ７０はユニットデータ６２の映像・音声データから構成される。データブロック・チェックコード５８は、データブロック３６のヘッダ５４、広告映像データ５６の誤り検出訂正符号から構成される。図８において、タグ付きデータ３０は、ユニークワード７２、タグ７４、データブロック７６から成り、タグ７４は、ヘッダ７５、認証データ７８、課金請求データ８０、タグ・チェックコード８２から成る。認証データ部７８はヘッダ８４と認証データ８６とから構成される。課金請求データ部８０は、ヘッダ８８と課金請求データ９０とから構成される。データブロック７６は、ヘッダ９２、広告結果データ部９４、データブロック・チェックコード９６から成る。
広告結果データ部９４は、ヘッダ９８と広告結果データ１００とから成る。ユニークワード７２は課金タグ付きデータ３０の識別同期符号から構成され、ヘッダ７５はタグ７４のバイト数を示し、ヘッダ８４は、認証データ８６のバイト数を示し、認証データ８６は、広告代理店IDコード、広告主IDコードから構成される。尚、図１０においては認証データ８６は、会員端末IDコード、広告代理店IDコードから成る。ヘッダ８８は課金請求データ９０のバイト数を示し、課金請求データ９０は課金タグ付きデータ２８のシリアル番号、課金金額、課金条件から構成される。
図１０の修正課金タグ付きデータ３１においては、課金請求データ９０’は修正課金タグ付き電子広告データ２９のシリアル番号、修正課金条件から構成される。
タグ・チェックコード８２は、タグ７４のヘッダ７５、認証データ７８、課金請求データ部８０の誤り検出訂正符号から構成される。ヘッダ９２はデータ・ブロック７６のバイト数を示し、ヘッダ９８は、広告結果データ１００のバイト数を示し、広告結果データ１００は、認識結果、広告効果、ログからそれぞれ構成される。データブロック・チェックコード９６は、データ・ブロック７６のヘッダ、広告結果データ部９４の誤り検出訂正符号から構成される。
図１１は本システムで使用されるデータの構造を示している。
図１１に示す、映像・音認識データ１０２のデータ構造は以下の通りである。
背景データ１０２ａは、人物像と思われる映像情報以外のカメラ入力からの映像データで、統計処理などを施した背景抜き取り用データである。
人物モデル・データ１０２ｂは、多数の人物画像から統計処理などによって得た普遍的な特徴量を持つ人物モデルである。
顔モデル・データ１０２ｃは、多数の人物の顔画像から統計処理などによって得た普遍的な特徴量を持つ顔モデルである。
目、瞳モデル・データ１０２ｄは、多数の人物の目、瞳画像から統計処理などによって得た普遍的な特徴量を持つ目、瞳モデルである。
笑顔モデル・データ１０２ｅは、多数の人物の笑顔画像から統計処理などによって得た普遍的な特徴量を持つ笑顔モデルである。
顔オブジェクトデータ１０２ｆは、顔追跡処理単位毎のオブジェクト認識の各種情報である。顔オブジェクトデータ１０２ｆは、会員の顔オブジェクトデータから成り、会員の顔オブジェクトデータは、会員の顔追跡処理のオブジェクト認識の履歴、認識情報である。
尚、上記において、特徴量とは、人物、顔、目、笑顔等の形状の特徴を数値化したものであり、人間の顔の皺、瞼、瞳、唇、歯等の各器官の相対位置、形状、相互関連度、変化の速さなどである。
認識解析結果データ１０４のデータ構造は、以下の通りである。
認識解析データ・シリアルNo.：00000001
プロジェクト・コード：PrjctCd00-01
電子広告媒体No.：EastStreet97
日時：20100808-23:00.00-20100808-23:59.59　
画面注視時間：xxxx
広告結果データ１００のデータ構造は、以下の通りである。
広告結果データ：
課金タグ付きデータ・シリアルNo.KTD0001
電子広告媒体No.：EastStreet97
日時：20100808-23:00.00-20100808-23:59.59
画面注視時間：xxxx
出力補正用データ１０６の各ブロック１０６ａ、１０６ｂ、１０６ｃのデータ構造は以下の通りである。
ブロック１０６ａ：
出力補正データ・シリアルNo.：00000001
プロジェクト・コード：PrjctCd00-01
シナリオコード：ABCD-0001
シナリオ・スクリプトリンク情報：刺激用修正映像・音声情報
親リンク情報：00000001
子リンク情報：00000003
映像・音声データ
ブロック１０６ｂ：
出力補正用データ・シリアルNo.：00000002
プロジェクト・コード：PrjctCd00-01
シナリオコード：ABCD-0001
シナリオ・スクリプトリンク情報：刺激用修正映像・音声情報
親リンク情報：00000001
子リンク情報：00000003
映像・音声データ
ブロック１０６ｃ：
出力補正用データ・シリアルNo.：00000003
プロジェクト・コード：PrjctCd00-01
シナリオコード：ABCD-0001
シナリオ・スクリプトリンク情報：刺激用修正映像・音声情報
親リンク情報：00000001
子リンク情報：None
映像・音声データ
出力データ１０８の各ブロック１０８ａ、１０８ｂ、１０８ｃのデータ構造は以下の通りである。
ブロック１０８ａ：
出力データシリアルNo.：T00000001
作成プロセスID:　PC00001
映像・音声リンクアドレス情報：T00000002, T00000003
映像・音声データ
ブロック１０８ｂ：
出力データシリアルNo.：T00000002
作成プロセスID：PC00001
映像・音声リンクアドレス情報：T00000003
映像・音声データモード：　MPEG4
映像・音声データ
ブロック１０８ｃ：
出力データシリアルNo.：T00000003
作成プロセスID：PC00001
映像・音声リンクアドレス情報：None
映像・音声データモード：MPEG4
映像・音声データ：
認証データ４８のデータ構造は、以下の通りである。
認証データ：
広告主IDコード、広告代理店IDコード
課金保証データ５２のデータ構造は、以下の通りである。
課金タグ付きデータ・シリアルNo.：KTD0001
課金金額：￥200,000-
課金条件：
画面注視時間：0,5秒
注視時間満足人数閾値：N
課金請求データ９０のデータ構造は以下の通りである。
課金タグ付きデータ・シリアルNo.：KTD0001
課金金額：￥200,000-
課金条件：
画面注視時間：0,5秒
注視時間満足人数閾値：N
判定結果：
次に、広告代理店側のウエブサイトを通じたシステム管理作業について説明する。
まず、広告代理店側管理者は、ウエブサイト１１を通じて課金電子広告システムに協力するインターネット端末会員を募集する。広告代理店側と会員側との間には、会員契約が締結され、会員側にその協力に対して所定の対価がポイント制などの形態で広告代理店側から支払われる。広告代理店側の統括コンピュータ１の会員リストデータベース９には、会員の特定のためのデータが記録される。また、会員契約が成立すると、統括コンピュータ１から修正課金タグ付き広告データ処理プログラム７が会員側端末コンピュータ１２にダウンロードされ、該広告データ処理プログラム７によって、会員側端末コンピュータ１２に図５に示すように電子広告掲示システムが構築される。
また、広告主から、課金電子広告利用の申し込みがウエブサイト１１を通じて成されると、広告代理店側の統括コンピュータ1から統括プログラム１１２を含む課金タグ付き電子広告データ作成プログラム４が、広告主側のコンピュータにダウンロードされ、これらのプログラムによって広告主側コンピュータ１３に図６に示すように課金電子広告作成システムが構築される。
広告主側コンピュータ１３は、インターネット２を通じて広告映像作成業者のコンピュータ１４から提供された広告映像・音声データに基づいて、課金電子広告を作成する。
以下に広告主側コンピュータ１３による課金電子広告作成動作を図１２に示すフローチャートを参照して説明する。
図１２において、広告主側システム２の、広告映像・音声データの作成、タグ付加、送信に関する動作は、ラベルR1から入る。広告主側システム２は、ステップS1で、統括プログラム１１２は、広告のストーリー情報に基づいてストーリー情報１１０を作成する。このストーリー情報１１０は、複数のステージ（行程）から構成されている。
次に、ステップS２で、映像・音声作成プログラム１１４は、ストーリー情報１１０の各ステージに基づき、各ステージを構成する映像・音声のユニットデータ６２を作成する。
次に、ステップS３で、シナリオ作成プログラム１１６は、ストーリー情報に基づき、ステージ毎に展開したメインシナリオ６６を作成する。次にステップS４で、統括プログラム１１２は、メインシナリオ６６と映像音声のユニットデータ６２とを合成して広告映像・音声データ５６を作成する。
次に、ステップS５で、課金プログラム１１８は、課金保証に関する入力データに基づき、課金保証データ部５２を作成する。次にステップS６で、認証プログラム１２０は、認証に関する入力データに基づき、認証データ４８を作成する。次に、ステップS７で、統括プログラム１１２は、課金保証データ５２と、認証データ４８とからタグ３４を作成する。
次に、ステップS８で、統括プログラム１１２は、広告映像・音声のデータブロック３６とタグ３４から、課金タグ付きデータ２８を生成する。次に、ステップS９で、統括プログラム１１２は、課金タグ付きデータ２８を、課金電子広告掲示システム６へネットワークを介して送出し、広告主側コンピュータ１３の送信処理を完了する。
図１３は、広告主側コンピュータ１３の広告主側システムの課金請求データ受信の処理を示している。図１３において、広告主側システムは、課金請求データのネットワーク受信処理のスタートをラベルＲ２から入る。広告主側システムは、ステップS１で、認証プログラム１２０は、統括コンピュータ１から受信した認証データ８６を検証する。
次に、認証プログラム１２０は、ステップS２で、認証データ８６の検証ができたか否か判断する。ステップS２で否定を判断するとステップS１に戻り肯定を判断するとステップS３で、課金プログラム１１８は、タグ７４から課金請求データ９０を分離する。次に、ステップS５で、結果検証プログラム１２２は、広告結果データ１００を検証する。次に、結果検証プログラム１２２は、ステップS６で、広告結果データ１００の検証ができたか否か判断する。ステップS６で否定を判断すると、広告主側システム２は、処理を終了する。また、結果検証プログラム１２２が、判断ステップS６で、肯定を判断すると、ステップS７で、統括プログラム１１２は、課金請求を精算し、処理を終了する。
次に、広告代理店側統括コンピュータ１の受信処理動作について説明する。
広告代理店側統括コンピュータ１は、インターネット２を通じて広告主側コンピュータ１３から課金タグ付き電子広告データ２８を受信すると、課金条件を図９に示すように、単一の会員側端末コンピュータ１２に適した課金条件に修正した修正タグ３５を作成し、会員側端末コンピュータ１２用の修正課金タグ付き電子広告データ２９を作成する。修正された課金条件は、例えば課金条件が「広告映像画面を０，５秒以上注視する会員の数が１０万を超えること」であるとすると、集計部分が削除されて、「広告映像画面を０，５秒以上注視する」となる。
次に、広告代理店側統括コンピュータ１は、インターネット２を通じて、各会員側端末コンピュータ１２に修正課金広告電子データ２９を送信する。この修正課金電子広告データ２９は、５秒程度を３０分に１回繰り返し各会員側端末コンピュータ１２に送信される。図１８は、広告代理店側統括コンピュータ１から各会員側端末コンピュータ１２に電子広告データ２９が送信され会員側端末コンピュータ１２に初期画面が表示された状態を示している。この初期画面データは、１日に１回程度表示されるように予め会員側において設定されている。初期画面には、拒否２３と応諾２５のボタンが表示され、会員がタッチパネル１４２に触れて、応諾のボタン２５を押すと、会員側端末コンピュータ１２にアニメーションからなる広告映像音声データの映像が表示される。拒否のボタン２３を押した場合には、会員側端末コンピュータ１２への送信が停止し、初期画面の映像が消去される。会員側端末コンピュータ１２は、ビデオカメラ２４からの入力とダウンロードされたプログラムに基づいて、カメラ２４の前の人物２０４の顔を認識し、これら人物を特定し、会員契約者を特定する。また、人物の目の動きから、視線を認識し、端末コンピュータ１２の画面２２に表示されるアニメーションなどの広告映像データへの注視時間をカウントする。また、顔表情から人物の感情、関心を認識する。また、身振りから応諾、拒否、疑問などを認識する。また、マイクロホン２６からの入力を通じて、人物の音声や感情を認識する。
次に会員側端末コンピュータ１２の修正課金タグ付きデータ受信の処理動作を、図１４を参照して説明する。
図１４において、端末コンピュータ１２は、課金タグ付きデータ受信の処理動作をラベルR３から入る。
端末コンピュータ１２のデータ受信処理がスタートすると、ステップS１で、認証プログラム１２４は、受信した修正課金タグ付きデータ２８の認証データ４８を分離・検証する。次にステップS２で、認証プログラム１２４は、認証データ４８の検証ができたか否か判断し、肯定を判断すると、ステップS３で、課金プログラム１２６は、受信した修正課金タグ付きデータの課金保証データ５２を分離、検証、保存する。
次のステップS４で、統括プログラム１２８は、課金保証データ５２の修正課金条件から判定項目と閾値とを課金判定条件として設定する。次に、ステップS５で、統括プログラム１２８は、受信した修正課金タグ付きデータ２８の広告映像音声データ５６を分離し、保存、且つ、広告映像音声データ５６からメイン・シナリオ６０、映像音声ユニットデータ６２を分離し、保存する。次に、ステップS６で、統括プログラム１２８はメイン・シナリオ６０と修正課金条件からストーリーを構築し、ステップS７で、ユニットデータ６２に基づいて、出力制御プログラム１３０下に出力オブジェクトを生成し、映像、音声入力に基づいて、解析プログラム１３２下に入力オブジェクトを生成し、これらオブジェクト間の通信を管理する。入力オブジェクトは、カメラ２４の入力映像データを認識解析することで生成される。出力データや入力データに基づいて、出力オブジェクトや入力オブジェクトを生成する方法は従来知られているプログラム技術（特許文献２参照）であり、本実施形態では従来知られているプログラム生成技術を用いている。統括プログラム１２８中のオブジェクト生成・制御を担当するプログラム部分を便宜上、ストーリー・マネージャーと称する。
このステップS７の処理を図１５に示すフローチャートを参照して以下に詳しく説明する。
　図１４に示すステップS７のスタートは、図１５のラベルR５から入る。統括プログラム１２８は、ステップS１で、シナリオに基づき、映像音声ユニット６２を編成して各ステージを構成、反応度の閾値を設定し、第１ステージをスタートする。次に、ステップS２で、ステージ毎に該当する出力オブジェクトの場面の管理を行う。次に、ステップS２で、出力制御プログラム１３０は、場面を構成する。次に、ステップS３で、表示・音出力プログラム１３４は、場面のオブジェクト毎に、表示・音出力を生成する。次に、ステップS５で、表示・音出力プログラム１３４は、合成画面を表示入力部２２に出力し、出力合成音をスピーカー２０に出力する。
次に、ステップS６で、統括プログラム１２８は、解析プログラム１３２で生成した人物オブジェクト（入力オブジェクト）の反応度をチェックする。ここで反応度とは、画面注視時間などを意味する。次に、ステップS７で、出力制御プログラム１３０は、ステージが終了したか否か判断し、肯定を判断すると、ステップS９に移行する。ステップS７で否定を判断すると、ステップS８で、反応度が閾値以上か否か判断し、肯定を判断すると、ステップS９に移行する。ステップS８で否定を判断すると、ステップS１３で、出力制御プログラム１３０は、ステージ、オブジェクト、刺激度、反応度を基準として、登場場面を出力補正用データ１０６内で検索する。
次に、ステップS１４で、出力制御プログラム１３０は、出力補正用データ１０６内に、刺激度、反応度の大きい場面が有るか否か判断し、否定を判断した場合には、輝度、コントラスト、音量、アニメーションモーフィング等を変化させて、現在の刺激場面を更に大きく補正し、ステップS１６に移行する。ステップS１４で肯定を判断すると、ステップS１６で、出力制御プログラム１３０は、刺激度、反応度の大きな場面でストーリーを再構築し、ステップS４に移行する。ステップS８で、肯定を判断した場合は、出力制御プログラム１３０は、場面を反応度と共に出力補正用データ１０６として登録する。次に、ステップS１０で、出力制御プログラム１３０は、ストーリーが終了段階か否か判断し、否定を判断すると、ステップS１１で、次のステージをスタートさせ、ステップS２に移行する。ステップS１０で肯定を判断すると、ステップS１２で広告効果データ１００即ち、人物オブジェクトの画面注視時間を含むログを生成し、これを統括プログラム１２８に送出し、処理を終了する。上記ステップS６での人物オブジェクトの反応度のチェックでは、顔認識と顔追跡の並列的処理が実行される。
次に、上記顔認識と顔追跡処理の動作について図１６に示すフローチャートを参照して説明する。
顔認識・追跡処理がラベルＲ６からスタートすると映像・音認識プログラム１３６による人物の顔検出処理がスタートする（ステップＳ１）。次に、ステップＳ２で、映像・音認識プログラム１３６は、カメラ入力による映像データ、マイク入力による音データから人物認識処理をスタートする。次に、ステップＳ３で映像入力データから背景を消去し、人物モデルデータによる普遍的特徴量を閾値以上に多く持つオブジェクトを人物オブジェクトとして検出する。次に、ステップＳ４で、顔モデルデータによる普遍的特徴量を閾値以上に多く持つオブジェクトを顔オブジェクトとして検出する。
次に、ステップＳ５で、発生、消滅、移動、変化するオブジェクトとして、顔オブジェクト毎に対応した顔追跡処理を生成する。この並列的顔追跡処理は、ステップＳ６で、目・瞳モデルデータによる普遍的特徴量を閾値以上多く持つオブジェクトを目・瞳オブジェクトとして検出する。次に、顔追跡処理は、ステップＳ７で、目・瞳オブジェクトの中の瞳の目に対する位置で視線、およびその方向を検出する。次に、ステップＳ８で顔追跡処理は、笑顔モデルデータによる普遍的特徴量を閾値以上多く持つオブジェクトを笑顔オブジェクトとして検出する。次に、ステップＳ９で、映像・音認識プログラム１３６は、顔追跡処理が追跡する顔オブジェクトが、顔モデルデータによる普遍的特徴量を閾値以上多く持つか否か調査する。ステップＳ１０で、映像・音認識プログラム１３６は、前記顔オブジェクトの普遍的特徴量を閾値以上であるか否か判断し、否定を判断すると、ステップＳ１１で、閾値未満のオブジェクトを追跡する処理を消去して、ステップＳ１２に移行する。
ステップＳ１０で肯定を判断すると、ステップＳ１２で、統括プログラム２８は、映像・音認識プログラムから人物オブジェクトの反応度等のパラメータを取得し、顔オブジェクトとその持つ視線方向、及び笑顔オブジェクトとを解析プログラム１３２に引き渡して処理を終了する。次に、再び図１４に戻り、ステップＳ８以下の処理について説明する。
ステップＳ８で、統括プログラム１２８は、ストーリーが終了したか否か判断する。肯定を判断すると、次に、ステップＳ９で、ストーリー回数が終了したか否か判断し、否定を判断するとステップＳ７に戻り、肯定を判断すると、ステップＳ１０に移行する。
ステップＳ１０で、統括プログラム１２８は、広告結果データ１００をストーリーマネージャーから受け取り、ステップＳ１１で、広告結果データ１００が修正課金条件、例えば画面注視時間を満たしているか判断する。次に、ステップＳ１２で判定結果が満足できるものであるか否か判断し、肯定を判断すると、ステップＳ１３で、解析プログラム１３２は、映像・音認識データ１４０に基づいて、解析した認識解析結果データ１３８を保存し、課金開始イベントを発生する。ステップＳ１２で否定を判断したときは、処理を終了する。
　次に、図７を参照して、会員側端末コンピュータ６の修正課金タグ付きデータ送信処理について説明する。
ラベルＲ４から課金開始イベントがスタートすると、ステップＳ１で、課金プログラム１２６は、課金請求データ９０を作成する。次に、ステップＳ２で、認証プログラム１２４は、認証データ８６を作成する。次に、ステップＳ３で、統括プログラム１２８は、課金請求データ９０と認証データ８６とから、タグ７４を作成する。次に、ステップＳ４で、統括プログラム１２８は、認識解析結果データ１３８から、広告結果データ１００を作成する。次に、ステップＳ５で統括プログラム１２８は、広告結果データ１００を含むデータブロック７６とタグ７４から修正課金タグ付きデータ３０を作る。次に、ステップＳ６で統括プログラム１２８は、修正課金タグ付きデータ３０をネットワークを通して、広告代理店側の統括コンピュータ１に送出し、処理を終了する。
広告代理店側の統括コンピュータ１は、各会員側端末コンピュータ１２からの修正課金タグ付きデータ３１を集計プログラム６に基づいて集計し、集計データが課金条件を満足すると、課金タグ付きデータ３０をネットワーク２を通して、広告主側コンピュータ１３の課金精算システムに送出し、処理を終了する。
１　　　統括コンピュータ
２　　　インターネット
３　　　ウエブサイト構築プログラム
４　　　課金タグ付き電子広告データ作成プログラム
６　　　集計プログラム
７　　　修正課金タグ付きデータ受信処理プログラム
８　　　課金タグ処理プログラム
９　　　会員リストデータベース
１０　　修正課金タグ作成プログラム
１１　　課金電子広告ウエブサイト
１２　　会員側端末コンピュータ
１３　　広告主側コンピュータ
１４　　広告映像作成業者側コンピュータ
１５　　ＣＰＵ
２０　　スピーカ
２２　　映像表示入力部
２４　　ビデオカメラ
２６　　マイクロフォン
２８　　タグ付き電子広告データ
２９　　タグ付き電子広告データ
３０　　タグ付きデータ
３１　　タグ付きデータ
３２　　ユニークワード
３４　　タグ
３５　　修正タグ
３６　　データブロック
３８　　ヘッダ
４０　　認証データ部
４２　　ユニークワード
４４　　タグ
４６　　データブロック
４８　　認証データ部
５０　　課金請求データ部
５２　　タグ・チェックコード
５４　　ヘッダ
５６　　認証データ
５８　　ヘッダ
６０　　課金請求データ
６２　　ヘッダ
６４　　広告結果データ部
６６　　データブロック・チェックコード
６８　　ヘッダ
７０　　データ
７２　　ユニークワード
７４　　タグ
７６　　データ・ブロック
７８　　認証データ部
８０　　課金請求データ部
８２　　タグ・チェックコード
８４　　ヘッダ
８６　　認証データ
８８　　ヘッダ
９０　　課金請求データ
９２　　ヘッダ
９４　　広告結果データ
９６　　データブロック・チェックコード
９８　　ヘッダ
１００　広告結果データ
１０２　映像・音認識データ
１０４　認識解析データ
１０６　出力解析データ
１０８　出力データ
１１０　ストーリー情報
１１２　統括プログラム
１１４　映像・音声作成プログラム
１１６　シナリオ作成プログラム
１１８　課金プログラム
１２０　認証プログラム
１２２　結果検証プログラム
１２４　認証プログラム
１２６　課金プログラム
１２８　統括プログラム
１３０　出力制御プログラム
１３２　解析プログラム
１３４　表示・音出力プログラム
１３６　映像・音認識プログラム
１３８　認識解析結果データ
１４０　映像・音認識データ
１４２　初期画面

Claims (7)

  1. 課金条件が記載された情報からなるタグを備えた課金タグ付き電子広告データを生成する広告主側コンピュータと、画面の前方の情況を入力データとして取り込む電子機器を備えた多数の会員側端末コンピュータと、前記課金タグ付き電子広告データを受信し、前記課金条件の中、集計部分を削除した修正課金タグを生成する広告代理店側統括コンピュータとがインターネットを介して接続し、前記広告代理店側統括コンピュータのコントロール下で、前記広告主側コンピュータから出力された電子広告データが、これに修正課金タグが付加されて前記会員側端末コンピュータに送信され、該電子広告データが会員側端末コンピュータの画面に表示されるようにしたシステムであって、前記会員側端末コンピュータは、前記電子広告データを処理する広告データ受信処理プログラムを内蔵し、該プログラムは、受信した電子広告データの修正課金条件が達成されたか否かを前記電子機器からの入力データを解析して判断する入力映像解析手段を有し、前記広告代理店側統括コンピュータに内蔵されたプログラムは、前記会員側端末コンピュータから送信された修正課金条件判断データを集計し電子広告データの課金条件が達成されたか否かを判断するプログラムを有し、前記課金条件が達成されたとき、前記広告主側コンピュータに処理させるための課金請求データを生成するようにしたことを特徴とする課金電子広告システム。
  2. 前記課金タグ付き電子広告データを作成するためのプログラムが前記広告代理店側統括コンピュータのウエブサイトに用意され、該ウエブサイトから前記課金タグ付き電子広告データ作成プログラムが前記広告主側コンピュータにダウンロードされるようにしたことを特徴とする請求項１に記載の課金電子広告システム。
  3. 前記課金請求データを処理し、該データに記載された課金を精算する課金請求データ精算プログラムが前記広告代理店側統括コンピュータのウエブサイトに用意され、該プログラムが前記ウエブサイトから前記広告主側コンピュータにダウンロードされるようにしたことを特徴とする請求項１に記載の課金電子広告システム。
  4. 前記入力映像解析手段を有する修正課金タグ付き広告データを処理する広告データ受信処理プログラムが前記広告代理店側統括コンピュータのウエブサイトに用意され、該ウエブサイトから前記広告データ受信処理プログラムが前記会員側端末コンピュータにダウンロードされるようにしたことを特徴とする請求項１に記載の課金電子広告システム。
  5. 前記会員側端末コンピュータは、前記広告代理店側統括コンピュータのウエブサイトの会員リストデータベースに登録されていることを特徴とする請求項１に記載の課金電子広告システム。
  6. 前記課金条件が、前記会員側端末コンピュータの電子広告データ表示画面に対する該コンピュータ所有者の注視時間が所定時間以上であり、該注視時間を満足する会員側端末コンピュータ数が所定数を超えるということを内容とすることを特徴とする請求項１に記載の課金電子広告システム。
  7. 前記修正課金条件が、前記会員側端末コンピュータの電子広告データ表示画面に対する該コンピュータ所有者の注視時間が所定時間以上であることを内容とすることを特徴とする請求項１に記載の課金電子広告システム。
PCT/JP2011/073221 2011-10-07 2011-10-07 課金電子広告システム WO2013051153A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2011552107A JP4966436B1 (ja) 2011-10-07 2011-10-07 課金電子広告システム
US14/239,414 US10410254B2 (en) 2011-10-07 2011-10-07 Billing electronic advertisement system
PCT/JP2011/073221 WO2013051153A1 (ja) 2011-10-07 2011-10-07 課金電子広告システム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2011/073221 WO2013051153A1 (ja) 2011-10-07 2011-10-07 課金電子広告システム

Publications (1)

Publication Number Publication Date
WO2013051153A1 true WO2013051153A1 (ja) 2013-04-11

Family

ID=46650116

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2011/073221 WO2013051153A1 (ja) 2011-10-07 2011-10-07 課金電子広告システム

Country Status (3)

Country Link
US (1) US10410254B2 (ja)
JP (1) JP4966436B1 (ja)
WO (1) WO2013051153A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190022224A (ko) * 2017-08-25 2019-03-06 이상협 디지털 인식기를 이용한 정보수집시스템 및 방법
CN110881132B (zh) * 2018-09-06 2022-06-21 武汉斗鱼网络科技有限公司 一种查看直播间距离的方法及其相关装置
CN111459595A (zh) * 2020-03-31 2020-07-28 联想(北京)有限公司 一种处理方法、装置及电子设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001084300A (ja) * 1999-09-10 2001-03-30 Matsushita Electric Ind Co Ltd 記憶媒体応用装置
JP2002133312A (ja) * 2000-10-25 2002-05-10 Fuji Xerox Co Ltd 広告料金管理装置、広告料金管理システム、広告料金管理方法及びコンピュータ読み取り可能な記録媒体
JP2003150861A (ja) * 2001-11-09 2003-05-23 Sony Corp コンテンツ配信システム、広告情報に関する料金請求を処理するための装置、コンテンツ配信サーバ、及びこれらのプログラム、プログラム記録媒体
JP2011197475A (ja) * 2010-03-19 2011-10-06 Fujitsu Ltd 広告表示システム、広告表示方法および広告表示プログラム

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030105669A1 (en) 2001-11-09 2003-06-05 Sony Corporation Contents distributing system, device for processing charge for advertisement information, contents distributing server, their program, and program recording medium
WO2007074842A1 (ja) * 2005-12-27 2007-07-05 Matsushita Electric Industrial Co., Ltd. 画像処理装置
US20090150253A1 (en) * 2007-10-05 2009-06-11 Williams Phillip W System and method for facilitating advertising
US20090197582A1 (en) * 2008-02-01 2009-08-06 Lewis Robert C Platform for mobile advertising and microtargeting of promotions
US20100191631A1 (en) * 2009-01-29 2010-07-29 Adrian Weidmann Quantitative media valuation method, system and computer program
US20100280876A1 (en) * 2009-04-30 2010-11-04 Microsoft Corporation Implicit rating of advertisements

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001084300A (ja) * 1999-09-10 2001-03-30 Matsushita Electric Ind Co Ltd 記憶媒体応用装置
JP2002133312A (ja) * 2000-10-25 2002-05-10 Fuji Xerox Co Ltd 広告料金管理装置、広告料金管理システム、広告料金管理方法及びコンピュータ読み取り可能な記録媒体
JP2003150861A (ja) * 2001-11-09 2003-05-23 Sony Corp コンテンツ配信システム、広告情報に関する料金請求を処理するための装置、コンテンツ配信サーバ、及びこれらのプログラム、プログラム記録媒体
JP2011197475A (ja) * 2010-03-19 2011-10-06 Fujitsu Ltd 広告表示システム、広告表示方法および広告表示プログラム

Also Published As

Publication number Publication date
US20140236736A1 (en) 2014-08-21
US10410254B2 (en) 2019-09-10
JP4966436B1 (ja) 2012-07-04
JPWO2013051153A1 (ja) 2015-03-30

Similar Documents

Publication Publication Date Title
WO2018098780A1 (zh) 一种交互式广告展示方法、终端及智慧城市交互系统
CN108269128B (zh) 广告的投放方法、装置、设备及存储介质
US20120130801A1 (en) System and method for mobile advertising
CN113315986B (zh) 直播互动、产品评价方法、装置、电子设备及存储介质
WO2010053195A1 (ja) 電子広告装置、電子広告方法及び記録媒体
US20200175545A1 (en) Methods and systems for online to offline conversion tracking an optimization
WO2022242428A1 (zh) 一种信息处理方法、装置、设备、存储介质及程序产品
KR20120108306A (ko) 얼굴 인식 기반 광고 방법 및 시스템
JP4966436B1 (ja) 課金電子広告システム
KR20120050941A (ko) 스마트폰 광고 응용 프로그램이 스마트폰에 광고를 사용자가 선택한 시간과 방법으로 노출시킬 때 광고주가 선택한 전화 번호가 표시되며, 사용자가 통화 버튼을 클릭 시 선택한 번호로 연결되는 시스템
US20230061210A1 (en) Method and system of automated question generation for speech assistance
KR20220131871A (ko) 얼굴인식 기술을 활용한 공사현장 인력 실시간 자격판독 방법
CN115393932A (zh) 基于微表情的视频面签处理方法、装置、系统及存储介质
US10454914B2 (en) System and method for verifying user supplied items asserted about the user for searching
CN111309230B (zh) 信息展示方法、装置、电子设备及计算机可读存储介质
CN112749363B (zh) 网络广告发布与获取方法、装置、存储介质和计算机设备
KR102195345B1 (ko) 보상 광고 제공 시스템 및 그 방법
US20150025963A1 (en) Method and system for targeted crowdsourcing
KR20210123940A (ko) 콘텐츠 거래 시스템 및 그 방법
JP4698770B1 (ja) 課金電子広告システム
CN111949961A (zh) 一种基于动作提示的人脸认证交互方法、系统和电子设备
CN111160946A (zh) 基于视频技术的广告精准投放隐私保护方法和系统
CN115829562A (zh) 会员信息处理方法、系统、智能终端及可读存储介质
KR20230067444A (ko) 인공 지능 기반 심리 분석 서비스 제공 방법, 이를 위한 장치 및 프로그램
CN112836732A (zh) 数据标注的校验方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
ENP Entry into the national phase

Ref document number: 2011552107

Country of ref document: JP

Kind code of ref document: A

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11873548

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 14239414

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 11873548

Country of ref document: EP

Kind code of ref document: A1