CN111656382A - 广告提示方法及广告提示系统 - Google Patents

广告提示方法及广告提示系统 Download PDF

Info

Publication number
CN111656382A
CN111656382A CN201880087939.2A CN201880087939A CN111656382A CN 111656382 A CN111656382 A CN 111656382A CN 201880087939 A CN201880087939 A CN 201880087939A CN 111656382 A CN111656382 A CN 111656382A
Authority
CN
China
Prior art keywords
state
advertisement
image
user
region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201880087939.2A
Other languages
English (en)
Inventor
李树程
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Meidaoxunji Co ltd
Original Assignee
Meidaoxunji Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2018014506A external-priority patent/JP6371019B1/ja
Priority claimed from JP2018126509A external-priority patent/JP7289491B2/ja
Application filed by Meidaoxunji Co ltd filed Critical Meidaoxunji Co ltd
Publication of CN111656382A publication Critical patent/CN111656382A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • G06Q30/0251—Targeted advertisements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/22—Social work or social welfare, e.g. community support activities or counselling services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/90—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to alternative medicines, e.g. homeopathy or oriental medicines
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • G06Q30/0251—Targeted advertisements
    • G06Q30/0269—Targeted advertisements based on user profile or attribute
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • G06Q30/0251—Targeted advertisements
    • G06Q30/0269—Targeted advertisements based on user profile or attribute
    • G06Q30/0271—Personalized advertisement
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/03—Recognition of patterns in medical or anatomical images

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Business, Economics & Management (AREA)
  • Medical Informatics (AREA)
  • Strategic Management (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Finance (AREA)
  • Development Economics (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Accounting & Taxation (AREA)
  • Primary Health Care (AREA)
  • Epidemiology (AREA)
  • Biomedical Technology (AREA)
  • General Business, Economics & Management (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Game Theory and Decision Science (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Data Mining & Analysis (AREA)
  • Radiology & Medical Imaging (AREA)
  • Pathology (AREA)
  • Databases & Information Systems (AREA)
  • Tourism & Hospitality (AREA)
  • Alternative & Traditional Medicine (AREA)
  • Pharmacology & Pharmacy (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Resources & Organizations (AREA)
  • Child & Adolescent Psychology (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明提供一种广告提示系统。该系统能够向利用者提示恰当的广告。广告提示系统(S)具备：图像识别部(20)，识别通过便携信息终端(1)的相机(10)拍摄到的包括利用者的牙齿及舌头的图像；第1状态识别部(21)，基于上述图像，识别牙齿的健康状态；第2状态识别部(24)，识别舌头的状态，并基于该状态识别利用者的身体状态及体质；广告获取部(25)，基于利用者的身体状态及体质的状态获取广告；以及信息提示部(26)，向便携信息终端(1)的触摸面板(11)提示广告的同时提示牙齿的健康状态。

Description

广告提示方法及广告提示系统
技术领域
本发明涉及用于基于所获取的利用者的图像来提示适合于该利用者的广告的广告提示方法及广告提示系统。
背景技术
以往，已知有下述一种诊断系统：对利用者的口腔内部进行拍摄而获取图像，再基于该获取的图像来诊断利用者的口腔内部的状态，并将该诊断结果通知给利用者。作为这种诊断系统，已知有下述一种系统：根据诊断结果或者根据来自利用者的要求，向该利用者提示距离最近的医院的信息、用于治疗的处置及器具的信息等的广告(例如，参照专利文献1。)。
现有技术文献
专利文献
专利文献1：日本特开2009-205330号公报
发明内容
发明要解决的课题
但是，专利文献1所记载的以往的诊断系统用于诊断利用者的口腔内部的状态，因此所被提示的广告也仅与口腔相关。因此，所被提示的广告的内容受到限制，对于系统提供者来说，存在难以从多种营业者收集广告的问题。
另一方面，假设不对所被提示的广告的内容进行限制时，有可能向利用者提示完全无关的广告。其结果，因提示了该广告，而可能对使用该诊断系统的利用者造成压力、违和感。
本发明是鉴于以上问题而完成的，其目的在于提供一种能够向利用者提示恰当的广告的广告提示方法以及广告提示系统。
用于解决课题的手段
本发明的广告提示方法的特征在于，具备：
图像识别工序，图像识别部根据利用者身体的图像来识别所述利用者身体的第1区域的图像即第1图像、以及所述利用者身体的第2区域的图像即第2图像；
第1状态识别工序，第1状态识别部基于所述第1图像识别与所述利用者的所述第1区域相关的状态即第1状态；
第2状态识别工序，第2状态识别部基于所述第2图像识别与所述第2区域相关的状态，并基于与该第2区域相关的状态，识别与所述第1区域自身以外的区域相关的状态即第2状态；
广告获取工序，广告获取部获取与所述第2状态对应地决定的广告；以及，
信息提示工序，信息提示部在向所述利用者提示了所述广告之后或者在提示所述广告的同时提示所述第1状态。
这里，“广告”除了由图像或动态图像构成的广告以外，还包括由语音构成的广告等能够向利用者通知信息的各种广告。
另外，“基于第2区域的状态”、“识别第2状态”是指基于第2区域的健康状态(例如颜色、表皮的状态等)，并按照规定的规则，获取或计算出第2状态。例如，可以举出下述几种方法：参照决定了第2区域的健康状态与第2状态之间的关系的数据表来获取第2状态的方法；使用规定的算法并基于第2区域的健康状态来计算第2状态的方法；将第2区域的图像提示给医生来推断第2状态的方法等。
另外，“与第2状态对应地决定”是指：参照第2状态，按照规定的规则来进行决定。例如，可以举出参照决定了第2状态的内容与广告之间的关系的数据表，并基于第2状态的内容获取广告的方法；使用规定的算法，并基于第2状态的内容获取广告的方法等。
这样，在本发明的广告提示方法中，在识别第1区域的第1状态(即，原本是利用者希望诊断的区域的状态)，并基于拍摄第1区域的图像中所包含的第2区域的图像，同时识别与第1区域以外的区域相关的第2状态。然后，基于该第2状态，获取向利用者提示的广告。
由此，向利用者提示与利用者希望诊断的第1区域相关的第1状态的同时提示与第2状态对应地决定的广告。即，通过该广告提示方法提示给利用者的广告是实施该方法的系统的利用者未意识到的广告(即，与第1区域无关的广告)，同时该广告构成对利用者有用的可能性高或与利用者兴趣一致的可能性高的广告(即，对利用者而言是恰当的广告)。
其结果，使用了该广告提示方法的系统的提供者除了能够从进行与第1区域相关的经营的营业者募集广告之外，还能够从进行与第2区域相关的经营的营业者也能够广泛地募集广告。另外，对利用者而言，所被提示的广告对于利用者而言是恰当的，因此不容易让利用者感受到因被提示广告而引起的压力、违和感。
另外，在本发明的广告提示方法中，所述第2状态可以是与所述利用者的体质以及身体状况中的至少一方相关的状态。
这里，“与体质及身体状况相关的状态”包括与不仅基于西洋医学、还基于中医或东洋医学而判断出的体质及身体状况相关的状态。
另外，在本发明的广告提示方法中，优选的是，具备：提问提示工序，提问提示部基于所述第2图像识别与所述第2区域相关的状态，并基于与该第2区域相关的状态提示问题；和回答识别工序，回答识别部识别针对所述问题的回答，
在所述第2状态识别工序中，第2状态识别部基于所述第2图像以及所述回答来识别所述第2状态。
仅通过基于第2图像得到的信息，有时难以准确地掌握第2状态。因此，像这样通过进行与第2区域相关的提问，并参照该回答，能够使提示给利用者的广告更为恰当。
另外，在本发明的广告提示方法中，优选的是，在所述第1状态识别工序中，基于所述第1图像识别所述第1状态，并且对应于预先决定的第1状态与重症度的基准来识别所述第1状态的重症度，
在第2状态识别工序中，基于所述第2图像识别所述第2状态，并且对应于预先决定的第2状态与重症度的基准来识别所述第2状态的重症度，
在所述广告获取工序中，获取与所述第1状态对应地决定的第1广告，并且获取与所述第2状态对应地决定的第2广告，
在信息提示工序中，对比所述第1状态的重症度和所述第2状态的重症度，并根据该对比的结果，决定所述第1广告及所述第2广告的提示时间、或提示顺序，提示所述第1广告及所述第2广告。
这里，“重症度”例如是基于状态而被识别的值，例如基于病状的严重程度等来被决定。重症度的大小能够由系统设计者等任意进行决定。
这样，在提示多种广告，且根据重症度(即，对利用者的有用度)来决定广告的提示时间、提示顺序时，能够使被提示的广告的内容对利用者而言更为恰当。
另外，在本发明的广告提示方法中，所述第1区域是所述利用者的牙齿及牙龈，所述第2区域是包括所述利用者的嘴唇、嘴唇周围的皮肤以及舌头中的至少一个的区域，所述广告是与所述第2状态相关的中药的广告。
这里，“嘴唇周围的皮肤”是指例如下巴、脸颊、颈部、耳朵、鼻子等能够与牙齿及牙龈一同拍摄的区域的皮肤。
通过以这种方式构成，在拍摄图像时能够自然地拍摄到第1区域和第2区域，因此对使用了本发明的广告提示方法的系统进行使用的利用者而言，进一步不容易感受到压力、违和感。
需要说明的是，在本发明的广告提示方法中，构成对象的利用者身体区域的组合只要是能够通过相机等图像获取部能够同时拍摄到的区域即可。例如，除了上述区域之外，还包括眼睛和眼睛周围的皮肤或者额头的皮肤、手及指甲、头发及耳朵周围的皮肤等。
另外，本发明的广告提示系统的特征在于，具备：
图像识别部，其根据利用者身体的图像识别所述利用者身体的第1区域的图像即第1图像、以及所述利用者身体的第2区域的图像即第2图像；
第1状态识别部，基于所述第1图像识别与所述利用者的所述第1区域相关的状态即第1状态；
第2状态识别部，基于所述第2图像识别与所述第1区域自身以外的区域相关的状态即第2状态；
广告获取部，获取与所述第2状态对应地决定的广告；以及
信息提示部，其在向所述利用者提示了所述广告之后或者在提示所述广告的同时提示所述第1状态。
附图的简单说明
图1表示实施方式的广告提示系统的概略构成的示意图。
图2是表示图1的广告提示系统的构成的框图。
图3是表示图1的广告提示系统所进行的处理的流程图。
具体实施方式
以下，参照附图，对实施方式的广告提示系统S进行说明。需要说明的是，本实施方式的广告提示系统S是将本发明的广告提示系统作为下述系统进行使用。其中，上述系统用于进行利用者的牙齿及牙龈的诊断(健康状态的掌握)，并提示与牙齿及牙龈相关的广告、以及相对于利用者的体质及身体状况的改善是有效的中药的广告。
即，广告提示系统S是下述一种系统：从想要进行关于牙齿及牙龈的广告的营业者(例如，运营牙刷等与牙齿及牙龈相关的商品等的营业者)、以及想要进行关于中药的广告的营业者所提供的多个广告中获取对利用者来说有用的可能性高的广告或与利用者兴趣一致的可能性高的广告(即，恰当的广告)，并在与利用者的牙齿的诊断结果一起显示的同时，在恰当的时机向利用者提示上述广告。
但是，本发明的广告提示方法及广告提示系统是用于通过便携信息终端的相机等提示基于能够同时拍摄的多个部位的健康信息以及广告的系统，因此，并不仅仅只适用于用于提示与牙齿及牙龈相关的广告以及与中药相关的广告的系统。
因此，作为本发明的广告提示方法以及广告提示系统中的身体的区域，例如除了牙齿、嘴唇或嘴唇周围的皮肤以外，还包括眼睛、眼睛周围的皮肤或者额头的皮肤、手及指甲、头发以及耳朵的周围的皮肤等。另外，与诊断对象相关的广告以外的广告并不限于与中药相关的广告，只要是与利用者的体质及身体状况中的至少一方相关的状态(后述的第2状态)对应地决定的广告即可。
例如，也可以在诊断头发的状态的同时，识别同时拍摄到的皮肤的状态，并基于识别出的皮肤的状态，推测利用者受到的压力的种类，提示对该压力有效的香料(具体而言，沐浴剂、芳香油等)的广告。
另外，例如，也可以使用下述一种系统：用于在进行利用者的牙齿及牙龈的诊断(健康状态的掌握)的同时，提示与牙齿及牙龈相关的广告、以及与嘴唇或者嘴唇的周围的皮肤(具体而言，下巴、脸颊、颈部、耳朵、鼻等后述的通过便携信息终端1的相机10能够与牙齿及牙龈一起进行拍摄的区域的皮肤)相关的广告(例如，化妆品等与护肤用品等相关的广告)。
需要说明的是，本实施方式中的“广告”是图像或动态图像，但本发明中的“广告”除了由图像或动态图像构成的广告以外，还包括通过语音实现的广告等能够向利用者通知信息的各种广告。
首先，参照图1及图2，对广告提示系统S的构成进行说明。
如图1所示，广告指示系统S由系统的利用者等所持有的智能手机等便携信息终端1(信息处理终端)以及由广告代理店等的系统提供者设置的服务器2构成。便携信息终端1与服务器2、以及服务器2与营业者用终端3通过经由互联网线路等以能够相互进行信息通信的方式连接而构成。
便携信息终端1具备用于获取图像的相机10(图像获取部)、向利用者提示后述的提问及回答、第1状态以及广告等的同时受理来自利用者的输入的触摸面板11(输入输出部)。
相机10构成为能够在拍摄利用者的牙齿及牙龈(第1区域)的同时拍摄嘴唇、嘴唇周围的皮肤及舌头(第2区域)并将同时摄入这些区域的静态图像作为二维图像进行获取。
需要说明的是，本发明的图像获取部所获取的图像只要是后述的图像识别部20能够识别作为第1区域的图像的第1图像和作为第2区域的图像的第2图像即可。例如，也可以不是二维图像而是三维图像。另外，在图像识别部能够从动态图像中提取出静态图像来进行识别的情况下，图像获取部也可以对动态图像进行拍摄。
另外，也可以代替作为输出部和输入部一体化而成的输入输出部的触摸面板11而采用独立的输出部以及输入部。具体而言，也可以采用作为输出部的显示器以及作为输入部的键盘、麦克风等。
如图2所示，服务器2具备图像识别部20、第1状态识别部21、提问提示部22、回答识别部23、第2状态识别部24、广告获取部25、信息提示部26、广告存储部27作为通过所被安装的硬件结构或程序而实现的功能。
图像识别部20基于相机10所获取的图像，识别作为利用者身体的牙齿及牙龈(第1区域)的图像的第1图像、以及嘴唇、嘴唇周围的皮肤及舌头(第2区域)的图像、即第2图像。
第1状态识别部21根据图像识别部20所识别出的第1图像，识别利用者的牙齿及牙龈的状态，根据该状态识别能够推断的与牙齿及牙龈相关的健康状态(第1状态)及其重症度。
提问提示部22基于图像识别部20所识别出的第2图像，识别利用者的嘴唇、嘴唇周围的皮肤以及舌头的状态(与第2区域相关的状态)。之后，基于被识别出的状态，决定向利用者提示的问题，经由触摸面板11将所决定的提问提示给利用者。
这里，能够由系统设计者任意决定用于决定提问的方法。例如，可以举出下述几种方法：参照预先决定了所被识别出的状态与提问的关系的数据表来决定提问的方法；使用规定的算法并基于识别出的状态来决定提问的方法等。
提问的内容也能够由系统设计者任意决定。例如，如本实施方式的广告提示系统S那样是在用于提示下述广告的系统的情况下，只要从中医或东洋医学的观点出发来决定提问的内容即可，其中，该广告是指：与被认为对利用者的体质及身体状况的改善是有效的中药相关的广告。
具体而言，例如能够基于第2图像来识别额头的皮肤的状态(是否黑)、眼睛下的皮肤的状态(是否黑)、脸两侧的皮肤的状态(是否黑)、舌头的状态(是否白)、嘴唇的状态(是否紫)、指甲的状态(是否有凹凸)、手的状态(关节是否弯曲)。
并且，根据这些状态(与第2区域相关的状态)，虽疑似有肝脏、胃、肾脏不健康的情况，但仅根据这些状态无法判断实际是否不健康。即，很难准确地掌握利用者的体质或身体状况。
因此，提问提示部22构成为：在根据这些状态被怀疑有肝脏、胃、肾脏不健康的情况下，进行能够获取用于判断实际是否是不健康的信息的内容的提问。
具体而言，提示是否经常食用生食物或冷食物的情况、早晨起床时脚是否肿胀、饮酒频度、性生活频度等问题。根据针对这些问题的回答，能够推测出根据第2图像推测是无法识别的舌头的状态(表面的平滑度、厚度)、口腔的气味、身体的气味等。
然后，如后所述，第2状态识别部24参照根据第2图像而识别出的信息、以及基于针对问题的回答而识别出的信息，来识别第2状态。
回答识别部23针对提问提示部22所提示的问题，识别利用者经由触摸面板11而输入的回答。
第2状态识别部24根据图像识别部20识别出的第2图像，识别利用者的嘴唇、嘴唇周围的皮肤以及舌头的状态(与第2区域相关的状态)，并识别根据该状态以及由回答识别部23识别出的回答能够推断出的与利用者的体质以及身体状况相关的状态(第2状态)以及其重症度。
这里，“第2状态”除了与利用者的体质以及身体状况相关的状态以外，还包括与第2区域本身相关的状态等与能够根据第2区域的状态推断或识别出的利用者身体的第1区域以外的区域相关的状态。
例如，在本实施方式的广告提示系统S中，第2区域是指利用者的嘴唇以及嘴唇周围的皮肤，第2状态是与利用者的体质以及身体状况相关的状态。但是，作为第2状态，也可以基于嘴唇以及嘴唇周围的皮肤的状态来推断牙齿(第1区域)、嘴唇以及嘴唇周围的皮肤(第2区域)以外的利用者身体的区域的状态。具体而言，也可以是基于嘴唇的状态而推断出的舌头、口腔内部等的状态。
需要说明的是，在广告提示系统S中，第1状态识别部21以及第2状态识别部24参照事先得到的样本图像与图像识别部20所识别出的图像的比较结果，识别第1状态以及第2状态。
另外，在本实施方式中，“与体质及身体状况相关的状态”不仅包括西洋医学，还包括与基于中医或东洋医学判断的体质及身体状况相关的状态。
但是，本发明中的第1状态以及第2状态的识别不一定需要参照图像的比较结果来进行，只要是基于图像识别部所识别出的图像进行的识别即可。例如，广告提示系统S也可以构成为：通常通过图像的比较来识别状态，仅在难以识别的情况下，向医生发送图像来进行诊断。
另外，在本实施方式的广告提示系统S中，为了向利用者提示更为恰当的广告，系统S构成为：向利用者进行提问，并在识别第2状态时参照该回答。但是，本发明的广告提示系统并不限定于这种构成，例如，在通过图像能够高精度地识别第2状态的情况下，也可以省略提问的提示以及回答的识别。在这种情况下，可以省略提问提示部以及回答识别部。
另外，这里的“重症度”例如是基于状态而识别的值，例如基于病状的严重程度等来进行决定。重症度的大小能够由系统设计者等任意进行决定。
用于求出与第1状态以及第2状态相关的重症度的方法也能够由系统设计者任意决定。例如，可以举出参照数据表求出重症度的方法、使用作为预先被决定的基准的规定的算法并基于被识别的状态求出重症度的方法等。其中，上述数据表作为预先决定被识别的状态与重症度的关系的基准。
广告获取部25基于由第1状态识别部21以及第2状态识别部24识别出的第1状态以及第2状态，获取与第1状态对应地决定的与牙齿以及牙龈相关的广告(第1广告)以及与第2状态对应地决定的与中药相关的广告(第2广告)。
这里，“与状态对应地决定”是指，参照第1状态或第2状态并按照规定的规则来进行决定。例如，可以举出参照决定了状态的内容与广告的关系的数据表，并基于状态的内容获取广告的方法、使用规定的算法并基于状态的内容获取广告的方法等。
信息提示部26对第1状态的重症度和第2状态的重症度进行对比，并根据其对比结果，决定第1广告的提示时间和第2广告的提示时间、第1广告和第2广告的提示顺序、以及它们的提示区域的大小。另外，信息提示部26按照该决定内容，在便携信息终端1的触摸面板11上提示了这些广告之后，提示第1状态。
提示时间与重症度的对比结果的关系可以恰当进行设定。例如，重症度越大，广告的提示时间越长。另外，也可以设定成重症度越大越在后面进行提示。另外，也可以反复提示重症度大的广告。
需要说明的是，在本实施方式的广告提示系统S中，第1状态识别部21以及第2状态识别部24在识别第1状态以及第2状态的同时还识别各个重症度。这是为了让信息提示部26根据其重症度(即，针对利用者的有用度)变动向利用者提示的各广告的提示时间以及提示顺序。
但是，在广告的提示时间不是能够变动的情况下(例如广告只有一种的情况下)等，无法进行提示时间的变动，因此也可以构成为不识别重症度，不进行重症度的比较。
另外，作为用于使提示广告的时间变动的方法，在广告为静止图像那种不会径时变化的情况下，只要单纯使提示时间变动即可。另外，在广告是动态图像那种会径时变化的情况下，在获取广告时，也可以在1个状态下获取时间不同的多个广告，并从中选择与所决定的提示时间相应的长度的广告。
另外，也可以使重症度的比较的结果反映到提示的时间之外，还反映到提示的区域中。具体而言，可以在对触摸面板11上的显示区域进行分割而同时显示多个广告的情况下，重症度越高显示得越大。
广告存储部27存储从营业者所具有的营业者用终端3上传的广告。需要说明的是，也可以将该广告存储部27设置在服务器2的外部(其他服务器等)。另外，也可以省略广告存储部27，信息提示部26根据需要随时从外部获取广告。
接着，参照图2以及图3，对广告提示系统S进行的处理(本发明的广告提示方法)进行说明。图3是表示广告提示系统S所进行的处理的流程图。
在本实施方式的广告提示系统S中，在用于提示诊断结果及广告的处理之前，营业者用终端3向广告存储部27上传可以构成提示对象的多个广告。
在广告提示系统S所进行的处理中，首先，便携信息终端1的相机10在拍摄利用者的牙齿及牙龈(第1区域)的同时拍摄嘴唇、嘴唇周围的皮肤及舌头(第2区域)，获取同时摄入了这些区域的静止图像作为二维图像(图3/STEP01)。
接着，服务器2的图像识别部20基于相机10所获取的图像，识别利用者身体的牙齿及牙龈(第1区域)的图像、即第1图像、以及嘴唇、嘴唇周围的皮肤及舌头(第2区域)的图像即第2图像(图3/STEP02(图像识别工序))。
接着，服务器2的提问提示部22基于图像识别部20所识别出的第2图像，识别利用者的嘴唇、嘴唇周围的皮肤以及舌头的状态(与第2区域相关的状态)，并基于该状态来决定提问，并将经由触摸面板11决定的提问提示给利用者(图3/STEP03(提问提示工序))。
接着，服务器2的回答识别部23针对提问提示部22所提示的问题，识别利用者经由触摸面板11输入的回答(图3/STEP04(回答识别工序))。
接着，服务器2的第1状态识别部21基于图像识别部20识别出的第1图像，识别利用者的牙齿及牙龈的状态，并识别根据该状态识别能够推断的牙齿及牙龈的健康状态(第1状态)及其重症度(图3/STEP05(第1状态识别工序))。
接着，服务器2的第2状态识别单元24基于由图像识别单元20识别的第2图像来识别利用者的嘴唇、嘴唇周围的皮肤以及舌头的状态(与第2区域相关的状态)，并识别从该状态以及根据回答识别部23所识别出的回答能够推断出的利用者的体质以及与身体状况相关的状态(第2状态)及其重症度(图3/STEP06(第2状态识别工序))。
接着，服务器2的广告获取单元25基于由第1状态识别单元21和第2状态识别单元24识别出的第1状态和第2状态来获取与第1状态对应地决定的牙齿及牙龈相关的广告(第1广告)、以及与第2状态对应地决定的广告(即，与第2状态相关中药)相关的广告(第2广告)(图3/STEP07(广告获取工序))。
接着，服务器2的信息提示部26对第1状态的重症度和第2状态的重症度进行对比，并根据其对比结果，决定第1广告及第2广告的提示时间及提示顺序(图3/STEP08)。
接着，信息提示部26在便携信息终端1的触摸面板11上依次提示这些广告后提示第1状态，并结束本次的处理(图3/STEP09(信息提示工序))。
如上所说明的，在广告提示系统S中，识别牙齿及牙龈(第1区域)所涉及的第1状态(即，利用者本来希望诊断的区域的状态)，并根据拍摄第1区域的图像所包含的嘴唇、嘴唇周围的皮肤及舌头(第2区域)的图像，还识别与利用者的体质以及身体状况相关的第2状态。然后，获取与该第2状态对应的中药的广告、即第2广告。
由此，向利用者提示与利用者希望诊断的牙齿及牙龈的健康状态、即第1状态的同时提示与利用者的体质以及身体状况相关的广告。即，通过该广告提示系统S向利用者提示的广告是实施该方法的系统的利用者未意识到的广告(即，与第1区域无关的广告)，且该广告对于利用者来说有用的可能性高或与利用者的兴趣一致的可能性高。
其结果，该广告提示系统S的提供者除了能够从进行与牙齿及牙龈相关的营业的营业者募集到广告之外，还能够从进行与中药相关的营业的营业者广泛地募集到广告。另外，对利用者而言，所被提示的广告对于利用者来说是一种恰当的广告，因此不容易因被提示了广告而感受到压力、违和感。
以上，对图示的实施方式进行了说明，但本发明并不限于这样的方式。
例如，在上述实施方式中，广告指示系统S构成为下述一种系统：用于进行利用者的牙齿及牙龈的诊断，并且提示与牙齿及牙龈相关的广告、以及与嘴唇、嘴唇周围的皮肤及舌头的状态对应地决定的中药所相关的广告。这是因为，在进行牙齿及牙龈的拍摄的同时，获取嘴唇、嘴唇周围的皮肤及舌头的图像相对比较容易。
但是，本发明的广告提示方法以及广告提示系统并不限定于这样的构成，只要是基于利用者身体的第1区域以及能够与该第1区域一起进行拍摄的第2区域来进行与利用者的体质以及身体状况中的任一方相关的状态的识别以及广告的提示的系统即可。
例如，也可以将第1区域设定为耳朵，将第2区域设定为头发。另外，也可以将第1状态设定为与眼睛有关的状态，将第2状态设定为根据眼睛周围的皮肤推测出的体质以及身体状况。
另外，在上述实施方式中，作为第2区域，使用嘴唇、嘴唇周围的皮肤以及舌头这多个区域。但是，本发明的第2区域也可以仅使用一个区域。例如，也可以仅设定为舌头。另外，在与上述实施方式同样地将第2区域设定为多个区域的情况下，不一定需要将多个第2区域设定为相互邻接的区域。例如，也可以将舌头和眼睛周围的皮肤作为第2区域。
另外，在上述实施方式中，依次提示与第1状态所涉及的牙齿以及牙龈相关的第1广告和与第2状态所涉及的中药相关的第2广告。
但是，本发明的广告提示方法以及广告提示系统并不限定于这样的构成，只要是至少与第1状态一起提示第2状态的广告即可。
例如，与上述实施方式的广告提示系统S相同，在牙齿诊断的同时，基于嘴唇、嘴唇周围的皮肤及舌头来识别利用者身体状况以及体质的系统的情况下，广告提示系统S也可以构成为不提示与牙齿及牙龈相关的广告(即，第1广告)，而仅提示与基于嘴唇、嘴唇周围的皮肤以及舌头而推测的利用者身体状况以及体质相关的广告(即，第2广告)。通过这种方式构成广告提示系统S时，也可以构成为在提示牙齿的诊断结果的同时提示与中药相关的广告。另外，在能够与第1状态一起识别两个以上的第2状态的情况下，也可以提示两个以上的第2广告。另外，也可以在第1区域的诊断结果之后，提示第2广告或第1广告及第2广告。
另外，在上述实施方式中，由服务器2和便携信息终端1构成用于实施本发明的广告提示方法的广告提示系统S。但是，本发明的广告提示方法并非仅由通过这种构成的系统构成。
例如，可以使设置于店面等的具有拍摄功能的信息处理终端仅由该信息处理终端构成系统，也可以在便携信息终端设置各处理部及各信息存储部，仅由该便携信息终端来构成系统。相反，也可以构成为使用分别独立的不同的服务器来进行在上述实施方式中是由一个服务器进行的状态的识别以及获取广告的处理。
符号说明
1 便携式信息终端(信息处理终端)
2 服务器
3 营业者用终端
10 相机(图像获取部)
11 触摸面板(输入输出部)
20 图像识别部
21 第1状态识别部
22 提问提示部
23 回答识别部
24 第2状态识别部
25 广告获取部
26 信息提示部
27 广告存储部

Claims (6)

1.一种广告提示方法，其特征在于，具备：
图像识别工序，图像识别部根据利用者身体的图像来识别所述利用者身体的第1区域的图像即第1图像、以及所述利用者身体的第2区域的图像即第2图像；
第1状态识别工序，第1状态识别部基于所述第1图像识别与所述利用者的所述第1区域相关的状态即第1状态；
第2状态识别工序，第2状态识别部基于所述第2图像识别与所述第2区域相关的状态，并基于与该第2区域相关的状态，识别与所述第1区域自身以外的区域相关的状态即第2状态；
广告获取工序，广告获取部获取与所述第2状态对应地决定的广告；以及，
信息提示工序，信息提示部在向所述利用者提示了所述广告之后或者在提示所述广告的同时提示所述第1状态。
2.根据权利要求1所述的广告提示方法，其特征在于，
所述第2状态是与所述利用者的体质以及身体状况中的至少一方相关的状态。
3.根据权利要求1所述的广告提示方法，其特征在于，具备：
提问提示工序，提问提示部基于所述第2图像识别与所述第2区域相关的状态，并基于与该第2区域相关的状态提示问题；和
回答识别工序，回答识别部识别针对所述问题的回答，
在所述第2状态识别工序中，第2状态识别部基于所述第2图像以及所述回答来识别所述第2状态。
4.根据权利要求1所述的广告提示方法，其特征在于，
在所述第1状态识别工序中，基于所述第1图像识别所述第1状态，并且对应于预先决定的第1状态与重症度的基准来识别所述第1状态的重症度，
在第2状态识别工序中，基于所述第2图像识别所述第2状态，并且对应于预先决定的第2状态与重症度的基准来识别所述第2状态的重症度，
在所述广告获取工序中，获取与所述第1状态对应地决定的第1广告，并且获取与所述第2状态对应地决定的第2广告，
在信息提示工序中，对比所述第1状态的重症度和所述第2状态的重症度，并根据该对比的结果，决定所述第1广告及所述第2广告的提示时间、或提示顺序，提示所述第1广告及所述第2广告。
5.根据权利要求1所述的广告提示方法，其特征在于，
所述第1区域是所述利用者的牙齿及牙龈，
所述第2区域是包括所述利用者的嘴唇、嘴唇周围的皮肤以及舌头中的至少一个的区域，
所述广告是与所述第2状态相关的中药的广告。
6.一种广告提示系统，其特征在于，具备：
图像识别部，其根据利用者身体的图像识别所述利用者身体的第1区域的图像即第1图像、以及所述利用者身体的第2区域的图像即第2图像；
第1状态识别部，基于所述第1图像识别与所述利用者的所述第1区域相关的状态即第1状态；
第2状态识别部，基于所述第2图像识别与所述第1区域自身以外的区域相关的状态即第2状态；
广告获取部，获取与所述第2状态对应地决定的广告；以及
信息提示部，其在向所述利用者提示了所述广告之后或者在提示所述广告的同时提示所述第1状态。
CN201880087939.2A 2018-01-31 2018-07-30 广告提示方法及广告提示系统 Pending CN111656382A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2018-014506 2018-01-31
JP2018014506A JP6371019B1 (ja) 2018-01-31 2018-01-31 広告提示方法、及び、広告提示システム
JP2018126509A JP7289491B2 (ja) 2018-07-03 2018-07-03 広告提示方法、及び、広告提示システム
JP2018-126509 2018-07-03
PCT/JP2018/028465 WO2019150607A1 (ja) 2018-01-31 2018-07-30 広告提示方法、及び、広告提示システム

Publications (1)

Publication Number Publication Date
CN111656382A true CN111656382A (zh) 2020-09-11

Family

ID=67479690

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880087939.2A Pending CN111656382A (zh) 2018-01-31 2018-07-30 广告提示方法及广告提示系统

Country Status (3)

Country Link
US (1) US20210065248A1 (zh)
CN (1) CN111656382A (zh)
WO (1) WO2019150607A1 (zh)

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005296208A (ja) * 2004-04-09 2005-10-27 Konica Minolta Holdings Inc 診断システム
RU2270036C1 (ru) * 2004-07-14 2006-02-20 Государственное учреждение "Нижегородский научно-исследовательский институт травматологии и ортопедии Министерства здравоохранения Российской Федерации" Способ коррекции психоэмоциональных и психосоматических расстройств у детей с термической травмой
US20060085408A1 (en) * 2004-10-19 2006-04-20 Steve Morsa Match engine marketing: system and method for influencing positions on product/service/benefit result lists generated by a computer network match engine
US20100150405A1 (en) * 2006-11-22 2010-06-17 Nader Butto System and method for diagnosis of human behavior based on external body markers
CN102915671A (zh) * 2011-08-02 2013-02-06 中国人民解放军第四五五医院 重症患者需求识别交流卡及方法
CN104200120A (zh) * 2014-09-18 2014-12-10 上海中医药大学 一种基于中医诊断信息的健康状态监测系统及其方法
CN104995212A (zh) * 2012-09-07 2015-10-21 瑞泽恩制药公司 以il-4r拮抗剂治疗特应性皮炎的方法
CN105574484A (zh) * 2014-11-04 2016-05-11 三星电子株式会社 电子装置及用于在电子装置中分析脸部信息的方法
JP2016077436A (ja) * 2014-10-15 2016-05-16 デジタルワン株式会社 口腔内検診管理システム
CN105993016A (zh) * 2014-02-04 2016-10-05 奥普蒂马塔公司 用于预测医疗效果的方法和系统
KR20160141100A (ko) * 2015-05-28 2016-12-08 양재정 복약순응에 따라 광고를 제시하고, 시청이 확인되면 보상하는 헬스케어 시스템 및 그 방법
JP2017049695A (ja) * 2015-08-31 2017-03-09 キヤノン株式会社 支援システム、支援方法、プログラム
US9842358B1 (en) * 2012-06-19 2017-12-12 Brightex Bio-Photonics Llc Method for providing personalized recommendations

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001314376A (ja) * 2000-05-11 2001-11-13 Res Dev Corp Of Japan 舌診用システムと問診用システム、及び舌診問診教育支援装置
JP4487535B2 (ja) * 2003-11-10 2010-06-23 コニカミノルタホールディングス株式会社 健康度測定システムおよびプログラム
JP2012143528A (ja) * 2011-01-12 2012-08-02 Advance Co Ltd 口腔内撮影表示システム

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005296208A (ja) * 2004-04-09 2005-10-27 Konica Minolta Holdings Inc 診断システム
RU2270036C1 (ru) * 2004-07-14 2006-02-20 Государственное учреждение "Нижегородский научно-исследовательский институт травматологии и ортопедии Министерства здравоохранения Российской Федерации" Способ коррекции психоэмоциональных и психосоматических расстройств у детей с термической травмой
US20060085408A1 (en) * 2004-10-19 2006-04-20 Steve Morsa Match engine marketing: system and method for influencing positions on product/service/benefit result lists generated by a computer network match engine
US20100150405A1 (en) * 2006-11-22 2010-06-17 Nader Butto System and method for diagnosis of human behavior based on external body markers
CN102915671A (zh) * 2011-08-02 2013-02-06 中国人民解放军第四五五医院 重症患者需求识别交流卡及方法
US9842358B1 (en) * 2012-06-19 2017-12-12 Brightex Bio-Photonics Llc Method for providing personalized recommendations
CN104995212A (zh) * 2012-09-07 2015-10-21 瑞泽恩制药公司 以il-4r拮抗剂治疗特应性皮炎的方法
CN105993016A (zh) * 2014-02-04 2016-10-05 奥普蒂马塔公司 用于预测医疗效果的方法和系统
CN104200120A (zh) * 2014-09-18 2014-12-10 上海中医药大学 一种基于中医诊断信息的健康状态监测系统及其方法
JP2016077436A (ja) * 2014-10-15 2016-05-16 デジタルワン株式会社 口腔内検診管理システム
CN105574484A (zh) * 2014-11-04 2016-05-11 三星电子株式会社 电子装置及用于在电子装置中分析脸部信息的方法
KR20160141100A (ko) * 2015-05-28 2016-12-08 양재정 복약순응에 따라 광고를 제시하고, 시청이 확인되면 보상하는 헬스케어 시스템 및 그 방법
JP2017049695A (ja) * 2015-08-31 2017-03-09 キヤノン株式会社 支援システム、支援方法、プログラム

Also Published As

Publication number Publication date
US20210065248A1 (en) 2021-03-04
WO2019150607A1 (ja) 2019-08-08

Similar Documents

Publication Publication Date Title
EP1297782A1 (en) Beauty analysis of external body conditions
EP1297781A1 (en) Early detection of beauty treatment progress
JP6305448B2 (ja) 手洗い監視システム
US20150305662A1 (en) Remote assessment of emotional status
KR20020001609A (ko) 진단 시스템, 진단 데이터 생성 방법, 그에 이용되는 정보처리 장치 및 단말 장치 및 기록 매체
Hop et al. Photographic assessment of burn size and depth: reliability and validity
WO2009100494A1 (en) System and method of cosmetic analysis and treatment diagnosis
JP2004000427A (ja) 身体画像の修整
Wache et al. Implicit user-centric personality recognition based on physiological responses to emotional videos
JP2007068620A (ja) 心理状態計測装置
JP2003070749A (ja) 診断システム、肌の診断方法、及びそれに用いられる情報処理装置、並びにプログラム、記録媒体
Douglas et al. A review of facial image analysis for delineation of the facial phenotype associated with fetal alcohol syndrome
US20100150405A1 (en) System and method for diagnosis of human behavior based on external body markers
CN110021203A (zh) 一种口腔健康教育体验系统、方法及医疗教育装置
Mackenzie et al. Morphological and morphometric changes in the faces of female-to-male (FtM) transsexual people
CN111656382A (zh) 广告提示方法及广告提示系统
US20230012806A1 (en) Method and photographing device for acquiring side image for ocular proptosis degree analysis, and recording medium therefor
JP7289491B2 (ja) 広告提示方法、及び、広告提示システム
JP2003070753A (ja) 診断システム、診断データ生成方法、それに用いられる情報処理装置、及び端末装置、並びに記録媒体
US20220101655A1 (en) System and method of facial analysis
CN115530855A (zh) 三维数据采集设备的控制方法及装置、三维数据采集设备
Gullapalli et al. Quantifying the psychopathic stare: Automated assessment of head motion is related to antisocial traits in forensic interviews
JP7327987B2 (ja) 医療診断支援システム、医療診断支援装置、医療診断支援方法及びプログラム
Volk et al. Objective Measurement of Outcomes inFacial Palsy
JP6371019B1 (ja) 広告提示方法、及び、広告提示システム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination