CN114222189A - 内容定制方法、装置、计算机设备和存储介质 - Google Patents

内容定制方法、装置、计算机设备和存储介质 Download PDF

Info

Publication number
CN114222189A
CN114222189A CN202010919636.1A CN202010919636A CN114222189A CN 114222189 A CN114222189 A CN 114222189A CN 202010919636 A CN202010919636 A CN 202010919636A CN 114222189 A CN114222189 A CN 114222189A
Authority
CN
China
Prior art keywords
user
image
content
angle information
target image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010919636.1A
Other languages
English (en)
Inventor
唐帅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Audi AG
Original Assignee
Audi AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Audi AG filed Critical Audi AG
Priority to CN202010919636.1A priority Critical patent/CN114222189A/zh
Publication of CN114222189A publication Critical patent/CN114222189A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/475End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H04N21/4755End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for defining user preferences, e.g. favourite actors or genre
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5846Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using extracted text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9535Search customisation based on user profiles and personalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00Digital computing or data processing equipment or methods, specially adapted for specific functions
    • G06F17/10Complex mathematical operations
    • G06F17/18Complex mathematical operations for evaluating statistical data, e.g. average values, frequency distributions, probability functions, regression analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41422Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance located in transportation means, e.g. personal vehicle

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Library & Information Science (AREA)
  • Evolutionary Biology (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Physics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Pure & Applied Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Mathematical Optimization (AREA)
  • Computational Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Evolutionary Computation (AREA)
  • Operations Research (AREA)
  • Probability & Statistics with Applications (AREA)
  • Artificial Intelligence (AREA)
  • Algebra (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请涉及一种内容定制方法方法、装置、计算机设备和存储介质。所述方法包括:获取用户的凝视方向上的角度信息,获取车辆外部的外部图像,从外部图像中,确定与所述角度信息对应的目标图像,根据所述目标图像进行内容定制,从而可以即时根据用户的喜好定制内容或更改所定制的内容。

Description

内容定制方法、装置、计算机设备和存储介质
技术领域
本申请涉及多媒体服务领域,特别是涉及一种内容定制方法、装置、计算机设备和存储介质。
背景技术
随着社会经济的不断发展及方便出行,车辆的数量也越来越庞大,车辆无时不刻出现在人们的生活中。其中,随着人们物质生活的不断充实,汽车已经不仅仅是作为基本的交通的工具,汽车的智能化和人性化设计也越来越受到消费者的关注与重视,例如,车载系统的内容定制。
现有的车载系统的内容定制方法,只能根据历史记录进行内容定制,不能即时根据用户的喜好更改所定制的内容。
发明内容
基于此,有必要针对上述技术问题,提供一种能够即时根据用户的喜好更改所定制的内容的内容定制方法、装置、计算机设备和存储介质。
一种内容定制方法,所述方法包括:
获取用户的凝视方向上的角度信息;
获取车辆外部的外部图像;
从所述外部图像中,确定与所述角度信息对应的目标图像;
根据所述目标图像进行内容定制。
在其中一个实施例中,所述获取用户的凝视方向上的角度信息,包括:
获取所述用户的面部图像;
根据所述面部图像确定所述用户的凝视方向;
输出所述凝视方向上的角度信息。
在其中一个实施例中,所述从所述外部图像中,确定与所述角度信息对应的目标图像,包括:
从所述外部图像中,提取与所述角度信息重叠的部分图像;
将所述重叠的部分图像,作为所述目标图像。
在其中一个实施例中,所述从所述外部图像中,确定与所述角度信息对应的目标图像,包括:
从所述外部图像中,提取与所述角度信息重叠的部分图像,并计算所述用户对重叠的部分图像凝视的凝视时长;
若所述凝视时长大于预设阈值,则将重叠的部分图像作为所述目标图像。
在其中一个实施例中,所述根据所述目标图像进行内容定制,包括:
识别所述目标图像中的对象;
计算属于同一类别的对象的出现的频率;
根据每个类别中的对象的出现的频率,进行内容定制。
在其中一个实施例中,所述根据每个类别中的对象的出现的频率,进行内容定制,包括:
确定频率最大的对象所属的类别;
根据所述频率最大的类别中的对象,进行内容定制。
在其中一个实施例中,所述根据所述目标图像进行内容定制,包括:
将所述目标图像与在线图像相匹配;
计算与所述目标图像匹配的在线图像的频率;
根据与所述目标图像匹配的在线图像的频率,进行内容定制。
在其中一个实施例中,所述根据与所述目标图像匹配的在线图像的频率,进行内容定制,包括:
确定频率最大的在线图像;
根据所述频率最大的在线图像,进行内容定制。
在其中一个实施例中,所述根据所述目标图像进行内容定制,包括:
识别所述目标图像中的文本;
计算属于同一类别的文本的出现的频率;
根据每个类别中的文本的出现的频率,进行内容定制。
在其中一个实施例中,所述根据每个类别中的文本的出现的频率,进行内容定制,包括:
确定频率最大的文本所属的类别;
根据所述频率最大的类别中的文本,进行内容定制。
在其中一个实施例中,获取用户的凝视方向上的角度信息的同时,根据所述用户所处的座位确定用户标识;
所述方法还包括:
接收至少一个用户对用户标识的选择操作,使得所述用户标识和所述用户的终端存在对应关系;
根据对应关系,将与所述用户标识对应的定制内容,推送到与所述用户标识对应的用户的终端上。
在其中一个实施例中,获取用户的凝视方向上的角度信息的同时,根据所述用户所处的座位确定用户标识;
所述方法还包括:
将与所述用户标识对应的定制内容,显示在与所述用户所处的座位对应的显示屏幕上。
一种内容定制装置,所述装置包括:
角度信息获取模块,用于获取用户的凝视方向上的角度信息;
外部图像获取模块,用于获取车辆外部的外部图像;
目标图像确定模块,用于从所述外部图像中,确定与所述角度信息对应的目标图像;
内容定制模块,用于根据所述目标图像进行内容定制。
在其中一个实施例中,所述角度信息获取模块用于:
获取所述用户的面部图像;
根据所述面部图像确定所述用户的凝视方向;
输出所述凝视方向上的角度信息
在其中一个实施例中,所述目标图像确定模块用于:
从所述外部图像中,提取与所述角度信息重叠的部分图像;
将所述重叠的部分图像,作为所述目标图像。
在其中一个实施例中,所述目标图像确定模块用于:
从所述外部图像中,提取与所述角度信息重叠的部分图像,并计算所述用户对重叠的部分图像凝视的凝视时长;
若所述凝视时长大于预设阈值,则将重叠的部分图像作为所述目标图像。
在其中一个实施例中,所述内容定制模块用于:
识别所述目标图像中的对象;
计算属于同一类别的对象的出现的频率;
根据每个类别中的对象的出现的频率,进行内容定制。
在其中一个实施例中,所述内容定制模块用于:
确定频率最大的对象所属的类别;
根据所述频率最大的类别中的对象,进行内容定制。
在其中一个实施例中,所述内容定制模块用于:
将所述目标图像与在线图像相匹配;
计算与所述目标图像匹配的在线图像的频率;
根据与所述目标图像匹配的在线图像的频率,进行内容定制。
在其中一个实施例中,所述内容定制模块用于:
确定频率最大的在线图像;
根据所述频率最大的在线图像,进行内容定制。
在其中一个实施例中,所述内容定制模块用于:
识别所述目标图像中的文本;
计算属于同一类别的文本的出现的频率;
根据每个类别中的文本的出现的频率,进行内容定制。
在其中一个实施例中,所述内容定制模块用于:
确定频率最大的文本所属的类别;
根据所述频率最大的类别中的文本,进行内容定制。
在其中一个实施例中,获取用户的凝视方向上的角度信息的同时,根据所述用户所处的座位确定用户标识;
所述装置还包括:
显示模块,用于将与所述用户标识对应的定制内容,显示在与所述用户所处的座位对应的显示屏幕上。
在其中一个实施例中,获取用户的凝视方向上的角度信息的同时,根据所述用户所处的座位确定用户标识;
所述装置还包括:
接收模块,用于接收至少一个用户对用户标识的选择操作,使得所述用户标识和所述用户的终端存在对应关系;
推送模块,用于根据对应关系,将与所述用户标识对应的定制内容,推送到与所述用户标识对应的用户的终端上。
一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
获取用户的凝视方向上的角度信息;
获取车辆外部的外部图像;
从所述外部图像中,确定与所述角度信息对应的目标图像;
根据所述目标图像进行内容定制。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:
获取用户的凝视方向上的角度信息;
获取车辆外部的外部图像;
从所述外部图像中,确定与所述角度信息对应的目标图像;
根据所述目标图像进行内容定制。
上述内容定制方法、装置、计算机设备和存储介质,获取用户的凝视方向上的角度信息,获取车辆外部的外部图像,从外部图像中,确定与所述角度信息对应的目标图像,根据所述目标图像进行内容定制。其中,因为用户的凝视方向上的角度信息是即时变化的,则根据即时变化的角度信息确定的目标图像也是即时变化的,并且因为用户凝视的多为用户关注或喜好的内容,所以根据目标图像进行内容定制,便可以即时根据用户的喜好定制内容或更改所定制的内容。
附图说明
图1为一个实施例中内容定制方法的应用环境图;
图2为一个实施例中内容定制方法的流程示意图;
图3为一个实施例中步骤S20的细化步骤的流程示意图;
图4为一个实施例中步骤S22的细化步骤的流程示意图;
图5为一个实施例中步骤S22的另一细化步骤的流程示意图
图6为一个实施例中的场景图;
图7为一个实施例中内容定制装置的结构框图;
图8为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请提供的内容定制方法,可以应用于如图1所示的应用环境中。其中,图像采集装置10与车辆11通信连接。图像采集装置10获取用户的凝视方向上的角度信息以及外部图像,并将用户的凝视方向上的角度信息以及外部图像发送至车辆11。当车辆11接收到用户的凝视方向上的角度信息以及外部图像后,车辆11可以从外部图像中,确定与角度信息对应的目标图像,并根据目标图像进行内容定制。
在一个实施例中,如图2所示,提供了一种内容定制方法,以该方法应用于图1中的内容定制系统为例进行说明,包括以下步骤:
步骤S20,获取用户的凝视方向上的角度信息。
在本发明实施例中,车辆的内部安装有多个图像采集装置,图像采集装置可以捕获用户的面部图像,并根据面部图像确定用户的凝视方向上的角度信息。
其中,图像采集装置可以是摄像机等。
其中,角度信息可以表示3D角度。
步骤S21,获取车辆外部的外部图像。
在本发明实施例中,利用图像采集装置获取车辆外部的外部图像。
其中,外部图像是车辆的外面的完整图像,该完整图像包括前后左右等各个方位上的图像。
步骤S22,从所述外部图像中,确定与所述角度信息对应的目标图像。
在本发明实施例中,目标图像是外部图像中的一部分,是用户正在观看的图像部分。该目标图像是根据角度信息确定的,目标图像与角度信息具有对应关系。当角度信息发生变化的时候,确定的目标图像也随之变化。
步骤S23,根据所述目标图像进行内容定制。
在本发明实施例中,定制与目标图像相关联的内容。
上述内容定制方法,获取用户的凝视方向上的角度信息,获取车辆外部的外部图像,从外部图像中,确定与所述角度信息对应的目标图像,根据所述目标图像进行内容定制。其中,因为用户的凝视方向上的角度信息是即时变化的,则根据即时变化的角度信息确定的目标图像也是即时变化的,并且因为用户凝视的多为用户关注或喜好的内容,所以根据目标图像进行内容定制,便可以即时根据用户的喜好定制内容或更改所定制的内容。
在一个实施例中,如图3所示,为步骤S20的细化步骤的流程示意图,具体包括:
步骤S200,获取所述用户的面部图像。
在本发明实施例中,图像采集装置捕捉用户的图像,并对图像进行脸部侦测,以得到图像中的脸部区域。
步骤S201,根据所述面部图像确定所述用户的凝视方向。
在本发明实施例中,图像采集装置可以通过计算机视觉检测方法检测出用户的凝视方向。
其中,通过计算机视觉检测方法检测出用户的凝视方向属于现有技术,此处不再加以赘述。
步骤S202,输出所述凝视方向上的角度信息。
在本发明实施例中,图像采集装置确定用户的凝视方向后,将用户的凝视方向转换成角度信息,并输出转换后的角度信息。
其中,若图像采集装置具有计算机识别处理能力,则可以由图像采集装置对用户的面部图像进行分析,输出角度信息。若图像采集装置仅仅具有拍摄能力而不具备计算机识别处理能力,则可以将获取到的用户的面部图像发送至车辆,车辆中的处理器对用户的面部图像进行分析,输出角度信息。
在一个实施例中,如图4所示,为步骤S22的细化步骤的流程示意图,具体包括:
步骤S220,从所述外部图像中,提取与所述角度信息重叠的部分图像。
在本发明实施例中,图像采集装置获取到的外部图像也具有角度信息,车辆将用户的凝视方向上的角度信息与外部图像的各角度信息相匹配,从外部图像中的各角度信息中,确定出与用户的凝视方向上的角度信息匹配的目标角度信息,并将与目标角度信息对应的图像,作为与用户的凝视方向上的角度信息重叠的部分图像。
步骤S221,将所述重叠的部分图像,作为所述目标图像。
在本发明实施例中,该重叠的部分图像即为用户正在观看的图像部分。
在一个实施例中,如图5所示,为步骤S22的另一细化步骤的流程示意图,具体包括:
步骤S222,从所述外部图像中,提取与所述角度信息重叠的部分图像,并计算所述用户对重叠的部分图像凝视的凝视时长。
在本发明实施例中,从所述外部图像中,提取与所述角度信息重叠的部分图像的相关描述与上述步骤S220中描述的内容一致,此处不再加以赘述。
其中,在提取与所述角度信息重叠的部分图像的同时,车辆还会计算用户对重叠的部分图像的凝视时长。
步骤S223,若所述凝视时长大于预设阈值,则将重叠的部分图像作为所述目标图像。
在本发明实施例中,通过将凝视时长与预设阈值比较的方法,可以判断用户对观看的区域是否有兴趣。若凝视时长大于预设阈值,则表示用户对观看的区域有兴趣,将重叠的部分图像作为目标图像。若凝视时长小于预设阈值,则表示用户对观看的区域没兴趣,可能是视线扫过,则不将重叠的部分图像作为目标图像。
其中,预设阈值可以根据每个用户的实际情况进行设置,也可以根据当前车速进行设定,例如,若当前车速较快,则可以将预设阈值设置的小一点,因为车速较快,用户也没有办法对某一区域观看过长时间。若当前车速较慢,则可以将预设阈值设置的大一点。
在一个实施例中,上述步骤S23根据所述目标图像进行内容定制主要包括三种方法,具体的:
第一种:识别所述目标图像中的对象;计算属于同一类别的对象的出现的频率;根据每个类别中的对象的出现的频率,进行内容定制。
在本发明实施例中,对象就是客观世界中存在的人、事、物体等实体在计算机逻辑中的映射,该目标图像中的对象可以是车、人、树木、建筑物等。
在本发明实施例中,类别是预先设置好的,为了便于理解,对同一类别的对象举例说明,例如,预设设置所有的车都属于同一类别,则轿车、卡车等都属于同一类别。
在本发明实施例中,因为用户的凝视方向是变化的,所以用户的凝视方向上的角度信息也是即时变化的,根据角度信息确定的目标图像也是即时变化的,则目标图像中的对象也是变化的。车辆计算属于同一类别的对象的出现的频率,比较各个类别的频率,确定出频率最大的类别,并根据频率最大的类别中的对象,进行内容定制。其中,某一类别的频率最大,则表示用户对该类别观看的次数最大,用户对该类别的内容可能是最感兴趣的,所以根据频率最大的类别中的对象进行内容定制,会定制出用户感兴趣的内容。
第二种:将所述目标图像与在线图像相匹配;计算与所述目标图像匹配的在线图像的频率;根据与所述目标图像匹配的在线图像的频率,进行内容定制。
在本发明实施例中,在线图像是车载系统中存储于在线服务器上并且是潜在的待推荐的图像,例如,在线图像是根据历史信息等确定的用户可能感兴趣的待推荐的图像。
在本发明实施例中,因为用户的凝视方向是变化的,所以用户的凝视方向上的角度信息也是即时变化的,根据角度信息确定的目标图像也是即时变化的。其中,若获取到5张目标图像,则将5张目标图像均与在线图像匹配,从在线图像中,确定出与每张目标图像匹配的在线图像,并计算与每张目标图像匹配的在线图像的数量。车辆计算出与每张目标图像匹配的在线图像的数量后,比较频率的大小,确定出频率最大的在线图像,并根据频率最大的在线图像,进行内容定制。其中,因为在线图像是用户可能感兴趣的待推荐的图像,所以某匹配的在线图像的频率最大,表示用户对该类匹配的在线图像是最感兴趣的,所以根据频率最大的在线图像进行内容定制,会定制出用户感兴趣的内容。
其中,为了便于理解上述方法,此处举例说明。例如,获取到目标图像1、目标图像2、目标图像3、目标图像4和目标图像5,计算出与目标图像1匹配的在线图像的频率为10,与目标图像2匹配的在线图像的频率为4,与目标图像3匹配的在线图像的频率为20,与目标图像4匹配的在线图像的频率为3,与目标图像5匹配的在线图像的频率为12,因为与目标图像3匹配的在线图像的频率最大,表示与目标图像3匹配的在线图像可能是用户最感兴趣的待推荐的图像,所以可以根据频率最大的在线图像进行内容定制。具体的,定制的内容可以是在线图像中,与频率最大的在线图像相关联的在线图像,或者可以直接是频率最大的在线图像。
第三种:识别所述目标图像中的文本;计算属于同一类别的文本的出现的频率;根据每个类别中的文本的出现的频率,进行内容定制。
在本发明实施例中,类别是预先设置好的,例如,将旅游、旅行、游玩等设置为同一类别。
在本发明实施例中,因为用户的凝视方向是变化的,所以用户的凝视方向上的角度信息也是即时变化的,根据角度信息确定的目标图像也是即时变化的,则识别出的目标图像中的文本也是变化的。车辆计算属于同一类别的文本的出现的频率,比较各个类别的频率,确定出频率最大的类别,并根据频率最大的类别中的文本,进行内容定制。其中,某一类别的频率最大,则表示用户对该类别观看的次数最大,用户对该类别的内容可能是最感兴趣的,所以根据频率最大的类别中的文本进行内容定制,会定制出用户感兴趣的内容。
在一个实施例中,获取用户的凝视方向上的角度信息的同时,根据所述用户所处的座位确定用户标识;
所述方法还包括:
将与所述用户标识对应的定制内容,显示在与所述用户所处的座位对应的显示屏幕上。
可选的,车内设置至少一个显示屏幕,显示屏幕和车内的座位之间存在着对应关系。例如,每一个座位前面都有一个显示屏幕,每一个座位和其前面的显示屏幕相对应,或者,车内就一个显示屏幕,在车内的驾驶位和副驾驶位中间,该显示屏幕和所有座位都有对应关系,或者,车内的副驾驶座位前有一个显示屏幕,后排的每个座位前面都有两个显示屏幕,则车内的副驾驶座位和其前面的显示屏幕相对应,后排的每个座位和其前面的两个显示屏幕相对应,等等。其中,上述例子仅仅是示意性的,显示屏幕的个数和位置可以根据实际需求进行设置和修改,座位和显示屏幕的对应关系可以根据实际需求进行设置和修改。
在本发明实施例中,图像采集装置获取用户的凝视方向上的角度信息的同时,还会根据该用户所处的座位确定用户标识。其中,该用户标识是预先设置的,和座位存在着一一对应关系。其中,因为在获取用户的凝视方向上的角度信息的同时,还会根据该用户所处的座位确定用户标识,则根据每个用户的凝视方向上的角度信息,可以确定出属于该用户的目标图像,并根据该用户的目标图像定制出属于该用户的内容,之后,车辆可以将属于该用户的内容,显示在该用户所处的座位对应的显示屏幕上。
为了便于理解,此处举例说明,如图6所示,假设每一个座位前面都有一个显示屏幕,根据座位预先设置用户标识为A、B、C和D,其中,若用户标识A和用户标识D对应的座位有用户坐着,图像采集装置获取用户标识A对应的座位上的用户的凝视方向上的角度信息的同时,还会根据该用户所处的座位确定用户标识为A,图像采集装置获取用户标识D对应的座位上的用户的凝视方向上的角度信息的同时,会根据该用户所处的座位确定用户标识为D,之后,车辆分别定制出与用户标识A对应的内容,和与用户标识D对应的内容,因为用户标识和座位存在着一一对应关系,则车辆将与用户标识A对应的内容显示在与用户标识A对应的座位的显示屏幕上,将用户标识D对应的内容显示在与用户标识D对应的座位的显示屏幕上。通过上述方法,可以对车辆内的各个用户定制各自感兴趣的内容,并显示在每个用户的座位对应的显示屏幕上,使得每个用户观看到各自感兴趣的内容。
在一个实施例中,获取用户的凝视方向上的角度信息的同时,根据所述用户所处的座位确定用户标识;
所述方法还包括:接收至少一个用户对用户标识的选择操作,使得所述用户标识和所述用户的终端存在对应关系;
根据对应关系,将与所述用户标识对应的定制内容,推送到与所述用户标识对应的用户的终端上。
在本发明实施例中,如图6所示,根据座位预先设置用户标识为A、B、C和D,其中,若用户标识A和用户标识D对应的座位有用户坐着,图像采集装置获取用户标识A对应的座位上的用户的凝视方向上的角度信息的同时,还会根据该用户所处的座位确定用户标识为A,图像采集装置获取用户标识D对应的座位上的用户的凝视方向上的角度信息的同时,会根据该用户所处的座位确定用户标识为D,之后,车辆分别定制出与用户标识A对应的内容,和与用户标识D对应的内容。其中,两个用户坐在对应的位置上的时候,都会用各自的终端对用户标识进行选择,例如,用户标识A对应的座位的用户会对用户标识A进行选择,用户标识D对应的座位的用户会对用户标识D进行选择,则用户标识和终端存在对应关系,假设用户标识A对应的座位的用户的终端为01,用户标识B对应的座位的用户的终端为02,则用户标识A与终端01存在对应关系,用户标识B与终端02存在对应关系。根据对应关系,车辆将与用户标识A对应的定制内容,推送到与所述用户标识对应的用户的终端01上,车辆将与用户标识B对应的定制内容,推送到与所述用户标识对应的用户的终端02上。
应该理解的是,虽然图2-5的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2-5中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图7所示,提供了一种内容定制装置,包括:角度信息获取模块700、外部图像获取模块701、目标图像确定模块702和内容定制模块703,其中:
角度信息获取模块700,用于获取用户的凝视方向上的角度信息;
外部图像获取模块701,用于获取车辆外部的外部图像;
目标图像确定模块702,用于从所述外部图像中,确定与所述角度信息对应的目标图像;
内容定制模块703,用于根据所述目标图像进行内容定制。
在一个实施例中,所述角度信息获取模块700用于:
获取所述用户的面部图像;
根据所述面部图像确定所述用户的凝视方向;
输出所述凝视方向上的角度信息。
在一个实施例中,所述目标图像确定模块702用于:
从所述外部图像中,提取与所述角度信息重叠的部分图像;
将所述重叠的部分图像,作为所述目标图像。
在一个实施例中,所述目标图像确定模块702用于:
从所述外部图像中,提取与所述角度信息重叠的部分图像,并计算所述用户对重叠的部分图像凝视的凝视时长;
若所述凝视时长大于预设阈值,则将重叠的部分图像作为所述目标图像。
在一个实施例中,所述内容定制模块703用于:
识别所述目标图像中的对象;
计算属于同一类别的对象的出现的频率;
根据每个类别中的对象的出现的频率,进行内容定制。
在一个实施例中,所述内容定制模块703用于:
确定频率最大的对象所属的类别;
根据所述频率最大的类别中的对象,进行内容定制。
在一个实施例中,所述内容定制模块703用于:
将所述目标图像与在线图像相匹配;
计算与所述目标图像匹配的在线图像的频率;
根据与所述目标图像匹配的在线图像的频率,进行内容定制。
在一个实施例中,所述内容定制模块703用于:
确定频率最大的在线图像;
根据所述频率最大的在线图像,进行内容定制。
在一个实施例中,所述内容定制模块703用于:
识别所述目标图像中的文本;
计算属于同一类别的文本的出现的频率;
根据每个类别中的文本的出现的频率,进行内容定制。
在一个实施例中,所述内容定制模块703用于:
确定频率最大的文本所属的类别;
根据所述频率最大的类别中的文本,进行内容定制。
在一个实施例中,所述角度信息获取模块在获取用户的凝视方向上的角度信息的同时,根据所述用户所处的座位确定用户标识;所述内容定制模块还用于将与所述用户标识对应的定制内容,显示在与所述用户所处的座位对应的显示屏幕上。
在一个实施例中,所述角度信息获取模块在获取用户的凝视方向上的角度信息的同时,根据所述用户所处的座位确定用户标识;所述装置还包括:接收模块,用于接收至少一个用户对用户标识的选择操作,使得所述用户标识和所述用户的终端存在对应关系;推送模块,用于根据对应关系,将与所述用户标识对应的定制内容,推送到与所述用户标识对应的用户的终端上。
关于内容定制装置的具体限定可以参见上文中对于内容定制方法的限定,在此不再赘述。上述内容定制装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图8所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口和数据库。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储角度信息、目标图像、外部图像等数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种内容定制方法。
本领域技术人员可以理解,图8中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行计算机程序时实现上述任意一个实施例中的方法的步骤。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现上述任意一个实施例中的方法的步骤。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。

Claims (20)

1.一种内容定制方法,其特征在于,所述方法包括:
获取用户的凝视方向上的角度信息;
获取车辆外部的外部图像;
从所述外部图像中,确定与所述角度信息对应的目标图像;
根据所述目标图像进行内容定制。
2.根据权利要求1所述的方法,其特征在于,所述获取用户的凝视方向上的角度信息,包括:
获取所述用户的面部图像;
根据所述面部图像确定所述用户的凝视方向;
输出所述凝视方向上的角度信息。
3.根据权利要求1所述的方法,其特征在于,所述从所述外部图像中,确定与所述角度信息对应的目标图像,包括:
从所述外部图像中,提取与所述角度信息重叠的部分图像;
将所述重叠的部分图像,作为所述目标图像。
4.根据权利要求1所述的方法,其特征在于,所述从所述外部图像中,确定与所述角度信息对应的目标图像,包括:
从所述外部图像中,提取与所述角度信息重叠的部分图像,并计算所述用户对重叠的部分图像凝视的凝视时长;
若所述凝视时长大于预设阈值,则将重叠的部分图像作为所述目标图像。
5.根据权利要求1所述的方法,其特征在于,所述根据所述目标图像进行内容定制,包括:
识别所述目标图像中的对象;
计算属于同一类别的对象的出现的频率;
根据每个类别中的对象的出现的频率,进行内容定制。
6.根据权利要求5所述的方法,其特征在于,所述根据每个类别中的对象的出现的频率,进行内容定制,包括:
确定频率最大的对象所属的类别;
根据所述频率最大的类别中的对象,进行内容定制。
7.根据权利要求1所述的方法,其特征在于,所述根据所述目标图像进行内容定制,包括:
将所述目标图像与在线图像相匹配;
计算与所述目标图像匹配的在线图像的频率;
根据与所述目标图像匹配的在线图像的频率,进行内容定制。
8.根据权利要求7所述的方法,其特征在于,所述根据与所述目标图像匹配的在线图像的频率,进行内容定制,包括:
确定频率最大的在线图像;
根据所述频率最大的在线图像,进行内容定制。
9.根据权利要求1所述的方法,其特征在于,所述根据所述目标图像进行内容定制,包括:
识别所述目标图像中的文本;
计算属于同一类别的文本的出现的频率;
根据每个类别中的文本的出现的频率,进行内容定制。
10.根据权利要求9所述的方法,其特征在于,所述根据每个类别中的文本的出现的频率,进行内容定制,包括:
确定频率最大的文本所属的类别;
根据所述频率最大的类别中的文本,进行内容定制。
11.根据权利要求1所述的方法,其特征在于,获取用户的凝视方向上的角度信息的同时,根据所述用户所处的座位确定用户标识;
所述方法还包括:
将与所述用户标识对应的定制内容,显示在与所述用户所处的座位对应的显示屏幕上。
12.根据权利要求1所述的方法,其特征在于,获取用户的凝视方向上的角度信息的同时,根据所述用户所处的座位确定用户标识;
所述方法还包括:
接收至少一个用户对用户标识的选择操作,使得所述用户标识和所述用户的终端存在对应关系;
根据对应关系,将与所述用户标识对应的定制内容,推送到与所述用户标识对应的用户的终端上。
13.一种内容定制装置,其特征在于,所述装置包括:
角度信息获取模块,用于获取用户的凝视方向上的角度信息;
外部图像获取模块,用于获取车辆外部的外部图像;
目标图像确定模块,用于从所述外部图像中,确定与所述角度信息对应的目标图像;
内容定制模块,用于根据所述目标图像进行内容定制。
14.根据权利要求13所述的装置,其特征在于,
所述角度信息获取模块用于:
获取所述用户的面部图像;
根据所述面部图像确定所述用户的凝视方向;
输出所述凝视方向上的角度信息;
进一步可选的,
所述目标图像确定模块用于:
从所述外部图像中,提取与所述角度信息重叠的部分图像;
将所述重叠的部分图像,作为所述目标图像;
进一步可选的,
所述目标图像确定模块用于:
从所述外部图像中,提取与所述角度信息重叠的部分图像,并计算所述用户对重叠的部分图像凝视的凝视时长;
若所述凝视时长大于预设阈值,则将重叠的部分图像作为所述目标图像。
15.根据权利要求13所述的装置,其特征在于,
所述内容定制模块用于:
识别所述目标图像中的对象;
计算属于同一类别的对象的出现的频率;
根据每个类别中的对象的出现的频率,进行内容定制;
进一步可选的,
所述内容定制模块还用于:
确定频率最大的对象所属的类别;
根据所述频率最大的类别中的对象,进行内容定制。
16.根据权利要求13所述的装置,其特征在于,
所述内容定制模块用于:
将所述目标图像与在线图像相匹配;
计算与所述目标图像匹配的在线图像的频率;
根据与所述目标图像匹配的在线图像的频率,进行内容定制;
进一步可选的,
所述内容定制模块还用于:
确定频率最大的在线图像;
根据所述频率最大的在线图像,进行内容定制。
17.根据权利要求13所述的装置,其特征在于,
所述内容定制模块用于:
识别所述目标图像中的文本;
计算属于同一类别的文本的出现的频率;
根据每个类别中的文本的出现的频率,进行内容定制;
进一步可选的,
所述内容定制模块还用于:
确定频率最大的文本所属的类别;
根据所述频率最大的类别中的文本,进行内容定制。
18.根据权利要求13所述的装置,其特征在于,获取用户的凝视方向上的角度信息的同时,根据所述用户所处的座位确定用户标识;
所述装置还包括:
显示模块,用于将与所述用户标识对应的定制内容,显示在与所述用户所处的座位对应的显示屏幕上;
进一步可选的,
获取用户的凝视方向上的角度信息的同时,根据所述用户所处的座位确定用户标识;
所述装置还包括:
接收模块,用于接收至少一个用户对用户标识的选择操作,使得所述用户标识和所述用户的终端存在对应关系;
推送模块,用于根据对应关系,将与所述用户标识对应的定制内容,推送到与所述用户标识对应的用户的终端上。
19.一种计算机设备,包括存储器及处理器,所述存储器上存储有可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至12中任一项所述方法的步骤。
20.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至12中任一项所述的方法的步骤。
CN202010919636.1A 2020-09-04 2020-09-04 内容定制方法、装置、计算机设备和存储介质 Pending CN114222189A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010919636.1A CN114222189A (zh) 2020-09-04 2020-09-04 内容定制方法、装置、计算机设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010919636.1A CN114222189A (zh) 2020-09-04 2020-09-04 内容定制方法、装置、计算机设备和存储介质

Publications (1)

Publication Number Publication Date
CN114222189A true CN114222189A (zh) 2022-03-22

Family

ID=80695596

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010919636.1A Pending CN114222189A (zh) 2020-09-04 2020-09-04 内容定制方法、装置、计算机设备和存储介质

Country Status (1)

Country Link
CN (1) CN114222189A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024098667A1 (zh) * 2022-11-08 2024-05-16 中国第一汽车股份有限公司 一种基于地理位置信息进行智能推荐的方法及装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150006278A1 (en) * 2013-06-28 2015-01-01 Harman International Industries, Inc. Apparatus and method for detecting a driver's interest in an advertisement by tracking driver eye gaze
CN109849788A (zh) * 2018-12-29 2019-06-07 北京七鑫易维信息技术有限公司 信息提供方法、装置及系统
CN110019893A (zh) * 2018-08-28 2019-07-16 京东方科技集团股份有限公司 一种画作获取方法及装置
CN111263133A (zh) * 2020-02-26 2020-06-09 中国联合网络通信集团有限公司 信息处理方法及系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150006278A1 (en) * 2013-06-28 2015-01-01 Harman International Industries, Inc. Apparatus and method for detecting a driver's interest in an advertisement by tracking driver eye gaze
CN110019893A (zh) * 2018-08-28 2019-07-16 京东方科技集团股份有限公司 一种画作获取方法及装置
CN109849788A (zh) * 2018-12-29 2019-06-07 北京七鑫易维信息技术有限公司 信息提供方法、装置及系统
CN111263133A (zh) * 2020-02-26 2020-06-09 中国联合网络通信集团有限公司 信息处理方法及系统

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024098667A1 (zh) * 2022-11-08 2024-05-16 中国第一汽车股份有限公司 一种基于地理位置信息进行智能推荐的方法及装置

Similar Documents

Publication Publication Date Title
US9501693B2 (en) Real-time multiclass driver action recognition using random forests
CN108725357B (zh) 基于人脸识别的参数控制方法、系统与云端服务器
CN111274881A (zh) 驾驶安全的监控方法、装置、计算机设备及存储介质
US10235768B2 (en) Image processing device, in-vehicle display system, display device, image processing method, and computer readable medium
US20200334467A1 (en) Vehicle damage assessment method, apparatus, and device
CN112959945B (zh) 车窗控制方法、装置、车辆及存储介质
CN112947740A (zh) 基于动作分析的人机交互方法、车载装置
CN114222189A (zh) 内容定制方法、装置、计算机设备和存储介质
JP7196683B2 (ja) 情報処理システム、プログラム、及び制御方法
CN114125415A (zh) 通过增强现实呈现车辆异常部件的系统、方法和存储介质
CN113901871A (zh) 一种驾驶员危险动作识别方法、装置以及设备
CN112685125A (zh) 应用程序的主题切换方法、装置及计算机可读存储介质
CN112146666A (zh) 车辆行驶路线标记方法、装置、计算机设备和存储介质
CN115171243A (zh) 一种车辆驾驶行为的分析管理、装置、终端和存储介质
CN112700658B (zh) 用于车辆的图像分享的系统及相应的方法和存储介质
CN114150963A (zh) 前后联动自动门控制方法、装置、车辆及存储介质
CN112199987A (zh) 单一区域内多算法组合配置策略方法、图像处理装置及电子设备
CN112506353A (zh) 车辆交互系统、方法、存储介质和车辆
CN115512337A (zh) 疲劳驾驶检测方法、装置、设备及存储介质
CN113127710A (zh) 信息呈现方法、装置、服务器及介质
CN110659384B (zh) 视频结构化分析方法及装置
CN112488096A (zh) 行车过程中文本信息的获取方法及装置、计算机设备
US20230274586A1 (en) On-vehicle device, management system, and upload method
CN112596602A (zh) 用于调整显示屏上的信息显示的装置及相应的方法和介质
CN111754390A (zh) 环视图显示方法、装置、计算机设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20220322

WD01 Invention patent application deemed withdrawn after publication