CN111652678A - 物品信息显示方法、装置、终端、服务器及可读存储介质 - Google Patents
物品信息显示方法、装置、终端、服务器及可读存储介质 Download PDFInfo
- Publication number
- CN111652678A CN111652678A CN202010460986.6A CN202010460986A CN111652678A CN 111652678 A CN111652678 A CN 111652678A CN 202010460986 A CN202010460986 A CN 202010460986A CN 111652678 A CN111652678 A CN 111652678A
- Authority
- CN
- China
- Prior art keywords
- item
- article
- image
- information
- link
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 85
- 230000015654 memory Effects 0.000 claims description 19
- 230000004044 response Effects 0.000 claims description 10
- 230000001976 improved effect Effects 0.000 abstract description 24
- 238000012545 processing Methods 0.000 abstract description 22
- 230000003993 interaction Effects 0.000 abstract description 14
- 238000013473 artificial intelligence Methods 0.000 description 25
- 238000005516 engineering process Methods 0.000 description 20
- 230000008569 process Effects 0.000 description 20
- 230000006870 function Effects 0.000 description 18
- 238000010586 diagram Methods 0.000 description 11
- 230000002093 peripheral effect Effects 0.000 description 10
- 230000001133 acceleration Effects 0.000 description 9
- 238000004891 communication Methods 0.000 description 9
- 241000282414 Homo sapiens Species 0.000 description 7
- 230000014509 gene expression Effects 0.000 description 7
- 238000007781 pre-processing Methods 0.000 description 7
- 238000013527 convolutional neural network Methods 0.000 description 6
- 238000010801 machine learning Methods 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 6
- 238000012549 training Methods 0.000 description 6
- 238000011160 research Methods 0.000 description 4
- 241000282454 Ursus arctos Species 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 238000000605 extraction Methods 0.000 description 3
- 238000005070 sampling Methods 0.000 description 3
- 230000006399 behavior Effects 0.000 description 2
- 239000000919 ceramic Substances 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 238000012790 confirmation Methods 0.000 description 2
- 238000013135 deep learning Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000009499 grossing Methods 0.000 description 2
- 238000012015 optical character recognition Methods 0.000 description 2
- 230000001131 transforming effect Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 238000011478 gradient descent method Methods 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 230000003340 mental effect Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003058 natural language processing Methods 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000002787 reinforcement Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000006641 stabilisation Effects 0.000 description 1
- 238000011105 stabilization Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000013526 transfer learning Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/06—Buying, selling or leasing transactions
- G06Q30/0601—Electronic shopping [e-shopping]
- G06Q30/0641—Shopping interfaces
- G06Q30/0643—Graphical representation of items or shoppers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/62—Text, e.g. of license plates, overlay texts or captions on TV images
- G06V20/635—Overlay text, e.g. embedded captions in a TV program
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/06—Buying, selling or leasing transactions
- G06Q30/0601—Electronic shopping [e-shopping]
- G06Q30/0631—Item recommendations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/764—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/2187—Live feed
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
- H04N21/26603—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel for automatically generating descriptors from content, e.g. when it is not made available by its provider, using content analysis techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/27—Server based end-user applications
- H04N21/274—Storing end-user multimedia data in response to end-user request, e.g. network recorder
- H04N21/2743—Video hosting of uploaded data from client
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
- H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
- H04N21/4725—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content using interactive regions of the image, e.g. hot spots
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/47815—Electronic shopping
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/654—Transmission by server directed to the client
- H04N21/6547—Transmission by server directed to the client comprising parameters, e.g. for client setup
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
- H04N21/8583—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by creating hot-spots
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- Databases & Information Systems (AREA)
- Finance (AREA)
- Accounting & Taxation (AREA)
- Marketing (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Development Economics (AREA)
- Economics (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Medical Informatics (AREA)
- Software Systems (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- Computing Systems (AREA)
- Computer Vision & Pattern Recognition (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请提供了一种物品信息显示方法、装置、终端、服务器及可读存储介质,属于计算机技术领域。该方法包括:响应于对直播界面中所显示的物品进行识别的物品识别指令,获取直播界面的画面图像,基于画面图像,获取用于指示画面图像中物品的位置和物品关键字的至少一个物品信息,在直播界面中物品的对应位置上,基于至少一个物品信息所指示的物品关键字,分别显示对应的物品标签,通过对物品关键字进行处理得到物品标签,以便通过物品标签来向用户展示直播间中所包括的物品的物品信息,使得用户可以直接了解到这些物品的信息,提高直播间的信息交互效率,进而提高用户体验。
Description
技术领域
本申请涉及计算机技术领域,特别涉及一种物品信息显示方法、装置、终端、服务器及可读存储介质。
背景技术
随着直播行业的蓬勃发展,直播行业在电子商务领域得到了较为广泛的应用。主播可以在开始直播前,将要出售的商品的商品链接添加到直播间,以便在直播界面中对该商品链接进行显示。在直播过程中,主播可以对要出售的商品进行介绍,该直播界面中显示有该商品的商品链接,观看直播的用户可以在想要购买该商品时,点击直播界面中的商品链接,来触发商品购买请求,终端可以响应于该商品购买请求,执行相应的购买流程。
在上述实现过程中,主播进行直播时,直播间里除了要出售商品外,还会有其他的东西展示在直播间里,观看直播的用户有时候会关注到这些东西,并且很想了解到这些东西的信息,但这些东西的信息只能通过询问主播来获取,而无法直接获取,导致信息交互效率较低,用户体验较差。
发明内容
本申请实施例提供了一种物品信息显示方法、装置、终端、服务器及可读存储介质,可以提高直播间的信息交互效率,进而提高用户体验。该技术方案如下:
一方面,提供了一种物品信息显示方法,该方法包括:
响应于物品识别指令,获取直播界面的画面图像,该物品识别指令用于对该直播界面中所显示的物品进行识别;
基于该画面图像,获取至少一个物品信息,该物品信息用于指示该画面图像中物品的位置和物品关键字;
在该直播界面中物品的对应位置上,基于该至少一个物品信息所指示的物品关键字,分别显示对应的物品标签,该物品标签用于在检测到触发操作时展示对应物品的物品链接。
一方面,提供了一种物品信息显示方法,该方法包括:
接收终端的物品识别请求,该物品识别请求携带直播界面的画面图像;
对该画面图像进行识别,得到该画面图像中的至少一个物品信息,该物品信息用于指示该画面图像中物品的位置和物品关键字;
将该至少一个物品信息发送给该终端。
在一种可能的实现方式中,该基于该至少一个物品图像对应的第一物品关键字和该至少一个物品图像对应的第二物品关键字,确定该画面图像中至少一个物品的物品关键字包括:
在至少一个第二物品关键字中,确定与至少一个第一物品关键字的相似度满足预设条件的目标第二物品关键字,将该目标第二物品关键字作为该画面图像中至少一个物品的物品关键字。
在一种可能的实现方式中,该确定该至少一个第一物品链接和该至少一个第二物品链接中的至少一个重合物品链接,作为该物品链接获取请求对应的至少一个物品链接之后,该方法还包括:
按照该至少一个物品链接对应的推荐指数从大到小的顺序,对该至少一个物品链接进行排序;
获取排序位于目标位置之前的至少一个物品链接。
在一种可能的实现方式中,该推荐指数包括价格推荐指数、销量推荐指数、好评推荐指数和物流推荐指数中至少一项。
在一种可能的实现方式中,该对该画面图像进行识别,得到该画面图像中的至少一个物品信息之后,该方法还包括:
获取该直播界面对应的直播间的直播物品信息;
从识别得到的至少一个物品信息中删除该直播物品信息,得到该画面图像中的至少一个物品信息。
一方面,提供了一种物品信息显示装置,该装置包括:
图像获取模块,用于响应于物品识别指令,获取直播界面的画面图像,该物品识别指令用于对该直播界面中所显示的物品进行识别;
信息获取模块,用于基于该画面图像,获取至少一个物品信息,该物品信息用于指示该画面图像中物品的位置和物品关键字;
第一显示模块,用于在该直播界面中物品的对应位置上,基于该至少一个物品信息所指示的物品关键字,分别显示对应的物品标签,该物品标签用于在检测到触发操作时展示对应物品的物品链接。
在一种可能的实现方式中,该信息获取模块用于下述任一项:
向服务器发送物品识别请求,该物品识别请求携带该画面图像,接收该服务器基于该画面图像返回的至少一个物品信息;
对该画面图像进行图像识别,得到该至少一个物品信息。
在一种可能的实现方式中,该装置还包括:
发送模块,用于响应于对该至少一个物品标签中目标物品标签的查看指令,向服务器发送物品链接获取请求;
接收模块,用于接收该服务器返回的该目标物品标签对应的至少一个物品链接;
第二显示模块,用于对该至少一个物品链接进行显示。
在一种可能的实现方式中,该第二显示模块,用于在该直播界面中显示物品链接展示区域,该物品链接展示区域部分覆盖该直播界面的画面图像,在该物品链接展示区域中,显示至少一个物品条目,一个物品条目对应于一个物品链接。
在一种可能的实现方式中,该装置还包括:
确定模块,用于确定该画面图像中的人脸区域;
第三显示模块,用于响应于对该至少一个物品标签中目标物品标签的查看指令,在该直播界面中该人脸区域以外的区域,对该目标物品标签对应的至少一个物品链接进行显示。
在一种可能的实现方式中,该装置还包括:
第四显示模块,用于显示该直播界面,该直播界面中包括物品识别按钮;
生成模块,用于响应于检测到对该物品识别按钮的触发操作,生成该物品识别指令。
一方面,提供了一种物品信息显示装置,该装置包括:
第一接收模块,用于接收终端的物品识别请求,该物品识别请求携带直播界面的画面图像;
识别模块,用于对该画面图像进行识别,得到该画面图像中的至少一个物品信息,该物品信息用于指示该画面图像中物品的位置和物品关键字;
第一发送模块,用于将该至少一个物品信息发送给该终端。
在一种可能的实现方式中,该装置还包括:
第二接收模块,用于接收该终端发送的物品链接获取请求,该物品链接获取请求携带物品关键字;
第一链接获取模块,用于根据该物品关键字,获取至少一个物品链接;
第二发送模块,用于将该至少一个物品链接发送给该终端。
在一种可能的实现方式中,该识别模块包括第一识别单元、获取单元、第二识别单元和确定单元;
该第一识别单元,用于将该画面图像输入第一图像识别模型,通过该第一图像识别模型对该画面图像进行识别,得到该画面图像中至少一个物品的物品位置和对应的第一物品关键字;
该获取单元,用于根据该画面图像中至少一个物品的物品位置,从该画面图像中获取至少一个物品图像;
该第二识别单元包括第二识别子单元和确认子单元;
该第二识别子单元,用于将该至少一个物品图像和对应的第一物品关键字输入第二图像识别模型,通过该第二图像识别模型对该至少一个物品图像进行识别,得到该至少一个物品图像对应的第二物品关键字;
该确定子单元,用于基于该至少一个物品图像对应的第一物品关键字和该至少一个物品图像对应的第二物品关键字,确定该画面图像中至少一个物品的物品关键字;
该确定单元,用于结合该至少一个物品的物品关键字和该至少一个物品的物品位置,确定该画面图像中的至少一个物品信息。
在一种可能的实现方式中,该确定子单元,用于在至少一个第二物品关键字中,确定与至少一个第一物品关键字的相似度满足预设条件的目标第二物品关键字,将该目标第二物品关键字作为该画面图像中至少一个物品的物品关键字。
在一种可能的实现方式中,该装置还包括:
第三接收模块,用于接收该终端发送的物品链接获取请求,该物品链接获取请求携带物品关键字;
图像获取模块,用于根据该物品关键字,获取该物品关键字对应的物品图像;
第二链接获取模块,用于分别根据该物品关键字和该物品图像,获取至少一个第一物品链接和至少一个第二物品链接;
确定模块,用于确定该至少一个第一物品链接和该至少一个第二物品链接中的至少一个重合物品链接,作为该物品链接获取请求对应的至少一个物品链接;
第三发送模块,用于将该至少一个物品链接发送给该终端。
在一种可能的实现方式中,该装置还包括:
排序模块,用于按照该至少一个物品链接对应的推荐指数从大到小的顺序,对该至少一个物品链接进行排序;
第三链接获取模块,用于获取排序位于目标位置之前的至少一个物品链接。
在一种可能的实现方式中,该推荐指数包括价格推荐指数、销量推荐指数、好评推荐指数和物流推荐指数中至少一项。
在一种可能的实现方式中,该装置还包括:
信息获取模块,用于获取该直播界面对应的直播间的直播物品信息;
删除模块,用于从识别得到的至少一个物品信息中删除该直播物品信息,得到该画面图像中的至少一个物品信息。
一方面,提供了一种终端,该终端包括一个或多个处理器和一个或多个存储器,该一个或多个存储器中存储有至少一条程序代码,该程序代码由该一个或多个处理器加载并执行以实现该物品信息显示方法所执行的操作。
一方面,提供了一种服务器,该服务器包括一个或多个处理器和一个或多个存储器,该一个或多个存储器中存储有至少一条程序代码,该程序代码由该一个或多个处理器加载并执行以实现该物品信息显示方法所执行的操作。
一方面,提供了一种计算机可读存储介质,该计算机可读存储介质中存储有至少一条程序代码,该程序代码由处理器加载并执行以实现该物品信息显示方法所执行的操作。
一方面,提供了一种应用程序产品,该应用程序产品存储有至少一条程序代码,该至少一条程序代码由终端的处理器加载并执行,以实现上述物品信息显示方法所执行的操作。
通过响应于对直播界面中所显示的物品进行识别的物品识别指令,获取直播界面的画面图像,基于画面图像,获取用于指示画面图像中物品的位置和物品关键字的至少一个物品信息,在直播界面中物品的对应位置上,基于至少一个物品信息所指示的物品关键字,分别显示对应的用于在检测到触发操作时展示对应物品的物品链接的物品标签,通过对物品关键字进行处理得到物品标签,以便通过物品标签来向用户展示直播间所包括的物品的物品信息,使得用户可以直接了解到这些物品的信息,提高直播间的信息交互效率,进而提高用户体验。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种物品信息显示方法的实施环境示意图;
图2是本申请实施例提供的一种物品信息显示方法的流程图;
图3是本申请实施例提供的一种物品信息显示方法的流程图;
图4是本申请实施例提供的一种物品信息显示方法的流程图;
图5是本申请实施例提供的一种直播界面的示意图;
图6是本申请实施例提供的一种直播界面的示意图;
图7是本申请实施例提供的一种物品标签显示界面的示意图;
图8是本申请实施例提供的一种物品链接展示界面的示意图;
图9是本申请实施例提供的一种物品信息显示方法的流程图;
图10是本申请实施例提供的一种物品信息显示装置的结构图;
图11是本申请实施例提供的一种物品信息显示装置的结构图;
图12是本申请实施例提供的一种终端的结构示意图;
图13是本申请实施例提供的一种服务器的结构示意图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施方式作进一步地详细描述。
人工智能(Artificial Intelligence,AI)是利用数字计算机或者数字计算机控制的机器模拟、延伸和扩展人的智能,感知环境、获取知识并使用知识获得最佳结果的理论、方法、技术及应用系统。换句话说,人工智能是计算机科学的一个综合技术,它企图了解智能的实质,并生产出一种新的能以人类智能相似的方式做出反应的智能机器。人工智能也就是研究各种智能机器的设计原理与实现方法,使机器具有感知、推理与决策的功能。
人工智能技术是一门综合学科,涉及领域广泛,既有硬件层面的技术也有软件层面的技术。人工智能基础技术一般包括如传感器、专用人工智能芯片、云计算、分布式存储、大数据处理技术、操作/交互系统、机电一体化等技术。人工智能软件技术主要包括计算机视觉技术、语音处理技术、自然语言处理技术以及机器学习/深度学习等几大方向。
机器学习(Machine Learning,ML)是一门多领域交叉学科,涉及概率论、统计学、逼近论、凸分析、算法复杂度理论等多门学科。专门研究计算机怎样模拟或实现人类的学习行为,以获取新的知识或技能,重新组织已有的知识结构使之不断改善自身的性能。机器学习是人工智能的核心,是使计算机具有智能的根本途径,其应用遍及人工智能的各个领域。机器学习和深度学习通常包括人工神经网络、置信网络、强化学习、迁移学习、归纳学习、示教学习等技术。
计算机视觉技术(Computer Vision,CV)计算机视觉是一门研究如何使机器“看”的科学,更进一步的说,就是指用摄影机和电脑代替人眼对目标进行识别、跟踪和测量等机器视觉,并进一步做图形处理,使电脑处理成为更适合人眼观察或传送给仪器检测的图像。作为一个科学学科,计算机视觉研究相关的理论和技术,试图建立能够从图像或者多维数据中获取信息的人工智能系统。计算机视觉技术通常包括图像处理、图像识别、图像语义理解、图像检索、光学字符识别(Optical Character Recognition,OCR)、视频处理、视频语义理解、视频内容/行为识别、三维物体重建、三维(Three-Dimensional,3D)技术、虚拟现实、增强现实、同步定位与地图构建等技术,还包括常见的人脸识别、指纹识别等生物特征识别技术。
所谓人工智能云服务,一般也被称作是人工智能即服务(ArtificialIntelligence as a Service,AIaaS)。这是目前主流的一种人工智能平台的服务方式,具体来说AIaaS平台会把几类常见的人工智能(Artificial Intelligence,AI)服务进行拆分,并在云端提供独立或者打包的服务。这种服务模式类似于开了一个AI主题商城:所有的开发者都可以通过应用程序编程接口(Application Programming Interface,API)的方式来接入使用平台提供的一种或者是多种人工智能服务,部分资深的开发者还可以使用平台提供的AI框架和AI基础设施来部署和运维自已专属的云人工智能服务。
随着人工智能技术研究和进步,人工智能技术在多个领域展开研究和应用,例如常见的智能家居、智能穿戴设备、虚拟助理、智能音箱、智能营销、无人驾驶、自动驾驶、无人机、机器人、智能医疗、智能客服等,相信随着技术的发展,人工智能技术将在更多的领域得到应用,并发挥越来越重要的价值。
本申请实施例提供的方案涉及人工智能服务的图像处理,例如,人工智能云服务的图像处理等技术,具体通过如下实施例进行说明:
图1是本申请实施例提供的一种物品信息显示方法的实施环境示意图,参见图1,该实施环境包括:终端101和服务器102。
终端101可以是智能手机、平板电脑、笔记本电脑、台式计算机、智能音箱、智能手表等,但并不局限于此。终端101上可以安装并运行有直播类应用程序,终端101可以对直播界面进行显示,以便用户通过终端101来观看直播。用户可以通过在终端101的可视化界面上触发观看直播按钮,终端响应于该触发操作,可以生成直播数据获取指令,来获取直播数据。终端101以及服务器102可以通过有线或无线通信方式进行直接或间接地连接,本申请在此不做限制。终端101可以将该直播数据获取指令发送给服务器102,并接收服务器102返回的直播数据,进而对接收到的直播数据进行解码,得到音频帧和视频帧,并基于解码得到的音频帧和视频帧进行直播。
终端101可以泛指多个终端中的一个,本实施例以终端101来举例说明。本领域技术人员可以知晓,上述终端的数量可以更多或更少。比如上述终端可以仅为一个,或者上述终端为几十个或几百个,或者更多数量,本申请实施例对终端的数量和设备类型不加以限定。
服务器102可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、内容分发网络(Content Delivery Network,CDN)、以及大数据和人工智能平台等基础云计算服务的云服务器。服务器102以及终端101可以通过有线或无线通信方式进行直接或间接地连接,本申请在此不做限制。服务器102可以接收各个终端发送的直播数据获取请求,并基于主播终端上传的音频帧和视频帧进行编码,得到直播数据,进而将该直播数据分发给各个终端,以便各个终端基于接收到的直播数据进行直播。可选地,上述服务器的数量可以更多或更少,本申请实施例对此不加以限定。当然,服务器102还可以包括其他功能服务器,以便提供更全面且多样化的服务。
图2是本申请实施例提供的一种物品信息显示方法的流程图,参见图2,应用于终端,该方法包括:
201、响应于物品识别指令,获取直播界面的画面图像,该物品识别指令用于对该直播界面中所显示的物品进行识别。
需要说明的是,终端在对直播界面的画面图像进行获取时,可以基于该物品识别指令,对当前显示的直播界面进行截屏,得到直播画面的画面图像。可选地,终端可以基于直播过程中各个画面图像对应的播放时间,对多个画面图像进行缓存,进而可以响应于物品识别指令,基于该物品识别指令的接收时间,从缓存中获取播放时间与物品识别指令的接收时间对应的画面图像。本申请实施例对具体采用哪种方式获取直播界面的画面图像不加以限定。
202、基于该画面图像,获取至少一个物品信息,该物品信息用于指示该画面图像中物品的位置和物品关键字。
需要说明的是,该物品信息所指示的物品的位置用于对该物品在画面图像中的位置进行标识,该物品信息所指示的物品关键字用于对该物品的类别进行标识,如“跳绳”、“耳机”等。
203、在该直播界面中物品的对应位置上,基于该至少一个物品信息所指示的物品关键字,分别显示对应的物品标签,该物品标签用于在检测到触发操作时展示对应物品的物品链接。
需要说明的是,通过该物品信息所指示的物品的位置,终端可以在相应的位置对物品标签进行显示,该物品标签中显示的内容即为物品信息所指示的物品关键字。
本申请实施例提供的方案,通过获取直播界面的画面图像中的至少一个物品信息,并在直播界面中物品的对应位置上,基于至少一个物品信息所指示的物品关键字,分别显示对应的物品标签,来向用户展示直播间所包括的物品的物品信息,使得用户可以直接了解到这些物品的信息,无需向主播进行询问,提高直播间的信息交互效率,进而提高用户体验。
图3是本申请实施例提供的一种物品信息显示方法的流程图,参见图2,应用于服务器,该方法包括:
301、接收终端的物品识别请求,该物品识别请求携带直播界面的画面图像。
302、对该画面图像进行识别,得到该画面图像中的至少一个物品信息,该物品信息用于指示该画面图像中物品的位置和物品关键字。
需要说明的是,服务器可以通过预先训练好的第一图像识别模型和第二图像识别模型,来对画面图像进行识别。可选地,还可以采用其他方式来对画面图像进行识别,本申请实施例对此不加以限定。
303、将该至少一个物品信息发送给该终端。
本申请实施例提供的方案,通过对接收到的直播界面的画面图像进行识别,进而将识别得到的至少一个物品信息发送给终端,以便终端可以在直播界面中物品的对应位置上,基于至少一个物品信息所指示的物品关键字,分别显示对应的物品标签,来向用户展示直播间所包括的物品的物品信息,使得用户可以直接了解到这些物品的信息,无需向主播进行询问,提高直播间的信息交互效率,进而提高用户体验。
图4是本申请实施例提供的一种物品信息显示方法的流程图,参见图4,该方法包括:
401、终端显示该直播界面,该直播界面中包括物品识别按钮。
需要说明的是,终端上可以安装并运行有直播类应用程序或具有直播功能的应用程序,用户可以通过这类应用程序,来对直播进行观看。
其中,该直播界面可以参见图5,图5是本申请实施例提供的一种直播界面的示意图,该直播界面中可以设置有菜单按钮501、转发按钮502和点赞按钮503三个按钮,用户可以在该直播界面中对菜单按钮501进行触发,终端可以响应于用户的触发操作,在如图6所示的界面中,对菜单按钮对应的功能按钮进行展示,参见图6,图6是本申请实施例提供的一种直播界面的示意图,终端可以在该界面中提供优惠券获取按钮601、清晰度选择按钮602和物品识别按钮603三种功能按钮。其中,该物品识别按钮用于对直播界面的画面图像中的物品进行识别。
402、终端响应于检测到对该物品识别按钮的触发操作,生成物品识别指令,该物品识别指令用于对该直播界面中所显示的物品进行识别。
在一种可能的实现方式中,用户可以在如图6所示的界面中,对物品识别按钮603进行触发,终端在检测到该触发操作时,可以生成物品识别指令。
403、终端响应于该物品识别指令,获取直播界面的画面图像。
在一种可能的实现方式中,终端可以响应于该物品识别指令,调用操作系统中的截屏工具,来对当前显示的直播界面进行截屏,得到直播界面的画面图像。
在另一种可能的实现方式中,终端可以基于直播过程中各个画面图像对应的播放时间,对多个画面图像进行缓存,进而可以响应于物品识别指令,基于该物品识别指令的接收时间,从缓存中获取播放时间与物品识别指令的接收时间对应的画面图像,也即是,物品识别指令对应的画面图像。
404、终端向服务器发送物品识别请求,该物品识别请求携带该画面图像。
需要说明的是,该画面图像可以携带有用户标识,以便服务器可以对用户标识与对应的画面图像进行存储,方便后续需要进行图像的获取时,可以直接基于用户标识进行获取。
405、服务器响应于接收到的物品识别请求,将该画面图像输入第一图像识别模型,通过该第一图像识别模型对该画面图像进行识别,得到该画面图像中至少一个物品的物品位置和对应的第一物品关键字。
需要说明的是,服务器在对画面图像进行识别得到至少一个物品信息所指示的物品关键字时,其过程大致可以分为以下几步:信息的获取、预处理、特征抽取和选择、分类器设计和分类决策。下面基于步骤408至步骤408的过程来对识别得到物品关键字的过程进行进一步描述。
其中,该第一图像识别模型可以为卷积神经网络,卷积神经网络可以基于同一图像中相邻像素的强关联性和强相似性,来对图像进行识别。由于在一张图像中的两个相邻像素,比图像中两个分开的像素更具有关联性,因而采用这种卷积神经网络进行识别,可以提高识别结果的准确性。可选地,该第一图像识别模型还可以为其他类型的网络模型,本申请实施例对此不加以限定。
以该第一图像识别模型为卷积神经网络为例,该第一图像识别模型可以包括卷积层、汇聚层和分类器。在一种可能的实现方式中,服务器可以将物品识别请求携带的画面图像输入第一图像识别模型,通过该第一图像识别模型的卷积层,将该画面图像分成多个像素块,用数字对各个像素块的高度、宽度和颜色分别进行表示,得到各个像素块的三维数值表达,再通过该第一图像识别模型的汇聚层,结合采样函数来对各个像素块的三维数值表达进行采样,得到一个联合数组,该联合数组中仅包含该画面图像中相对重要的部分,进而通过该第一图像识别模型的分类器,根据该联合数组,得到该画面图像中至少一个物品的物品位置和对应的第一物品关键字。
其中,在将该画面图像分成多个像素块时,服务器可以将该画面图像分成3*3或5*5的像素块。可选地,该像素块还可以为其他大小,本申请实施例对此不加以限定。此外,除对各个像素块的高度、宽度和颜色分别进行表示,得到各个像素块的三维数值表达外,还可以对各个像素块的其他内容进行表示,得到更高维度的数值表达,如四维数值表达等,本申请实施例对此不加以限定。
需要说明的是,该第一图像识别模型可以基于下述训练过程预先训练得到:服务器可以获取多个样本画面图像以及每个样本画面图像中至少一个样本物品的样本物品位置和对应的第一样本物品关键字,服务器可以将该多个样本画面图像逐个输入初始第一图像识别模型,通过初始第一图像识别模型的卷积层,将该样本画面图像分成多个样本像素块,用数字对各个样本像素块的高度、宽度和颜色分别进行表示,得到各个样本像素块的三维数值表达,再通过该初始第一图像识别模型的汇聚层,结合采样函数来对各个样本像素块的三维数值表达进行采样,得到一个样本联合数组,实现特征抽取和选择,进而通过该初始第一图像识别模型的分类器,根据该样本联合数组,得到该样本画面图像中至少一个样本物品的样本物品位置和对应的第一样本物品关键字,进而根据获取到的样本画面图像中至少一个样本物品的样本物品位置和对应的第一样本物品关键字和模型处理得到的结果,确定初始第一图像识别模型的损失函数值,根据该损失函数值,通过梯度下降法,对该初始第一图像识别模型的参数进行调整,再继续对下一个样本画面图像进行相同的处理,直至调整后的初始第一图像识别模型满足预设条件,则将满足预设条件的初始第一图像识别模型作为训练好的第一图像识别模型。
其中,该分类器可以为一种识别规则,通过训练可以对该识别规则不断进行调整,进而得到识别准确率较高的识别规则,从而形成相关的物品关键词,作为该第一图像识别模型的分类器,以便通过分类决策得到图像中物品的物品关键字。该预设条件可以为预测结果的准确性满足迭代截止条件,还可以为损失函数值满足迭代截止条件,还可以为迭代次数达到预设次数,本申请实施例对具体采用哪种条件作为预设条件不加以限定。
需要说明的是,在将该画面图像输入第一图像识别模型之前,服务器可以获取直播间的场景信息,以便基于获取到的场景信息来确定该场景信息对应的场景关键字,进而可以在识别出至少一个第一物品关键字后,从至少一个第一物品关键字删除场景关键字。例如,若该直播间的场景为户外场景,则服务器可以获取该户外场景信息,并基于该户外场景信息确定该户外场景中可能存在的物品,如树木、花等等,进而可以在识别出至少一个第一物品关键字后,从至少一个第一物品关键字中删除树木、花这种户外场景中存在的场景关键字。通过从识别出的至少一个关键字中删除场景关键字,可以避免场景物品对后续处理过程造成影响,提高确定出的物品信息的准确性。
其中,在进行场景信息的获取时,服务器可以向终端发送场景信息获取请求,终端在接收到场景信息获取请求后,可以通过传感器,获取场景中的光、声音等信息,并将获取到的光或声音等信息转化为电信息,以便终端和服务器能够识别该信息,进而将电信息形式的场景信息发送给服务器。可选地,还可以采用其他方式来进行场景信息的获取,本申请实施例对此不加以限定。
需要说明的是,在将该画面图像输入第一图像识别模型之前,服务器还对该画面图像进行预处理,例如,服务器可以对该画面图像进行去噪、平滑、变换等操作,可选地,还可以采用其他预处理方式,本申请实施例对此不加以限定。通过对画面图像进行预处理,可以加强画面图像的重要特征,提高画面图像的图像质量,进而可以提高后续识别结果的准确性。
406、服务器根据该画面图像中至少一个物品的物品位置,从该画面图像中获取至少一个物品图像。
在一种可能的实现方式中,服务器可以根据识别得到的该画面图像中至少一个物品的物品位置,从该画面图像中,截取出各个物品的图像,得到至少一个物品图像。
需要说明的是,步骤404已经对用户标识与对应的画面图像进行了存储,服务器在获取到至少一个物品图像后,也可以将用户标识与对应的至少一个物品图像进行存储,方便后续需要进行图像的获取时,可以直接基于用户标识进行获取。
407、服务器将该至少一个物品图像和对应的第一物品关键字输入第二图像识别模型,通过该第二图像识别模型对该至少一个物品图像进行识别,得到该至少一个物品图像对应的第二物品关键字,基于该至少一个物品图像对应的第一物品关键字和该至少一个物品图像对应的第二物品关键字,确定该画面图像中至少一个物品的物品关键字。
需要说明的是,该第二图像识别模型可以为卷积神经网络,可选地,该第二图像识别模型还可以为其他类型的网络模型,本申请实施例对此不加以限定。
以该第二图像识别模型为卷积神经网络为例,该第二图像识别模型可以包括卷积层、汇聚层和分类器。在一种可能的实现方式中,服务器可以将该至少一个物品图像和对应的第一物品关键字逐对输入第二图像识别模型,通过该第二图像识别模型的卷积层,将输入的物品图像分成多个像素块,用数字对各个像素块的高度、宽度和颜色分别进行表示,得到各个像素块的三维数值表达,再通过该第二图像识别模型的汇聚层,结合采样函数来对各个像素块的三维数值表达进行采样,得到一个联合数组,该联合数组中仅包含该画面图像中相对重要的部分,实现特征抽取和选择,进而通过该第二图像识别模型的分类器,根据该联合数组,得到该至少一个物品图像对应的第二物品关键字,基于该至少一个物品图像对应的第一物品关键字和该至少一个物品图像对应的第二物品关键字,确定该画面图像中至少一个物品的物品关键字。
其中,在基于第一物品关键字和第二物品关键字确定物品关键字时,服务器可以在至少一个第二物品关键字中,确定与至少一个第一物品关键字的相似度满足预设条件的目标第二物品关键字,将该目标第二物品关键字作为该画面图像中至少一个物品的物品关键字。
需要说明的是,该第二图像识别模型可以预先训练得到,训练过程与上述步骤405中第一图像识别模型的训练过程同理,此处不再赘述。
其中,在将该至少一个物品图像输入第二图像识别模型之前,服务器还对该至少一个物品图像进行预处理,例如,服务器可以对该至少一个物品图像进行去噪、平滑、变换等操作,可选地,还可以采用其他预处理方式,本申请实施例对此不加以限定。通过对至少一个物品图像进行预处理,可以加强至少一个物品图像的重要特征,提高至少一个物品图像的图像质量,进而可以提高后续识别结果的准确性。
需要说明的是,通过上述步骤405至步骤407,可以实现对直播界面的画面图像的识别,得到画面图像中的至少一个物品关键字。例如,若直播间放置有跳绳,则通过上述步骤405至步骤407,服务器可以识别出画面图像中包括跳绳,进而得到相应的物品关键字,如“电子跳绳”、“跳绳”等;若直播间放置有耳机,则通过上述步骤405至步骤407,服务器可以识别出画面图像中包括耳机,进而得到相应的物品关键字,如“无线耳机”、“蓝牙耳机”等。
408、服务器结合该至少一个物品的物品关键字和该至少一个物品的物品位置,确定该画面图像中的至少一个物品信息,该物品信息用于指示该画面图像中物品的位置和物品关键字。
在一种可能的实现方式中,服务器可以将识别得到的至少一个物品的物品关键字和至少一个物品的物品位置,直接作为画面图像中的至少一个物品信息。
可选地,服务器在通过模型识别出至少一个物品信息后,可以获取该直播界面对应的直播间的直播物品信息,从识别得到的至少一个物品信息中删除该直播物品信息,得到该画面图像中的至少一个物品信息。通过从识别出的物品信息中删除直播物品信息,可以避免对主播直播时推荐的物品造成影响,而且还可以了解到直播间其他物品的信息,提高直播间的信息交互效率,进而提高用户体验。
409、服务器将该至少一个物品信息发送给该终端。
410、终端接收该服务器基于该画面图像返回的至少一个物品信息。
需要说明的是,上述步骤404至步骤410是以通过终端与服务器之间的交互,由服务器接收终端发送的画面图像,并对该画面图像进行识别,进而将识别得到的至少一个物品信息发送给终端为了进行说明的,在其他可能的实现方式中,还可以由终端直接基于获取到的画面图像,对该画面图像进行图像识别,得到该至少一个物品信息,具体识别过程与上述步骤405至步骤408同理,此处不再赘述。
411、终端在该直播界面中物品的对应位置上,基于该至少一个物品信息所指示的物品关键字,分别显示对应的物品标签,该物品标签用于在检测到触发操作时展示对应物品的物品链接。
在一种可能的实现方式中,终端可以根据接收到的至少一个物品信息,确定出各个物品在该画面图像中的位置,进而在直播界面的对应位置上,基于接收到的至少一个物品信息所指示的至少一个物品信息所指示的物品关键字,分别显示对应的物品标签。
其中,基于物品关键字在对应位置显示物品标签的过程如下:终端可以存储有多种标签形状,从而可以从中选取一种标签形状,基于所选取的标签形状生成一个可交互的物品标签,进而在物品标签上对对应的物品关键字进行显示。
需要说明的是,显示物品标签后的直播界面可以参见图7,图7是本申请实施例提供的一种物品标签显示界面的示意图,该图所示的界面中对白色棒球帽的标签701、画框的标签702和布朗熊的标签703进行了显示,以便用户可以通过触发相应的标签来查看对应的物品链接。
需要说明的是,若步骤408中未从至少一个物品信息中删除直播物品信息,则在步骤411中需要对该直播物品信息对应的物品标签也进行显示。
412、终端响应于对该至少一个物品标签中目标物品标签的查看指令,向该服务器发送物品链接获取请求,该物品链接获取请求携带物品关键字。
需要说明的是,用户可以对终端显示的物品标签进行触发,以触发对该至少一个物品标签中目标物品标签的查看指令,终端可以响应于该查看指令,向该服务器发送携带物品关键字的物品链接获取请求。
413、服务器基于接收到的物品链接获取请求,根据物品链接获取请求携带的物品关键字,获取至少一个物品链接。
需要说明的是,服务器可以维护有一个物品链接数据库,用于存储多种物品名称以及各个物品名称对应的至少一个物品链接。在一种可能的实现方式中,服务器可以基于接收到的物品链接请求携带的物品关键字,与数据库中存储的物品名称进行匹配,进而基于匹配出的物品名称,获取该物品名称对应的至少一个物品链接。
可选地,服务器维护的物品链接数据库,还可以用于存储多个物品关键字以及各个物关键字对应的至少一个物品链接。在一种可能的实现方式中,服务器可以基于接收到的物品链接请求携带的物品关键字,在物品链接数据库中进行查询,获取该物品关键字对应的至少一个物品链接。
需要说明的是,上述两种实现方式是以根据物品关键字来进行物品链接的获取为例进行说明的,在一些可能的实现方式中,服务器还可以基于物品关键字和物品图像,来共同进行物品链接的获取。具体地,服务器可以根据接收到的物品链接获取请求中携带的物品关键字,获取该物品关键字对应的物品图像,分别根据该物品关键字和该物品图像,获取至少一个第一物品链接和至少一个第二物品链接,确定该至少一个第一物品链接和该至少一个第二物品链接中的至少一个重合物品链接,作为该物品链接获取请求对应的至少一个物品链接,将该至少一个物品链接发送给该终端。通过根据物品关键字和物品图像分别获取物品链接,再从获取到的两组物品链接中选择重合的物品链接,作为物品链接获取请求对应的物品链接,可以保证确定出的物品链接对应的物品与画面图像中的物品更加接近,提高确定出的物品链接出准确性。
其中,该物品链接获取请求中可以携带有用户标识,由于步骤406已经对用户标识与对应的至少一个物品图像进行了存储,因而服务器可以根据该用户标识,在已存储的物品图像中进行查询,从而获取到该用户标识对应的物品图像,进而可以从该用户标识对应的物品图像中获取物品关键字对应的物品图像。通过携带用户标识,可以方便服务器更加直接地获取到对应的物品图像,保证获取到的物品图像的准确性。
需要说明的是,服务器在将该至少一个物品链接发送给该终端之前,还可以按照该至少一个物品链接对应的推荐指数从大到小的顺序,对该至少一个物品链接进行排序,获取排序位于目标位置之前的至少一个物品链接,该推荐指数可以包括价格推荐指数、销量推荐指数、好评推荐指数和物流推荐指数中至少一项。通过根据推荐指数来对物品链接进行排序,可以推荐综合评价较高的物品给用户,进而可以增加用户购买的可能性,提高用户体验,增加直播间流水。
414、服务器将该至少一个物品链接发送给该终端。
需要说明的是,上述获取物品链接的过程,可以通过直播类应用程序的后台服务器与相关电商平台的服务器之间进行交互实现。可选地,上述获取物品链接的过程,还可以由直播类应用程序的后台服务器自行完成,本申请实施例对此不加以限定。
415、终端接收该服务器返回的该目标物品标签对应的至少一个物品链接,对该至少一个物品链接进行显示。
需要说明的是,终端在接收到物品链接后,可以对该物品链接进行处理,从中提取出物品的属性信息,进而在对物品链接进行显示的同时,对物品的属性信息进行显示,以便用户可以根据属性信息直接获取到物品的简单介绍,方便用户了解直播间的物品。
在一种可能的实现方式中,终端可以在该直播界面中显示物品链接展示区域,该物品链接展示区域部分覆盖该直播界面的画面图像,在该物品链接展示区域中,显示至少一个物品条目,一个物品条目对应于一个物品链接。参见图8,图8是本申请实施例提供的一种物品链接展示界面的示意图,用户可以通过触发图7中布朗熊的标签703,即可以跳转到如图8所示的界面,该图8在物品链接区域801中展示了多个布朗熊的物品链接,用户可以触发各个物品链接对应的“去购买”按钮,终端可以响应于用户的触发操作,跳转到对应的购买界面,以便用户可以在购买界面中对物品进行购买。图8所示的界面仅以物品链接区域位于界面下部为例来进行说明,可选地,该物品链接区域还可以位于界面的其他位置,本申请实施例对此不加以限定。
需要说明的是,若用户所触发的物品链接为直播物品信息对应的物品标签,则终端可以直接从购物袋中弹出直播物品的物品链接,可选地,终端还可以在物品链接展示区域中对直播物品的物品链接进行显示,本申请实施例对此不加以限定。
其中,在对物品链接进行显示时,终端可以对画面图像中的人脸区域进行检测,从而确定该画面图像中的人脸区域,以便在该直播界面中该人脸区域以外的区域,对该目标物品标签对应的至少一个物品链接进行显示。通过在人脸区域以外的区域显示物品链接,从而保证用户可以正常观看直播,提高用户体验。
需要说明的是,上述步骤401至步骤415中的所有过程,可以简要概括为如图9所示的流程,图9是本申请实施例提供的一种物品信息显示方法的流程图,参见图9,在步骤901直播间开始直播后,通过步骤401显示直播界面,用户可以在步骤902中点击物品识别按钮,通过步骤402至步骤408来实现步骤903,得到物品信息,进而通过步骤409至步骤411,实现物品标签的显示,再通过步骤412至步骤415,来实现步骤904至步骤905,实现物品链接的获取和物品链接的推荐。
需要说明的是,本申请实施例提供的方法,在用户触发物品识别按钮后,可以实时获取直播界面的画面图像,进而实时识别直播间内的物品,并给出物品的信息及购买物品或相似物品的链接。通过获取直播界面的画面图像进行识别,可以保证在主播拿出了新的物品后,也可以对该物品的物品信息进行显示,得到对应的物品标签,以便用户也可以了解该物品的信息,进而获取到物品链接,保证物品标签的实时性,提高直播间的信息交互效率,提高用户体验。
本申请实施例提供的方案,通过获取直播界面的画面图像中的至少一个物品信息,并在直播界面中物品的对应位置上,基于至少一个物品信息所指示的物品关键字,分别显示对应的物品标签,来向用户展示直播间所包括的物品的物品信息,使得用户可以直接了解到这些物品的信息,无需向主播询问,实现了对直播间点对点的数据传输方式的拓展,提高直播间的信息交互效率,进而提高用户体验。本申请实施例提供的方案,可以在用户触发物品识别按钮时,基于AI智能图像识别和智能推荐技术,来自行识别图像中的物品并进行物品分类推荐,从而可以将直播间里的一些物品结合起来,用户可以了解自己看到的物品,并且能自由选择来查看物品的信息,还能获取物品或相似物品的链接,进而可以增加用户的体验感和心理满足感。此外,用户通过触发物品识别按钮,即可以智能一键识别直播间的所有物品,从而可以拓展直播间的商业价值,通过识别出的物品关键词,可以直接找到物品或相似物品的购买渠道,进而可以刺激用户的购买,同时也降低普通用户的购买门槛,相当于可以在无形中推荐商品,不仅可以提高用户的购买欲,满足用户的精神需求,同时也能提升直播间的消费流水。
上述所有可选技术方案,可以采用任意结合形成本申请的可选实施例,在此不再一一赘述。
图10是本申请实施例提供的一种物品信息显示装置的结构图,参见图10,该装置包括:
图像获取模块1001,用于响应于物品识别指令,获取直播界面的画面图像,该物品识别指令用于对该直播界面中所显示的物品进行识别;
信息获取模块1002,用于基于该画面图像,获取至少一个物品信息,该物品信息用于指示该画面图像中物品的位置和物品关键字;
第一显示模块1003,用于在该直播界面中物品的对应位置上,基于该至少一个物品信息所指示的物品关键字,分别显示对应的物品标签,该物品标签用于在检测到触发操作时展示对应物品的物品链接。
本申请实施例提供的装置,通过获取直播界面的画面图像中的至少一个物品信息,并在直播界面中物品的对应位置上,基于至少一个物品信息所指示的物品关键字,分别显示对应的物品标签,来向用户展示直播间所包括的物品的物品信息,使得用户可以直接了解到这些物品的信息,提高直播间的信息交互效率,进而提高用户体验。
在一种可能的实现方式中,该信息获取模块用于下述任一项:
向服务器发送物品识别请求,该物品识别请求携带该画面图像,接收该服务器基于该画面图像返回的至少一个物品信息;
对该画面图像进行图像识别,得到该至少一个物品信息。
在一种可能的实现方式中,该装置还包括:
发送模块,用于响应于对该至少一个物品标签中目标物品标签的查看指令,向服务器发送物品链接获取请求;
接收模块,用于接收该服务器返回的该目标物品标签对应的至少一个物品链接;
第二显示模块,用于对该至少一个物品链接进行显示。
在一种可能的实现方式中,该第二显示模块,用于在该直播界面中显示物品链接展示区域,该物品链接展示区域部分覆盖该直播界面的画面图像,在该物品链接展示区域中,显示至少一个物品条目,一个物品条目对应于一个物品链接。
在一种可能的实现方式中,该装置还包括:
确定模块,用于确定该画面图像中的人脸区域;
第三显示模块,用于响应于对该至少一个物品标签中目标物品标签的查看指令,在该直播界面中该人脸区域以外的区域,对该目标物品标签对应的至少一个物品链接进行显示。
在一种可能的实现方式中,该装置还包括:
第四显示模块,用于显示该直播界面,该直播界面中包括物品识别按钮;
生成模块,用于响应于检测到对该物品识别按钮的触发操作,生成该物品识别指令。
图11是本申请实施例提供的一种物品信息显示装置的结构图,参见图11,该装置包括:
第一接收模块1101,用于接收终端的物品识别请求,该物品识别请求携带直播界面的画面图像;
识别模块1102,用于对该画面图像进行识别,得到该画面图像中的至少一个物品信息,该物品信息用于指示该画面图像中物品的位置和物品关键字;
第一发送模块1103,用于将该至少一个物品信息发送给该终端。
本申请实施例提供的装置,通过对接收到的直播界面的画面图像进行识别,进而将识别得到的至少一个物品信息发送给终端,以便终端可以在直播界面中物品的对应位置上,基于至少一个物品信息所指示的物品关键字,分别显示对应的物品标签,来向用户展示直播间所包括的物品的物品信息,使得用户可以直接了解到这些物品的信息,提高直播间的信息交互效率,进而提高用户体验。
在一种可能的实现方式中,该装置还包括:
第二接收模块,用于接收该终端发送的物品链接获取请求,该物品链接获取请求携带物品关键字;
第一链接获取模块,用于根据该物品关键字,获取至少一个物品链接;
第二发送模块,用于将该至少一个物品链接发送给该终端。
在一种可能的实现方式中,该识别模块1102包括第一识别单元、获取单元、第二识别单元和确定单元;
该第一识别单元,用于将该画面图像输入第一图像识别模型,通过该第一图像识别模型对该画面图像进行识别,得到该画面图像中至少一个物品的物品位置和对应的第一物品关键字;
该获取单元,用于根据该画面图像中至少一个物品的物品位置,从该画面图像中获取至少一个物品图像;
该第二识别单元包括第二识别子单元和确认子单元;
该第二识别子单元,用于将该至少一个物品图像和对应的第一物品关键字输入第二图像识别模型,通过该第二图像识别模型对该至少一个物品图像进行识别,得到该至少一个物品图像对应的第二物品关键字;
该确定子单元,用于基于该至少一个物品图像对应的第一物品关键字和该至少一个物品图像对应的第二物品关键字,确定该画面图像中至少一个物品的物品关键字;
该确定单元,用于结合该至少一个物品的物品关键字和该至少一个物品的物品位置,确定该画面图像中的至少一个物品信息。
在一种可能的实现方式中,该确定子单元,用于在至少一个第二物品关键字中,确定与至少一个第一物品关键字的相似度满足预设条件的目标第二物品关键字,将该目标第二物品关键字作为该画面图像中至少一个物品的物品关键字。
在一种可能的实现方式中,该装置还包括:
第三接收模块,用于接收该终端发送的物品链接获取请求,该物品链接获取请求携带物品关键字;
图像获取模块,用于根据该物品关键字,获取该物品关键字对应的物品图像;
第二链接获取模块,用于分别根据该物品关键字和该物品图像,获取至少一个第一物品链接和至少一个第二物品链接;
确定模块,用于确定该至少一个第一物品链接和该至少一个第二物品链接中的至少一个重合物品链接,作为该物品链接获取请求对应的至少一个物品链接;
第三发送模块,用于将该至少一个物品链接发送给该终端。
在一种可能的实现方式中,该装置还包括:
排序模块,用于按照该至少一个物品链接对应的推荐指数从大到小的顺序,对该至少一个物品链接进行排序;
第三链接获取模块,用于获取排序位于目标位置之前的至少一个物品链接。
在一种可能的实现方式中,该推荐指数包括价格推荐指数、销量推荐指数、好评推荐指数和物流推荐指数中至少一项。
在一种可能的实现方式中,该装置还包括:
信息获取模块,用于获取该直播界面对应的直播间的直播物品信息;
删除模块,用于从识别得到的至少一个物品信息中删除该直播物品信息,得到该画面图像中的至少一个物品信息。
需要说明的是:上述实施例提供的物品信息显示装置在对物品信息进行显示时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将终端/服务器的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的物品信息显示装置与物品信息显示方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
图12是本申请实施例提供的一种终端的结构示意图。该终端1200可以是:智能手机、平板电脑、MP3播放器(Moving Picture Experts Group Audio Layer III,动态影像专家压缩标准音频层面3)、MP4(Moving Picture Experts Group Audio Layer IV,动态影像专家压缩标准音频层面4)播放器、笔记本电脑或台式电脑。终端1200还可能被称为用户设备、便携式终端、膝上型终端、台式终端等其他名称。
通常,终端1200包括有:一个或多个处理器1201和一个或多个存储器1202。
处理器1201可以包括一个或多个处理核心,比如4核心处理器、8核心处理器等。处理器1201可以采用DSP(Digital Signal Processing,数字信号处理)、FPGA(Field-Programmable Gate Array,现场可编程门阵列)、PLA(Programmable Logic Array,可编程逻辑阵列)中的至少一种硬件形式来实现。处理器1201也可以包括主处理器和协处理器,主处理器是用于对在唤醒状态下的数据进行处理的处理器,也称CPU(Central ProcessingUnit,中央处理器);协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中,处理器1201可以在集成有GPU(Graphics Processing Unit,图像处理器),GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中,处理器1201还可以包括AI(Artificial Intelligence,人工智能)处理器,该AI处理器用于处理有关机器学习的计算操作。
存储器1202可以包括一个或多个计算机可读存储介质,该计算机可读存储介质可以是非暂态的。存储器1202还可包括高速随机存取存储器,以及非易失性存储器,比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中,存储器1202中的非暂态的计算机可读存储介质用于存储至少一个程序代码,该至少一个程序代码用于被处理器1201所执行以实现本申请中方法实施例提供的物品信息显示方法。
在一些实施例中,终端1200还可选包括有:外围设备接口1203和至少一个外围设备。处理器1201、存储器1202和外围设备接口1203之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口1203相连。具体地,外围设备包括:射频电路1204、显示屏1205、摄像头1206、音频电路1207、定位组件1208和电源1209中的至少一种。
外围设备接口1203可被用于将I/O(Input/Output,输入/输出)相关的至少一个外围设备连接到处理器1201和存储器1202。在一些实施例中,处理器1201、存储器1202和外围设备接口1203被集成在同一芯片或电路板上;在一些其他实施例中,处理器1201、存储器1202和外围设备接口1203中的任意一个或两个可以在单独的芯片或电路板上实现,本实施例对此不加以限定。
射频电路1204用于接收和发射RF(Radio Frequency,射频)信号,也称电磁信号。射频电路1204通过电磁信号与通信网络以及其他通信设备进行通信。射频电路1204将电信号转换为电磁信号进行发送,或者,将接收到的电磁信号转换为电信号。可选地,射频电路1204包括:天线系统、RF收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。射频电路1204可以通过至少一种无线通信协议来与其它终端进行通信。该无线通信协议包括但不限于:城域网、各代移动通信网络(2G、3G、4G及5G)、无线局域网和/或WiFi(Wireless Fidelity,无线保真)网络。在一些实施例中,射频电路1204还可以包括NFC(Near Field Communication,近距离无线通信)有关的电路,本申请对此不加以限定。
显示屏1205用于显示UI(User Interface,用户界面)。该UI可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏1205是触摸显示屏时,显示屏1205还具有采集在显示屏1205的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器1201进行处理。此时,显示屏1205还可以用于提供虚拟按钮和/或虚拟键盘,也称软按钮和/或软键盘。在一些实施例中,显示屏1205可以为一个,设置终端1200的前面板;在另一些实施例中,显示屏1205可以为至少两个,分别设置在终端1200的不同表面或呈折叠设计;在再一些实施例中,显示屏1205可以是柔性显示屏,设置在终端1200的弯曲表面上或折叠面上。甚至,显示屏1205还可以设置成非矩形的不规则图形,也即异形屏。显示屏1205可以采用LCD(Liquid Crystal Display,液晶显示屏)、OLED(Organic Light-Emitting Diode,有机发光二极管)等材质制备。
摄像头组件1206用于采集图像或视频。可选地,摄像头组件1206包括前置摄像头和后置摄像头。通常,前置摄像头设置在终端的前面板,后置摄像头设置在终端的背面。在一些实施例中,后置摄像头为至少两个,分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种,以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及VR(Virtual Reality,虚拟现实)拍摄功能或者其它融合拍摄功能。在一些实施例中,摄像头组件1206还可以包括闪光灯。闪光灯可以是单色温闪光灯,也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合,可以用于不同色温下的光线补偿。
音频电路1207可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波,并将声波转换为电信号输入至处理器1201进行处理,或者输入至射频电路1204以实现语音通信。出于立体声采集或降噪的目的,麦克风可以为多个,分别设置在终端1200的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。扬声器则用于将来自处理器1201或射频电路1204的电信号转换为声波。扬声器可以是传统的薄膜扬声器,也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时,不仅可以将电信号转换为人类可听见的声波,也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中,音频电路1207还可以包括耳机插孔。
定位组件1208用于定位终端1200的当前地理位置,以实现导航或LBS(LocationBased Service,基于位置的服务)。定位组件1208可以是基于美国的GPS(GlobalPositioning System,全球定位系统)、中国的北斗系统、俄罗斯的格雷纳斯系统或欧盟的伽利略系统的定位组件。
电源1209用于为终端1200中的各个组件进行供电。电源1209可以是交流电、直流电、一次性电池或可充电电池。当电源1209包括可充电电池时,该可充电电池可以支持有线充电或无线充电。该可充电电池还可以用于支持快充技术。
在一些实施例中,终端1200还包括有一个或多个传感器1210。该一个或多个传感器1210包括但不限于:加速度传感器1211、陀螺仪传感器1212、压力传感器1213、指纹传感器1214、光学传感器1215以及接近传感器1216。
加速度传感器1211可以检测以终端1200建立的坐标系的三个坐标轴上的加速度大小。比如,加速度传感器1211可以用于检测重力加速度在三个坐标轴上的分量。处理器1201可以根据加速度传感器1211采集的重力加速度信号,控制显示屏1205以横向视图或纵向视图进行用户界面的显示。加速度传感器1211还可以用于游戏或者用户的运动数据的采集。
陀螺仪传感器1212可以检测终端1200的机体方向及转动角度,陀螺仪传感器1212可以与加速度传感器1211协同采集用户对终端1200的3D动作。处理器1201根据陀螺仪传感器1212采集的数据,可以实现如下功能:动作感应(比如根据用户的倾斜操作来改变UI)、拍摄时的图像稳定、游戏控制以及惯性导航。
压力传感器1213可以设置在终端1200的侧边框和/或显示屏1205的下层。当压力传感器1213设置在终端1200的侧边框时,可以检测用户对终端1200的握持信号,由处理器1201根据压力传感器1213采集的握持信号进行左右手识别或快捷操作。当压力传感器1213设置在显示屏1205的下层时,由处理器1201根据用户对显示屏1205的压力操作,实现对UI界面上的可操作性控件进行控制。可操作性控件包括按钮控件、滚动条控件、图标控件、菜单控件中的至少一种。
指纹传感器1214用于采集用户的指纹,由处理器1201根据指纹传感器1214采集到的指纹识别用户的身份,或者,由指纹传感器1214根据采集到的指纹识别用户的身份。在识别出用户的身份为可信身份时,由处理器1201授权该用户执行相关的敏感操作,该敏感操作包括解锁屏幕、查看加密信息、下载软件、支付及更改设置等。指纹传感器1214可以被设置终端1200的正面、背面或侧面。当终端1200上设置有物理按键或厂商Logo时,指纹传感器1214可以与物理按键或厂商Logo集成在一起。
光学传感器1215用于采集环境光强度。在一个实施例中,处理器1201可以根据光学传感器1215采集的环境光强度,控制显示屏1205的显示亮度。具体地,当环境光强度较高时,调高显示屏1205的显示亮度;当环境光强度较低时,调低显示屏1205的显示亮度。在另一个实施例中,处理器1201还可以根据光学传感器1215采集的环境光强度,动态调整摄像头组件1206的拍摄参数。
接近传感器1216,也称距离传感器,通常设置在终端1200的前面板。接近传感器1216用于采集用户与终端1200的正面之间的距离。在一个实施例中,当接近传感器1216检测到用户与终端1200的正面之间的距离逐渐变小时,由处理器1201控制显示屏1205从亮屏状态切换为息屏状态;当接近传感器1216检测到用户与终端1200的正面之间的距离逐渐变大时,由处理器1201控制显示屏1205从息屏状态切换为亮屏状态。
本领域技术人员可以理解,图12中示出的结构并不构成对终端1200的限定,可以包括比图示更多或更少的组件,或者组合某些组件,或者采用不同的组件布置。
图13是本申请实施例提供的一种服务器的结构示意图,该服务器1300可因配置或性能不同而产生比较大的差异,可以包括一个或多个处理器(Central Processing Units,CPU)1301和一个或多个的存储器1302,其中,该一个或多个存储器1302中存储有至少一条程序代码,该至少一条程序代码由该一个或多个处理器1301加载并执行以实现上述各个方法实施例提供的方法。当然,该服务器1300还可以具有有线或无线网络接口、键盘以及输入输出接口等部件,以便进行输入输出,该服务器1300还可以包括其他用于实现设备功能的部件,在此不做赘述。
在示例性实施例中,还提供了一种计算机可读存储介质,例如包括程序代码的存储器,上述程序代码可由处理器执行以完成上述实施例中的物品信息显示方法。例如,该计算机可读存储介质可以是只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、只读光盘(Compact Disc Read-Only Memory,CD-ROM)、磁带、软盘和光数据存储设备等。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来程序代码相关的硬件完成,该程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
上述仅为本申请的可选实施例,并不用以限制本申请,凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。
Claims (15)
1.一种物品信息显示方法,其特征在于,所述方法包括:
响应于物品识别指令,获取直播界面的画面图像,所述物品识别指令用于对所述直播界面中所显示的物品进行识别;
基于所述画面图像,获取至少一个物品信息,所述物品信息用于指示所述画面图像中物品的位置和物品关键字;
在所述直播界面中物品的对应位置上,基于所述至少一个物品信息所指示的物品关键字,分别显示对应的物品标签,所述物品标签用于在检测到触发操作时展示对应物品的物品链接。
2.根据权利要求1所述的方法,其特征在于,所述基于所述画面图像,获取至少一个物品信息包括下述任一项:
向服务器发送物品识别请求,所述物品识别请求携带所述画面图像,接收所述服务器基于所述画面图像返回的至少一个物品信息;
对所述画面图像进行图像识别,得到所述至少一个物品信息。
3.根据权利要求1所述的方法,其特征在于,所述在所述直播界面中物品的对应位置上,基于所述至少一个物品信息所指示的物品关键字,分别显示对应的物品标签之后,所述方法还包括:
响应于对所述至少一个物品标签中目标物品标签的查看指令,向服务器发送物品链接获取请求;
接收所述服务器返回的所述目标物品标签对应的至少一个物品链接;
对所述至少一个物品链接进行显示。
4.根据权利要求3所述的方法,其特征在于,所述对所述至少一个物品链接进行显示包括:
在所述直播界面中显示物品链接展示区域,所述物品链接展示区域部分覆盖所述直播界面的画面图像;
在所述物品链接展示区域中,显示至少一个物品条目,一个物品条目对应于一个物品链接。
5.根据权利要求1所述的方法,其特征在于,所述在所述直播界面中物品的对应位置上,基于所述至少一个物品信息所指示的物品关键字,分别显示对应的物品标签之后,所述方法还包括:
确定所述画面图像中的人脸区域;
响应于对所述至少一个物品标签中目标物品标签的查看指令,在所述直播界面中所述人脸区域以外的区域,对所述目标物品标签对应的至少一个物品链接进行显示。
6.根据权利要求1所述的方法,其特征在于,所述响应于物品识别指令,获取直播界面的画面图像之前,所述方法还包括:
显示所述直播界面,所述直播界面中包括物品识别按钮;
响应于检测到对所述物品识别按钮的触发操作,生成所述物品识别指令。
7.一种物品信息显示方法,其特征在于,所述方法包括:
接收终端的物品识别请求,所述物品识别请求携带直播界面的画面图像;
对所述画面图像进行识别,得到所述画面图像中的至少一个物品信息,所述物品信息用于指示所述画面图像中物品的位置和物品关键字;
将所述至少一个物品信息发送给所述终端。
8.根据权利要求7所述的方法,其特征在于,所述将所述至少一个物品信息发送给所述终端之后,所述方法还包括:
接收所述终端发送的物品链接获取请求,所述物品链接获取请求携带物品关键字;
根据所述物品关键字,获取至少一个物品链接;
将所述至少一个物品链接发送给所述终端。
9.根据权利要求7所述的方法,其特征在于,所述对所述画面图像进行识别,得到所述画面图像中的至少一个物品信息包括:
将所述画面图像输入第一图像识别模型,通过所述第一图像识别模型对所述画面图像进行识别,得到所述画面图像中至少一个物品的物品位置和对应的第一物品关键字;
根据所述画面图像中至少一个物品的物品位置,从所述画面图像中获取至少一个物品图像;
将所述至少一个物品图像和对应的第一物品关键字输入第二图像识别模型,通过所述第二图像识别模型对所述至少一个物品图像进行识别,得到所述至少一个物品图像对应的第二物品关键字,基于所述至少一个物品图像对应的第一物品关键字和所述至少一个物品图像对应的第二物品关键字,确定所述画面图像中至少一个物品的物品关键字;
结合所述至少一个物品的物品关键字和所述至少一个物品的物品位置,确定所述画面图像中的至少一个物品信息。
10.根据权利要求7所述的方法,其特征在于,所述将所述至少一个物品信息发送给所述终端之后,所述方法还包括:
接收所述终端发送的物品链接获取请求,所述物品链接获取请求携带物品关键字;
根据所述物品关键字,获取所述物品关键字对应的物品图像;
分别根据所述物品关键字和所述物品图像,获取至少一个第一物品链接和至少一个第二物品链接;
确定所述至少一个第一物品链接和所述至少一个第二物品链接中的至少一个重合物品链接,作为所述物品链接获取请求对应的至少一个物品链接;
将所述至少一个物品链接发送给所述终端。
11.一种物品信息显示装置,其特征在于,所述装置包括:
图像获取模块,用于响应于物品识别指令,获取直播界面的画面图像,所述物品识别指令用于对所述直播界面中所显示的物品进行识别;
信息获取模块,用于基于所述画面图像,获取至少一个物品信息,所述物品信息用于指示所述画面图像中物品的位置和物品关键字;
第一显示模块,用于在所述直播界面中物品的对应位置上,基于所述至少一个物品信息所指示的物品关键字,分别显示对应的物品标签,所述物品标签用于在检测到触发操作时展示对应物品的物品链接。
12.一种物品信息显示装置,其特征在于,所述装置包括:
接收模块,用于接收终端的物品识别请求,所述物品识别请求携带直播界面的画面图像;
识别模块,用于对所述画面图像进行识别,得到所述画面图像中的至少一个物品信息,所述物品信息用于指示所述画面图像中物品的位置和物品关键字;
发送模块,用于将所述至少一个物品信息发送给所述终端。
13.一种终端,其特征在于,所述终端包括一个或多个处理器和一个或多个存储器,所述一个或多个存储器中存储有至少一条程序代码,所述程序代码由所述一个或多个处理器加载并执行以实现如权利要求1至权利要求6任一项所述的物品信息显示方法所执行的操作。
14.一种计算机设备,其特征在于,所述计算机设备包括一个或多个处理器和一个或多个存储器,所述一个或多个存储器中存储有至少一条程序代码,所述程序代码由所述一个或多个处理器加载并执行以实现如权利要求7至权利要求10任一项所述的物品信息显示方法所执行的操作。
15.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有至少一条程序代码,所述程序代码由处理器加载并执行以实现如权利要求1至权利要求10任一项所述的物品信息显示方法所执行的操作。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010460986.6A CN111652678B (zh) | 2020-05-27 | 2020-05-27 | 物品信息显示方法、装置、终端、服务器及可读存储介质 |
PCT/CN2021/092710 WO2021238631A1 (zh) | 2020-05-27 | 2021-05-10 | 物品信息的显示方法、装置、设备及可读存储介质 |
US17/722,186 US12088887B2 (en) | 2020-05-27 | 2022-04-15 | Display method and apparatus for item information, device, and computer-readable storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010460986.6A CN111652678B (zh) | 2020-05-27 | 2020-05-27 | 物品信息显示方法、装置、终端、服务器及可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111652678A true CN111652678A (zh) | 2020-09-11 |
CN111652678B CN111652678B (zh) | 2023-11-14 |
Family
ID=72342451
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010460986.6A Active CN111652678B (zh) | 2020-05-27 | 2020-05-27 | 物品信息显示方法、装置、终端、服务器及可读存储介质 |
Country Status (3)
Country | Link |
---|---|
US (1) | US12088887B2 (zh) |
CN (1) | CN111652678B (zh) |
WO (1) | WO2021238631A1 (zh) |
Cited By (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112348649A (zh) * | 2020-12-07 | 2021-02-09 | 福州市长乐区三互信息科技有限公司 | 直播类别推荐方法 |
CN112492331A (zh) * | 2020-11-05 | 2021-03-12 | 北京三快在线科技有限公司 | 直播方法、装置、系统及存储介质 |
CN112533014A (zh) * | 2020-11-26 | 2021-03-19 | Oppo广东移动通信有限公司 | 视频直播中目标物品信息处理和显示方法、装置及设备 |
CN112561632A (zh) * | 2020-12-08 | 2021-03-26 | 北京达佳互联信息技术有限公司 | 信息显示方法、装置、终端及存储介质 |
CN112637620A (zh) * | 2020-12-09 | 2021-04-09 | 杭州艾耕科技有限公司 | 一种对音视频流中物品和语言实时识别分析的方法与装置 |
CN112653900A (zh) * | 2020-12-21 | 2021-04-13 | Oppo广东移动通信有限公司 | 视频直播中的目标显示方法、装置及设备 |
CN112929687A (zh) * | 2021-02-05 | 2021-06-08 | 腾竞体育文化发展(上海)有限公司 | 基于直播视频的互动方法、装置、设备及存储介质 |
CN113111213A (zh) * | 2021-04-23 | 2021-07-13 | 大同市巴什卡机械制造有限公司 | 一种仓储系统自动存储物品方法及装置 |
CN113643105A (zh) * | 2021-09-17 | 2021-11-12 | 北京快来文化传播集团有限公司 | 基于直播客户端的直播间商品展示方法和系统 |
WO2021238631A1 (zh) * | 2020-05-27 | 2021-12-02 | 腾讯科技(深圳)有限公司 | 物品信息的显示方法、装置、设备及可读存储介质 |
CN113747182A (zh) * | 2021-01-18 | 2021-12-03 | 北京京东拓先科技有限公司 | 物品展示方法、客户端、直播服务器和计算机存储介质 |
CN113961833A (zh) * | 2021-10-20 | 2022-01-21 | 维沃移动通信有限公司 | 信息搜索方法、装置及电子设备 |
CN114266327A (zh) * | 2020-09-14 | 2022-04-01 | 阿里健康信息技术有限公司 | 信息展示、处理方法、终端设备、服务器及存储介质 |
CN114399699A (zh) * | 2021-12-06 | 2022-04-26 | 北京达佳互联信息技术有限公司 | 目标推荐对象确定方法、装置、电子设备及存储介质 |
WO2022108642A1 (en) * | 2020-11-20 | 2022-05-27 | Li Chenhao | Enhanced e-commerce and livestream platform |
WO2022121978A1 (zh) * | 2020-12-09 | 2022-06-16 | 北京字节跳动网络技术有限公司 | 直播间置顶消息确定方法、装置、设备和存储介质 |
CN114827651A (zh) * | 2022-04-25 | 2022-07-29 | 北京达佳互联信息技术有限公司 | 信息处理方法、装置、电子设备及存储介质 |
EP4057204A1 (en) * | 2021-03-12 | 2022-09-14 | Beijing Dajia Internet Information Technology Co., Ltd. | Method and apparatus for processing live streaming data |
CN115086774A (zh) * | 2022-05-31 | 2022-09-20 | 北京达佳互联信息技术有限公司 | 资源显示方法、装置、电子设备及存储介质 |
EP4064710A1 (en) * | 2021-03-22 | 2022-09-28 | Beijing Dajia Internet Information Technology Co., Ltd. | Method and apparatus for live streaming |
CN115225945A (zh) * | 2021-04-20 | 2022-10-21 | 北京字节跳动网络技术有限公司 | 对象展示方法、装置、电子设备及计算机可读存储介质 |
WO2023005315A1 (zh) * | 2021-07-28 | 2023-02-02 | 广州博冠信息科技有限公司 | 虚拟直播间的交互控制方法、装置、介质及电子设备 |
WO2023193482A1 (zh) * | 2022-04-07 | 2023-10-12 | Oppo广东移动通信有限公司 | 显示方法、装置、电子设备和计算机可读存储介质 |
US12056458B2 (en) | 2020-05-20 | 2024-08-06 | Tencent Technology (Shenzhen) Company Limited | Translation method and apparatus based on multimodal machine learning, device, and storage medium |
Families Citing this family (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11120093B1 (en) * | 2020-06-02 | 2021-09-14 | Capital One Services, Llc | System and method for providing a content item based on computer vision processing of images |
US20220067993A1 (en) * | 2020-08-31 | 2022-03-03 | Popshop Technologies, Inc. | Live streaming object image capture and image conversion to product catalog |
US20220070388A1 (en) * | 2020-09-02 | 2022-03-03 | Shopify Inc. | Methods and devices for capturing an item image |
CN114637890A (zh) * | 2020-12-16 | 2022-06-17 | 花瓣云科技有限公司 | 在图像画面中显示标签的方法、终端设备及存储介质 |
CN114501041B (zh) * | 2021-04-06 | 2023-07-14 | 抖音视界有限公司 | 特效显示方法、装置、设备及存储介质 |
US20220383394A1 (en) * | 2021-05-28 | 2022-12-01 | Verishop Inc. | Live shopping broadcast |
CN115967822A (zh) * | 2021-10-12 | 2023-04-14 | 北京字跳网络技术有限公司 | 信息显示方法、装置、电子设备和存储介质 |
CN114071179B (zh) * | 2021-11-22 | 2023-12-26 | 北京字跳网络技术有限公司 | 一种直播预览方法、装置、设备及介质 |
CN113888291B (zh) * | 2021-12-08 | 2022-04-22 | 北京达佳互联信息技术有限公司 | 虚拟空间处理方法、装置、电子设备及存储介质 |
CN114501103B (zh) * | 2022-01-25 | 2023-05-23 | 腾讯科技(深圳)有限公司 | 基于直播视频的互动方法、装置、设备及存储介质 |
CN114579870B (zh) * | 2022-05-05 | 2022-10-11 | 深圳格隆汇信息科技有限公司 | 基于关键字的金融主播推荐方法及系统 |
US20240244302A1 (en) * | 2023-01-17 | 2024-07-18 | Bank Of America Corporation | Systems and methods for embedding extractable metadata elements within a channel-agnostic layer of audio-visual content |
US20240259639A1 (en) * | 2023-01-27 | 2024-08-01 | Adeia Guides Inc. | Systems and methods for levaraging machine learning to enable user-specific real-time information services for identifiable objects within a video stream |
US20240334000A1 (en) * | 2023-03-31 | 2024-10-03 | Adeia Guides Inc. | Automated picutre-in-picture positioning and formating |
Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104090762A (zh) * | 2014-07-10 | 2014-10-08 | 福州瑞芯微电子有限公司 | 一种截图处理装置和方法 |
US20160163029A1 (en) * | 2014-12-05 | 2016-06-09 | At&T Intellectual Property I, L.P. | Dynamic image recognition model updates |
CN107633066A (zh) * | 2017-09-21 | 2018-01-26 | 北京金山安全软件有限公司 | 一种信息展示方法、装置、电子设备及存储介质 |
CN108154098A (zh) * | 2017-12-20 | 2018-06-12 | 歌尔股份有限公司 | 一种机器人的目标识别方法、装置和机器人 |
CN108229379A (zh) * | 2017-12-29 | 2018-06-29 | 广东欧珀移动通信有限公司 | 图像识别方法、装置、计算机设备和存储介质 |
CN108596052A (zh) * | 2018-04-09 | 2018-09-28 | Oppo广东移动通信有限公司 | 一种物品查找方法、系统及终端设备 |
CN109034115A (zh) * | 2018-08-22 | 2018-12-18 | Oppo广东移动通信有限公司 | 视频识图方法、装置、终端及存储介质 |
CN109168034A (zh) * | 2018-08-28 | 2019-01-08 | 百度在线网络技术(北京)有限公司 | 商品信息显示方法、装置、电子设备和可读存储介质 |
CN109274999A (zh) * | 2018-10-08 | 2019-01-25 | 腾讯科技(深圳)有限公司 | 一种视频播放控制方法、装置、设备及介质 |
CN109766914A (zh) * | 2018-12-14 | 2019-05-17 | 深圳壹账通智能科技有限公司 | 基于图像识别的物品识别方法、装置、设备及存储介质 |
CN109947988A (zh) * | 2019-03-08 | 2019-06-28 | 百度在线网络技术(北京)有限公司 | 一种信息处理方法、装置、终端设备及服务器 |
CN110378773A (zh) * | 2019-07-26 | 2019-10-25 | 织网(上海)互联网科技有限公司 | 商品展示处理方法、装置、存储介质及平台系统 |
CN110505498A (zh) * | 2019-09-03 | 2019-11-26 | 腾讯科技(深圳)有限公司 | 视频的处理、播放方法、装置及计算机可读介质 |
CN110751539A (zh) * | 2019-10-25 | 2020-02-04 | 北京达佳互联信息技术有限公司 | 物品信息处理方法、装置、终端、服务器及存储介质 |
Family Cites Families (42)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7738706B2 (en) * | 2000-09-22 | 2010-06-15 | Sri International | Method and apparatus for recognition of symbols in images of three-dimensional scenes |
US20060031870A1 (en) * | 2000-10-23 | 2006-02-09 | Jarman Matthew T | Apparatus, system, and method for filtering objectionable portions of a multimedia presentation |
US10032192B2 (en) * | 2003-12-23 | 2018-07-24 | Roku, Inc. | Automatic localization of advertisements |
US8849945B1 (en) * | 2006-03-28 | 2014-09-30 | Amazon Technologies, Inc. | Annotating content with interactive objects for transactions |
WO2009101153A2 (en) * | 2008-02-13 | 2009-08-20 | Ubisoft Entertainment S.A. | Live-action image capture |
US20100154007A1 (en) * | 2008-12-17 | 2010-06-17 | Jean Touboul | Embedded video advertising method and system |
KR20100095924A (ko) * | 2009-02-23 | 2010-09-01 | 삼성전자주식회사 | 동영상의 상황정보를 반영한 광고 키워드 추출 방법 및 장치 |
JP2010245853A (ja) * | 2009-04-07 | 2010-10-28 | Hitachi Ltd | 動画インデクシング方法及び動画再生装置 |
US9015139B2 (en) * | 2010-05-14 | 2015-04-21 | Rovi Guides, Inc. | Systems and methods for performing a search based on a media content snapshot image |
US8732275B2 (en) * | 2011-08-01 | 2014-05-20 | Verizon Patent And Licensing Inc. | Methods and systems for delivering a personalized version of an executable application to a secondary access device associated with a user |
US20130036442A1 (en) * | 2011-08-05 | 2013-02-07 | Qualcomm Incorporated | System and method for visual selection of elements in video content |
US20130275411A1 (en) * | 2012-04-13 | 2013-10-17 | Lg Electronics Inc. | Image search method and digital device for the same |
US9699485B2 (en) * | 2012-08-31 | 2017-07-04 | Facebook, Inc. | Sharing television and video programming through social networking |
US20150070516A1 (en) * | 2012-12-14 | 2015-03-12 | Biscotti Inc. | Automatic Content Filtering |
US9996150B2 (en) * | 2012-12-19 | 2018-06-12 | Qualcomm Incorporated | Enabling augmented reality using eye gaze tracking |
US9560415B2 (en) * | 2013-01-25 | 2017-01-31 | TapShop, LLC | Method and system for interactive selection of items for purchase from a video |
US11483432B2 (en) * | 2013-03-06 | 2022-10-25 | David A. Taylor | Media sharing and communication system |
US8955060B2 (en) * | 2013-05-10 | 2015-02-10 | Verizon Patent And Licensing Inc. | Collaborative parental control of streaming media |
US10002191B2 (en) * | 2013-12-31 | 2018-06-19 | Google Llc | Methods, systems, and media for generating search results based on contextual information |
WO2016004330A1 (en) * | 2014-07-03 | 2016-01-07 | Oim Squared Inc. | Interactive content generation |
KR102077237B1 (ko) * | 2014-09-17 | 2020-02-13 | 삼성전자주식회사 | 영상 재생 장치에 의해 캡쳐된 이미지에 관련된 연관 정보를 휴대용 디바이스에게 제공하는 방법 및 시스템 |
US20170366867A1 (en) * | 2014-12-13 | 2017-12-21 | Fox Sports Productions, Inc. | Systems and methods for displaying thermographic characteristics within a broadcast |
US9436876B1 (en) * | 2014-12-19 | 2016-09-06 | Amazon Technologies, Inc. | Video segmentation techniques |
US9883249B2 (en) * | 2015-06-26 | 2018-01-30 | Amazon Technologies, Inc. | Broadcaster tools for interactive shopping interfaces |
CN105869007A (zh) * | 2015-11-25 | 2016-08-17 | 乐视网信息技术(北京)股份有限公司 | 一种视频购物的实现方法及系统 |
CN105916050A (zh) * | 2016-05-03 | 2016-08-31 | 乐视控股(北京)有限公司 | 电视购物信息处理方法和装置 |
CN106202317A (zh) * | 2016-07-01 | 2016-12-07 | 传线网络科技(上海)有限公司 | 基于视频的商品推荐方法及装置 |
US20180310066A1 (en) * | 2016-08-09 | 2018-10-25 | Paronym Inc. | Moving image reproduction device, moving image reproduction method, moving image distribution system, storage medium with moving image reproduction program stored therein |
WO2018035133A1 (en) * | 2016-08-17 | 2018-02-22 | Vid Scale, Inc. | Secondary content insertion in 360-degree video |
CN108124184A (zh) * | 2016-11-28 | 2018-06-05 | 广州华多网络科技有限公司 | 一种直播互动的方法及装置 |
US10469884B2 (en) * | 2016-12-12 | 2019-11-05 | The Directv Group, Inc. | Devices for presenting video program segments in accordance with definition documents |
US20220179665A1 (en) * | 2017-01-29 | 2022-06-09 | Yogesh Rathod | Displaying user related contextual keywords and controls for user selection and storing and associating selected keywords and user interaction with controls data with user |
CN108462889A (zh) * | 2017-02-17 | 2018-08-28 | 阿里巴巴集团控股有限公司 | 直播过程中的信息推荐方法及装置 |
EP4451197A2 (en) * | 2017-04-27 | 2024-10-23 | Snap Inc. | Map-based graphical user interface indicating geospatial activity metrics |
KR102470919B1 (ko) * | 2017-09-11 | 2022-11-25 | 나이키 이노베이트 씨.브이. | 표적 탐색 및 지오캐싱 이용을 위한 장치, 시스템, 및 방법 |
US10712811B2 (en) * | 2017-12-12 | 2020-07-14 | Facebook, Inc. | Providing a digital model of a corresponding product in a camera feed |
US11500533B2 (en) * | 2018-02-14 | 2022-11-15 | Lg Electronics Inc. | Mobile terminal for displaying a preview image to be captured by a camera and control method therefor |
CN110213307B (zh) | 2018-02-28 | 2021-12-21 | 腾讯科技(深圳)有限公司 | 多媒体数据推送方法、装置、存储介质及设备 |
US10979761B2 (en) * | 2018-03-14 | 2021-04-13 | Huawei Technologies Co., Ltd. | Intelligent video interaction method |
US20180345129A1 (en) * | 2018-07-27 | 2018-12-06 | Yogesh Rathod | Display virtual objects within predefined geofence or receiving of unique code from closest beacon |
US10834462B2 (en) * | 2018-09-17 | 2020-11-10 | International Business Machines Corporation | System and method for context detection of objectionable speech in video |
CN111652678B (zh) * | 2020-05-27 | 2023-11-14 | 腾讯科技(深圳)有限公司 | 物品信息显示方法、装置、终端、服务器及可读存储介质 |
-
2020
- 2020-05-27 CN CN202010460986.6A patent/CN111652678B/zh active Active
-
2021
- 2021-05-10 WO PCT/CN2021/092710 patent/WO2021238631A1/zh active Application Filing
-
2022
- 2022-04-15 US US17/722,186 patent/US12088887B2/en active Active
Patent Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104090762A (zh) * | 2014-07-10 | 2014-10-08 | 福州瑞芯微电子有限公司 | 一种截图处理装置和方法 |
US20160163029A1 (en) * | 2014-12-05 | 2016-06-09 | At&T Intellectual Property I, L.P. | Dynamic image recognition model updates |
CN107633066A (zh) * | 2017-09-21 | 2018-01-26 | 北京金山安全软件有限公司 | 一种信息展示方法、装置、电子设备及存储介质 |
CN108154098A (zh) * | 2017-12-20 | 2018-06-12 | 歌尔股份有限公司 | 一种机器人的目标识别方法、装置和机器人 |
CN108229379A (zh) * | 2017-12-29 | 2018-06-29 | 广东欧珀移动通信有限公司 | 图像识别方法、装置、计算机设备和存储介质 |
CN108596052A (zh) * | 2018-04-09 | 2018-09-28 | Oppo广东移动通信有限公司 | 一种物品查找方法、系统及终端设备 |
CN109034115A (zh) * | 2018-08-22 | 2018-12-18 | Oppo广东移动通信有限公司 | 视频识图方法、装置、终端及存储介质 |
CN109168034A (zh) * | 2018-08-28 | 2019-01-08 | 百度在线网络技术(北京)有限公司 | 商品信息显示方法、装置、电子设备和可读存储介质 |
CN109274999A (zh) * | 2018-10-08 | 2019-01-25 | 腾讯科技(深圳)有限公司 | 一种视频播放控制方法、装置、设备及介质 |
CN109766914A (zh) * | 2018-12-14 | 2019-05-17 | 深圳壹账通智能科技有限公司 | 基于图像识别的物品识别方法、装置、设备及存储介质 |
CN109947988A (zh) * | 2019-03-08 | 2019-06-28 | 百度在线网络技术(北京)有限公司 | 一种信息处理方法、装置、终端设备及服务器 |
CN110378773A (zh) * | 2019-07-26 | 2019-10-25 | 织网(上海)互联网科技有限公司 | 商品展示处理方法、装置、存储介质及平台系统 |
CN110505498A (zh) * | 2019-09-03 | 2019-11-26 | 腾讯科技(深圳)有限公司 | 视频的处理、播放方法、装置及计算机可读介质 |
CN110751539A (zh) * | 2019-10-25 | 2020-02-04 | 北京达佳互联信息技术有限公司 | 物品信息处理方法、装置、终端、服务器及存储介质 |
Non-Patent Citations (1)
Title |
---|
皮思远;唐洪;肖南峰;: "基于全卷积深度学习模型的可抓取物品识别", 重庆理工大学学报(自然科学), no. 02 * |
Cited By (36)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US12056458B2 (en) | 2020-05-20 | 2024-08-06 | Tencent Technology (Shenzhen) Company Limited | Translation method and apparatus based on multimodal machine learning, device, and storage medium |
WO2021238631A1 (zh) * | 2020-05-27 | 2021-12-02 | 腾讯科技(深圳)有限公司 | 物品信息的显示方法、装置、设备及可读存储介质 |
US12088887B2 (en) | 2020-05-27 | 2024-09-10 | Tencent Technology (Shenzhen) Company Limited | Display method and apparatus for item information, device, and computer-readable storage medium |
CN114266327A (zh) * | 2020-09-14 | 2022-04-01 | 阿里健康信息技术有限公司 | 信息展示、处理方法、终端设备、服务器及存储介质 |
CN112492331A (zh) * | 2020-11-05 | 2021-03-12 | 北京三快在线科技有限公司 | 直播方法、装置、系统及存储介质 |
CN112492331B (zh) * | 2020-11-05 | 2022-10-21 | 北京三快在线科技有限公司 | 直播方法、装置、系统及存储介质 |
WO2022108642A1 (en) * | 2020-11-20 | 2022-05-27 | Li Chenhao | Enhanced e-commerce and livestream platform |
CN112533014B (zh) * | 2020-11-26 | 2023-06-09 | Oppo广东移动通信有限公司 | 视频直播中目标物品信息处理和显示方法、装置及设备 |
CN112533014A (zh) * | 2020-11-26 | 2021-03-19 | Oppo广东移动通信有限公司 | 视频直播中目标物品信息处理和显示方法、装置及设备 |
CN112348649A (zh) * | 2020-12-07 | 2021-02-09 | 福州市长乐区三互信息科技有限公司 | 直播类别推荐方法 |
CN112348649B (zh) * | 2020-12-07 | 2022-07-29 | 福州灵和晞科技有限公司 | 直播类别推荐方法 |
WO2022121358A1 (zh) * | 2020-12-08 | 2022-06-16 | 北京达佳互联信息技术有限公司 | 信息显示方法及其装置 |
CN112561632B (zh) * | 2020-12-08 | 2022-04-22 | 北京达佳互联信息技术有限公司 | 信息显示方法、装置、终端及存储介质 |
CN112561632A (zh) * | 2020-12-08 | 2021-03-26 | 北京达佳互联信息技术有限公司 | 信息显示方法、装置、终端及存储介质 |
WO2022121978A1 (zh) * | 2020-12-09 | 2022-06-16 | 北京字节跳动网络技术有限公司 | 直播间置顶消息确定方法、装置、设备和存储介质 |
CN112637620A (zh) * | 2020-12-09 | 2021-04-09 | 杭州艾耕科技有限公司 | 一种对音视频流中物品和语言实时识别分析的方法与装置 |
CN112653900A (zh) * | 2020-12-21 | 2021-04-13 | Oppo广东移动通信有限公司 | 视频直播中的目标显示方法、装置及设备 |
CN113747182A (zh) * | 2021-01-18 | 2021-12-03 | 北京京东拓先科技有限公司 | 物品展示方法、客户端、直播服务器和计算机存储介质 |
CN112929687A (zh) * | 2021-02-05 | 2021-06-08 | 腾竞体育文化发展(上海)有限公司 | 基于直播视频的互动方法、装置、设备及存储介质 |
CN112929687B (zh) * | 2021-02-05 | 2023-12-29 | 腾竞体育文化发展(上海)有限公司 | 基于直播视频的互动方法、装置、设备及存储介质 |
EP4057204A1 (en) * | 2021-03-12 | 2022-09-14 | Beijing Dajia Internet Information Technology Co., Ltd. | Method and apparatus for processing live streaming data |
US11606401B2 (en) | 2021-03-12 | 2023-03-14 | Beijing Dajia Internet Information Technology Co., Ltd. | Method for processing live streaming data and server |
EP4064710A1 (en) * | 2021-03-22 | 2022-09-28 | Beijing Dajia Internet Information Technology Co., Ltd. | Method and apparatus for live streaming |
CN115225945A (zh) * | 2021-04-20 | 2022-10-21 | 北京字节跳动网络技术有限公司 | 对象展示方法、装置、电子设备及计算机可读存储介质 |
CN113111213A (zh) * | 2021-04-23 | 2021-07-13 | 大同市巴什卡机械制造有限公司 | 一种仓储系统自动存储物品方法及装置 |
CN113111213B (zh) * | 2021-04-23 | 2023-07-21 | 大同市巴什卡机械制造有限公司 | 一种仓储系统自动存储物品方法及装置 |
WO2023005315A1 (zh) * | 2021-07-28 | 2023-02-02 | 广州博冠信息科技有限公司 | 虚拟直播间的交互控制方法、装置、介质及电子设备 |
CN113643105A (zh) * | 2021-09-17 | 2021-11-12 | 北京快来文化传播集团有限公司 | 基于直播客户端的直播间商品展示方法和系统 |
CN113643105B (zh) * | 2021-09-17 | 2024-01-19 | 北京快来文化传播集团有限公司 | 基于直播客户端的直播间商品展示方法和系统 |
CN113961833A (zh) * | 2021-10-20 | 2022-01-21 | 维沃移动通信有限公司 | 信息搜索方法、装置及电子设备 |
CN114399699A (zh) * | 2021-12-06 | 2022-04-26 | 北京达佳互联信息技术有限公司 | 目标推荐对象确定方法、装置、电子设备及存储介质 |
WO2023193482A1 (zh) * | 2022-04-07 | 2023-10-12 | Oppo广东移动通信有限公司 | 显示方法、装置、电子设备和计算机可读存储介质 |
CN114827651B (zh) * | 2022-04-25 | 2023-12-01 | 北京达佳互联信息技术有限公司 | 信息处理方法、装置、电子设备及存储介质 |
CN114827651A (zh) * | 2022-04-25 | 2022-07-29 | 北京达佳互联信息技术有限公司 | 信息处理方法、装置、电子设备及存储介质 |
CN115086774B (zh) * | 2022-05-31 | 2024-03-05 | 北京达佳互联信息技术有限公司 | 资源显示方法、装置、电子设备及存储介质 |
CN115086774A (zh) * | 2022-05-31 | 2022-09-20 | 北京达佳互联信息技术有限公司 | 资源显示方法、装置、电子设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
US12088887B2 (en) | 2024-09-10 |
WO2021238631A1 (zh) | 2021-12-02 |
US20220239988A1 (en) | 2022-07-28 |
CN111652678B (zh) | 2023-11-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111652678B (zh) | 物品信息显示方法、装置、终端、服务器及可读存储介质 | |
CN113395542B (zh) | 基于人工智能的视频生成方法、装置、计算机设备及介质 | |
CN111506758B (zh) | 物品名称确定方法、装置、计算机设备及存储介质 | |
CN111491187B (zh) | 视频的推荐方法、装置、设备及存储介质 | |
CN110020880B (zh) | 广告投放方法、装置及设备 | |
CN111897996A (zh) | 话题标签推荐方法、装置、设备及存储介质 | |
CN110163066B (zh) | 多媒体数据推荐方法、装置及存储介质 | |
CN111737573A (zh) | 资源推荐方法、装置、设备及存储介质 | |
CN111368116B (zh) | 图像分类方法、装置、计算机设备及存储介质 | |
CN111339938A (zh) | 信息交互方法、装置、设备及存储介质 | |
CN111541951B (zh) | 基于视频的交互处理方法、装置、终端及可读存储介质 | |
CN113987326B (zh) | 资源推荐方法、装置、计算机设备及介质 | |
CN113918767A (zh) | 视频片段定位方法、装置、设备及存储介质 | |
CN113032587A (zh) | 多媒体信息推荐方法、系统、装置、终端和服务器 | |
CN110213307B (zh) | 多媒体数据推送方法、装置、存储介质及设备 | |
CN112561084B (zh) | 特征提取方法、装置、计算机设备及存储介质 | |
CN114281936A (zh) | 分类方法、装置、计算机设备及存储介质 | |
CN113609358A (zh) | 内容分享方法、装置、电子设备以及存储介质 | |
CN112528760A (zh) | 图像处理方法、装置、计算机设备及介质 | |
CN111754272A (zh) | 广告推荐方法、推荐广告显示方法、装置及设备 | |
CN111353513B (zh) | 一种目标人群筛选的方法、装置、终端和存储介质 | |
CN112070586B (zh) | 基于语义识别的物品推荐方法、装置、计算机设备及介质 | |
CN114462580A (zh) | 文本识别模型的训练方法、文本识别方法、装置和设备 | |
CN113936240A (zh) | 确定样本图像的方法、装置、设备及存储介质 | |
CN115905374A (zh) | 应用功能的展示方法、装置、终端及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
REG | Reference to a national code |
Ref country code: HK Ref legal event code: DE Ref document number: 40028107 Country of ref document: HK |
|
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |