CN115486088B - 信息交互方法、计算机可读存储介质、通信终端 - Google Patents

信息交互方法、计算机可读存储介质、通信终端 Download PDF

Info

Publication number
CN115486088B
CN115486088B CN202180000654.2A CN202180000654A CN115486088B CN 115486088 B CN115486088 B CN 115486088B CN 202180000654 A CN202180000654 A CN 202180000654A CN 115486088 B CN115486088 B CN 115486088B
Authority
CN
China
Prior art keywords
image
instruction
local
information
video window
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202180000654.2A
Other languages
English (en)
Other versions
CN115486088A (zh
Inventor
温垦
马明园
马永达
张洪雷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BOE Technology Group Co Ltd
Beijing BOE Technology Development Co Ltd
Original Assignee
BOE Technology Group Co Ltd
Beijing BOE Technology Development Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BOE Technology Group Co Ltd, Beijing BOE Technology Development Co Ltd filed Critical BOE Technology Group Co Ltd
Publication of CN115486088A publication Critical patent/CN115486088A/zh
Application granted granted Critical
Publication of CN115486088B publication Critical patent/CN115486088B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486—Drag-and-drop
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/11—Region-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2624—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of whole input images, e.g. splitscreen
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20021—Dividing image into blocks, subimages or windows
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Graphics (AREA)
  • Computational Linguistics (AREA)
  • Computer Hardware Design (AREA)
  • Geometry (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • User Interface Of Digital Computer (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

公开一种信息交互方法、计算机可读存储介质、通信终端，信息交互方法应用于本地终端，所述信息交互方法包括：在与远程终端视频通话的过程中，响应于第一交互指令，对所述本地终端的显示屏幕进行分屏显示，以至少形成第一分屏和第二分屏，所述第一分屏用于显示所述视频通话的界面，所述第二分屏用于显示购物界面；响应于第一选择指令，获取所述第一选择指令所对应的商品的图像；其中，第一选择指令为：从所述购物界面中选择商品的指令；显示合成图像，所述合成图像为将所述商品的图像与所述视频通话的界面中的至少一部分图像进行图像合成后得到的图像。

Description

信息交互方法、计算机可读存储介质、通信终端
技术领域
本公开涉及显示技术领域，具体涉及一种信息交互方法、计算机可读存储介质、通信终端。
背景技术
随着互联网产业的迅速发展，利用互联网在线购物成为人们生活中越来越普遍的事情。在一些智能购物场景中，用户站在电子设备前方，电子设备采集用户的图像，以及将用户所选择的商品的图像与用户的图像进行合成并显示，从而实现在线试衣的效果。
发明内容
本公开提出了一种信息交互方法、计算机可读存储介质、通信终端。
第一方面，本公开提供一种信息交互方法，应用于本地终端，其中，所述信息交互方法包括：
在与远程终端视频通话的过程中，响应于第一交互指令，对所述本地终端的显示屏幕进行分屏显示，以至少形成第一分屏和第二分屏，所述第一分屏用于显示所述视频通话的界面，所述第二分屏用于显示购物界面；
响应于第一选择指令，获取所述第一选择指令所对应的商品的图像；其中，第一选择指令为：从所述购物界面中选择商品的指令；
显示合成图像，所述合成图像为将所述商品的图像与所述视频通话的界面中的至少一部分图像进行图像合成后得到的图像。
在一些实施例中，所述视频通话的界面包括：本地视频窗口和远程端视频窗口，所述本地视频窗口用于显示所述本地终端采集到的图像，所述远程端视频窗口用于显示所述远程终端采集到的图像；
所述显示合成图像之前，还包括：
从所述本地视频窗口所显示的图像中获取至少一个人像，作为目标人像；
将所述商品的图像与所述目标人像进行合成，得到所述合成图像；或，将所述目标人像发送至服务器，接收所述服务器发送的所述合成图像。
在一些实施例中，所述第一选择指令为根据所述购物界面上受到的点击操作而产生的指令；或者为，根据所述显示屏幕上受到的第一滑动操作而产生的指令；其中，所述点击操作包括：通过触控而对所述购物界面进行点击的操作，或者通过隔空手势而对所述购物界面进行点击的操作；所述第一滑动操作包括：从所述购物界面移动至所述视频通话的界面的隔空手势操作；或者，从所述购物界面移动至所述视频通话的界面的触控操作；
从所述本地视频窗口所显示的图像中获取至少一个人像，作为目标人像，具体包括：
当所述第一选择指令为根据所述单击操作而产生的指令时，检测所述本地视频窗口中的人像数量，当所述本地视频窗口中存在一个人像时，将所述人像作为目标人像；当所述本地视频窗口中的人像数量大于1时，输出对象选择请求，以提示用户输入对象选择信息；当接收到用户输入的对象选择信息时，根据所述对象选择信息确定所述目标人像；
当所述第一选择指令为根据所述第一滑动操作而产生的指令时，根据所述第一滑动操作在所述显示屏幕上的路径，确定所述目标人像。
在一些实施例中，所述信息交互方法还包括：
检测所述本地视频窗口中的人像数量，当所述本地视频窗口中的人像数量为多个时，将所述本地视频窗口分为多个本地视频子窗口，每个所述本地视频子窗口显示其中一个人像。
在一些实施例中，将所述商品的图像与所述目标人像进行合成，之后还包括：
将所述合成图像发送至所述远程终端或服务器。
在一些实施例中，所述信息交互方法还包括：
响应于所述第一选择指令，获取所述第一选择指令所对应的商品的链接信息；
将所述链接信息显示至所述本地视频窗口中，并将所述链接信息发送至所述远程终端或所述服务器。
在一些实施例中，所述信息交互方法还包括：
响应于商品推荐指令，获取所述商品推荐指令所对应的商品信息；
根据所述商品推荐指令所对应的商品信息，向所述远程终端发送提醒信息，以供所述远程终端的用户选择是否接受商品推荐；
响应于所述远程终端的用户的接受指令，将所述商品推荐信息对应的商品的图像与所述远程端窗口中的至少一个人像进行合成。
在一些实施例中，所述信息交互方法还包括：
响应于对比指令，获取所述视频通话的历史记录中产生的至少两张合成图像，并将所述至少两张合成图像进行对比显示；
其中，所述至少两张合成图像包括至少两张第一合成图像，或者包括至少两张第二合成图像，或者包括至少一张第一合成图像和至少一张第二合成图像；所述第一合成图像为所述本地视频窗口中的人像与所述商品的图像的合成图像，所述第二合成图像为远程端窗口中的人像与所述商品的图像的合成图像。
在一些实施例中，响应于对比指令，获取所述视频通话的历史记录中产生的至少两张合成图像，并将所述至少两张合成图形进行对比显示，具体包括：
响应于第一对比指令，获取所述视频通话的历史记录中产生的至少两张所述第一合成图像，并将获得的所述第一合成图像进行对比显示；
响应于第二对比指令，获取所述视频通话的历史记录中产生的至少两张所述第二合成图像，并将获得的所述第二合成图像进行对比显示；
响应于第三对比指令，获取所述视频通话的历史记录中产生的至少一张所述第一合成图像和至少一张所述第二合成图像，并在当前视频通话的本地视频窗口中显示所述第一合成图像、在远程端视频窗口中显示所述第二合成图像。
在一些实施例中，所述视频通话的界面包括：本地视频窗口和远程端视频窗口，所述远程端视频窗口用于显示所述远程终端采集到的图像；所述信息交互方法还包括：
响应于第二交互指令，从所述本地终端中获取预先存储的本地用户的人体三维模型图；或者，进行图像采集，以获取本地用户的人体三维模型图；
响应于第二选择指令，获取所述第二选择指令所对应的商品的三维模型图；
将所述人体三维模型图与所述商品的三维模型图合成，生成第一合成模型图；
将所述第一合成模型图显示至所述本地视频窗口中，并发送至所述远程终端或服务器。
在一些实施例中，所述视频通话的界面包括：本地视频窗口和远程端视频窗口，所述信息交互方法还包括：
响应于窗口创建指令，在所述视频通话的界面中建立分享窗口；
响应于信息分享指令，将所述信息分享指令所对应的待分享信息显示至所述分享窗口，所述分享窗口中显示的信息用于在所述本地终端与所述远程终端之间共享。
在一些实施例中，所述信息分享指令为，对所述本地终端或所述远程终端上的文件进行第一预设操作而产生的指令；所述待分享信息包括所述第一预设操作所对应的文件。
在一些实施例中，所述信息分享指令包括：第一分享指令和第二分享指令，所述第一分享指令为：对所述本地终端或所述远程终端上的预设人体模型图进行第二预设操作而产生的指令；所述第二分享指令为：对所述购物界面上进行第三预设操作而产生的指令；
响应于信息分享指令，将所述信息分享指令所对应的待分享信息显示至所述分享窗口，具体包括：
响应于所述第一分享指令，将所述第一分享指令所对应的预设人体模型图显示至所述分享窗口；
响应于所述第二分享指令，将所述第二分享指令所对应的商品的三维模型图与所述分享窗口中的预设人体模型图合成，生成第二合成模型图，并将该第二合成模型图显示至所述分享窗口。
在一些实施例中，所述视频通话的界面包括：本地视频窗口和远程端视频窗口；所述信息交互方法还包括：
在所述视频通话的过程中，响应于第三交互指令，对所述显示屏幕进行分屏显示，以至少形成第三分屏和第四分屏，所述第三分屏用于显示所述本地视频窗口，所述第四分屏用于显示所述远程端视频窗口；
响应于捕获指令，从所述远程端视频窗口所显示的图像中获取目标物的图像；
将所述目标物的图像与所述本地视频窗口中的图像进行合成，并基于合成后的图像与远程终端进行视频传输。
在一些实施例中，所述捕获指令为，根据所述显示屏幕上的第二滑动操作而产生的指令；
将所述目标物的图像与所述本地视频窗口中的图像进行合成，具体包括：
根据所述第二滑动操作的移动路径，确定所述目标物的图像在所述本地视频窗口中的图像中的目标放置位置；
根据所述目标放置位置，将所述目标物的图像与所述本地视频窗口中的图像进行合成。
在一些实施例中，根据所述目标放置位置，将所述目标物的图像与所述本地视频窗口中的图像进行合成，具体包括：
当接收到清晰度调节指令时，对所述目标图的图像进行清晰度提升处理，得到第一图像；对所述本地视频窗口中的图像进行清晰度降低处理，得到第二图像；
根据所述目标放置位置，将所述第一图像覆盖在所述第二图像的目标放置位置。
在一些实施例中，基于合成后的图像与远程终端进行视频传输，具体包括：
响应于隐私传输指令，将所述合成后的图像在所述第三分屏中显示，并对所述合成后的图像进行图像处理后，发送至所述远程终端或所述服务器。
在一些实施例中，确定所述目标物的图像在所述本地视频窗口中的图像中的目标放置位置，之后还包括：
对所述本地视频窗口中的图像进行图像识别，获取所述目标放置位置处的容纳空间的尺寸，所述容纳空间为用于放置所述目标物的空间；
根据所述目标物的尺寸和所述容纳空间的尺寸，判断所述目标物与所述容纳空间是否匹配；若不匹配，则生成推荐信息或提示信息。
第二方面，本公开还提供一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现上述的信息交互方法。
第三方面，本公开还提供一种通信终端，包括：
存储器和处理器，所述存储器上存储有计算机程序，其中，所述计算机程序被所述处理器执行时实现上述的信息交互方法。
附图说明
附图是用来提供对本公开的进一步理解，并且构成说明书的一部分，与下面的具体实施方式一起用于解释本公开，但并不构成对本公开的限制。在附图中：
图1为本公开的一些实施例中提供的信息交互方法的示意图。
图2为本公开的另一些实施例中提供的信息交互方法的示意图。
图3为一个场景中本地终端的显示屏幕的画面变化示意图。
图4为另一个场景中本地终端的显示屏幕的画面变化示意图。
图5为本公开的另一些实施例中提供的信息交互方法的示意图。
图6为本公开的另一些实施例中提供的信息交互方法的示意图。
图7为本公开的一些实施例中多张第一合成图像进行对比的示意图。
图8为本公开的一些实施例中接收到第二对比指令时的视频通话界面变化示意图。
图9为本公开的另一些实施例中提供的信息交互方法的示意图。
图10为本公开的另一些实施例中提供的信息交互方法的示意图。
图11A为本公开的实施例中提供的分享窗口在本地终端的界面上的示意图。
图11B为本公开的实施例中提供的分享窗口在远程终端的界面上的示意图。
图12为本公开的另一些实施例中提供的信息交互方法的示意图。
图13为本公开的一个示例中提供的本地终端在接收到捕获指令前后的界面变化示意图。
具体实施方式
以下结合附图对本公开的具体实施方式进行详细说明。应当理解的是，此处所描述的具体实施方式仅用于说明和解释本公开，并不用于限制本公开。
本公开实施例提供一种信息交互方法，该信息交互方法应用于本地终端，本地终端可以与至少一个远程终端进行通信。图1为本公开的一些实施例中提供的信息交互方法的示意图，如图1所示，信息交互方法包括：
S11、在本地终端与远程终端进行视频通话的过程中，响应于第一交互指令，对本地终端的显示屏幕进行分屏显示，以至少形成第一分屏和第二分屏。其中，第一分屏用于显示视频通话的界面，第二分屏用于显示网上购物应用的购物界面。
S12、响应于第一选择指令，获取第一选择指令所对应的商品的图像；其中，第一选择指令为：从购物界面中选择商品的指令。例如，第一选择指令为：用户对购物界面中所显示的商品进行触控而产生的指令；又例如，第一选择指令为：用户对购物界面中所显示的商品进行拖动而产生的指令。
S13、显示合成图像，该合成图像为将商品的图像与视频通话的界面中的至少一部分图像进行图像合成后得到的图像。其中，可以是本地终端对商品的图像与视频通话的界面中的至少一部分图像进行合成，并将合成图像发送给服务器，服务器再将该合成图像发送给远程终端；也可以是，本地终端将商品的图像与视频通话的界面中的至少一部分图像发送至服务器，由服务器进行图像合成后，将合成后的图像发送给本地终端以及远程终端。
在本公开实施例中，视频通话进程可以与网上购物应用之间发生信息交互，当本地终端接收到第一选择指令时，将相应的商品的图像与视频通话的界面中的图像进行合成，本地终端能够显示合成后的图像，这样本地用户在视频通话过程中即可看到合成图像，提高了用户体验。
另外，上述合成图像除了在本地终端进行显示之外，还可以发送给远程终端，这样，视频通话的双方用户或多方用户能够同时看到合成图像的内容，有利于远程终端的用户为本地终端的用户提供购物建议。例如，视频通话的界面中显示的图像包括：本地终端所采集到的图像和远程终端所采集到的图像，具体地，本地终端采集到的图像中包括人像，远程终端采集到的图像中包括人像。第一选择指令所对应的商品可以为衣服、帽子、配饰等，将商品的图像与人像进行合成，从而呈现试穿效果，而远程终端的用户看到商品的试穿效果后，可以给出购物建议，进而提高了线上购物体验，增强了交互性。
图2为本公开的另一些实施例中提供的信息交互方法的示意图，如图2所示，在一些实施例中，信息交互方法包括：
S11、在本地终端与远程终端进行视频通话的过程中，响应于第一交互指令，对本地终端的显示屏幕进行分屏显示，以至少形成第一分屏和第二分屏。其中，第一分屏用于显示所述视频通话的界面，第二分屏用于显示网上购物应用的购物界面。其中，视频通话的界面包括：本地视频窗口和远程端视频窗口，本地视频窗口用于显示所述本地终端实时采集到的图像，远程端视频窗口用于显示远程终端实时采集到的图像。
S12、响应于第一选择指令，获取第一选择指令所对应的商品的图像；其中，第一选择指令为：从购物界面中选择商品的指令。
在一个示例中，第一选择指令为根据购物界面上受到的点击操作而产生的指令；所述点击操作包括：通过触控而对所述购物界面进行点击的操作，或者通过隔空手势、语音指令、面部动作和面部表情中的至少一种而对购物界面进行点击的操作。在另一个示例中，根据购物界面上受到的第一滑动操作而产生的指令；所述第一滑动操作包括：从购物界面移动至视频通话的界面的隔空手势操作；或者，从购物界面移动至视频通话的界面的触控操作。其中，所谓的“触控”是指，与显示屏幕直接接触的动作。
S121、从本地视频窗口所显示的图像中获取至少一个人像，作为目标人像。
在一些实施例中，当第一选择指令为根据点击操作而产生的指令时，步骤S121具体包括：检测本地视频窗口中的人像数量，当本地视频窗口中只有一个人像时，则将该人像作为目标人像；当本地视频窗口中存在多个人像时，输出对象选择请求，以提示本地终端的用户输入对象选择信息；当接收到用户输入的对象选择信息时，根据对象选择信息确定所述目标人像。
例如，对象选择请求为文字信息或语音信息，用于提醒用户输入对象选择信息。对象选择信息可以为直接通过点击显示屏幕的方式进行输入，例如，用户点击本地视频窗口中的某个人像，则将被点击的人像作为目标人像。
其中，可以通过人脸识别的方式确定人像数量。
当第一选择指令为根据第一拖动动作而产生的指令时，步骤S121具体包括：根据第一滑动操作在显示屏幕上的路径确定所述目标人像。
其中，第一滑动操作的路径为：从购物界面的某个商品图标的位置，移动至本地视频窗口中。根据第一滑动操作在显示屏幕上的路径确定目标人像，具体可以为，根据第一滑动操作的终点位置确定目标人像。
在一个示例中，若第一滑动操作的终点位置落在本地视频窗口中的一个人像上，则该人像即为目标人像；在另一个示例中，本地视频窗口中显示有至少一个人像和背景图像，若第一滑动操作的终点位置落在本地视频窗口中的背景图像上，则将本地视频窗口中的每个人像均作为目标人像。
在另一些实施例中，在视频通话的过程中，还可以实时检测本地视频窗口中的人像数量，当本地视频窗口有多个人像时，则将本地视频窗口分成多个本地视频子窗口，每个本地视频子窗口显示其中一个人像。这种情况下，显示屏幕上接收到第一滑动操作时，若第一滑动操作的终点位置落在某一个本地视频子窗口中，则将该本地视频子窗口中的人像作为目标人像。
S122、本地终端将商品的图像与目标人像进行合成，得到合成图像；或者，本地终端将目标人像发送至服务器，以使服务器根据商品的图像和目标人像进行合成，生成合成图像。
在一些实施例中，将商品的图像与目标人像进行合成，具体可以为，对人像进行图像识别，确定人体姿势，并根据人体姿势对商品的图像进行调整，并将调整后的商品的图像覆盖在人像的相应位置上。示例性地，根据商品属性确定商品的图像在人像上的目标覆盖区域，商品属性具体是指，商品的类型(例如，为上衣、裤子、连衣裙、眼睛、帽子等)。例如，当商品为上衣时，则根据人体姿势对商品的图像进行调整，并将调整后的商品的图像覆盖在人像的上半部分上。当商品为帽子时，将帽子的图像覆盖在人像的顶部。
S13、显示合成图像。
其中，步骤S122中的合成图像是由本地终端合成得到时，在本地终端生成该合成图像之后，还可以将合成图像发送至远程终端；或者发送至服务器，以使服务器将合成图像发送至远程终端，从而使远程终端的用户看到合成图像。其中，本地终端可以在显示合成图像的同时，将合成图像发送至服务器或远程终端；也可以在显示合成图像之前或之后，将合成图像发送至服务器或远程终端。
在一些实施例中，步骤S122之后还包括：本地终端对本地视频窗口和远程端视频窗口的大小进行调整；或者，本地终端响应于服务器发送的窗口调整指令，对本地视频窗口和远程端视频窗口的大小进行调整。示例性地，在步骤S122之前，本地视频窗口嵌套在远程端视频窗口中，在步骤S122之后，将远程视频窗口与本地视频窗口的尺寸互换，使得远程端视频窗口嵌套在本地视频窗口中；或者，将本地视频窗口与远程端视频窗口并排显示。
需要说明的是，在视频通话的过程中，本地视频窗口和远程端视频窗口中显示的可以是视频，每个窗口中的视频包括多个视频帧，每个视频帧中均可以包括至少一个人像。当本地终端接收到第一选择指令时，可以将商品的图像与连续的多张人像分别进行合成，从而形成视频。例如，商品为上衣，那么，当用户输入第一选择指令后，本地终端的本地视频窗口中所显示的将是：试穿有相应上衣的用户的视频；相应地，远程终端的用户也将看到试穿有上衣的用户的视频。
图3为一个场景中本地终端的显示屏幕的画面变化示意图，图3中仅示出了本地视频窗口和远程端视频窗口中均只有一个人像的情况。如图3中的(a)图所示，在初始状态下，本地视频窗口10嵌套在远程端视频窗口20中，本地视频窗口10中显示人像A，远程视频窗口20中显示人像B；当用户在购物界面上进行触控操作，且触控位置为商品1的位置时，将商品1的图像与本地视频窗口中的人像A进行合成，并将本地视频窗口10与远程视频窗口20的尺寸进行调节，如图3中的(b)图所示。
图4为另一个场景中本地终端的显示屏幕的画面变化示意图，图4中仅示出了本地视频窗口和远程端视频窗口中均只有一个人像的情况，如图4中的(a)图所示，在初始状态下，本地视频窗口10嵌套在远程端视频窗口20中；当用户在购物界面上进行第一拖动操作(例如，点击商品1，并将商品1拖动至本地视频窗口10中)时，如图4中的(b)图所示，将商品1的图像与本地视频窗口10中的人像A进行合成。并且，如图4中的(c)图所示，将本地视频窗口10与远程视频窗口20的尺寸进行调节。
在一些实施例中，当本地视频窗口中的人像与商品的图像的合成图像传输至远程终端时，远程终端的用户可以给出对商品的评价、建议，这时，本地终端的用户可以根据该评价建议在购物界面重新选择商品(例如，选择其他颜色、尺寸的商品)，从而使得新的商品的图像与本地视频窗口中的人像重新进行合成。
在一些实施例中，步骤S12中，响应于第一选择指令获取商品的图像的同时，还可以获取第一选择指令所对应的商品的链接信息，该链接信息例如为商品的购买网址或二维码。步骤S122中，本地终端将商品的图像与本地视频窗口中的目标人像进行合成的同时，或者，本地终端将目标人像发送至服务器的同时，还可以将商品的链接信息显示在本地视频窗口中，并将链接信息发送至远程终端，或者将链接信息发送给服务器，以使服务器将链接信息发送给远程终端。这样，如果远程终端的用户对商品感兴趣，则可以直接根据链接信息购买相应的商品。
图5为本公开的另一些实施例中提供的信息交互方法的示意图，如图5所示，信息交互方法包括：
S21、在与远程终端视频通话的过程中，响应于第一交互指令，对本地终端的显示屏幕进行分屏显示，以至少形成第一分屏和第二分屏。其中，第一分屏用于显示视频通话的界面，第二分屏用于显示购物界面。
S22、响应于商品推荐指令，获取商品推荐指令所对应的商品信息。
可选地，商品推荐指令为：点击购物界面中的商品，并将其拖动至远程端视频窗口中的拖动操作而产生的指令。
S23、根据商品推荐指令所对应的商品信息，向远程终端发送提醒信息，以供远程终端的用户选择是否接受商品推荐。
可选地，当本地终端的用户点击购物界面中的商品，并将其拖动至远程端视频窗口中时，生成提醒信息并向远程终端发送，从而使远程终端输出提醒信息，该提醒信息用于对远程终端的用户进行提醒，提醒信息的内容可以包括：商品推荐指令所对应的商品的信息，以及询问远程终端是否接受。提醒信息可以为文字信息，例如“对方用户向您推荐XXX商品，您是否试穿/试戴”。
S24、当接收到远程终端的用户的接受指令时，响应于该接受指令，将商品推荐指令对应的商品的图像与远程端视频窗口中的至少一个人像进行合成。其中，所述接受指令用于指示远程终端的用户接受上述商品推荐指令所对应的商品。
可选地，步骤S24中，将商品的图像与远程端视频窗口中的至少一个人像合成后，合成图像可以在本地终端的远程端视频窗口中进行显示，另外还将合成图像直接发送至远程终端进行显示；或将合成图像发送至服务器，以供服务器将合成图像发送至远程终端进行显示。
当远端视频窗口中有多个人像时，可以根据商品推荐指令对应的拖动操作的终点位置，确定远端视频窗口中的目标人像；当接收到远程终端的用户的接受指令时，将商品推荐指令随对应的商品的图像与远程端视频窗口中的目标人像进行合成。
在上述实施例中，将商品的图像与本地视频窗口中的人像进行合成之后，以及将商品的图像与远程端视频窗口中的人像进行合成之后，还可以将合成的图像进行保存。例如，在最近一段时间内(例如，一周内)，每接收到一次本地用户输入的第一选择指令，则对产生的合成图像进行保存；每接收到一次远程终端发送的接受指令，同样对产生的合成图像进行保存。又例如，可以保存一定次数的第一选择指令所生成的合成图像、以及一定次数的接受指令所生成的合成图像。如上文所述，当接收到第一选择指令时，将商品的图像与连续多帧图像中的人像进行合成，而在对合成图像进行保存时，每接收到一次第一选择指令，则可以只保存一张合成后的图像。同样地，每接收到一次远程终端发送的接受指令，可以只保存一张合成后的图像。
图6为本公开的另一些实施例中提供的信息交互方法的示意图，如图6所示，信息交互方法包括：
S31、在与远程终端视频通话的过程中，响应于第一交互指令，对本地终端的显示屏幕进行分屏显示，以至少形成第一分屏和第二分屏。其中，第一分屏用于显示视频通话的界面，第二分屏用于显示购物界面。
S32、响应于对比指令，获取视频通话的历史记录中产生的至少两张合成图像，并将至少两张合成图像进行对比显示。
其中，至少两张合成图像包括至少两张第一合成图像；或者包括至少两张第二合成图像；或者包括至少一张第一合成图像和至少一张第二合成图像。其中，第一合成图像为本地视频窗口中的人像与商品的图像的合成图像，第二合成图像为远程端窗口中的人像与商品的图像的合成图像。
在一些实施例中，对比指令包括第一对比指令、第二对比指令和第三对比指令。其中，第一对比指令用于指示将至少两张第一合成图像进行对比显示；第二对比指令用于指示将指示两张第二合成图像进行对比显示；第三对比指令用于指示将至少一张第一合成图像与至少一张第二合成图像进行对比显示。其中，第一对比指令、第二对比指令和第三对比指令均可以为用户向本地终端所输入的指令。
步骤S32具体可以包括以下步骤S32a、步骤S32b和步骤S32c中的至少一者：
S32a、当接收到第一对比指令时，响应于该第一对比指令，获取视频通话的历史记录中产生的至少两张第一合成图像，并将获得的第一合成图像进行对比显示。应当理解的是，获取的至少两张第一合成图像是基于不同次的第一选择指令产生的。
图7为本公开的一些实施例中多张第一合成图像进行对比的示意图，如图7所示，当接收到第一对比指令时，可以在显示屏幕上显示多张第一合成图像11，此时，可以不需要显示购物界面。另外，还可以历史记录中的第一选择指令所对应的商品的缩略图或标记13，这样，用户可以通过点击商品的缩略图或标记，则显示相应的第一合成图像11。
S32b、当接收到第二对比指令时，响应于该第二对比指令，获取视频通话的历史记录中产生的至少两张第二合成图像，并将获得的第二合成图像进行对比显示。应当理解的是，获取的至少两张第二合成图像是基于不同次的接受指令产生的。
S32c、当接收到第三对比指令时，响应于第三对比指令，获取视频通话的历史记录中产生的至少一张第一合成图像和至少一张第二合成图像，并在当前视频通话的本地视频窗口中显示第一合成图像、在远程端窗口中显示第二合成图像；以及，将本地视频窗口和远程端视频窗口调整为并排显示。其中，本地视频窗口和远程端视频窗口中所显示的图像能够传输至远程终端，从而使得本地终端的用户和远程终端的用户均可以看到对比结果。
图8为本公开的一些实施例中接收到第二对比指令时的视频通话界面变化示意图，如图8所示，在视频通话的过程中，本地视频窗口10嵌套在远程端视频窗口20中；当在视频通话的过程中接收到第二对比指令时，则在当前的视频通话界面的本地视频窗口10中显示第一合成图像11、在远程端视频窗口20中显示第二合成图像21，并将本地视频窗口10和远程端视频窗口20调整为并排显示。
图9为本公开的另一些实施例中提供的信息交互方法的示意图，如图9所示，该信息交互方法包括：
S41、在与远程终端视频通话的过程中，响应于第一交互指令，对本地终端的显示屏幕进行分屏显示，以至少形成第一分屏和第二分屏，第一分屏用于显示视频通话的界面，第二分屏用于显示购物界面。
S42、响应于第二交互指令，获取本地用户的人体三维模型图。
其中，人体三维模型图可以是本地终端中预先存储的人体三维模型图，也可以通过摄像头采集图像的方式进行获取。例如，在接收到第二交互指令时，发出提醒信息，以提醒用户站在指定位置并转动身体，通过摄像头进行图像采集，并通过三维建模，得到用户的三维模型图。
S43、响应于第二选择指令，获取第二选择指令所对应的商品的三维模型图。
其中，第二选择指令为选择购物界面中的商品的指令，例如，当检测到第二选择指令时，获取相应商品的多个视角图，并根据商品的多个视角图，获取商品的三维模型图。
S44、将人体三维模型图与商品的三维模型图合成，生成第一合成模型图。
S45、将第一合成模型图显示至本地视频窗口中，并发送至远程终端或服务器。其中，第一合成模型图可以直接由本地终端发送给远程终端；或者，由本地终端发送给服务器，再由服务器发送给远程终端。当然，也可以是，本地终端将人体三维模型与商品的三维模型图发送给服务器，由服务器生成所述第一合成模型图之后，将第一合成模型图发送给本地终端和远程终端。
例如，当商品为衣服时，生成的第一合成模型图即为用户试穿衣服的三维模型图，从而便于本地终端的用户和远程终端的用户看到更逼真的试穿效果。
图10为本公开的另一些实施例中提供的信息交互方法的示意图，如图10所示，信息交互方法包括：
S51、在与远程终端视频通话的过程中，响应于第一交互指令，对本地终端的显示屏幕进行分屏显示，以至少形成第一分屏和第二分屏。其中，第一分屏用于显示视频通话的界面，第二分屏用于显示购物界面。
其中，视频通话的界面包括：本地视频窗口和远程端视频窗口。
S52、响应于窗口创建指令，在视频通话的界面中建立分享窗口。
图11A为本公开的实施例中提供的分享窗口在本地终端的界面上的示意图，图11B为本公开的实施例中提供的分享窗口在远程终端的界面上的示意图，如图11A所示，在本地终端的显示屏幕上，显示有视频通话的界面和购物界面，视频通话的界面包括本地视频窗口10和远程端视频窗口20，本地视频窗口10中显示人像A，远程端视频窗口20中显示人像B。如图11B所示，在远程终端的视频通话的界面上，显示有本地视频窗口40和远程视频窗口50，本地视频窗口10中显示人像B，远程端视频窗口50中显示人像A。当本地终端接收到窗口创建指令时，可以在本地终端的视频通话的界面上建立分享窗口30，并可以向服务器发送相应的指令，再由服务器向远程终端发送相应的指令，以在远程终端的视频通话的界面上建立分享窗口30。
S53、响应于信息分享指令，将信息分享指令所对应的待分享信息显示至分享窗口。其中，分享窗口中的信息用于在本地终端与远程终端之间共享。即，待分享信息在本地终端的分享窗口中显示，并在远程终端的共享窗口中显示。
在一个示例中，信息分享指令为，对本地终端或远程终端上的文件进行第一预设操作而产生的指令；待分享信息包括第一预设操作所对应的文件。该文件例如为：图片文件、文档文件、网页文件、视频文件、音乐文件等。
例如，第一预设操作例如为拖动操作。本地终端的显示屏幕界面除了包括第一分屏和第二分屏之外，还可以包括边缘区域，在该边缘区域，可以显示待分享的文件的图标。当本地用户将待分享的文件的图标拖动至分享窗口时，本地终端将文件发送至服务器，由服务器将文件发送至远程终端。同样地，当远程终端的用户将待分享的文件的图标拖动至分享窗口时，远程终端也可以将文件发送至服务器，再由服务器发送至本地终端。
在另一个示例中，信息分享指令包括：第一分享指令和第二分享指令。其中，第一分享指令为：对本地终端或远程终端上的预设人体模型图进行第二预设操作而产生的指令。例如，第二预设操作为：将本地终端或远程终端上的预设人体模型图拖动至分享窗口。第二分享指令为：对购物界面上进行第三预设操作而产生的指令；例如，第三预设操作为：将购物界面上的商品拖动至分享窗口。
这种情况下，步骤S53具体包括：
S531、当接收到第一分享指令时，响应于第一分享指令，将第一分享指令所对应的预设人体模型图显示至分享窗口。
S532、当接收到第二分享指令时，响应于第二分享指令，将第二分享指令所对应的商品的三维模型图与分享窗口中的预设人体模型图合成，生成第二合成模型图，并将该第二合成模型图发送至分享窗口。
其中，预设人体模型图可以为本地终端中预存的第三方用户的人体三维模型图，第三方用户为除了本地终端的用户、远程终端的用户之外的用户。商品为衣服时，通过步骤S53可以实现为第三方用户在线选衣的目的。
图12为本公开的另一些实施例中提供的信息交互方法的示意图，如图12所示，信息交互方法在视频通话的过程中进行，视频通话的界面包括本地视频窗口和远程视频窗口。信息交互方法包括：
S61、在与远程终端视频通话的过程中，当接收到第三交互指令时，响应于该第三交互指令，对本地终端的显示屏幕进行分屏显示，以至少形成第三分屏和第四分屏，第三分屏用于显示本地视频窗口，第四分屏用于显示远程端视频窗口。
S62、响应于捕获指令，从远程端视频窗口所显示的图像中获取目标物的图像。
在一个示例中，捕获指令为，根据显示屏幕上的第二滑动操作而产生的指令。例如，远程视频窗口中显示有至少一个物体的图像，第二滑动操作具体可以为，通过触控或通过隔空手势来选中某一个物体并将该物体拖动至本地视频窗口的操作。被选中的物体即为目标物。
在一个示例中，远程端视频窗口中显示的图像为远程终端实时采集到的图像，远程终端采集到的图像即为远程终端所处环境的影像，该影像中可以包括一个或多个物体的图像。在另一个示例中，远程端视频窗口中显示的图像包括目标物的图像，且目标物的图像为远程终端所获取到的目标物的三维模型图。例如，远程终端对目标物的实体进行扫描，并通过三维建模的方式，生成三维模型图，该三维模型图被发送至本地终端，并在本地终端的远程视频窗口中显示。又例如，远程终端对目标物的二维码进行扫描，通过二维码直接获取目标物的三维模型图。
S63、将目标物的图像与本地视频窗口中的图像进行合成。
其中，步骤S63具体包括：
S631、根据第二滑动操作的移动路径，确定目标物的图像在本地视频窗口中的图像中的目标放置位置。
S632、根据目标放置位置，将目标物的图像与本地视频窗口中的图像进行合成。在一个示例中，步骤S632具体可以包括：将目标物的图像直接覆盖在本地视频窗口中的图像的目标位置处。
S64、基于合成后的图像与远程终端进行视频传输。
其中，步骤S64具体包括：将合成后的图像在本地视频窗口中显示，并发送至远程终端或服务器，从而使得本地终端的用户和远程终端的用户均可以看到合成后的图像。其中，合成后的图像可以直接发送给远程终端，或者发送给服务器，由服务器发送给远程终端。
图13为本公开的一个示例中提供的本地终端在接收到捕获指令前后的界面变化示意图。在一个示例中，远程终端的用户在逛街，例如，在逛家具市场；本地终端的用户在自己家中，本地终端在与远程终端正在进行视频通话，此时，如图13中的(a)图所示，本地终端的本地视频窗口10中显示用户家中的环境图像，远程视频窗口20中显示家具市场的环境图像。当本地终端的用户从远程视频窗口20中看到喜欢的家具时，如图13中的(b)图所示，选中该家具并将其拖动至本地视频窗口10中(即，进行第二滑动操作)，从而使该家具的图像与用户家中的环境图像进行合成，以使本地终端的用户和远程终端的用户均可以看到家具在家中的摆放情况，进而便于判断家具与家中的环境是否匹配。
在另一个示例中，根据目标放置位置，将目标物的图像与本地视频窗口中的图像进行合成，具体可以包括：当接收到清晰度调节指令时，对目标物的图像进行清晰度提升处理，得到第一图像；对本地视频窗口中的图像进行清晰度降低处理，得到第二图像。之后，根据目标放置位置，将第一图像覆盖在第二图像的目标放置位置。
其中，清晰度调节指令可以为本地终端的用户输入至本地终端的指令。应当理解的是，对于清晰度越高的图像，人眼的感觉越好。例如，清晰度降低处理可以为模糊化处理；清晰度提升处理可以为：去噪和/或去模糊或分辨率增强处理。通过对目标物的图像进行清晰度提升处理、对本地视频窗口中的图像进行清晰度降低处理，可以使本地终端的用户和远程终端的用户看到目标物与周围图像的匹配情况，并且，在进行图像传输时，可以节省带宽。
可选地，在步骤S631或步骤S632之后，还可以包括：对本地视频窗口中的图像进行图像识别，获取目标放置位置处的容纳空间的尺寸，其中，容纳空间为用于放置目标物的空间。根据目标物的尺寸和容纳空间的尺寸，判断目标物与容纳空间是否匹配；若不匹配，则生成推荐信息或提示信息。
示例性地，在获取容纳空间的尺寸时，可以对本地视频窗口中的图像进行图像识别，从而获得本地视频窗口中的容纳空间的图像尺寸，并根据本地终端的摄像头在进行图像采集时的参数(例如焦距、缩放大小等)，获得容纳空间的实际尺寸。目标物的尺寸可以由远程终端获取，例如，目标物家具市场中的家具，远程终端可以对家具市场的二维码进行扫描，从而至少获得目标物的信息。推荐信息具体为：与容纳空间相匹配、且与目标物的种类相同的物体的信息。例如，当目标物与容纳空间不匹配时，可以自动在相关联的购物应用上搜索与目标物种类相同的物体，从而获取推荐信息。提示信息用于提示用户目标物与容纳空间不匹配。
例如，远程视频窗口中显示有椅子的图像，本地视频窗口中显示有两个柜子的图像，本地终端的用户将椅子拖动至本地视频窗口中两个柜子之间的区域时，若两个柜子之间的区域不足以容纳椅子，则发出提示信息。另外，还可以自动在购物应用上搜索其他椅子的信息，并向用户进行推荐。
在一些示例中，步骤S64可以包括：将合成后的图像直接在本地视频窗口中显示，并发送至远程终端或服务器。在另一些示例中，步骤S64可以包括：响应于隐私传输指令，将合成后的图像在第三分屏中显示，并对合成后的图像进行图像处理后，发送至远程终端或服务器。其中，对合成后的图像进行图像处理，具体可以包括：对合成后的图像的至少部分区域进行模糊化处理或隐藏处理，例如，在至少部分区域增加马赛克或者覆盖预设的图片。这样，本地终端的用户可以清楚地看到自己家中的环境和目标物合成后的效果，而对方看到的只是处理后的局部图或模糊图。
本公开还提供一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现上述信息交互方法。
本公开还提供一种通信终端，例如，手机或者其他能够进行通信的终端。该通信终端包括存储器和处理器，所述存储器上存储有计算机程序，所述计算机程序被所述处理器执行时实现上述信息交互方法。
上述存储器和所述计算机可读存储介质包括但不限于以下可读介质：诸如随机存取存储器(RAM)、只读存储器(ROM)、非易失性随机存取存储器(NVRAM)、可编程只读存储器(PROM)、可擦除可编程只读存储器(EPROM)、电可擦除PROM(EEPROM)、闪存、磁或光数据存储、寄存器、磁盘或磁带、诸如光盘(CD)或DVD(数字通用盘)的光存储介质以及其它非暂时性介质。处理器的示例包括但不限于通用处理器、中央处理单元(CPU)、微处理器、数字信号处理器(DSP)、控制器、微控制器、状态机等。
可以理解的是，以上实施方式仅仅是为了说明本公开的原理而采用的示例性实施方式，然而本公开并不局限于此。对于本领域内的普通技术人员而言，在不脱离本公开的精神和实质的情况下，可以做出各种变型和改进，这些变型和改进也视为本公开的保护范围。

Claims (19)

1.一种信息交互方法，应用于本地终端，其中，所述信息交互方法包括：
在与远程终端视频通话的过程中，响应于第一交互指令，对所述本地终端的显示屏幕进行分屏显示，以至少形成第一分屏和第二分屏，所述第一分屏用于显示所述视频通话的界面，所述第二分屏用于显示网上购物应用的购物界面；
响应于第一选择指令，获取所述第一选择指令所对应的商品的图像；其中，第一选择指令为：从所述购物界面中选择商品的指令；
显示合成图像，所述合成图像为将所述商品的图像与所述视频通话的界面中的至少一部分图像进行图像合成后得到的图像，所述本地终端在显示合成图像的同时，将所述合成图像发送至服务器或所述远程终端；或者，在显示合成图像之前或之后，将所述合成图像发送至所述服务器或所述远程终端。
2.根据权利要求1所述的信息交互方法，其中，所述视频通话的界面包括：本地视频窗口和远程端视频窗口，所述本地视频窗口用于显示所述本地终端采集到的图像，所述远程端视频窗口用于显示所述远程终端采集到的图像；
所述显示合成图像之前，还包括：
从所述本地视频窗口所显示的图像中获取至少一个人像，作为目标人像；
将所述商品的图像与所述目标人像进行合成，得到所述合成图像；或，将所述目标人像发送至服务器，接收所述服务器发送的所述合成图像。
3.根据权利要求2所述的信息交互方法，其中，所述第一选择指令为根据所述购物界面上受到的点击操作而产生的指令；或者为，根据所述显示屏幕上受到的第一滑动操作而产生的指令；其中，所述点击操作包括：通过触控而对所述购物界面进行点击的操作，或者通过隔空手势而对所述购物界面进行点击的操作；所述第一滑动操作包括：从所述购物界面移动至所述视频通话的界面的隔空手势操作；或者，从所述购物界面移动至所述视频通话的界面的触控操作；
从所述本地视频窗口所显示的图像中获取至少一个人像，作为目标人像，具体包括：
当所述第一选择指令为根据所述点击操作而产生的指令时，检测所述本地视频窗口中的人像数量，当所述本地视频窗口中存在一个人像时，将所述人像作为目标人像；当所述本地视频窗口中的人像数量大于1时，输出对象选择请求，以提示用户输入对象选择信息；当接收到用户输入的对象选择信息时，根据所述对象选择信息确定所述目标人像；
当所述第一选择指令为根据所述第一滑动操作而产生的指令时，根据所述第一滑动操作在所述显示屏幕上的路径，确定所述目标人像。
4.根据权利要求2所述的信息交互方法，其中，所述信息交互方法还包括：
检测所述本地视频窗口中的人像数量，当所述本地视频窗口中的人像数量为多个时，将所述本地视频窗口分为多个本地视频子窗口，每个所述本地视频子窗口显示其中一个人像。
5.根据权利要求2所述的信息交互方法，其中，所述信息交互方法还包括：
响应于所述第一选择指令，获取所述第一选择指令所对应的商品的链接信息；
将所述链接信息显示至所述本地视频窗口中，并将所述链接信息发送至所述远程终端或所述服务器。
6.根据权利要求2所述的信息交互方法，其中，所述信息交互方法还包括：
响应于商品推荐指令，获取所述商品推荐指令所对应的商品信息；
根据所述商品推荐指令所对应的商品信息，向所述远程终端发送提醒信息，以供所述远程终端的用户选择是否接受商品推荐；
响应于所述远程终端的用户的接受指令，将所述商品推荐信息对应的商品的图像与所述远程端视频窗口中的至少一个人像进行合成。
7.根据权利要求2至6中任意一项所述的信息交互方法，其中，所述信息交互方法还包括：
响应于对比指令，获取所述视频通话的历史记录中产生的至少两张合成图像，并将所述至少两张合成图像进行对比显示；
其中，所述至少两张合成图像包括至少两张第一合成图像，或者包括至少两张第二合成图像，或者包括至少一张第一合成图像和至少一张第二合成图像；所述第一合成图像为所述本地视频窗口中的人像与所述商品的图像的合成图像，所述第二合成图像为远程端视频窗口中的人像与所述商品的图像的合成图像。
8.根据权利要求7所述的信息交互方法，其中，响应于对比指令，获取所述视频通话的历史记录中产生的至少两张合成图像，并将所述至少两张合成图形进行对比显示，具体包括：
响应于第一对比指令，获取所述视频通话的历史记录中产生的至少两张所述第一合成图像，并将获得的所述第一合成图像进行对比显示；
响应于第二对比指令，获取所述视频通话的历史记录中产生的至少两张所述第二合成图像，并将获得的所述第二合成图像进行对比显示；
响应于第三对比指令，获取所述视频通话的历史记录中产生的至少一张所述第一合成图像和至少一张所述第二合成图像，并在当前视频通话的本地视频窗口中显示所述第一合成图像、在远程端视频窗口中显示所述第二合成图像。
9.根据权利要求1所述的信息交互方法，其中，所述视频通话的界面包括：本地视频窗口和远程端视频窗口，所述远程端视频窗口用于显示所述远程终端采集到的图像；所述信息交互方法还包括：
响应于第二交互指令，从所述本地终端中获取预先存储的本地用户的人体三维模型图；或者，进行图像采集，以获取本地用户的人体三维模型图；
响应于第二选择指令，获取所述第二选择指令所对应的商品的三维模型图；
将所述人体三维模型图与所述商品的三维模型图合成，生成第一合成模型图；
将所述第一合成模型图显示至所述本地视频窗口中，并发送至所述远程终端或服务器。
10.根据权利要求1所述的信息交互方法，其中，所述视频通话的界面包括：本地视频窗口和远程端视频窗口，所述信息交互方法还包括：
响应于窗口创建指令，在所述视频通话的界面中建立分享窗口；
响应于信息分享指令，将所述信息分享指令所对应的待分享信息显示至所述分享窗口，所述分享窗口中显示的信息用于在所述本地终端与所述远程终端之间共享。
11.根据权利要求10所述的信息交互方法，其中，所述信息分享指令为，对所述本地终端或所述远程终端上的文件进行第一预设操作而产生的指令；所述待分享信息包括所述第一预设操作所对应的文件。
12.根据权利要求10所述的信息交互方法，其中，所述信息分享指令包括：第一分享指令和第二分享指令，所述第一分享指令为：对所述本地终端或所述远程终端上的预设人体模型图进行第二预设操作而产生的指令；所述第二分享指令为：对所述购物界面上进行第三预设操作而产生的指令；
响应于信息分享指令，将所述信息分享指令所对应的待分享信息显示至所述分享窗口，具体包括：
响应于所述第一分享指令，将所述第一分享指令所对应的预设人体模型图显示至所述分享窗口；
响应于所述第二分享指令，将所述第二分享指令所对应的商品的三维模型图与所述分享窗口中的预设人体模型图合成，生成第二合成模型图，并将该第二合成模型图显示至所述分享窗口。
13.根据权利要求1所述的信息交互方法，其中，所述视频通话的界面包括：本地视频窗口和远程端视频窗口；所述信息交互方法还包括：
在所述视频通话的过程中，响应于第三交互指令，对所述显示屏幕进行分屏显示，以至少形成第三分屏和第四分屏，所述第三分屏用于显示所述本地视频窗口，所述第四分屏用于显示所述远程端视频窗口；
响应于捕获指令，从所述远程端视频窗口所显示的图像中获取目标物的图像；
将所述目标物的图像与所述本地视频窗口中的图像进行合成，并基于合成后的图像与远程终端进行视频传输。
14.根据权利要求13所述的信息交互方法，其中，所述捕获指令为，根据所述显示屏幕上的第二滑动操作而产生的指令；
将所述目标物的图像与所述本地视频窗口中的图像进行合成，具体包括：
根据所述第二滑动操作的移动路径，确定所述目标物的图像在所述本地视频窗口中的图像中的目标放置位置；
根据所述目标放置位置，将所述目标物的图像与所述本地视频窗口中的图像进行合成。
15.根据权利要求14所述的信息交互方法，其中，根据所述目标放置位置，将所述目标物的图像与所述本地视频窗口中的图像进行合成，具体包括：
当接收到清晰度调节指令时，对所述目标物的图像进行清晰度提升处理，得到第一图像；对所述本地视频窗口中的图像进行清晰度降低处理，得到第二图像；
根据所述目标放置位置，将所述第一图像覆盖在所述第二图像的目标放置位置。
16.根据权利要求13所述的信息交互方法，其中，基于合成后的图像与远程终端进行视频传输，具体包括：
响应于隐私传输指令，将所述合成后的图像在所述第三分屏中显示，并对所述合成后的图像进行图像处理后，发送至所述远程终端或所述服务器。
17.根据权利要求14所述的信息交互方法，其中，确定所述目标物的图像在所述本地视频窗口中的图像中的目标放置位置，之后还包括：
对所述本地视频窗口中的图像进行图像识别，获取所述目标放置位置处的容纳空间的尺寸，所述容纳空间为用于放置所述目标物的空间；
根据所述目标物的尺寸和所述容纳空间的尺寸，判断所述目标物与所述容纳空间是否匹配；若不匹配，则生成推荐信息或提示信息。
18.一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现权利要求1至17中任意一项所述的信息交互方法。
19.一种通信终端，包括：
存储器和处理器，所述存储器上存储有计算机程序，其中，所述计算机程序被所述处理器执行时实现权利要求1至17中任意一项所述的信息交互方法。
CN202180000654.2A 2021-03-30 2021-03-30 信息交互方法、计算机可读存储介质、通信终端 Active CN115486088B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2021/084139 WO2022205001A1 (zh) 2021-03-30 2021-03-30 信息交互方法、计算机可读存储介质、通信终端

Publications (2)

Publication Number Publication Date
CN115486088A CN115486088A (zh) 2022-12-16
CN115486088B true CN115486088B (zh) 2024-09-24

Family

ID=83455425

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202180000654.2A Active CN115486088B (zh) 2021-03-30 2021-03-30 信息交互方法、计算机可读存储介质、通信终端

Country Status (3)

Country Link
US (1) US20240185530A1 (zh)
CN (1) CN115486088B (zh)
WO (1) WO2022205001A1 (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103220490A (zh) * 2013-03-15 2013-07-24 广东欧珀移动通信有限公司 一种在视频通信中实现特效的方法及视频用户端
CN106708452A (zh) * 2015-11-17 2017-05-24 腾讯科技（深圳）有限公司 一种信息共享方法及终端
CN108259810A (zh) * 2018-03-29 2018-07-06 上海掌门科技有限公司 一种视频通话的方法、设备和计算机存储介质
CN111405343A (zh) * 2020-03-18 2020-07-10 广州华多网络科技有限公司 直播互动方法、装置、电子设备及存储介质
CN111935489A (zh) * 2019-05-13 2020-11-13 阿里巴巴集团控股有限公司 网络直播方法、信息显示方法、装置、直播服务器及终端设备

Family Cites Families (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5548789A (en) * 1991-01-24 1996-08-20 Canon Kabushiki Kaisha Message communication processing apparatus for selectively converting storing and transmitting messages of different lengths
US5659625A (en) * 1992-06-04 1997-08-19 Marquardt; Stephen R. Method and apparatus for analyzing facial configurations and components
US5512939A (en) * 1994-04-06 1996-04-30 At&T Corp. Low bit rate audio-visual communication system having integrated perceptual speech and video coding
US5896128A (en) * 1995-05-03 1999-04-20 Bell Communications Research, Inc. System and method for associating multimedia objects for use in a video conferencing system
AU4307499A (en) * 1998-05-03 1999-11-23 John Karl Myers Videophone with enhanced user defined imaging system
US6539100B1 (en) * 1999-01-27 2003-03-25 International Business Machines Corporation Method and apparatus for associating pupils with subjects
US7877443B2 (en) * 2005-05-12 2011-01-25 International Business Machines Corporation Method, system, and computer program product for web conference participant display render acknowledgement
KR101240261B1 (ko) * 2006-02-07 2013-03-07 엘지전자 주식회사 이동통신 단말기의 영상 통화 장치 및 방법
TW200828043A (en) * 2006-12-29 2008-07-01 Cheng-Hsien Yang Terminal try-on simulation system and operating and applying method thereof
CN101610421B (zh) * 2008-06-17 2011-12-21 华为终端有限公司 视频通讯方法、装置及系统
US8903130B1 (en) * 2011-05-09 2014-12-02 Google Inc. Virtual camera operator
US10129211B2 (en) * 2011-09-15 2018-11-13 Stephan HEATH Methods and/or systems for an online and/or mobile privacy and/or security encryption technologies used in cloud computing with the combination of data mining and/or encryption of user's personal data and/or location data for marketing of internet posted promotions, social messaging or offers using multiple devices, browsers, operating systems, networks, fiber optic communications, multichannel platforms
US10424009B1 (en) * 2013-02-27 2019-09-24 Amazon Technologies, Inc. Shopping experience using multiple computing devices
CN104219197A (zh) * 2013-05-30 2014-12-17 腾讯科技（深圳）有限公司 一种视频会话方法、终端和系统
CN103716227B (zh) * 2013-12-12 2018-03-30 北京京东尚科信息技术有限公司 一种用于即时通讯中进行信息交互的方法和装置
US10771736B2 (en) * 2014-06-30 2020-09-08 Microsoft Technology Licensing, Llc Compositing and transmitting contextual information during an audio or video call
CN106157073A (zh) * 2015-04-03 2016-11-23 阿里巴巴集团控股有限公司 交互沟通方法及设备
CN104750450A (zh) * 2015-04-03 2015-07-01 魅族科技（中国）有限公司 一种即时通信中的文件共享方法及终端
CN105243549A (zh) * 2015-09-25 2016-01-13 深圳市麦驰安防技术有限公司 基于可视对讲平台的可视购物方法及其系统
CN105975071A (zh) * 2016-04-28 2016-09-28 努比亚技术有限公司 一种信息处理方法及电子设备
KR102328102B1 (ko) * 2017-03-08 2021-11-17 삼성전자주식회사 전자 장치 및 전자 장치의 화면 표시방법
US11113883B2 (en) * 2017-12-22 2021-09-07 Houzz, Inc. Techniques for recommending and presenting products in an augmented reality scene
CN109992336A (zh) * 2018-01-03 2019-07-09 阿里巴巴集团控股有限公司 一种界面显示方法、装置、终端设备和存储介质
CN108447043B (zh) * 2018-03-30 2022-09-20 腾讯科技（深圳）有限公司 一种图像合成方法、设备及计算机可读介质
US20190332000A1 (en) * 2018-04-25 2019-10-31 4Panes, LLC Projection Screen System
CN109040643B (zh) * 2018-07-18 2021-04-20 奇酷互联网络科技（深圳）有限公司 移动终端及远程合影的方法、装置
CN108876936B (zh) * 2018-07-27 2022-10-25 京东方科技集团股份有限公司 虚拟显示方法、装置、电子设备及计算机可读存储介质
CN110177250A (zh) * 2019-04-30 2019-08-27 上海掌门科技有限公司 一种用于在视频通话过程中提供采购信息的方法与设备
CN110611849A (zh) * 2019-10-10 2019-12-24 四川长虹电器股份有限公司 一种基于电视分屏的影视周边购物方法
CN111429209A (zh) * 2020-03-11 2020-07-17 青岛海尔智能技术研发有限公司 用于多用户虚拟逛街的方法及装置、服务器
CN113726640A (zh) * 2020-05-26 2021-11-30 华为技术有限公司 一种即时通信方法及设备
CN111752448A (zh) * 2020-05-28 2020-10-09 维沃移动通信有限公司 信息显示方法、装置及电子设备
CN111913630B (zh) * 2020-06-30 2022-10-18 维沃移动通信有限公司 视频会话方法、装置和电子设备
CN112367532A (zh) * 2020-11-09 2021-02-12 珠海格力电器股份有限公司 商品的展示方法、装置、直播服务器及存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103220490A (zh) * 2013-03-15 2013-07-24 广东欧珀移动通信有限公司 一种在视频通信中实现特效的方法及视频用户端
CN106708452A (zh) * 2015-11-17 2017-05-24 腾讯科技（深圳）有限公司 一种信息共享方法及终端
CN108259810A (zh) * 2018-03-29 2018-07-06 上海掌门科技有限公司 一种视频通话的方法、设备和计算机存储介质
CN111935489A (zh) * 2019-05-13 2020-11-13 阿里巴巴集团控股有限公司 网络直播方法、信息显示方法、装置、直播服务器及终端设备
CN111405343A (zh) * 2020-03-18 2020-07-10 广州华多网络科技有限公司 直播互动方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
US20240185530A1 (en) 2024-06-06
CN115486088A (zh) 2022-12-16
WO2022205001A1 (zh) 2022-10-06

Similar Documents

Publication Publication Date Title
US20160253843A1 (en) Method and system of management for switching virtual-reality mode and augmented-reality mode
CN111178191B (zh) 信息播放方法、装置、计算机可读存储介质及电子设备
EP3972239A1 (en) Method and apparatus for virtual fitting
CN106774937B (zh) 一种增强现实技术中的图像交互方法及其装置
CN111414225A (zh) 三维模型远程展示方法、第一终端、电子设备及存储介质
JP6120467B1 (ja) サーバ装置、端末装置、情報処理方法、およびプログラム
JP2018109842A (ja) 化粧品提示システム、化粧品提示方法、及び化粧品提示サーバ
JP6656572B1 (ja) 情報処理装置、表示制御方法および表示制御プログラム
TW201814552A (zh) 空間物件搜尋排序方法、系統與電腦可讀取儲存裝置
US9990665B1 (en) Interfaces for item search
JP5600148B2 (ja) 映像配信装置、映像配信方法及び映像配信プログラム
WO2024088249A1 (zh) 用于显示信息的方法、装置、电子设备、介质及产品
US20210005022A1 (en) Guided consumer experience
US20130002822A1 (en) Product ordering system, program and method
KR20240144436A (ko) 클라우드 데스크톱의 표시 방법, 장치, 기기 및 저장 매체
JP7139236B2 (ja) 画像処理装置、画像処理方法および画像処理プログラム
CN115486088B (zh) 信息交互方法、计算机可读存储介质、通信终端
JP2017228278A (ja) サーバ装置、端末装置、情報処理方法、およびプログラム
CN111010526A (zh) 一种视频通讯中的互动方法及装置
US20160292780A1 (en) Interactive communication method and apparatus
JP3230092U (ja) 試着画像提供システム
CN112580409B (zh) 目标物体选择方法及相关产品
KR20140039508A (ko) 가상 코디 관리 시스템 및 방법
JP2020190860A (ja) 注文端末、注文システム、注文受付方法、注文処理装置、及びプログラム
TWI793762B (zh) 交互方法、裝置、伺服器及電腦可讀存儲介質

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant