CN117454543A - 一种产品设计协同方法及系统 - Google Patents

一种产品设计协同方法及系统 Download PDF

Info

Publication number
CN117454543A
CN117454543A CN202311388990.6A CN202311388990A CN117454543A CN 117454543 A CN117454543 A CN 117454543A CN 202311388990 A CN202311388990 A CN 202311388990A CN 117454543 A CN117454543 A CN 117454543A
Authority
CN
China
Prior art keywords
document
preset command
user
group
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202311388990.6A
Other languages
English (en)
Inventor
彭守昆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Shangtang Design Consulting Co ltd
Original Assignee
Shenzhen Shangtang Design Consulting Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Shangtang Design Consulting Co ltd filed Critical Shenzhen Shangtang Design Consulting Co ltd
Priority to CN202311388990.6A priority Critical patent/CN117454543A/zh
Publication of CN117454543A publication Critical patent/CN117454543A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00Computer-aided design [CAD]
    • G06F30/10Geometric CAD
    • G06F30/17Mechanical parametric or variational design
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00Computer-aided design [CAD]
    • G06F30/10Geometric CAD
    • G06F30/12Geometric CAD characterised by design entry means specially adapted for CAD, e.g. graphical user interfaces [GUI] specially adapted for CAD
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • G06F9/453Help systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • G06Q10/101Collaborative creation, e.g. joint development of products or services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • H04L67/565Conversion or adaptation of application format or content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2111/00Details relating to CAD techniques
    • G06F2111/02CAD in a network environment, e.g. collaborative CAD or distributed simulation

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Geometry (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Human Resources & Organizations (AREA)
  • Entrepreneurship & Innovation (AREA)
  • General Engineering & Computer Science (AREA)
  • Strategic Management (AREA)
  • Pure & Applied Mathematics (AREA)
  • Mathematical Optimization (AREA)
  • Mathematical Analysis (AREA)
  • Computational Mathematics (AREA)
  • Evolutionary Computation (AREA)
  • Computer Hardware Design (AREA)
  • Signal Processing (AREA)
  • Economics (AREA)
  • Architecture (AREA)
  • Marketing (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Multimedia (AREA)
  • Electrically Operated Instructional Devices (AREA)

Abstract

本发明公开了一种产品设计协同方法及系统,能够对产品设计协同过程中的内容进行更全面的进行记录。节点服务器一旦识别到进入协同模式,就记录将带教老师对文档的操作过程的视频帧数据写入到视频文件中,以便生成指导视频,无需用户手动确定录屏的时机。另一方面,由节点服务器采集产品设计协同过程中的内容,除了带教老师操作的画面还可以获取带教老师在键盘输入的操作指令等更全面的信息,便于后续新组员进行复习时能够获得更全面的学习内容。

Description

一种产品设计协同方法及系统
技术领域
本发明涉及产品设计技术领域,特别涉及一种产品设计协同方法及系统。
背景技术
所谓协同,就是指协调两个或者两个以上的不同资源或者个体,协同一致地完成某一任务的过程或能力。而所有有助于协同的软件都可以称作是协同软件。产品设计协同一般包括以下几种情形,第一种是甲方对乙方的设计方案提供指导意见,第二种是乙方公司各部门之间提出修改意见,第三种是小组内带教老师对新组员提供指导。为了满足上述几种情形中的协同需求,产品设计协同软件要求满足为多方用户提供共同操作同一个产品图纸(可以是二维模型或三维模型)的需求。
专利文献1提供了一种云端CAD处理方法,其满足了为多方用户提供共同操作同一个产品图纸(可以是二维模型或三维模型)的需求。其数据集中在云端,并且CAD服务也在云端,不同用户可根据权限直接访问相同的文件,解决了不同用户的协同问题。其采用文档服务+后端服务+云端渲染+Web端显示的技术方案,将传统CAD重客户端的能力迁移至云端,由云端完成计算(后端服务)和渲染(云端渲染),再将结果传送到Web端(Web端显示),并通过不同的命令操作进行Web端和云端的交互和同步,数据存储迁移至云端(文档服务),带来了便于协同等优点。
在第三种情形中,新组员存在需要带教老师手把手指导如何操作以生成对应的产品图纸(可以是二维模型或三维模型)的需求,在专利文献1的框架下,对新组员进行手把手指导时,其场景如下:
新组员在绘制产品图纸设计过程中,对图纸中产品某个部件的结构不确定时或者不清楚以怎么样的操作来绘制出该结构(例如在CAD设计中,新组员不清楚以怎么样的操作可以方便快速绘制出A部件对应尺寸、齿数的多个齿轮,而带教老师会教组员们使用插件快速实现等)时,会通过即时通讯方式向带教老师反馈问题并请求带教老师通过其终端对保存在云服务器上新组员未绘制完成的产品图纸进行操作,云服务器会将带教老师的操作过程生成视频流并发送给新组员的终端,新组员在自己的终端播放视频流,以查看带教老师绘制出A部件的操作过程,在带教老师绘制A部件的过程中,也会通过即时通讯软件向新组员说明操作过程的要点,以便加深对新组员的指导效果。
在上述场景中,带教老师一旦完成A部件的绘制,意味着指导过程已经结束。可以理解的是,对于比较复杂的操作,仅仅观看一遍,还无法达到较好的学习效果。常见的做法是新组员在自己的终端利用录屏软件将带教老师操作的过程录制下来,以便后续反复观看。然而,上述做法存在对指导过程涉及的内容记录不全面的问题,例如,录屏开启的时机如果把握不好,可能导致缺少对绘制A部件的某些操作的记录。
专利文献1,中国专利,公开号,CN115665120A,专利名称,一种云端CAD处理方法、系统、计算机设备和存储介质,公开日,2023-01-31。
发明内容
本发明的目的在于至少解决现有技术中存在的技术问题之一,提供一种产品设计协同方法及系统,能够对产品设计协同过程中的内容进行更全面的进行记录。
第一方面,提供一种产品设计协同方法,所述方法包括:
节点服务器建立云端CAD服务程序的进程后,加载协同文档;所述协同文档是根据第一用户终端输入的文档ID确定的文档;
建立云端CAD服务程序的进程的权限列表,并在权限列表的控制集合中添加第一用户终端,在权限列表的播放集合中添加第一用户终端;其中,在控制集合中的终端被标记为控制端,在播放集合中的终端被标记为播放端;
基于权限列表,分别对播放端和控制端执行相应的操作:
对于每个播放端:
云端CAD服务将文档中的模型几何数据转换为视频帧数据,并通过视频流转发服务发送至播放端的前端UI组件进行模型显示;
对于每个控制端:
控制端的前端UI组件响应用户操作生成用户操作指令,并封装为特定格式的消息通过信令服务发送到云端CAD服务,云端CAD服务接收并解析响应消息,将响应结果转发至播放端的前端UI组件进行显示;其中,所述用户操作包括鼠键操作,以及基于命令状态数据的命令操作或基于模型属性数据的属性操作;
在基于权限列表,分别对播放端和控制端执行相应的操作过程中,响应于第一用户终端发送的协同指令,进入协同模式;所述协同指令中携带有与第二用户终端对应的账号ID;
其中,进入协同模式包括:在权限列表的控制集合中添加第二用户终端,在权限列表的播放集合中添加第二用户终端,并且按照时间顺序将视频帧数据写入到一个视频文件中,以在退出协同模式时,基于所述视频文件生成指导视频。
作为进一步改进,在生成指导视频的过程中,所述方法还包括:
检测到用户操作为预设命令的起始操作时,标记所述用户操作对应的视频帧数据为所述预设命令的起始帧;
检测到用户操作为预设命令的结束操作时,标记所述用户操作对应的视频帧数据为所述预设命令的结束帧;
根据起始帧和结束帧确定各预设命令所属帧组;每个预设命令所属帧组均包括所述预设命令的起始帧、结束帧以及处于所述预设命令的起始帧、结束帧之间的视频帧数据;
使用所述预设命令的名称标记所属帧组;
在播放所述指导视频时,在播放进度条上显示各预设命令所属帧组的范围并在各预设命令所属帧组的范围旁显示对应预设命令的名称。
作为进一步改进,在生成指导视频的过程中,所述方法还包括:
根据起始操作和结束操作确定各预设命令所属操作组;每个预设命令所属操作组均包括所述预设命令的起始操作、结束操作以及处于所述预设命令的起始操作、结束操作之间的其他用户操作;每个预设命令所属操作组均关联有相应的预设命令所属帧组;
识别每个预设命令所属操作组中的键盘操作及各键盘操作被触发的相对顺序;
在播放所述指导视频过程中,检测到当前播放进度处于任一预设命令所属帧组的范围时,在播放界面按照各键盘操作被触发的相对顺序依次显示与当前预设命令所属帧组关联的预设命令所属操作组中的键盘操作对应的提示文字。
作为进一步改进,所述方法还包括:
在识别每个预设命令所属操作组中的键盘操作的过程中,如果检测到与撤销操作或删除操作对应的键盘操作时,在播放界面不显示与撤销操作或删除操作对应的键盘操作的提示文字。
作为进一步改进,所述方法还包括:
以进入协同模式时的文档作为第一文档,以退出协同模式时的文档作为第二文档;
记录在协同模式下从第一文档变化为第二文档过程中的每一步用户操作,得到操作记录表;所述操作记录表用于在打开第二文档时,通过执行撤销操作还原在协同模式下第一文档变化为第二文档过程中文档的状态,或在打开第一文档时,通过执行重做操作还原在协同模式下第一文档变化为第二文档过程中文档的状态。
作为进一步改进,在播放指导视频的过程中,检测到进入练习模式时,节点服务器建立云端CAD服务程序的进程,并加载第一文档或第二文档;
在练习模式下,所述方法还包括:
检测到当前播放进度处于任一预设命令所属帧组的范围时,将当前播放进度对应的预设命令所属帧组的起始操作作为目标操作;
基于所述操作记录表,将第一文档或第二文档还原为在协同模式下执行完所述目标操作上一个用户操作后的状态,以便用户练习。
作为进一步改进,所述操作记录表的每一个表项记录的数据包括:发生序号、用户操作对应的序列化字节数据、表项名称;当任一用户操作为对应的预设命令所属操作组中的起始操作时,其表项名称为操作组名称,所述操作组名称为预设命令的名称,否则为默认值;
所述基于所述操作记录表,将第一文档或第二文档还原为在协同模式下执行完所述目标操作上一个用户操作后的状态,具体包括:
从操作记录表中匹配出与所述目标操作对应的预设命令所属操作组的操作组名称相同的表项,作为目标表项;
基于所述目标表项,将第一文档或第二文档还原为在协同模式下执行完所述目标操作上一个用户操作后的状态,以便用户练习。
作为进一步改进,基于所述目标表项,将第一文档还原为在协同模式下执行完所述目标操作上一个用户操作后的状态,具体包括:
在打开第一文档时,通过重做操作将第一文档还原至目标表项的上一个表项对应的状态;
基于所述目标表项,将第一文档还原为在协同模式下执行完所述目标操作上一个用户操作后的状态,具体包括:
在打开第二文档时,通过撤销操作将第二文档还原至目标表项的上一个表项对应的状态。
作为进一步改进,所述方法还包括:
当从操作记录表中匹配出的与目标操作对应的目标表项的数量为多个时,则将目标操作对应的预设命令所属操作组的前N个预设命令所属操作组的操作组名称分别与目标表项前N个表项名称不为默认值的表项的表项名称进行比较;N为正整数;
将不一致的目标表项排除,直至剩下一个一致的目标表项作为最终目标表项;
基于所述最终目标表项,将第一文档或第二文档还原为在协同模式下执行完所述目标操作上一个用户操作后的状态,以便用户练习。
第二发明,提供一种产品设计协同系统,所述系统包括存储器及处理器,所述存储器上存储有计算机程序,所述处理器执行所述计算机程序时实现上述的方法。
有益效果:
相较于现有技术中,在带教老师对新组员进行产品设计协同指导时,新组员只能够在本地终端进行录屏记录指导过程造成的录屏时机把握不准确、录屏记录的内容有缺漏的情况。本发明中提供的一种产品设计协同方法及系统,能够对产品设计协同过程中的内容进行更全面的进行记录。例如,本发明中,节点服务器一旦识别到进入协同模式,就记录将带教老师对文档的操作过程的视频帧数据写入到视频文件中,以便生成指导视频,无需用户手动确定录屏的时机。另一方面,由节点服务器采集产品设计协同过程中的内容,除了带教老师操作的画面还可以获取带教老师在键盘输入的操作指令等更全面的信息,便于后续新组员进行复习时能够获得更全面的学习内容。
本发明的附加方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
下面结合附图和实施例对本发明进一步地说明;
图1为一个实施例中提供的一种产品设计协同方法的流程图。
图2为一个实施例中提供的一种产品设计协同方法的流程图。
图3为一个实施例中播放指导视频时的界面示意图。
图4为一个实施例中提供的一种产品设计协同方法的流程图。
图5为一个实施例中播放指导视频时的界面示意图。
图6为一个实施例中提供的一种产品设计协同方法的流程图。
具体实施方式
本部分将详细描述本发明的具体实施例,本发明之较佳实施例在附图中示出,附图的作用在于用图形补充说明书文字部分的描述,使人能够直观地、形象地理解本发明的每个技术特征和整体技术方案,但其不能理解为对本发明保护范围的限制。
可以理解的是,本发明是在专利文献1基础上作出的改进性发明,是在利用专利文献1提供的产品设计协同方案基础上,对带教老师指导新组员场景下的适用性改进,专利文献1中的具体方案不属于本发明的技术贡献,本领域技术人员可以通过专利文献1披露的内容充分理解本发明的改进基础,因此本发明不赘述专利文献1中的具体内容。
如图1所示,本实施例提供一种产品设计协同方法,所述方法包括:
步骤S202,节点服务器建立云端CAD服务程序的进程后,加载协同文档;所述协同文档是根据第一用户终端输入的文档ID确定的文档。
步骤S204,建立云端CAD服务程序的进程的权限列表,并在权限列表的控制集合中添加第一用户终端,在权限列表的播放集合中添加第一用户终端;其中,在控制集合中的终端被标记为控制端,在播放集合中的终端被标记为播放端。
步骤S206,基于权限列表,分别对播放端和控制端执行相应的操作:
对于每个播放端:
云端CAD服务将文档中的模型几何数据转换为视频帧数据,并通过视频流转发服务发送至播放端的前端UI组件进行模型显示。
对于每个控制端:
控制端的前端UI组件响应用户操作生成用户操作指令,并封装为特定格式的消息通过信令服务发送到云端CAD服务,云端CAD服务接收并解析响应消息,将响应结果转发至播放端的前端UI组件进行显示;其中,所述用户操作包括鼠键操作,以及基于命令状态数据的命令操作或基于模型属性数据的属性操作。
步骤S208,在基于权限列表,分别对播放端和控制端执行相应的操作过程中,响应于第一用户终端发送的协同指令,进入协同模式;所述协同指令中携带有与第二用户终端对应的账号ID。
其中,进入协同模式包括:在权限列表的控制集合中添加第二用户终端,在权限列表的播放集合中添加第二用户终端,并将第一用户终端从权限列表的控制集合中移除,并且按照时间顺序将视频帧数据写入到一个视频文件中,以在退出协同模式时,基于所述视频文件生成指导视频。
此处的按照时间顺序将视频帧数据写入到一个视频文件中,指的是按照生成视频帧数据的时间顺序。
需要说明的时,上述的节点服务器、云端CAD服务、前端UI组件等特征的表述及技术内涵均与专利文献1中相同,此处不再赘述。可以理解的是,本实施例通过增加权限列表可以使得多个终端之间转移对文档操作的控制权,实现产品协同设计。本实施例中,第一用户终端是新组员使用的终端,第二用户终端是带教老师使用的终端。其中,第二用户终端既是控制端也是播放端,而第一用户终端仅作为播放端,即带教老师通过第二用户终端操作文档的过程,可以通过第二用户终端上的视频流播放组件进行播放,还可以实时通过第一用户终端上的视频流播放组件进行播放,便于新组员接受指导。
本实施例中提供的一种产品设计协同方法及系统,能够对产品设计协同过程中的内容进行更全面的进行记录。例如,节点服务器一旦识别到进入协同模式,就记录将带教老师对文档的操作过程的视频帧数据写入到视频文件中,以便生成指导视频,无需用户手动确定录屏的时机。另一方面,由节点服务器采集产品设计协同过程中的内容,除了带教老师操作的画面还可以获取带教老师在键盘输入的操作指令等更全面的信息,便于后续新组员进行复习时能够获得更全面的学习内容。
如图2所示,在一个实施例中,在生成指导视频的过程中,所述方法还包括:
步骤S302,检测到用户操作为预设命令的起始操作时,标记所述用户操作对应的视频帧数据为所述预设命令的起始帧。
步骤S304,检测到用户操作为预设命令的结束操作时,标记所述用户操作对应的视频帧数据为所述预设命令的结束帧。
步骤S306,根据起始帧和结束帧确定各预设命令所属帧组;每个预设命令所属帧组均包括所述预设命令的起始帧、结束帧以及处于所述预设命令的起始帧、结束帧之间的视频帧数据。
步骤S308,使用所述预设命令的名称标记所属帧组。
步骤S310,在播放所述指导视频时,在播放进度条上显示各预设命令所属帧组的范围并在各预设命令所属帧组的范围旁显示对应预设命令的名称。
在一个示例中,预设命令如果是CAD中的镜像命令,即命令为mirror,其操作流程如下:a.按下键盘上的“MI”键;b.选择要镜像的对象;c.指定参考线;d.按下enter键,以确认镜像后的位置,完成命令。换句话说,对预设命令为mirror(镜像命令)的情况,其对应的操作至少包括上述abcd四个用户操作。可知,a操作是步骤S302中的起始操作,d操作是步骤S304中的结束操作。其中,根据生成视频帧数据的方式不同,用户操作对应的视频帧数据可以通过以下不同的方法确定:如果节点服务器是按照预设的刷新频率(如20HZ)对渲染的场景进行采样并生成视频帧数据,则a操作对应的视频帧数据为节点服务器接收到a操作并对a操作响应之后采集到的第一帧视频帧数据。假设a操作和d操作之间相隔3秒钟左右,则mirror命令所属帧组的帧数在60帧左右。如果节点服务器为了节省资源,只有在接收到用户操作时才采样生成视频帧数据,则a操作对应的视频帧数据为节点服务器接收到a操作并对a操作响应之后采集到的第一帧视频帧数据。可知,即使a操作和d操作之间相隔也是3秒钟左右,但是该方式下mirror命令所属帧组的帧数会小于60帧。本实施例中,利用mirror标记得到的上述帧组,如图所示,假设,a操作是在指导视频播放进度的第10秒开始播放,则mirror命令所属帧组(将其定义为Q帧组)的范围大概为3秒(即第10秒至第13秒),如图3所示,当新组员后续通过节点服务器播放指导视频时,仍然可以通过第一用户终端上的视频流播放组件同步进行查看,并且在在各预设命令所属帧组的范围旁显示对应预设命令的名称。
本实施例中能够利用协同模式中获取的用户操作信息,自动对指导视频按照预设命令对应的操作进行分段,便于用户后续查看复习。
如图4所示,在一个实施例中,在生成指导视频的过程中,所述方法还包括:
步骤S402,根据起始操作和结束操作确定各预设命令所属操作组;每个预设命令所属操作组均包括所述预设命令的起始操作、结束操作以及处于所述预设命令的起始操作、结束操作之间的其他用户操作;每个预设命令所属操作组均关联有相应的预设命令所属帧组。
如上述实施例所述,a操作是步骤S402中的起始操作,d操作是步骤S402中的结束操作。则处于a操作和d操作之间的其他操作分别是c操作和d操作。因此,确定mirror命令所属操作组(将其定义为Q操作组)包括abcd四个操作,其与上述范围大概为3秒的mirror命令所属帧组(即Q帧组)相关联。
步骤S404,识别每个预设命令所属操作组中的键盘操作及各键盘操作被触发的相对顺序。
可知,Q操作组中的a操作和d操作为键盘操作,并且a操作位于d操作之前。
步骤S406,在播放所述指导视频过程中,检测到当前播放进度处于任一预设命令所属帧组的范围时,在播放界面按照各键盘操作被触发的相对顺序依次显示与当前预设命令所属帧组关联的预设命令所属操作组中的键盘操作对应的提示文字。
如图5所示,此处播放进度处于mirror命令所属帧组(即Q帧组)的范围时,在播放界面按照a操作和d操作被触发相对顺序依次显示,图5(A)是播放进度为第10秒时的画面示意图,图5(B)是播放进度为第13秒时的画面示意图。
可以理解的是,对于a操作,可以在视频帧数据中看到输入的“MI”命令,但是d操作输入的回车键无法在视频帧数据体现,当后续进行复习时,可能会忽略不在指导视频中显示的内容,特别是指导视频不能收录带教老师的语音,在新组员查看指导视频进行复习时,可能错漏带教老师的某些操作,导致复习效率低。而本发明相较于录屏不同在于,可以获取带教老师输入的按键信息,因此,自动将按键信息对应的提示文字在视频播放中显示,提升用户复习效率。
进一步的,在一个实施例中,所述方法还包括:
在识别每个预设命令所属操作组中的键盘操作的过程中,如果检测到与撤销操作或删除操作对应的键盘操作时,在播放界面不显示与撤销操作或删除操作对应的键盘操作的提示文字。
可以理解但是,如果带教老师在教导如何实现镜像操作过程中输入错了指令,一般会触发撤销操作,例如按下CTRL+Z触发撤销操作或者通过DELETE按键删除错误的内容,显然这些按键操作是无需显示提示文字的,因此该实施例可以使得显示提示文字的功能更加简洁。
如图6所示,在一个实施例中,所述方法还包括:
步骤S502,以进入协同模式时的文档作为第一文档,以退出协同模式时的文档作为第二文档。
可以理解的是,用户在设计某个产品的模型时,编辑都某一步后续没有思路或者遇到困难时需要请求带教老师帮助,此时模型对应的文档为第一文档。当带教老师帮助用户绘制完某个结构之后,得到的就是第二文档,此时用户通过对应控件触发退出协同模式。
步骤S504,记录在协同模式下从第一文档变化为第二文档过程中的每一步用户操作,得到操作记录表;所述操作记录表用于在打开第二文档时,通过执行撤销操作还原在协同模式下第一文档变化为第二文档过程中文档的状态,或在打开第一文档时,通过执行重做操作还原在协同模式下第一文档变化为第二文档过程中文档的状态。
举例而言,在协同模式下,带教老师帮助新组员绘制完成2个结构,总共涉及30步用户操作,因此操作记录表中记录下了这30步用户操作对应的数据。可以理解的是,后续可以通过操作记录表来实现撤销操作(undo)和重做操作(redo),从而还原第一文档变化为第二文档过程中文档的状态,便于用户进行练习。需要说明的是,设计过程中,模型的状态会影响着命令的操作方式,例如,当两个封闭图形X、Y具有部分重叠并且需要同时对两个封闭图形X、Y需要分别填充不同的剖面线时,二者的填充操作就会受到干扰,即在重叠状态下无法单独为X、Y中的任何一个直接进行完整的填充。而带教老师会将两个封闭图形X、Y先分别移动到不重叠状态并分别进行填充,然后在重新移动会原来的位置,而为了保证二者填充后能够准确回到原来的位置,就需要设置一些辅助线,以便进行交点捕捉。可知,虽然上述操作涉及的命令或操作仅包括移动、填充,但是带教老师教的内容是基于该模型的复杂状态下这些命令和操作的用法,所以后续练习时如果不具有该状态下的模型,显然无法达到很好的练习和复习效果。而本实施例中,通过步骤S502-S504,可以还原带教老师教学时的模型状态,提升复习的效果。
具体的,在播放指导视频的过程中,检测到进入练习模式时,节点服务器建立云端CAD服务程序的进程,并加载第一文档或第二文档。
用户可以通过触发相应控件的方式进入练习模式。
在练习模式下,所述方法还包括:
步骤S602,检测到当前播放进度处于任一预设命令所属帧组的范围时,将当前播放进度对应的预设命令所属帧组的起始操作作为目标操作。
仍然以上述mirror命令的abcd四个用户操作为例。如图3所示,当前播放进度处于Q帧组的范围,即第10-13秒的播放进度,已知Q帧组对应Q操作组,而Q操作组的起始操作为a操作,即a操作为目标操作。
步骤S604,基于所述操作记录表,将第一文档或第二文档还原为在协同模式下执行完所述目标操作上一个用户操作后的状态,以便用户练习。
进一步的,所述操作记录表的每一个表项记录的数据包括:发生序号、用户操作对应的序列化字节数据、表项名称;当任一用户操作为对应的预设命令所属操作组中的起始操作时,其表项名称为操作组名称,所述操作组名称为预设命令的名称,否则为默认值。
其中,发生序号为该表项的用户操作从进入协同模式后发送的顺序,用户操作对应的序列化字节数据可以被存储在硬盘中,以节省节点服务器的内存资源,用户操作对应的序列化字节数据用户后续根据第一文档或第二文档进行撤销操作或重做操作。由于根据用户操作对应的序列化字节数据无法确定其对应的命令,所以设置了表项名称,仍然以上述mirror命令的abcd四个用户操作为例,a操作为Q操作组的起始操作,因此表项名称为mirror,默认值为0。
操作记录表
发生序号 用户操作对应的序列化字节数据 表项名称
15 w操作的序列化字节数据 0
16 a操作的序列化字节数据 mirror
17 b操作的序列化字节数据 0
19 c操作的序列化字节数据 0
19 d操作的序列化字节数据 0
所述基于所述操作记录表,将第一文档或第二文档还原为在协同模式下执行完所述目标操作上一个用户操作后的状态,具体包括:
步骤S702,从操作记录表中匹配出与所述目标操作对应的预设命令所属操作组的操作组名称相同的表项,作为目标表项。
例如,目标操作为a操作,a操作对应Q操作组,其名称为mirror,从操作记录表中搜索表项名称为mirror的表项,即发生序号为17的表项为目标表项。
步骤S704,基于所述目标表项,将第一文档或第二文档还原为在协同模式下执行完所述目标操作上一个用户操作后的状态,以便用户练习。
在步骤S704中,已知目标表项是发生序号为17的表项,若从第一文档进行还原,则通过重做操作将第一文档还原到发生序号为16的表项中的w操作后的状态。如果从第二文档进行还原,则通过撤销操作将第二文档还原到发生序号为16的表项中的w操作后的状态。可以理解的是,节点服务器同时将第一文档、第二文档、操作记录表与指导视频一共保存在硬盘中,根据目标表项的位置决定是从第一文档开始还原还是从第二文档开始还原,具体方法是,判断目标表项更靠近发生序号为0还是末尾的位置,如果目标表项更靠近发生序号为0的位置,则从第一文档开始还原,否则从第二文档开始还原,以此加快首次还原的速度。进一步的,如果并非第一次还原,则以第一次还原后的文档状态作为基础,还原下一次的文档状态,因为用户看指导视频一般都是按顺序播放,所以认为下一次需要还原的状态对应的表项发生序号应该与当前还原的状态对应的表项发生序号相差不多,比每一次都从第一文档或第二文档开始还原更快。
具体的,基于所述目标表项,将第一文档还原为在协同模式下执行完所述目标操作上一个用户操作后的状态,具体包括:
在打开第一文档时,通过重做操作将第一文档还原至目标表项的上一个表项对应的状态;
基于所述目标表项,将第一文档还原为在协同模式下执行完所述目标操作上一个用户操作后的状态,具体包括:
在打开第二文档时,通过撤销操作将第二文档还原至目标表项的上一个表项对应的状态。
在一个实施例中,所述方法还包括:
步骤S802,当从操作记录表中匹配出的与目标操作对应的目标表项的数量为多个时,则将目标操作对应的预设命令所属操作组的前N个预设命令所属操作组的操作组名称分别与目标表项前N个表项名称不为默认值的表项的表项名称进行比较;N为正整数。
举例而言,如图3所示,若根据当前播放进度确定目标操作为a操作,a操作属于Q操作组,作为mirror命令中的起始操作,而在本次指导中,带教老师可能分别执行了3次mirror命令。具体情况下如下表所示:
可知,需要从3个mirror对应的表项中排除2个。此时操作组按照播放进度的分布情况为O操作组(名称为mirror)、P操作组(名称为co)、Q操作组(名称为mirror)、R操作组(名称为text)、S操作组(名称为le)、T操作组(名称为mirror)。通过比较可知,Q操作组的前2个预设命令所属操作组的操作组名称分别为mirror、co,而发生序号为1的表项的前面没有表项名称,不符合;发生序号为9的表项的前面表项名称分别为mirror、co,符合;发生序号为27的表项的前面表项名称分别为text、le,不符合。
步骤S804,将不一致的目标表项排除,直至剩下一个一致的目标表项作为最终目标表项。
需要说明的时,N可以从小到大设置,即先设N为1,如果比较不出结果,就将N设为2,依次递增。显然,本实施例中,发生序号为9的表项作为最终目标表项。
步骤S806,基于所述最终目标表项,将第一文档或第二文档还原为在协同模式下执行完所述目标操作上一个用户操作后的状态,以便用户练习。
本实施例可以排除多个相同名称表项的干扰,提升了匹配的准确度。
在一个场景中,在练习模式下,假设指导视频播放至Q帧组对应的视频片段时,节点服务器将第一文档或第二文档还原为在协同模式下执行完所述目标操作上一个用户操作后的状态,即此时需要用户重新执行mirror命令对应的abcd四个操作,本实施例中还提供了一种能够自动判断用户练习结果是否正确的方法:
步骤S902,在练习模式下,指导视频播放至Q帧组对应的视频片段时,节点服务器将第一文档或第二文档还原为在协同模式下执行完所述目标操作上一个用户操作后的状态;
步骤S904,节点服务器通过云端CAD服务将第一文档或第二文档还原为在协同模式下执行完所述目标操作上一个用户操作后的状态之后,获取练习用户操作;
步骤S906,云端CAD服务响应于所述练习用户操作对当前状态的文档进行操作;
步骤S908,接收到用户完成当前练习的信号时,将接收到的用户操作与Q帧组关联的操作组进行比较.
具体的,用户可以通过相应的控件触发发送完成当前练习的信号。
步骤S910,如果接收到的用户操作与Q帧组关联的操作组中的用户操作一致,则判断练习结果为正确,否则判断练习结果为错误。
可知,Q帧组关联的操作组,即Q操作组对应着mirror命令,依次包括abcd4个操作,因此,判断时,需要判断用户输入的操作是否依次包括abcd4个操作,如果是则判断练习结果为正确,否则判断练习结果为错误。在判断练习结果为错误的情况下,可以提醒用户重新练习一次。通过提供自动判断练习结果是否正确的方案,从而判断用户对该命令的熟悉程度,可以提升用户练习的效率。
另一方面,在一个实施例中还提供了一种产品设计协同系统,其特征在于,所述系统包括存储器及处理器,所述存储器上存储有计算机程序,所述处理器执行所述计算机程序时实现以上实施例所述的方法。由于系统实施例与方法实施例基于相同的发明构思,此处不做赘述。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一非易失性计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRA)、存储器总线(Rambus)直接RAM(RDRA)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。

Claims (10)

1.一种产品设计协同方法,其特征在于,所述方法包括:
节点服务器建立云端CAD服务程序的进程后,加载协同文档;所述协同文档是根据第一用户终端输入的文档ID确定的文档;
建立云端CAD服务程序的进程的权限列表,并在权限列表的控制集合中添加第一用户终端,在权限列表的播放集合中添加第一用户终端;其中,在控制集合中的终端被标记为控制端,在播放集合中的终端被标记为播放端;
基于权限列表,分别对播放端和控制端执行相应的操作:
对于每个播放端:
云端CAD服务将文档中的模型几何数据转换为视频帧数据,并通过视频流转发服务发送至播放端的前端UI组件进行模型显示;
对于每个控制端:
控制端的前端UI组件响应用户操作生成用户操作指令,并封装为特定格式的消息通过信令服务发送到云端CAD服务,云端CAD服务接收并解析响应消息,将响应结果转发至播放端的前端UI组件进行显示;其中,所述用户操作包括鼠键操作,以及基于命令状态数据的命令操作或基于模型属性数据的属性操作;
在基于权限列表,分别对播放端和控制端执行相应的操作过程中,响应于第一用户终端发送的协同指令,进入协同模式;所述协同指令中携带有与第二用户终端对应的账号ID;
其中,进入协同模式包括:在权限列表的控制集合中添加第二用户终端,在权限列表的播放集合中添加第二用户终端,并且按照时间顺序将视频帧数据写入到一个视频文件中,以在退出协同模式时,基于所述视频文件生成指导视频。
2.根据权利要求1所述的一种产品设计协同方法,其特征在于,在生成指导视频的过程中,所述方法还包括:
检测到用户操作为预设命令的起始操作时,标记所述用户操作对应的视频帧数据为所述预设命令的起始帧;
检测到用户操作为预设命令的结束操作时,标记所述用户操作对应的视频帧数据为所述预设命令的结束帧;
根据起始帧和结束帧确定各预设命令所属帧组;每个预设命令所属帧组均包括所述预设命令的起始帧、结束帧以及处于所述预设命令的起始帧、结束帧之间的视频帧数据;
使用所述预设命令的名称标记所属帧组;
在播放所述指导视频时,在播放进度条上显示各预设命令所属帧组的范围并在各预设命令所属帧组的范围旁显示对应预设命令的名称。
3.根据权利要求2所述的一种产品设计协同方法,其特征在于,在生成指导视频的过程中,所述方法还包括:
根据起始操作和结束操作确定各预设命令所属操作组;每个预设命令所属操作组均包括所述预设命令的起始操作、结束操作以及处于所述预设命令的起始操作、结束操作之间的其他用户操作;每个预设命令所属操作组均关联有相应的预设命令所属帧组;
识别每个预设命令所属操作组中的键盘操作及各键盘操作被触发的相对顺序;
在播放所述指导视频过程中,检测到当前播放进度处于任一预设命令所属帧组的范围时,在播放界面按照各键盘操作被触发的相对顺序依次显示与当前预设命令所属帧组关联的预设命令所属操作组中的键盘操作对应的提示文字。
4.根据权利要求3所述的一种产品设计协同方法,其特征在于,所述方法还包括:
在识别每个预设命令所属操作组中的键盘操作的过程中,如果检测到与撤销操作或删除操作对应的键盘操作时,在播放界面不显示与撤销操作或删除操作对应的键盘操作的提示文字。
5.根据权利要求3所述的一种产品设计协同方法,其特征在于,所述方法还包括:
以进入协同模式时的文档作为第一文档,以退出协同模式时的文档作为第二文档;
记录在协同模式下从第一文档变化为第二文档过程中的每一步用户操作,得到操作记录表;所述操作记录表用于在打开第二文档时,通过执行撤销操作还原在协同模式下第一文档变化为第二文档过程中文档的状态,或在打开第一文档时,通过执行重做操作还原在协同模式下第一文档变化为第二文档过程中文档的状态。
6.根据权利要求5所述的一种产品设计协同方法,其特征在于,在播放指导视频的过程中,检测到进入练习模式时,节点服务器建立云端CAD服务程序的进程,并加载第一文档或第二文档;
在练习模式下,所述方法还包括:
检测到当前播放进度处于任一预设命令所属帧组的范围时,将当前播放进度对应的预设命令所属帧组的起始操作作为目标操作;
基于所述操作记录表,将第一文档或第二文档还原为在协同模式下执行完所述目标操作上一个用户操作后的状态,以便用户练习。
7.根据权利要求6所述的一种产品设计协同方法,其特征在于,所述操作记录表的每一个表项记录的数据包括:发生序号、用户操作对应的序列化字节数据、表项名称;当任一用户操作为对应的预设命令所属操作组中的起始操作时,其表项名称为操作组名称,所述操作组名称为预设命令的名称,否则为默认值;
所述基于所述操作记录表,将第一文档或第二文档还原为在协同模式下执行完所述目标操作上一个用户操作后的状态,具体包括:
从操作记录表中匹配出与所述目标操作对应的预设命令所属操作组的操作组名称相同的表项,作为目标表项;
基于所述目标表项,将第一文档或第二文档还原为在协同模式下执行完所述目标操作上一个用户操作后的状态,以便用户练习。
8.根据权利要求7所述的一种产品设计协同方法,其特征在于,基于所述目标表项,将第一文档还原为在协同模式下执行完所述目标操作上一个用户操作后的状态,具体包括:
在打开第一文档时,通过重做操作将第一文档还原至目标表项的上一个表项对应的状态;
基于所述目标表项,将第一文档还原为在协同模式下执行完所述目标操作上一个用户操作后的状态,具体包括:
在打开第二文档时,通过撤销操作将第二文档还原至目标表项的上一个表项对应的状态。
9.根据权利要求7所述的一种产品设计协同方法,其特征在于,所述方法还包括:
当从操作记录表中匹配出的与目标操作对应的目标表项的数量为多个时,则将目标操作对应的预设命令所属操作组的前N个预设命令所属操作组的操作组名称分别与目标表项前N个表项名称不为默认值的表项的表项名称进行比较;N为正整数;
将不一致的目标表项排除,直至剩下一个一致的目标表项作为最终目标表项;
基于所述最终目标表项,将第一文档或第二文档还原为在协同模式下执行完所述目标操作上一个用户操作后的状态,以便用户练习。
10.一种产品设计协同系统,其特征在于,所述系统包括存储器及处理器,所述存储器上存储有计算机程序,所述处理器执行所述计算机程序时实现如权利要求1-9中任一项所述的方法。
CN202311388990.6A 2023-10-25 2023-10-25 一种产品设计协同方法及系统 Pending CN117454543A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202311388990.6A CN117454543A (zh) 2023-10-25 2023-10-25 一种产品设计协同方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202311388990.6A CN117454543A (zh) 2023-10-25 2023-10-25 一种产品设计协同方法及系统

Publications (1)

Publication Number Publication Date
CN117454543A true CN117454543A (zh) 2024-01-26

Family

ID=89595912

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202311388990.6A Pending CN117454543A (zh) 2023-10-25 2023-10-25 一种产品设计协同方法及系统

Country Status (1)

Country Link
CN (1) CN117454543A (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110065082A1 (en) * 2009-09-17 2011-03-17 Michael Gal Device,system, and method of educational content generation
CN109981711A (zh) * 2017-12-28 2019-07-05 腾讯科技(深圳)有限公司 文档动态播放方法、装置、系统及计算机可读存储介质
US20210373676A1 (en) * 2020-06-01 2021-12-02 Science House LLC Systems, methods, and apparatus for enhanced presentation remotes
CN113784177A (zh) * 2021-07-06 2021-12-10 深圳点猫科技有限公司 一种协作教学的控制方法、装置、系统及介质
CN115665120A (zh) * 2022-12-28 2023-01-31 浙江华东工程数字技术有限公司 一种云端cad处理方法、系统、计算机设备和存储介质
CN116069211A (zh) * 2022-12-07 2023-05-05 淮南师范学院 一种录屏处理方法和终端设备

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110065082A1 (en) * 2009-09-17 2011-03-17 Michael Gal Device,system, and method of educational content generation
CN109981711A (zh) * 2017-12-28 2019-07-05 腾讯科技(深圳)有限公司 文档动态播放方法、装置、系统及计算机可读存储介质
US20210373676A1 (en) * 2020-06-01 2021-12-02 Science House LLC Systems, methods, and apparatus for enhanced presentation remotes
CN113784177A (zh) * 2021-07-06 2021-12-10 深圳点猫科技有限公司 一种协作教学的控制方法、装置、系统及介质
CN116069211A (zh) * 2022-12-07 2023-05-05 淮南师范学院 一种录屏处理方法和终端设备
CN115665120A (zh) * 2022-12-28 2023-01-31 浙江华东工程数字技术有限公司 一种云端cad处理方法、系统、计算机设备和存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
付喜梅;梁家智;: "异构CAD协同设计系统的集成与实现", 电脑与信息技术, no. 06, 15 December 2007 (2007-12-15) *

Similar Documents

Publication Publication Date Title
US20220392365A1 (en) Interactive Oral Presentation Display System
US20150178260A1 (en) Multi-layered presentation and mechanisms for collaborating with the same
US20170169822A1 (en) Dialog text summarization device and method
US20160379169A1 (en) Conference information accumulating apparatus, method, and computer program product
CN109324811B (zh) 一种用于更新教学录播数据的装置
CN104461477A (zh) 网络评论信息的添加方法、系统和相应装置
CN110475140A (zh) 弹幕数据处理方法、装置、计算机可读存储介质和计算机设备
CN106570919A (zh) 电子笔迹的保存方法和还原方法
US8819558B2 (en) Edited information provision device, edited information provision method, program, and recording medium
CN111694603A (zh) 屏幕分享方法、装置、计算机设备和存储介质
CN106657850A (zh) 课堂内容录制方法与系统
CN114638232A (zh) 一种文本转换成视频的方法、装置、电子设备及存储介质
CN112087657A (zh) 一种数据处理方法及装置
CN110248235B (zh) 软件教学方法、装置、终端设备及介质
US20180341638A1 (en) Providing suggested diagrammatic representations of user entered textual information
US20210201958A1 (en) Information processing apparatus, information processing method, and non-transitory computer readable medium
CN117454543A (zh) 一种产品设计协同方法及系统
CN115174506B (zh) 会话信息处理方法、装置、可读存储介质和计算机设备
CN114741634A (zh) 一种文档展示方法及其相关设备
CN114245193A (zh) 显示控制方法、装置和电子设备
US20200294552A1 (en) Recording device, recording method, reproducing device, reproducing method, and recording/reproducing device
JP6252083B2 (ja) 会議システム、サーバ装置、クライアント端末、およびプログラム
CN111221452B (zh) 方案讲解控制方法
CN116744048B (zh) 在线视频标记方法、系统以及存储介质
US10110847B2 (en) Program image creation method and apparatus of the same

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination