CN112153477A - 一种基于视频的服务方法及系统 - Google Patents
一种基于视频的服务方法及系统 Download PDFInfo
- Publication number
- CN112153477A CN112153477A CN202011005136.3A CN202011005136A CN112153477A CN 112153477 A CN112153477 A CN 112153477A CN 202011005136 A CN202011005136 A CN 202011005136A CN 112153477 A CN112153477 A CN 112153477A
- Authority
- CN
- China
- Prior art keywords
- voice
- voice keyword
- preset
- information
- keyword
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 79
- 230000008569 process Effects 0.000 claims abstract description 40
- 230000003993 interaction Effects 0.000 claims abstract description 32
- 238000012790 confirmation Methods 0.000 claims abstract description 17
- 230000001360 synchronised effect Effects 0.000 claims description 9
- 238000012545 processing Methods 0.000 claims description 8
- 238000004364 calculation method Methods 0.000 claims description 6
- 238000012360 testing method Methods 0.000 claims description 6
- 238000009432 framing Methods 0.000 claims description 4
- 238000012795 verification Methods 0.000 claims description 4
- 238000000605 extraction Methods 0.000 claims description 3
- 230000000977 initiatory effect Effects 0.000 abstract 1
- 230000009286 beneficial effect Effects 0.000 description 10
- 238000010586 diagram Methods 0.000 description 9
- 238000004590 computer program Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012544 monitoring process Methods 0.000 description 3
- 238000003860 storage Methods 0.000 description 3
- 238000004140 cleaning Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000000428 dust Substances 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000000779 smoke Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C9/00—Individual registration on entry or exit
- G07C9/00174—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
- G07C9/00857—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys where the code of the data carrier can be programmed
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C9/00—Individual registration on entry or exit
- G07C9/00174—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
- G07C9/00896—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys specially adapted for particular uses
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/02—Feature extraction for speech recognition; Selection of recognition unit
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Signal Processing (AREA)
- General Engineering & Computer Science (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Acoustics & Sound (AREA)
- Telephonic Communication Services (AREA)
Abstract
本发明提出了一种基于视频的服务方法及系统，包括：接收家政人员终端扫描设置在被服务人员的房门上的二维码后发送的开锁请求指令及家政请求指令；接收被服务人员终端对所述开锁请求指令的确认结果及对家政请求指令的服务要求；接收家政人员终端发送的在家政服务过程中的带有提示点的视频图像数据并发送至被服务人员终端；接收被服务人员终端发送的视频交互请求指令，建立起家政人员终端与被服务人员终端之间的视频交互请求群组；接收被服务人员终端对带有提示点的视频图像数据的标记信息并发送至家政人员终端。使得用户不在家时，也能保证家政服务的正常进行，在家政人员进行家政服务时，用户能及时获取家政服务的过程及家政服务质量。
Description
技术领域
本发明涉及家政服务技术领域，特别涉及一种基于视频的服务方法及系统。
背景技术
目前，家政服务的不断发展，对家政服务的需求不断增加，在进行家政服务时，当用户不在家时，家政服务不能正常进行，在家政人员进行家政服务时，用户不能及时获取家政服务的过程及家政服务质量，影响用户体验。
发明内容
本发明旨在至少一定程度上解决上述技术中的技术问题之一。为此，本发明的第一个目的在于提出一种基于视频的服务方法，使得用户不在家时，也能保证家政服务的正常进行，在家政人员进行家政服务时，用户能及时获取家政服务的过程及家政服务质量，提高用户体验，保证家政服务质量及安全。
本发明的第二个目的在于提出一种基于视频的服务系统。
为达到上述目的，本发明第一方面实施例提出了一种基于视频的服务方法，包括：
接收家政人员终端扫描设置在被服务人员的房门上的二维码后发送的开锁请求指令及家政请求指令，判断所述开锁请求指令及家政请求指令是否合法，在确定所述开锁请求指令及家政请求指令合法时，将所述开锁请求指令及家政请求指令发送至被服务人员终端；
接收所述被服务人员终端对所述开锁请求指令的确认结果及对所述家政请求指令的服务要求；将所述确认结果发送至设置在被服务人员的房门上的智能门锁，使得所述智能门锁打开；将所述服务要求发送至家政人员终端；
接收所述家政人员终端发送的在家政服务过程中的带有提示点的视频图像数据并发送至被服务人员终端；
接收所述被服务人员终端发送的视频交互请求指令，建立起所述家政人员终端与所述被服务人员终端之间的视频交互请求群组；
在生成视频交互请求群组后，接收所述被服务人员终端对所述带有提示点的视频图像数据的标记信息并发送至家政人员终端。
根据本发明的一些实施例，获取所述带有提示点的视频图像数据，包括：
在获取视频图像数据过程中，对家政人员的语音信息进行特征提取，判断所述语音信息中是否包括第一预设语音关键词及第二预设语音关键词；
在确定所述语音信息中包括第一预设语音关键词及第二预设语音关键词时，对所述第一预设语音关键词与第二预设语音关键词之间的语音信息中的提示内容及提示时刻进行记录，进而生成带有提示点的视频图像数据。
根据本发明的一些实施例，获取所述被服务人员终端对所述带有提示点的视频图像数据的标记信息的方法，包括：
接收带有提示点的视频图像数据；
根据所述提示点快速切换至目标视频中；
读取所述目标视频，获取所述目标视频的帧数，根据所述帧数，对目标视频进行分帧，获取每帧子目标视频的特征向量；
根据所述每帧子目标视频的特征向量生成图片数据，根据所述图片数据获取所述目标视频中目标物的尺寸信息；
根据所述目标物的尺寸信息确定在目标物上的标记位置并生成标记信息。
根据本发明的一些实施例，在接收所述家政人员终端发送的在家政服务过程中的带有提示点的视频图像数据并发送至被服务人员终端的同时，还包括：
接收所述家政人员终端发送的在家政服务过程中遥测数据并发送至被服务人员终端；所述遥测数据为由传感器检测获取的被服务人员家中的环境数据。
根据本发明的一些实施例，在所述家政人员终端将所述遥测数据及带有提示点的视频图像数据发送至所述被服务人员终端前，还包括：
对遥测数据及带有提示点的视频图像数据进行数据同步处理；
获取遥测数据的第一数据信息及带有提示点的视频图像数据的第二数据信息，根据所述第一数据信息及所述第二数据信息在预设数据同步信息表中查询，获取数据同步方式；
根据所述数据同步方式生成对遥测数据及带有提示点的视频图像数据生成数据同步请求报文并发送至所述被服务人员终端；
接收所述被服务人员终端对所述数据同步请求报文中提取的数据同步顺序信息的序列值与预设序列值的比较结果，在所述比较结果为序列值大于预设序列值时，表示数据同步顺序符合规则，将按照数据同步方式对遥测数据及带有提示点的视频图像数据生成同步数据并发送至被服务人员终端；在所述比较结果为序列值小于等于预设序列值时，表示数据同步顺序不符合规则，重新匹配数据同步方式，生成新的数据同步请求报文进行验证。
根据本发明的一些实施例，在接收所述家政人员终端发送的在家政服务过程中的带有提示点的视频图像数据后，还包括：
获取所述家政人员终端发送的在家政服务过程中的带有提示点的视频图像数据的发送时间信息及家政人员终端ID信息；
获取所述带有提示点的视频图像数据中的关联事件信息；
根据所述关联事件信息查询预设家政人员服务标准要求表获取该关联事件的服务标准要求；
获取所述带有提示点的视频图像数据中家政人员对关联事件的实际服务要求；
判断所述实际服务要求是否满足服务标准要求，在确定所述实际服务要求不满足服务标准要求时，根据所述带有提示点的视频图像数据的发送时间信息及家政人员终端ID信息，记录为一次服务不达标事件，并生成警示信息至家政人员终端；
统计家政人员在执行家政服务过程中的服务不达标事件的数量，当服务不达标事件的数量大于预设数量时，生成终止当前家政人员的家政服务的提示信息及更换家政人员的家政服务信息，并发送至被服务人员终端。
根据本发明的一些实施例，所述确定所述语音信息中包括第一预设语音关键词及第二预设语音关键词，包括：
S11、获取所述语音信息中与第一预设语音关键词长度相同的语音关键词；
S12、根据公式(1)计算所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的形式相似度Si：
其中，i∈(1，Z),Z为语音信息中与第一预设语音关键词长度相同的语音关键词的数量；wi为第i个语音关键词；
为第一预设语音关键词；
为第i个语音关键词与第一预设语音关键词的编辑距离，所述编辑距离为将第i个语音关键词转换为第一预设语音关键词需付出的代价；L(wi)为第i个语音关键词的长度；
S13、根据公式(2)计算所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的语音语义相似度Pi：
其中，ax为第i个语音关键词中第x个语音语义概念；by为第一预设语音关键词中第y个语音语义概念；
为语音语义概念ax在第i个语音关键词中出现的次数；
为语音语义概念by在第一预设语音关键词中出现的次数；N为第i个语音关键词中语音语义概念的个数；M为第一预设语音关键词中语音语义概念的个数；
S14、通过公式(3)根据所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的形式相似度Si及所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的语音语义相似度Pi，计算得到第i个语音关键词与所述第一预设语音关键词的匹配度Qi：
其中，k1为赋予形式相似度Si的第一权重；k2为赋予语音语义相似度Pi的第二权重；k1+k2＝1，k1、k2的取值经过多次试验计算获取；
S15、选取出最大匹配度，比较最大匹配度与预设匹配度的大小，在确定最大匹配度大于预设匹配度时，确定所述语音信息中包括第一预设语音关键词；
S16、同理，可以确定所述语音信息中包括第二预设语音关键词，对所述第一预设语音关键词与第二预设语音关键词之间的语音信息中的提示内容及提示时刻进行记录，进而生成带有提示点的视频图像数据。
为达到上述目的，本发明第二方面实施例提出了一种基于视频的服务系统，包括：
第一收发模块，用于接收家政人员终端扫描设置在被服务人员的房门上的二维码后发送的开锁请求指令及家政请求指令，判断所述开锁请求指令及家政请求指令是否合法，在确定所述开锁请求指令及家政请求指令合法时，将所述开锁请求指令及家政请求指令发送至被服务人员终端；
第二收发模块，用于接收所述被服务人员终端对所述开锁请求指令的确认结果及对所述家政请求指令的服务要求；将所述确认结果发送至设置在被服务人员的房门上的智能门锁，使得所述智能门锁打开；将所述服务要求发送至家政人员终端；
第三收发模块，用于接收所述家政人员终端发送的在家政服务过程中的带有提示点的视频图像数据并发送至被服务人员终端；
建立视频交互请求群组模块，用于接收所述被服务人员终端发送的视频交互请求指令，建立起所述家政人员终端与所述被服务人员终端之间的视频交互请求群组；
第四收发模块，用于在生成视频交互请求群组后，接收所述被服务人员终端对所述带有提示点的视频图像数据的标记信息并发送至家政人员终端。
根据本发明的一些实施例，包括：
判断模块，用于在获取视频图像数据过程中，对家政人员的语音信息进行特征提取，判断所述语音信息中是否包括第一预设语音关键词及第二预设语音关键词；
提示点生成模块，用于在确定所述语音信息中包括第一预设语音关键词及第二预设语音关键词时，对所述第一预设语音关键词与第二预设语音关键词之间的语音信息中的提示内容及提示时刻进行记录，进而生成带有提示点的视频图像数据。
根据本发明的一些实施例，所述确定所述语音信息中包括第一预设语音关键词及第二预设语音关键词，包括：
S11、获取所述语音信息中与第一预设语音关键词长度相同的语音关键词；
S12、根据公式(1)计算所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的形式相似度Si：
其中，i∈(1，Z),Z为语音信息中与第一预设语音关键词长度相同的语音关键词的数量；wi为第i个语音关键词；
为第一预设语音关键词；
为第i个语音关键词与第一预设语音关键词的编辑距离，所述编辑距离为将第i个语音关键词转换为第一预设语音关键词需付出的代价；L(wi)为第i个语音关键词的长度；
S13、根据公式(2)计算所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的语音语义相似度Pi：
其中，ax为第i个语音关键词中第x个语音语义概念；by为第一预设语音关键词中第y个语音语义概念；
为语音语义概念ax在第i个语音关键词中出现的次数；
为语音语义概念by在第一预设语音关键词中出现的次数；N为第i个语音关键词中语音语义概念的个数；M为第一预设语音关键词中语音语义概念的个数；
S14、通过公式(3)根据所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的形式相似度Si及所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的语音语义相似度Pi，计算得到第i个语音关键词与所述第一预设语音关键词的匹配度Qi：
其中，k1为赋予形式相似度Si的第一权重；k2为赋予语音语义相似度Pi的第二权重；k1+k2＝1，k1、k2的取值经过多次试验计算获取；
S15、选取出最大匹配度，比较最大匹配度与预设匹配度的大小，在确定最大匹配度大于预设匹配度时，确定所述语音信息中包括第一预设语音关键词；
S16、同理，可以确定所述语音信息中包括第二预设语音关键词，对所述第一预设语音关键词与第二预设语音关键词之间的语音信息中的提示内容及提示时刻进行记录，进而生成带有提示点的视频图像数据。
本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。
附图说明
附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明，并不构成对本发明的限制。在附图中：
图1是根据本发明一个实施例的一种基于视频的服务方法的流程图；
图2是根据本发明一个实施例的一种基于视频的服务系统的框图。
具体实施方式
以下结合附图对本发明的优选实施例进行说明，应当理解，此处所描述的优选实施例仅用于说明和解释本发明，并不用于限定本发明。
如图1所示，本发明第一方面实施例提出了一种基于视频的服务方法，包括步骤S1-S5：
S1、接收家政人员终端扫描设置在被服务人员的房门上的二维码后发送的开锁请求指令及家政请求指令，判断所述开锁请求指令及家政请求指令是否合法，在确定所述开锁请求指令及家政请求指令合法时，将所述开锁请求指令及家政请求指令发送至被服务人员终端；
S2、接收所述被服务人员终端对所述开锁请求指令的确认结果及对所述家政请求指令的服务要求；将所述确认结果发送至设置在被服务人员的房门上的智能门锁，使得所述智能门锁打开；将所述服务要求发送至家政人员终端；
S3、接收所述家政人员终端发送的在家政服务过程中的带有提示点的视频图像数据并发送至被服务人员终端；
S4、接收所述被服务人员终端发送的视频交互请求指令，建立起所述家政人员终端与所述被服务人员终端之间的视频交互请求群组；
S5、在生成视频交互请求群组后，接收所述被服务人员终端对所述带有提示点的视频图像数据的标记信息并发送至家政人员终端。
上述技术方案的工作原理：在被服务人员不在家时，家政人员通过家政人员终端扫描设置在被服务人员的房门上的二维码后发送的开锁请求指令及家政请求指令至服务器，服务器判断所述开锁请求指令及家政请求指令是否合法，即判断该被服务人员是否在该时间预约家政服务及核实家政人员身份信息等，在确定被服务人员在该时间预约家政服务及家政人员身份正确时，确定所述开锁请求指令及家政请求指令合法时，将所述开锁请求指令及家政请求指令发送至被服务人员终端；服务器接收所述被服务人员终端对所述开锁请求指令的确认结果及对所述家政请求指令的服务要求；将所述确认结果发送至设置在被服务人员的房门上的智能门锁，使得所述智能门锁打开；将所述服务要求发送至家政人员终端；使得家政人员可以进行被服务人员家中进行按照被服务人员指示的服务要求进行家政服务；服务器接收所述家政人员终端发送的在家政服务过程中的带有提示点的视频图像数据并发送至被服务人员终端；家政人员在进行家政服务中录制视频图像数据使得被服务人员查看，同时在录制过程中，在每进行一项家长服务时，进行提示点的创建，便于用户根据提示点进行快速对家政服务的查看，便于用户的搜索家政服务，提高用户体验。服务器接收所述被服务人员终端发送的视频交互请求指令，建立起所述家政人员终端与所述被服务人员终端之间的视频交互请求群组；可以实现在家政人员进行家政服务过程中，实现被服务人员与家政人员进行视频交互，便于被服务人员与家政人员针对详细的家政服务要求进行沟通，提高家政服务质量，使得被服务人员可以及时获取相关的家政服务视频及进行相应的指示；服务器在生成视频交互请求群组后，接收所述被服务人员终端对所述带有提示点的视频图像数据的标记信息并发送至家政人员终端；被服务人员对家政人员录制的视频进行标记，指出具体的家政服务要求。
上述技术方案的有益效果：使得用户不在家时，也能保证家政服务的正常进行，在家政人员进行家政服务时，用户能及时获取家政服务的过程及家政服务质量，提高用户体验，保证家政服务质量及安全。
根据本发明的一些实施例，获取所述带有提示点的视频图像数据，包括：
在获取视频图像数据过程中，对家政人员的语音信息进行特征提取，判断所述语音信息中是否包括第一预设语音关键词及第二预设语音关键词；
在确定所述语音信息中包括第一预设语音关键词及第二预设语音关键词时，对所述第一预设语音关键词与第二预设语音关键词之间的语音信息中的提示内容及提示时刻进行记录，进而生成带有提示点的视频图像数据。
上述技术方案的工作原理：第一预设语音关键词可以是“提示点创建开始”；第二预设语音关键词可以是“提示点创建结束”；即家政人员在录制家政服务过程中的视频图像数据时，说出第一预设语音关键词及第二预设语音关键词，对所述第一预设语音关键词与第二预设语音关键词之间的语音信息中的提示内容及提示时刻进行记录，进而生成带有提示点的视频图像数据。
上述技术方案的有益效果：便于被服务人员对视频图像数据的快速查看，避免浏览一些不必要的数据，节约时间，根据被服务人员对家政服务的查看需求进行快速检索定位，提高被服务人员体验。
根据本发明的一些实施例，获取所述被服务人员终端对所述带有提示点的视频图像数据的标记信息的方法，包括：
接收带有提示点的视频图像数据；
根据所述提示点快速切换至目标视频中；
读取所述目标视频，获取所述目标视频的帧数，根据所述帧数，对目标视频进行分帧，获取每帧子目标视频的特征向量；
根据所述每帧子目标视频的特征向量生成图片数据，根据所述图片数据获取所述目标视频中目标物的尺寸信息；
根据所述目标物的尺寸信息确定在目标物上的标记位置并生成标记信息。
上述技术方案的工作原理：被服务人员终端对所述带有提示点的视频图像数据进行标记，接收带有提示点的视频图像数据；根据所述提示点快速切换至目标视频中，目标视频为被服务人员所要进行标记的视频；读取所述目标视频，获取所述目标视频的帧数，根据所述帧数，对目标视频进行分帧，获取每帧子目标视频的特征向量；根据所述每帧子目标视频的特征向量生成图片数据，根据所述图片数据获取所述目标视频中目标物的尺寸信息；根据所述目标物的尺寸信息确定在目标物上的标记位置并生成标记信息。
上述技术方案的有益效果：可以更具体的指出需标记的位置及标记信息，便于家政人员准确理解被服务人员的意图及家政服务的指示，便于提高家政服务质量。
根据本发明的一些实施例，在接收所述家政人员终端发送的在家政服务过程中的带有提示点的视频图像数据并发送至被服务人员终端的同时，还包括：
接收所述家政人员终端发送的在家政服务过程中遥测数据并发送至被服务人员终端；所述遥测数据为由传感器检测获取的被服务人员家中的环境数据。
上述技术方案的工作原理及有益效果：家政人员终端将视频图像数据及遥测数据均发送至被服务人员终端。遥测数据可以为被服务人员家中的温度信息、湿度信息、烟雾浓度信息、灰尘浓度信息等等，便于被服务人员准确了解家政服务过程中，家中的具体情况，便于做出准确的指示。
根据本发明的一些实施例，在所述家政人员终端将所述遥测数据及带有提示点的视频图像数据发送至所述被服务人员终端前，还包括：
对遥测数据及带有提示点的视频图像数据进行数据同步处理；
获取遥测数据的第一数据信息及带有提示点的视频图像数据的第二数据信息，根据所述第一数据信息及所述第二数据信息在预设数据同步信息表中查询，获取数据同步方式；
根据所述数据同步方式生成对遥测数据及带有提示点的视频图像数据生成数据同步请求报文并发送至所述被服务人员终端；
接收所述被服务人员终端对所述数据同步请求报文中提取的数据同步顺序信息的序列值与预设序列值的比较结果，在所述比较结果为序列值大于预设序列值时，表示数据同步顺序符合规则，将按照数据同步方式对遥测数据及带有提示点的视频图像数据生成同步数据并发送至被服务人员终端；在所述比较结果为序列值小于等于预设序列值时，表示数据同步顺序不符合规则，重新匹配数据同步方式，生成新的数据同步请求报文进行验证。
上述技术方案的工作原理：对遥测数据及带有提示点的视频图像数据进行数据同步处理；获取遥测数据的第一数据信息及带有提示点的视频图像数据的第二数据信息，根据所述第一数据信息及所述第二数据信息在预设数据同步信息表中查询，获取数据同步方式；根据所述数据同步方式生成对遥测数据及带有提示点的视频图像数据生成数据同步请求报文并发送至所述被服务人员终端；接收所述被服务人员终端对所述数据同步请求报文中提取的数据同步顺序信息的序列值与预设序列值的比较结果，在所述比较结果为序列值大于预设序列值时，表示数据同步顺序符合规则，将按照数据同步方式对遥测数据及带有提示点的视频图像数据生成同步数据并发送至被服务人员终端；在所述比较结果为序列值小于等于预设序列值时，表示数据同步顺序不符合规则，重新匹配数据同步方式，生成新的数据同步请求报文进行验证。
上述技术方案的有益效果：实现将遥测数据及带有提示点的视频图像数据的同步发送，保证遥测数据及带有提示点的视频图像数据的准确性及同步性，便于被服务人员做出正确的决策。同时保证数据传输的质量及稳定性。
根据本发明的一些实施例，在接收所述家政人员终端发送的在家政服务过程中的带有提示点的视频图像数据后，还包括：
获取所述家政人员终端发送的在家政服务过程中的带有提示点的视频图像数据的发送时间信息及家政人员终端ID信息；
获取所述带有提示点的视频图像数据中的关联事件信息；
根据所述关联事件信息查询预设家政人员服务标准要求表获取该关联事件的服务标准要求；
获取所述带有提示点的视频图像数据中家政人员对关联事件的实际服务要求；
判断所述实际服务要求是否满足服务标准要求，在确定所述实际服务要求不满足服务标准要求时，根据所述带有提示点的视频图像数据的发送时间信息及家政人员终端ID信息，记录为一次服务不达标事件，并生成警示信息至家政人员终端；
统计家政人员在执行家政服务过程中的服务不达标事件的数量，当服务不达标事件的数量大于预设数量时，生成终止当前家政人员的家政服务的提示信息及更换家政人员的家政服务信息，并发送至被服务人员终端。
上述技术方案的工作原理：家政人员公司的监控端对家政人员的家政服务过程进行监控，获取所述家政人员终端发送的在家政服务过程中的带有提示点的视频图像数据的发送时间信息及家政人员终端ID信息；获取所述带有提示点的视频图像数据中的关联事件信息；示例的，关键事件信息可以为对厨房清洁事件、卧室清洁事件等等；根据所述关联事件信息查询预设家政人员服务标准要求表获取该关联事件的服务标准要求；获取所述带有提示点的视频图像数据中家政人员对关联事件的实际服务要求；判断所述实际服务要求是否满足服务标准要求，在确定所述实际服务要求不满足服务标准要求时，根据所述带有提示点的视频图像数据的发送时间信息及家政人员终端ID信息，记录为一次服务不达标事件，并生成警示信息至家政人员终端；统计家政人员在执行家政服务过程中的服务不达标事件的数量，当服务不达标事件的数量大于预设数量时，生成终止当前家政人员的家政服务的提示信息及更换家政人员的家政服务信息，并发送至被服务人员终端。
上述技术方案的有益效果：家政人员公司的监控端一方面协助被服务人员对家政服务的监控，另一方面监控家政人员按照家政公司的服务标准进行家政服务，保证家政服务的质量，提高用户体验。
根据本发明的一些实施例，所述确定所述语音信息中包括第一预设语音关键词及第二预设语音关键词，包括：
S11、获取所述语音信息中与第一预设语音关键词长度相同的语音关键词；
S12、根据公式(1)计算所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的形式相似度Si：
其中，i∈(1，Z),Z为语音信息中与第一预设语音关键词长度相同的语音关键词的数量；wi为第i个语音关键词；
为第一预设语音关键词；
为第i个语音关键词与第一预设语音关键词的编辑距离，所述编辑距离为将第i个语音关键词转换为第一预设语音关键词需付出的代价；L(wi)为第i个语音关键词的长度；
S13、根据公式(2)计算所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的语音语义相似度Pi：
其中，ax为第i个语音关键词中第x个语音语义概念；by为第一预设语音关键词中第y个语音语义概念；
为语音语义概念ax在第i个语音关键词中出现的次数；
为语音语义概念by在第一预设语音关键词中出现的次数；N为第i个语音关键词中语音语义概念的个数；M为第一预设语音关键词中语音语义概念的个数；
S14、通过公式(3)根据所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的形式相似度Si及所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的语音语义相似度Pi，计算得到第i个语音关键词与所述第一预设语音关键词的匹配度Qi：
其中，k1为赋予形式相似度Si的第一权重；k2为赋予语音语义相似度Pi的第二权重；k1+k2＝1，k1、k2的取值经过多次试验计算获取；
S15、选取出最大匹配度，比较最大匹配度与预设匹配度的大小，在确定最大匹配度大于预设匹配度时，确定所述语音信息中包括第一预设语音关键词；
S16、同理，可以确定所述语音信息中包括第二预设语音关键词，对所述第一预设语音关键词与第二预设语音关键词之间的语音信息中的提示内容及提示时刻进行记录，进而生成带有提示点的视频图像数据。
上述技术方案的工作原理及有益效果：根据第i个语音关键词与第一预设语音关键词的编辑距离、第i个语音关键词的长度准确计算出所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的形式相似度Si；根据第i个语音关键词中第x个语音语义概念、第一预设语音关键词中第y个语音语义概念等准确计算出所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的语音语义相似度Pi，进而准确计算出第i个语音关键词与所述第一预设语音关键词的匹配度，提高判断匹配度与预设匹配度大小的准确性，提高判断语音信息中是否包含第一预设语音关键词的准确性；同理，可以确定语音信息中是否包括第二语音关键词，对所述第一预设语音关键词与第二预设语音关键词之间的语音信息中的提示内容及提示时刻进行记录，进而生成带有提示点的视频图像数据，便于提示点的生成。
如图2所示，本发明第二方面实施例提出了一种基于视频的服务系统，包括：
第一收发模块1，用于接收家政人员终端扫描设置在被服务人员的房门上的二维码后发送的开锁请求指令及家政请求指令，判断所述开锁请求指令及家政请求指令是否合法，在确定所述开锁请求指令及家政请求指令合法时，将所述开锁请求指令及家政请求指令发送至被服务人员终端；
第二收发模块2，用于接收所述被服务人员终端对所述开锁请求指令的确认结果及对所述家政请求指令的服务要求；将所述确认结果发送至设置在被服务人员的房门上的智能门锁，使得所述智能门锁打开；将所述服务要求发送至家政人员终端；
第三收发模块3，用于接收所述家政人员终端发送的在家政服务过程中的带有提示点的视频图像数据并发送至被服务人员终端；
建立视频交互请求群组模块4，用于接收所述被服务人员终端发送的视频交互请求指令，建立起所述家政人员终端与所述被服务人员终端之间的视频交互请求群组；
第四收发模块5，用于在生成视频交互请求群组后，接收所述被服务人员终端对所述带有提示点的视频图像数据的标记信息并发送至家政人员终端。
上述技术方案的工作原理：在被服务人员不在家时，家政人员通过家政人员终端扫描设置在被服务人员的房门上的二维码后发送的开锁请求指令及家政请求指令至服务器的第一收发模块1，判断所述开锁请求指令及家政请求指令是否合法，即判断该被服务人员是否在该时间预约家政服务及核实家政人员身份信息等，在确定被服务人员在该时间预约家政服务及家政人员身份正确时，确定所述开锁请求指令及家政请求指令合法时，将所述开锁请求指令及家政请求指令发送至被服务人员终端；服务器的第二收发模块2接收所述被服务人员终端对所述开锁请求指令的确认结果及对所述家政请求指令的服务要求；将所述确认结果发送至设置在被服务人员的房门上的智能门锁，使得所述智能门锁打开；将所述服务要求发送至家政人员终端；使得家政人员可以进行被服务人员家中进行按照被服务人员指示的服务要求进行家政服务；服务器的第三收发模块3接收所述家政人员终端发送的在家政服务过程中的带有提示点的视频图像数据并发送至被服务人员终端；家政人员在进行家政服务中录制视频图像数据使得被服务人员查看，同时在录制过程中，在每进行一项家长服务时，进行提示点的创建，便于用户根据提示点进行快速对家政服务的查看，便于用户的搜索家政服务，提高用户体验。服务器的建立视频交互请求群组模块4接收所述被服务人员终端发送的视频交互请求指令，建立起所述家政人员终端与所述被服务人员终端之间的视频交互请求群组；可以实现在家政人员进行家政服务过程中，实现被服务人员与家政人员进行视频交互，便于被服务人员与家政人员针对详细的家政服务要求进行沟通，提高家政服务质量，使得被服务人员可以及时获取相关的家政服务视频及进行相应的指示；服务器的第四收发模块5在生成视频交互请求群组后，接收所述被服务人员终端对所述带有提示点的视频图像数据的标记信息并发送至家政人员终端；被服务人员对家政人员录制的视频进行标记，指出具体的家政服务要求。
上述技术方案的有益效果：使得用户不在家时，也能保证家政服务的正常进行，在家政人员进行家政服务时，用户能及时获取家政服务的过程及家政服务质量，提高用户体验，保证家政服务质量及安全。
根据本发明的一些实施例，包括：
判断模块，用于在获取视频图像数据过程中，对家政人员的语音信息进行特征提取，判断所述语音信息中是否包括第一预设语音关键词及第二预设语音关键词；
提示点生成模块，用于在确定所述语音信息中包括第一预设语音关键词及第二预设语音关键词时，对所述第一预设语音关键词与第二预设语音关键词之间的语音信息中的提示内容及提示时刻进行记录，进而生成带有提示点的视频图像数据。
上述技术方案的工作原理：第一预设语音关键词可以是“提示点创建开始”；第二预设语音关键词可以是“提示点创建结束”；即家政人员在录制家政服务过程中的视频图像数据时，判断模块对家政人员的语音信息进行特征提取，判断所述语音信息中是否包括第一预设语音关键词及第二预设语音关键词；提示点生成模块对所述第一预设语音关键词与第二预设语音关键词之间的语音信息中的提示内容及提示时刻进行记录，进而生成带有提示点的视频图像数据。
上述技术方案的有益效果：便于被服务人员对视频图像数据的快速查看，避免浏览一些不必要的数据，节约时间，根据被服务人员对家政服务的查看需求进行快速检索定位，提高被服务人员体验。
根据本发明的一些实施例，所述确定所述语音信息中包括第一预设语音关键词及第二预设语音关键词，包括：
S11、获取所述语音信息中与第一预设语音关键词长度相同的语音关键词；
S12、根据公式(1)计算所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的形式相似度Si：
其中，i∈(1，Z),Z为语音信息中与第一预设语音关键词长度相同的语音关键词的数量；wi为第i个语音关键词；
为第一预设语音关键词；
为第i个语音关键词与第一预设语音关键词的编辑距离，所述编辑距离为将第i个语音关键词转换为第一预设语音关键词需付出的代价；L(wi)为第i个语音关键词的长度；
S13、根据公式(2)计算所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的语音语义相似度Pi：
其中，ax为第i个语音关键词中第x个语音语义概念；by为第一预设语音关键词中第y个语音语义概念；
为语音语义概念ax在第i个语音关键词中出现的次数；
为语音语义概念by在第一预设语音关键词中出现的次数；N为第i个语音关键词中语音语义概念的个数；M为第一预设语音关键词中语音语义概念的个数；
S14、通过公式(3)根据所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的形式相似度Si及所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的语音语义相似度Pi，计算得到第i个语音关键词与所述第一预设语音关键词的匹配度Qi：
其中，k1为赋予形式相似度Si的第一权重；k2为赋予语音语义相似度Pi的第二权重；k1+k2＝1，k1、k2的取值经过多次试验计算获取；
S15、选取出最大匹配度，比较最大匹配度与预设匹配度的大小，在确定最大匹配度大于预设匹配度时，确定所述语音信息中包括第一预设语音关键词；
S16、同理，可以确定所述语音信息中包括第二预设语音关键词，对所述第一预设语音关键词与第二预设语音关键词之间的语音信息中的提示内容及提示时刻进行记录，进而生成带有提示点的视频图像数据。
上述技术方案的工作原理及有益效果：根据第i个语音关键词与第一预设语音关键词的编辑距离、第i个语音关键词的长度准确计算出所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的形式相似度Si；根据第i个语音关键词中第x个语音语义概念、第一预设语音关键词中第y个语音语义概念等准确计算出所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的语音语义相似度Pi，进而准确计算出第i个语音关键词与所述第一预设语音关键词的匹配度，提高判断匹配度与预设匹配度大小的准确性，提高判断语音信息中是否包含第一预设语音关键词的准确性；同理，可以确定语音信息中是否包括第二语音关键词，对所述第一预设语音关键词与第二预设语音关键词之间的语音信息中的提示内容及提示时刻进行记录，进而生成带有提示点的视频图像数据，便于提示点的生成。
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。
Claims (10)
1.一种基于视频的服务方法，其特征在于，包括：
接收家政人员终端扫描设置在被服务人员的房门上的二维码后发送的开锁请求指令及家政请求指令，判断所述开锁请求指令及家政请求指令是否合法，在确定所述开锁请求指令及家政请求指令合法时，将所述开锁请求指令及家政请求指令发送至被服务人员终端；
接收所述被服务人员终端对所述开锁请求指令的确认结果及对所述家政请求指令的服务要求；将所述确认结果发送至设置在被服务人员的房门上的智能门锁，使得所述智能门锁打开；将所述服务要求发送至家政人员终端；
接收所述家政人员终端发送的在家政服务过程中的带有提示点的视频图像数据并发送至被服务人员终端；
接收所述被服务人员终端发送的视频交互请求指令，建立起所述家政人员终端与所述被服务人员终端之间的视频交互请求群组；
在生成视频交互请求群组后，接收所述被服务人员终端对所述带有提示点的视频图像数据的标记信息并发送至家政人员终端。
2.如权利要求1所述的方法，其特征在于，获取所述带有提示点的视频图像数据，包括：
在获取视频图像数据过程中，对家政人员的语音信息进行特征提取，判断所述语音信息中是否包括第一预设语音关键词及第二预设语音关键词；
在确定所述语音信息中包括第一预设语音关键词及第二预设语音关键词时，对所述第一预设语音关键词与第二预设语音关键词之间的语音信息中的提示内容及提示时刻进行记录，进而生成带有提示点的视频图像数据。
3.如权利要求1所述的方法，其特征在于，获取所述被服务人员终端对所述带有提示点的视频图像数据的标记信息的方法，包括：
接收带有提示点的视频图像数据；
根据所述提示点快速切换至目标视频中；
读取所述目标视频，获取所述目标视频的帧数，根据所述帧数，对目标视频进行分帧，获取每帧子目标视频的特征向量；
根据所述每帧子目标视频的特征向量生成图片数据，根据所述图片数据获取所述目标视频中目标物的尺寸信息；
根据所述目标物的尺寸信息确定在目标物上的标记位置并生成标记信息。
4.如权利要求1所述的方法，其特征在于，在接收所述家政人员终端发送的在家政服务过程中的带有提示点的视频图像数据并发送至被服务人员终端的同时，还包括：
接收所述家政人员终端发送的在家政服务过程中遥测数据并发送至被服务人员终端；所述遥测数据为由传感器检测获取的被服务人员家中的环境数据。
5.如权利要求4所述的方法，其特征在于，在所述家政人员终端将所述遥测数据及带有提示点的视频图像数据发送至所述被服务人员终端前，还包括：
对遥测数据及带有提示点的视频图像数据进行数据同步处理；
获取遥测数据的第一数据信息及带有提示点的视频图像数据的第二数据信息，根据所述第一数据信息及所述第二数据信息在预设数据同步信息表中查询，获取数据同步方式；
根据所述数据同步方式生成对遥测数据及带有提示点的视频图像数据生成数据同步请求报文并发送至所述被服务人员终端；
接收所述被服务人员终端对所述数据同步请求报文中提取的数据同步顺序信息的序列值与预设序列值的比较结果，在所述比较结果为序列值大于预设序列值时，表示数据同步顺序符合规则，将按照数据同步方式对遥测数据及带有提示点的视频图像数据生成同步数据并发送至被服务人员终端；在所述比较结果为序列值小于等于预设序列值时，表示数据同步顺序不符合规则，重新匹配数据同步方式，生成新的数据同步请求报文进行验证。
6.如权利要求1所述的方法，其特征在于，在接收所述家政人员终端发送的在家政服务过程中的带有提示点的视频图像数据后，还包括：
获取所述家政人员终端发送的在家政服务过程中的带有提示点的视频图像数据的发送时间信息及家政人员终端ID信息；
获取所述带有提示点的视频图像数据中的关联事件信息；
根据所述关联事件信息查询预设家政人员服务标准要求表获取该关联事件的服务标准要求；
获取所述带有提示点的视频图像数据中家政人员对关联事件的实际服务要求；
判断所述实际服务要求是否满足服务标准要求，在确定所述实际服务要求不满足服务标准要求时，根据所述带有提示点的视频图像数据的发送时间信息及家政人员终端ID信息，记录为一次服务不达标事件，并生成警示信息至家政人员终端；
统计家政人员在执行家政服务过程中的服务不达标事件的数量，当服务不达标事件的数量大于预设数量时，生成终止当前家政人员的家政服务的提示信息及更换家政人员的家政服务信息，并发送至被服务人员终端。
7.如权利要求2所述的方法，其特征在于，所述确定所述语音信息中包括第一预设语音关键词及第二预设语音关键词，包括：
S11、获取所述语音信息中与第一预设语音关键词长度相同的语音关键词；
S12、根据公式(1)计算所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的形式相似度Si：
其中，i∈(1，Z),Z为语音信息中与第一预设语音关键词长度相同的语音关键词的数量；wi为第i个语音关键词；
为第一预设语音关键词；
为第i个语音关键词与第一预设语音关键词的编辑距离，所述编辑距离为将第i个语音关键词转换为第一预设语音关键词需付出的代价；L(wi)为第i个语音关键词的长度；
S13、根据公式(2)计算所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的语音语义相似度Pi：
其中，ax为第i个语音关键词中第x个语音语义概念；by为第一预设语音关键词中第y个语音语义概念；
为语音语义概念ax在第i个语音关键词中出现的次数；
为语音语义概念by在第一预设语音关键词中出现的次数；N为第i个语音关键词中语音语义概念的个数；M为第一预设语音关键词中语音语义概念的个数；
S14、通过公式(3)根据所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的形式相似度Si及所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的语音语义相似度Pi，计算得到第i个语音关键词与所述第一预设语音关键词的匹配度Qi：
其中，k1为赋予形式相似度Si的第一权重；k2为赋予语音语义相似度Pi的第二权重；k1+k2＝1，k1、k2的取值经过多次试验计算获取；
S15、选取出最大匹配度，比较最大匹配度与预设匹配度的大小，在确定最大匹配度大于预设匹配度时，确定所述语音信息中包括第一预设语音关键词；
S16、同理，可以确定所述语音信息中包括第二预设语音关键词，对所述第一预设语音关键词与第二预设语音关键词之间的语音信息中的提示内容及提示时刻进行记录，进而生成带有提示点的视频图像数据。
8.一种基于视频的服务系统，其特征在于，包括：
第一收发模块，用于接收家政人员终端扫描设置在被服务人员的房门上的二维码后发送的开锁请求指令及家政请求指令，判断所述开锁请求指令及家政请求指令是否合法，在确定所述开锁请求指令及家政请求指令合法时，将所述开锁请求指令及家政请求指令发送至被服务人员终端；
第二收发模块，用于接收所述被服务人员终端对所述开锁请求指令的确认结果及对所述家政请求指令的服务要求；将所述确认结果发送至设置在被服务人员的房门上的智能门锁，使得所述智能门锁打开；将所述服务要求发送至家政人员终端；
第三收发模块，用于接收所述家政人员终端发送的在家政服务过程中的带有提示点的视频图像数据并发送至被服务人员终端；
建立视频交互请求群组模块，用于接收所述被服务人员终端发送的视频交互请求指令，建立起所述家政人员终端与所述被服务人员终端之间的视频交互请求群组；
第四收发模块，用于在生成视频交互请求群组后，接收所述被服务人员终端对所述带有提示点的视频图像数据的标记信息并发送至家政人员终端。
9.如权利要求8所述的系统，其特征在于，包括：
判断模块，用于在获取视频图像数据过程中，对家政人员的语音信息进行特征提取，判断所述语音信息中是否包括第一预设语音关键词及第二预设语音关键词；
提示点生成模块，用于在确定所述语音信息中包括第一预设语音关键词及第二预设语音关键词时，对所述第一预设语音关键词与第二预设语音关键词之间的语音信息中的提示内容及提示时刻进行记录，进而生成带有提示点的视频图像数据。
10.如权利要求9所述的系统，其特征在于，所述确定所述语音信息中包括第一预设语音关键词及第二预设语音关键词，包括：
S11、获取所述语音信息中与第一预设语音关键词长度相同的语音关键词；
S12、根据公式(1)计算所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的形式相似度Si：
其中，i∈(1，Z),Z为语音信息中与第一预设语音关键词长度相同的语音关键词的数量；wi为第i个语音关键词；
为第一预设语音关键词；
为第i个语音关键词与第一预设语音关键词的编辑距离，所述编辑距离为将第i个语音关键词转换为第一预设语音关键词需付出的代价；L(wi)为第i个语音关键词的长度；
S13、根据公式(2)计算所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的语音语义相似度Pi：
其中，ax为第i个语音关键词中第x个语音语义概念；by为第一预设语音关键词中第y个语音语义概念；
为语音语义概念ax在第i个语音关键词中出现的次数；
为语音语义概念by在第一预设语音关键词中出现的次数；N为第i个语音关键词中语音语义概念的个数；M为第一预设语音关键词中语音语义概念的个数；
S14、通过公式(3)根据所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的形式相似度Si及所述语音信息中与第一预设语音关键词长度相同的第i个语音关键词与所述第一预设语音关键词的语音语义相似度Pi，计算得到第i个语音关键词与所述第一预设语音关键词的匹配度Qi：
其中，k1为赋予形式相似度Si的第一权重；k2为赋予语音语义相似度Pi的第二权重；k1+k2＝1，k1、k2的取值经过多次试验计算获取；
S15、选取出最大匹配度，比较最大匹配度与预设匹配度的大小，在确定最大匹配度大于预设匹配度时，确定所述语音信息中包括第一预设语音关键词；
S16、同理，可以确定所述语音信息中包括第二预设语音关键词，对所述第一预设语音关键词与第二预设语音关键词之间的语音信息中的提示内容及提示时刻进行记录，进而生成带有提示点的视频图像数据。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011005136.3A CN112153477B (zh) | 2020-09-23 | 2020-09-23 | 一种基于视频的服务方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011005136.3A CN112153477B (zh) | 2020-09-23 | 2020-09-23 | 一种基于视频的服务方法及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN112153477A true CN112153477A (zh) | 2020-12-29 |
| CN112153477B CN112153477B (zh) | 2022-04-26 |
Family
ID=73897556
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011005136.3A Active CN112153477B (zh) | 2020-09-23 | 2020-09-23 | 一种基于视频的服务方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112153477B (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115512474A (zh) * | 2021-06-04 | 2022-12-23 | 博泰车联网科技(上海)股份有限公司 | 智能家居系统的控制方法、设备及存储介质 |
Citations (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104918005A (zh) * | 2015-04-14 | 2015-09-16 | 谢冬 | 一种实时截取和发送监控记录的装置、系统和方法 |
| CN205028068U (zh) * | 2015-10-26 | 2016-02-10 | 武汉阳光尼特智能科技有限公司 | 一种智能管家系统 |
| CN105979167A (zh) * | 2016-06-24 | 2016-09-28 | 谭圆圆 | 视频制作方法及视频制作装置 |
| CN106385537A (zh) * | 2016-09-19 | 2017-02-08 | 深圳市金立通信设备有限公司 | 一种拍照方法及终端 |
| US20170069354A1 (en) * | 2015-09-08 | 2017-03-09 | Canon Kabushiki Kaisha | Method, system and apparatus for generating a position marker in video images |
| CN107886601A (zh) * | 2017-09-27 | 2018-04-06 | 湖南文理学院 | 一种办公室门禁系统及其开启方法 |
| CN108234945A (zh) * | 2017-12-29 | 2018-06-29 | 佛山市幻云科技有限公司 | 保姆管理方法与系统 |
| KR20180111277A (ko) * | 2017-03-31 | 2018-10-11 | 이현주 | 가사도우미의 관리 시스템 및 방법 |
| CN109165828A (zh) * | 2018-08-09 | 2019-01-08 | 江苏艾爱网络科技有限公司 | 基于网络平台的家政服务系统和使用方法 |
| US20190075365A1 (en) * | 2017-09-07 | 2019-03-07 | Facebook, Inc. | Reminding a user of an online system about a content item presented to the user in conjunction with a video |
| US20190304198A1 (en) * | 2017-06-16 | 2019-10-03 | Microsoft Technology Licensing, Llc | Object holographic augmentation |
| CN110569720A (zh) * | 2019-07-31 | 2019-12-13 | 安徽四创电子股份有限公司 | 一种基于音视频处理系统的音视频智能识别处理方法 |
| CN110990893A (zh) * | 2019-11-29 | 2020-04-10 | 山东爱城市网信息技术有限公司 | 一种基于区块链的家政服务体系管理方法及设备、介质 |
-
2020
- 2020-09-23 CN CN202011005136.3A patent/CN112153477B/zh active Active
Patent Citations (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104918005A (zh) * | 2015-04-14 | 2015-09-16 | 谢冬 | 一种实时截取和发送监控记录的装置、系统和方法 |
| US20170069354A1 (en) * | 2015-09-08 | 2017-03-09 | Canon Kabushiki Kaisha | Method, system and apparatus for generating a position marker in video images |
| CN205028068U (zh) * | 2015-10-26 | 2016-02-10 | 武汉阳光尼特智能科技有限公司 | 一种智能管家系统 |
| CN105979167A (zh) * | 2016-06-24 | 2016-09-28 | 谭圆圆 | 视频制作方法及视频制作装置 |
| CN106385537A (zh) * | 2016-09-19 | 2017-02-08 | 深圳市金立通信设备有限公司 | 一种拍照方法及终端 |
| KR20180111277A (ko) * | 2017-03-31 | 2018-10-11 | 이현주 | 가사도우미의 관리 시스템 및 방법 |
| US20190304198A1 (en) * | 2017-06-16 | 2019-10-03 | Microsoft Technology Licensing, Llc | Object holographic augmentation |
| US20190075365A1 (en) * | 2017-09-07 | 2019-03-07 | Facebook, Inc. | Reminding a user of an online system about a content item presented to the user in conjunction with a video |
| CN107886601A (zh) * | 2017-09-27 | 2018-04-06 | 湖南文理学院 | 一种办公室门禁系统及其开启方法 |
| CN108234945A (zh) * | 2017-12-29 | 2018-06-29 | 佛山市幻云科技有限公司 | 保姆管理方法与系统 |
| CN109165828A (zh) * | 2018-08-09 | 2019-01-08 | 江苏艾爱网络科技有限公司 | 基于网络平台的家政服务系统和使用方法 |
| CN110569720A (zh) * | 2019-07-31 | 2019-12-13 | 安徽四创电子股份有限公司 | 一种基于音视频处理系统的音视频智能识别处理方法 |
| CN110990893A (zh) * | 2019-11-29 | 2020-04-10 | 山东爱城市网信息技术有限公司 | 一种基于区块链的家政服务体系管理方法及设备、介质 |
Non-Patent Citations (1)
| Title |
|---|
| 钟瑞艳: "家政数据库管理及视频监控系统的设计与实现", 《中国优秀硕士学位论文全文数据库（电子期刊）》 * |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115512474A (zh) * | 2021-06-04 | 2022-12-23 | 博泰车联网科技(上海)股份有限公司 | 智能家居系统的控制方法、设备及存储介质 |
| CN115512474B (zh) * | 2021-06-04 | 2023-11-28 | 博泰车联网科技(上海)股份有限公司 | 智能家居系统的控制方法、设备及存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN112153477B (zh) | 2022-04-26 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4569471B2 (ja) | 電子画像蓄積方法、電子画像蓄積装置、及び電子画像蓄積システム | |
| CN110598474B (zh) | 基于区块链的数据获取方法、系统、装置及存储介质 | |
| CN109649915B (zh) | 一种智能货柜货物识别方法和装置 | |
| CN109089172A (zh) | 一种弹幕显示方法、装置及电子设备 | |
| CN112153477B (zh) | 一种基于视频的服务方法及系统 | |
| JP2019016079A (ja) | 電力機器の保守支援装置、システムおよびプログラム | |
| CN112087603B (zh) | 智慧考场监管方法 | |
| CN111652659B (zh) | 基于大数据的vr产品评价系统 | |
| CN110246292B (zh) | 家庭视频监控方法、装置及存储介质 | |
| CN111613253A (zh) | 一种数据采集方法、数据采集设备及数据采集系统 | |
| JP7030092B2 (ja) | 情報生成方法及び装置並びにヒューマンコンピュータインタラクションのための装置 | |
| CN111598280A (zh) | 一种设备报修方法和装置 | |
| JP6146805B2 (ja) | 広告配信システムおよびポイント付与方法 | |
| CN109902102B (zh) | 一种变电站监控信息验收卡的自动化核对方法 | |
| CN112802252B (zh) | 基于物联网的智能楼宇安全管理方法、系统和存储介质 | |
| CN113869115A (zh) | 一种人脸图像处理的方法及系统 | |
| CN104113866A (zh) | 无线控制器日志的处理方法及装置 | |
| JP6515852B2 (ja) | 情報処理装置、個人認証システム、その制御方法、個人認証方法、そのプログラム | |
| CN111915785A (zh) | 门禁控制方法、门禁设备、存储介质、程序产品和电子设备 | |
| CN113570341B (zh) | 一种配网设备信息录入方法及装置 | |
| CN113115107B (zh) | 一种基于5g网络的手持视频采集终端系统 | |
| CN108122037A (zh) | It运维管理方法及it运维管理装置 | |
| CN111881437B (zh) | 基于黑盒对抗样本攻击实现人脸识别安全测评的方法及其系统 | |
| KR20020081561A (ko) | 골프 스윙 셀프클리닉 시스템 및 그 방법 | |
| CN110149358B (zh) | 数据传输方法、系统及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB02 | Change of applicant information |
Address after: 230000 room 344, block C2, Mingfa Commercial Plaza, No. 88, Silihe Road, Luyang District, Hefei City, Anhui Province Applicant after: Hefei Luzhou housekeeper Housekeeping Service Group Co.,Ltd. Address before: 230000 room 336, C2, Mingfa Commercial Plaza, 88 Silihe Road, Luyang District, Hefei City, Anhui Province Applicant before: Hefei Luzhou housekeeper Housekeeping Service Co.,Ltd. |
|
| CB02 | Change of applicant information | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |