CN103902611A - 视频内容搜索系统及方法 - Google Patents

视频内容搜索系统及方法 Download PDF

Info

Publication number
CN103902611A
CN103902611A CN201210584187.5A CN201210584187A CN103902611A CN 103902611 A CN103902611 A CN 103902611A CN 201210584187 A CN201210584187 A CN 201210584187A CN 103902611 A CN103902611 A CN 103902611A
Authority
CN
China
Prior art keywords
video
content
user
search
pictures
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201210584187.5A
Other languages
English (en)
Inventor
郭鑫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hongfujin Precision Industry Shenzhen Co Ltd
Hon Hai Precision Industry Co Ltd
Original Assignee
Hongfujin Precision Industry Shenzhen Co Ltd
Hon Hai Precision Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hongfujin Precision Industry Shenzhen Co Ltd, Hon Hai Precision Industry Co Ltd filed Critical Hongfujin Precision Industry Shenzhen Co Ltd
Priority to CN201210584187.5A priority Critical patent/CN103902611A/zh
Priority to TW102101236A priority patent/TW201426356A/zh
Priority to US14/138,129 priority patent/US20140188834A1/en
Publication of CN103902611A publication Critical patent/CN103902611A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7834Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using audio features
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7844Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using original textual content or text extracted from visual content or transcript of audio data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7847Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using low-level visual features of the video content

Abstract

本发明提供一种视频内容搜索方法,包括:侦测使用者是否选择了所述电子装置当前播放的视频中的某部分内容;当使用者选择当前播放的视频中的某部分内容时,判断是否执行搜索操作;当判断结果为执行搜索操作时,解析使用者所选择的视频内容;及将所述解析出来的视频内容上传到一个云端服务器中执行搜索,并接收从云端服务器返回的搜索结果。本发明还提供一种视频内容搜索系统。利用本系统及方法可以快速地搜索到与视频中的内容相关的信息。

Description

视频内容搜索系统及方法
技术领域
本发明涉及搜索领域,尤其是关于一种视频内容搜索系统及方法。
背景技术
随着电子装置,如智能手机、平板电脑等的普及,人们获知各种信息的主要途径是通过网络上的视频。然而,用户在观看视频时,当遇到了某个比较关心的问题,如想了解视频中的某个人物,遇到了一个不太了解的词汇,看到了一个不认识的字等,可能需要执行搜索操作。传统方法需要用户开启一个搜索引擎,在搜索引擎中键入关键字。然而,用户可能不认识视频中的人,因此根本不知道该在搜索引擎中键入什么样的关键字,或者遇到不认识的字,如果用户只会拼音输入法,那么他根本无法在搜索引擎中键入该不认识的字。
发明内容
鉴于以上内容,有必要提出一种视频内容搜索系统及方法,其可以快速地搜索到与视频中的内容相关的信息。
所述的视频内容搜索系统运行于电子装置中。该系统包括:侦测模块,用于侦测使用者是否选择了所述电子装置当前播放的视频中的某部分内容;判断模块,用于当使用者选择当前播放的视频中的某部分内容时,判断是否执行搜索操作;解析模块,用于当判断结果为执行搜索操作时,解析使用者所选择的视频内容;及搜索模块,用于将所述解析出来的视频内容上传到一个云端服务器中执行搜索,并接收从云端服务器返回的搜索结果。
所述的视频内容搜索方法运行于电子装置中。该方法包括:侦测使用者是否选择了所述电子装置当前播放的视频中的某部分内容;当使用者选择当前播放的视频中的某部分内容时,判断是否执行搜索操作;当判断结果为执行搜索操作时,解析使用者所选择的视频内容;及将所述解析出来的视频内容上传到一个云端服务器中执行搜索,并接收从云端服务器返回的搜索结果。
利用本发明所提供的视频内容搜索系统及方法通过接收用户在视频中选择的内容,快速地搜索到与该选择的内容相关的信息。
附图说明
图1是本发明视频内容搜索系统较佳实施例的硬件环境图。
图2是本发明视频内容搜索系统较佳实施例的功能模块图。
图3是本发明视频内容搜索方法较佳实施例的方法流程图。
主要元件符号说明
电子装置 1
视频内容搜索系统 10
侦测模块 100
判断模块 101
解析模块 102
搜索模块 103
存储器 11
控制器 12
显示设备 13
输入设备 14
如下具体实施方式将结合上述附图进一步说明本发明。
具体实施方式
参阅图1所示,是本发明视频内容搜索系统较佳实施例的硬件环境图。所述视频内容搜索系统10应用于包括有存储器11及控制器12的电子装置1。所述电子装置1可以是个人计算机、平板电脑、PDA(personal digital assistant,个人数字助理)、智能手机等电子终端设备。
所述视频内容搜索系统10包括多个由程序化代码所组成的功能模块(详见图2描述),具有如下功能:接收用户在视频中选择的内容,解析该内容,并根据解析出的内容执行搜索。
所述视频内容搜索系统10的程序化代码存储在电子装置1的存储器11中,并由电子装置1的控制器12所执行以实现其功能。
所述存储器11可以为智能媒体卡(smart media card)、安全数字卡(secure digital card)、快闪存储器卡(flash card)等储存设备。所述控制器12可以为中央处理器等。
此外,所述电子装置1还内置或者外接有一个显示设备13及一个输入设备14。所述显示设备13可以是LED(Light EmittingDiode,发光二极管)显示器或者触摸面板等,用于输出视频。所述输入设备14可以是鼠标、触控笔等设备。
参阅图2所示,是本发明视频内容搜索系统10较佳实施例的功能模块图。
本实施例中,所述视频内容搜索系统10包括侦测模块100、判断模块101、解析模块102及搜索模块103。以下结合图3说明模块100~103的功能。
参阅图3所示,是本发明视频内容搜索方法较佳实施例的方法流程图。根据不同的需求,该流程图中步骤的顺序可以改变,某些步骤可以省略。
侦测模块100时时侦测使用者是否选择了电子装置1当前播放的视频中的某部分内容(步骤S10)。在一个实施例中,若侦测模块100侦测到使用者利用所述输入设备14以框选的方式选择了视频中某个画面中的图像或者文字时,或者利用所述输入设备14在一个预设的时间段内点击了所述视频中某两个画面,则侦测模块100认为使用者选择了电子装置1当前播放的视频中的某部分内容。其中,在一个预设的时间段内点击了所述视频中某两个画面表示选择了当前播放的视频中该两个画面之间的音频内容。所述预设的时间段可以是30秒。所述视频中的画面是指组成该视频的每一帧。
判断模块101判断是否执行搜索操作(步骤S11)。在一个实施例中,当侦测模块100侦测到使用者选择了电子装置1当前播放的视频中的某部分内容时,会发送一个对话框,并提供一个确认按键及一个取消按键,以确认使用者是否需要进行搜索,以防止使用者的误操作。当使用者选择了所述确认按键时,判断模块101判断需要执行搜索操作,并执行下述的步骤S12。否则,当使用者选择了所述取消按键时,判断模块101判断不需要执行搜索操作,并返回上述的步骤S10。
解析模块102判断所选择的内容是否为音频内容(步骤S12)。如上所述,当使用者利用所述输入设备14在一个预设的时间段内点击了所述视频中某两个画面时,解析模块102判断所选择的是音频内容,并解析该音频内容,以将该音频内容转换为文字信息(步骤S14)。否则,若选择的不是音频内容,则是视频画面,并执行步骤S13。
解析模块102进一步判断所选择的视频画面是否包含文字信息(步骤S13)。例如,使用者可以利用所述输入设备14以框选的方式选择视频画面中某些文字。当解析模块102判断所选择的视频画面包含文字信息时,则解析出该视频画面中的文字信息(步骤S16)。否则,当解析模块102判断所选择的视频画面不包含文字信息时,则截取使用者选择的视频画面(步骤S15)。例如,使用者利用所述输入设备14以框选的方式选择了某个视频画面时,则解析模块102直接截取该框选部分的视频画面。
搜索模块103将所述解析出来的文字信息或者截取的视频画面透过一个搜索引擎上传到一个云端服务器中执行搜索(步骤S17),并接收从云端服务器返回的搜索结果(步骤S18)。
最后应说明的是,以上实施例仅用以说明本发明的技术方案而非限制,尽管参照较佳实施例对本发明进行了详细说明,本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或等同替换,而不脱离本发明技术方案的精神和范围。

Claims (8)

1.一种视频内容搜索系统,运行于电子装置中,其特征在于,该系统包括:
侦测模块,用于侦测使用者是否选择了所述电子装置当前播放的视频中的某部分内容;
判断模块,用于当使用者选择当前播放的视频中的某部分内容时,判断是否执行搜索操作;
解析模块,用于当判断结果为执行搜索操作时,解析使用者所选择的视频内容;及
搜索模块,用于将所述解析出来的视频内容上传到一个云端服务器中执行搜索,并接收从云端服务器返回的搜索结果。
2.如权利要求1所述的视频内容搜索系统,其特征在于,当侦测模块侦测到使用者利用所述电子装置的输入设备以框选的方式选择了视频中某个画面中的图像或者文字时,或者利用所述输入设备在一个预设的时间段内点击了所述视频中某两个画面时,认为使用者选择了当前播放的视频中的某部分内容。
3.如权利要求2所述的视频内容搜索系统,其特征在于,所述解析模块还用于判断所选择的内容是音频内容还是视频画面,并在所选择的内容是音频内容,或者当所选择的内容为包含文字的视频画面时,将该音频内容或者视频画面中的文字解析为文字信息,当所选择的内容不是包含文字的视频画面时,截取该视频画面,其中,所述解析出来的视频内容即解析出的文字信息或者截取的视频画面。
4.如权利要求3所述的视频内容搜索系统,其特征在于,当侦测模块侦测到使用者利用所述输入设备在一个预设的时间段内点击了所述视频中某两个画面时,判断所选择的内容是该两个画面之间音频内容。
5.一种视频内容搜索方法,运行于电子装置中,其特征在于,该方法包括:
侦测步骤:侦测使用者是否选择了所述电子装置当前播放的视频中的某部分内容;
判断步骤:当使用者选择当前播放的视频中的某部分内容时,判断是否执行搜索操作;
解析步骤:当判断结果为执行搜索操作时,解析使用者所选择的视频内容;及
搜索步骤:将所述解析出来的视频内容上传到一个云端服务器中执行搜索,并接收从云端服务器返回的搜索结果。
6.如权利要求5所述的视频内容搜索方法,其特征在于,在侦测步骤中,当侦测到使用者利用所述电子装置的输入设备以框选的方式选择了视频中某个画面中的图像或者文字时,或者利用所述输入设备在一个预设的时间段内点击了所述视频中某两个画面时,认为使用者选择了当前播放的视频中的某部分内容。
7.如权利要求6所述的视频内容搜索方法,其特征在于,所述解析步骤还包括:
判断所选择的内容是音频内容还是视频画面,并在所选择的内容是音频内容,或者当所选择的内容为包含文字的视频画面时,将该音频内容或者视频画面中的文字解析为文字信息,当所选择的内容不是包含文字的视频画面时,截取该视频画面,其中,所述解析出来的视频内容即解析出的文字信息或者截取的视频画面。
8.如权利要求7所述的视频内容搜索方法,其特征在于,当侦测步骤中侦测到使用者利用所述输入设备在一个预设的时间段内点击了所述视频中某两个画面时,判断所选择的内容是该两个画面之间音频内容。
CN201210584187.5A 2012-12-28 2012-12-28 视频内容搜索系统及方法 Pending CN103902611A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201210584187.5A CN103902611A (zh) 2012-12-28 2012-12-28 视频内容搜索系统及方法
TW102101236A TW201426356A (zh) 2012-12-28 2013-01-11 視頻內容搜索系統及方法
US14/138,129 US20140188834A1 (en) 2012-12-28 2013-12-23 Electronic device and video content search method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210584187.5A CN103902611A (zh) 2012-12-28 2012-12-28 视频内容搜索系统及方法

Publications (1)

Publication Number Publication Date
CN103902611A true CN103902611A (zh) 2014-07-02

Family

ID=50993939

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210584187.5A Pending CN103902611A (zh) 2012-12-28 2012-12-28 视频内容搜索系统及方法

Country Status (3)

Country Link
US (1) US20140188834A1 (zh)
CN (1) CN103902611A (zh)
TW (1) TW201426356A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105446642A (zh) * 2015-11-13 2016-03-30 上海斐讯数据通信技术有限公司 视频内容的自动搜索方法、系统及具有触摸屏的电子设备
CN106021368A (zh) * 2016-05-10 2016-10-12 东软集团股份有限公司 播放多媒体文件的方法及装置
CN106325750A (zh) * 2016-08-26 2017-01-11 曹蕊 一种应用于终端设备的文字识别方法及系统
CN108255922A (zh) * 2017-11-06 2018-07-06 优视科技有限公司 视频识别方法、设备、客户端装置、电子设备及服务器
CN112738556A (zh) * 2020-12-22 2021-04-30 上海哔哩哔哩科技有限公司 视频处理方法及装置

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2980709A1 (de) * 2014-08-01 2016-02-03 NetRange MMH GmbH Verfahren und Vorrichtung zum Wiedergeben von Zusatzinformationen zu Videodaten
KR102407630B1 (ko) * 2015-09-08 2022-06-10 삼성전자주식회사 서버, 사용자 단말 및 이들의 제어 방법.
CN107291904A (zh) * 2017-06-23 2017-10-24 百度在线网络技术(北京)有限公司 一种视频搜索方法和装置
US11151191B2 (en) 2019-04-09 2021-10-19 International Business Machines Corporation Video content segmentation and search

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5774666A (en) * 1996-10-18 1998-06-30 Silicon Graphics, Inc. System and method for displaying uniform network resource locators embedded in time-based medium
US20010003214A1 (en) * 1999-07-15 2001-06-07 Vijnan Shastri Method and apparatus for utilizing closed captioned (CC) text keywords or phrases for the purpose of automated searching of network-based resources for interactive links to universal resource locators (URL's)
US7013273B2 (en) * 2001-03-29 2006-03-14 Matsushita Electric Industrial Co., Ltd. Speech recognition based captioning system
US20030107592A1 (en) * 2001-12-11 2003-06-12 Koninklijke Philips Electronics N.V. System and method for retrieving information related to persons in video programs
US8341152B1 (en) * 2006-09-12 2012-12-25 Creatier Interactive Llc System and method for enabling objects within video to be searched on the internet or intranet
US20080284910A1 (en) * 2007-01-31 2008-11-20 John Erskine Text data for streaming video
KR101550886B1 (ko) * 2009-03-27 2015-09-08 삼성전자 주식회사 동영상 콘텐츠에 대한 부가 정보 생성 장치 및 방법
WO2011146276A2 (en) * 2010-05-19 2011-11-24 Google Inc. Television related searching
US8745683B1 (en) * 2011-01-03 2014-06-03 Intellectual Ventures Fund 79 Llc Methods, devices, and mediums associated with supplementary audio information
EP2756686A4 (en) * 2011-09-12 2015-03-04 Intel Corp METHOD AND DEVICE FOR KEYWORK-BASED NON-LINEAR NAVIGATION OF VIDEO STREAMS AND OTHER CONTENT
US20140372210A1 (en) * 2013-06-18 2014-12-18 Yahoo! Inc. Method and system for serving advertisements related to segments of a media program
US9268861B2 (en) * 2013-08-19 2016-02-23 Yahoo! Inc. Method and system for recommending relevant web content to second screen application users

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105446642A (zh) * 2015-11-13 2016-03-30 上海斐讯数据通信技术有限公司 视频内容的自动搜索方法、系统及具有触摸屏的电子设备
CN106021368A (zh) * 2016-05-10 2016-10-12 东软集团股份有限公司 播放多媒体文件的方法及装置
CN106325750A (zh) * 2016-08-26 2017-01-11 曹蕊 一种应用于终端设备的文字识别方法及系统
CN108255922A (zh) * 2017-11-06 2018-07-06 优视科技有限公司 视频识别方法、设备、客户端装置、电子设备及服务器
CN112738556A (zh) * 2020-12-22 2021-04-30 上海哔哩哔哩科技有限公司 视频处理方法及装置

Also Published As

Publication number Publication date
TW201426356A (zh) 2014-07-01
US20140188834A1 (en) 2014-07-03

Similar Documents

Publication Publication Date Title
CN103902611A (zh) 视频内容搜索系统及方法
US11475089B2 (en) Method and apparatus for displaying search page, terminal and storage medium
US9875307B2 (en) Using content identification as context for search
US9088830B2 (en) Method for virtual channel management, network-based multimedia reproduction system with virtual channel, and computer readable storage medium
KR102212355B1 (ko) 현재 재생되는 텔레비젼 프로그램들과 연관된 인터넷-액세스가능 컨텐츠의 식별 및 제시
US10878044B2 (en) System and method for providing content recommendation service
EP2961172A1 (en) Method and device for information acquisition
KR102281882B1 (ko) 실-시간 오디오 스트림 검색 및 제시 시스템
CN113536793A (zh) 一种实体识别方法、装置、设备以及存储介质
KR20180032665A (ko) 데이터 스트림들의 실시간 자연어 처리
CN105335398A (zh) 一种服务推荐方法及终端
US9984687B2 (en) Image display device, method for driving the same, and computer readable recording medium
WO2019172704A1 (en) Method for intent-based interactive response and electronic device thereof
WO2014176750A1 (en) Reminder setting method, apparatus and system
KR101626874B1 (ko) 이동 단말기 및 이동 단말기에서의 컨텐츠 전송 방법
CN103716704A (zh) 图像处理设备及其控制方法和图像处理系统
CN107515870B (zh) 一种搜索方法和装置、一种用于搜索的装置
US20120323900A1 (en) Method for processing auxilary information for topic generation
CN103530385A (zh) 基于垂直搜索频道的信息搜索方法及装置
CN103530024A (zh) 一种更新信息指示方法及电子设备
KR20090093571A (ko) Tv 시청중 인터넷을 검색하는 장치 및 그 방법
US9066135B2 (en) System and method for generating a second screen experience using video subtitle data
EP2458515A1 (en) Method and apparatus for searching contents in a communication system
CN112825256A (zh) 录制语音包功能的引导方法、装置、设备和计算机存储介质
CN110166815A (zh) 一种视频内容的显示方法、装置、设备及介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20140702