CN107193941A - 基于图片内容的故事生成方法和装置 - Google Patents

基于图片内容的故事生成方法和装置 Download PDF

Info

Publication number
CN107193941A
CN107193941A CN201710359135.0A CN201710359135A CN107193941A CN 107193941 A CN107193941 A CN 107193941A CN 201710359135 A CN201710359135 A CN 201710359135A CN 107193941 A CN107193941 A CN 107193941A
Authority
CN
China
Prior art keywords
story
word
keyword
sentence
generation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710359135.0A
Other languages
English (en)
Inventor
张学华
刘宇翔
雷超然
季雨晴
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Kingsoft Internet Security Software Co Ltd
Original Assignee
Beijing Kingsoft Internet Security Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Kingsoft Internet Security Software Co Ltd filed Critical Beijing Kingsoft Internet Security Software Co Ltd
Priority to CN201710359135.0A priority Critical patent/CN107193941A/zh
Priority to PCT/CN2017/100329 priority patent/WO2018209845A1/zh
Publication of CN107193941A publication Critical patent/CN107193941A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/5866Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, manually generated location and time information

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Library & Information Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种基于图片内容的故事生成方法和装置,其中,该方法包括:识别图片内容提取关键词;获取与关键词相关的泛化词;根据预先训练的故事词句关联信息库生成与关键词和泛化词相关的句子;根据预设的逻辑规则对句子进行排序处理生成与图片对应的故事并进行播放。由此,实现将识别后的图片内容进行进一步的泛化处理后生成与图片对应的故事并进行播放,提高了人工智能的便利性和趣味性,提升了用户体验。

Description

基于图片内容的故事生成方法和装置
技术领域
本发明涉及图片识别技术领域,尤其涉及一种基于图片内容的故事生成方法和装置。
背景技术
人工智能(Artificial Intelligence),英文缩写为AI。它是研究、开发用于模拟、延伸和扩展人的智能的理论、方法、技术及应用系统的一门新的技术科学。人工智能是计算机科学的一个分支,它企图了解智能的实质,并生产出一种新的能以人类智能相似的方式做出反应的智能机器,该领域的研究包括机器人、语音识别、图像识别、自然语言处理 和专家系统等。
目前,图片的识别仅仅在于获取图片的内容信息,比较单一,并不能够将图片识别应 用到人工智能中。
发明内容
本发明的目的旨在至少在一定程度上解决相关技术中的技术问题之一。
为此,本发明的一个目的在于提出一种基于图片内容的故事生成方法,用于解决现有 技术中不能够将图片识别应用到人工智能中的问题,通过将识别后的图片内容进行进一步 的泛化处理后生成与图片对应的故事并进行播放,提高了人工智能的便利性和趣味性,提 升了用户体验。
本发明的第二个目的在于提出一种基于图片内容的故事生成装置。
本发明的第三个目的在于提出一种计算机设备。
本发明的第四个目的在于提出一种非临时性计算机可读存储介质。
本发明的第五个目的在于提出一种计算机程序产品。
为达上述目的,本发明第一方面实施例提出了一种基于图片内容的故事生成方法,包 括:识别图片内容提取关键词;获取与所述关键词相关的泛化词;根据预先训练的故事词 句关联信息库生成与所述关键词和所述泛化词相关的句子;根据预设的逻辑规则对所述句 子进行排序处理生成与所述图片对应的故事并进行播放。
本发明实施例的基于图片内容的故事生成方法,通过识别图片内容提取关键词,并获 取与关键词相关的泛化词,然后根据预先训练的故事词句关联信息库生成与关键词和泛化 词相关的句子,最后根据预设的逻辑规则对句子进行排序处理生成与图片对应的故事并进 行播放,实现将识别后的图片内容进行进一步的泛化处理后生成与图片对应的故事并进行 播放,提高了人工智能的便利性和趣味性,提升了用户体验。
另外,本发明实施例的基于图片内容的故事生成方法,还具有如下附加的技术特征:
可选地,所述获取与所述关键词相关的泛化词,包括:查询预设的近义词库获取与所 述关键词对应的近义词,以及查询预先训练的关联词库获取与所述关键词对应的关联词。
可选地,所述的方法,还包括:对样本集合中的信息内容进行切词处理生成多个词单 元;根据词单元之间的共现次数和预设阈值生成关联词库。
可选地,所述的方法,还包括:对故事样本中的信息内容进行切词和断句处理生成多 个词单元和句单元;根据词单元和句单元之间的共现次数和预设阈值生成所述故事词句关 联信息库。
可选地,在所述根据预设的逻辑规则对所述句子进行排序处理生成与所述图片对应的 故事并进行播放之前,还包括:获取与所述关键词对应的第一权重以及与所述泛化词对应 的第二权重;根据所述第一权重与所述第二权重对所述相关的句子进行筛选。
为达上述目的,本发明第二方面实施例提出了一种基于图片内容的故事生成装置,包 括:提取模块,用于识别图片内容提取关键词;第一获取模块,用于获取与所述关键词相 关的泛化词;第一生成模块,用于根据预先训练的故事词句关联信息库生成与所述关键词 和所述泛化词相关的句子;处理模块,用于根据预设的逻辑规则对所述句子进行排序处理 生成与所述图片对应的故事并进行播放。
本发明实施例的基于图片内容的故事生成装置,通过识别图片内容提取关键词,并获 取与关键词相关的泛化词,然后根据预先训练的故事词句关联信息库生成与关键词和泛化 词相关的句子,最后根据预设的逻辑规则对句子进行排序处理生成与图片对应的故事并进 行播放,实现将识别后的图片内容进行进一步的泛化处理后生成与图片对应的故事并进行 播放,提高了人工智能的便利性和趣味性,提升了用户体验。
另外,本发明实施例的基于图片内容的故事生成装置,还具有如下附加的技术特征:
可选地,所述获取模块用于:查询预设的近义词库获取与所述关键词对应的近义词, 以及查询预先训练的关联词库获取与所述关键词对应的关联词。
可选地,所述获取模块还用于:对样本集合中的信息内容进行切词处理生成多个词单 元;根据词单元之间的共现次数和预设阈值生成关联词库。
可选地,所述的装置,还包括:第二生成模块,用于对故事样本中的信息内容进行切 词和断句处理生成多个词单元和句单元;第三生成模块,用于根据词单元和句单元之间的 共现次数和预设阈值生成所述故事词句关联信息库。
可选地,所述的装置,还包括:第二获取模块,用于获取与所述关键词对应的第一权 重以及与所述泛化词对应的第二权重;筛选模块,用于根据所述第一权重与所述第二权重 对所述相关的句子进行筛选。
为达上述目的,本发明第三方面实施例提出了一种计算机设备,包括:包括存储器、 处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执 行所述程序时,使得能够执行一种基于图片内容的故事生成方法,所述方法包括:识别图 片内容提取关键词;获取与所述关键词相关的泛化词;根据预先训练的故事词句关联信息 库生成与所述关键词和所述泛化词相关的句子;根据预设的逻辑规则对所述句子进行排序 处理生成与所述图片对应的故事并进行播放。
为了实现上述目的,本发明第四方面实施例提出了一种非临时性计算机可读存储介质, 当所述存储介质中的指令由处理器被执行时,使得能够执行一种基于图片内容的故事生成 方法,所述方法包括:识别图片内容提取关键词;获取与所述关键词相关的泛化词;根据 预先训练的故事词句关联信息库生成与所述关键词和所述泛化词相关的句子;根据预设的 逻辑规则对所述句子进行排序处理生成与所述图片对应的故事并进行播放。
为了实现上述目的,本发明第五方面实施例提出了一种计算机程序产品,当所述计算 机程序产品中的指令处理器执行时,执行一种基于图片内容的故事生成方法,所述方法包 括:识别图片内容提取关键词;获取与所述关键词相关的泛化词;根据预先训练的故事词 句关联信息库生成与所述关键词和所述泛化词相关的句子;根据预设的逻辑规则对所述句 子进行排序处理生成与所述图片对应的故事并进行播放。
本发明附加的方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明 显,或通过本申请的实践了解到。
附图说明
图1是根据本发明一个实施例提供的基于图片内容的故事生成方法的流程图;
图2是是根据本发明一个实施例提供的图片样本示意图;
图3是是根据本发明另一个实施例提供的基于图片内容的故事生成示意图;
图4是根据本发明另一个实施例提供的基于图片内容的故事生成方法的流程图;
图5是根据本发明一个实施例提供的基于图片内容的故事生成装置的结构示意图;
图6是根据本发明另一个实施例提供的基于图片内容的故事生成装置的结构示意图;
图7是根据本发明又一个实施例提供的基于图片内容的故事生成装置的结构示意图。
具体实施方式
下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同 或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描 述的实施例是示例性的,旨在用于解释本发明,而不能理解为对本发明的限制。
下面参考附图描述本发明实施例的基于图片内容的故事生成方法和装置。
图1是根据本发明一个实施例提供的基于图片内容的故事生成方法的流程图。
需要说明的是,本申请实施例的基于图片内容的故事生成方法可以应用在Android、 IOS、PC等系统的设备(手机、平板、电脑等设备)中。
具体地,图片内容识别是指对图片进行解释,可以识别出图片中包含的物体、图片的 拍摄场景等。通常图片内容识别方法是物体检测法即通过定义一系列模板,使每个模板捕 捉某种特定类型的物体。
然而,上述识别得到的结果比较单一,不能够应用于人工智能的图片识别技术中。为 了进一步提高人工智能的便利性和趣味性,本发明提出一种基于图片内容的故事生成方法, 通过将识别后的图片内容进行进一步的泛化处理后生成与图片对应的故事并进行播放。具 体如下:
如图1所示,该基于图片内容的故事生成方法包括以下步骤:
步骤101,识别图片内容提取关键词。
步骤102,获取与关键词相关的泛化词。
具体地,可以通过图片识别软件或者算法等方式对图片进行处理以识别出图片内容, 并对图片内容进行处理提取关键词。可以理解的是,提取出若干个代表图片内容的词汇或 短语作为关键词。
进一步地,可以通过很多种方式获取与关键词相关的泛化词,作为一种示例,查询预 设的近义词库获取与关键词对应的近义词,查询预先训练的关联词库获取与关键词对应的 关联词。
举例而言,通过对图2所示的图片进行识别内容提取关键词为“女孩”、“女人”等,接着在预设的近义词库中查询与“女孩”、“女人”等对应的近义词比如“女生”、“女神”、 “佳人”等,再查询预先训练的关联词库,比如“女生”对应“可爱”、“萌萌哒”等,由 此可以获取到“女神”、“女生”、“模特”、“佳人”、“可爱”、“漂亮”、“美美哒”、“美女”、 “萌萌哒”等近义词及关联词作为与关键词相关的泛化词。
其中,近义词库是预先设置的,比如“美女”“女孩”是近义词;“厉害”、“太棒啦” 是近义词等等,可以根据需要对近义词库进行调整即增加或者减少近义词的数量。近义词 库中保存着多个近义词的相互关系(其形式可以是映射表等形式),比如通过关键词X可以 查找对应的映射表(还可以是通过相关算法计算等方式)找到其近义词Y、Z,或者更多的 近义词。
需要说明的是,可以通过很多种方式训练关联词库,作为一种示例,对样本集合中的 信息内容进行切词处理生成多个词单元,根据词单元之间的共现次数和预设阈值生成关联 词库。即可以通过对大量词单元之间的关联性进行评估,比如两个词单元一起出现的次数 大于预设阈值比如10次,则将这两个词单元设置为关联词保存在关联词库中。
步骤103,根据预先训练的故事词句关联信息库生成与关键词和泛化词相关的句子。
步骤104,根据预设的逻辑规则对句子进行排序处理生成与图片对应的故事并进行播 放。
具体地,预先需要训练生成故事词句关联信息库,可以理解的是,生成故事词句关联 信息库的方式有很多种,可以根据实际应用需要进行选择设置,举例说明如下:
作为一种示例,对故事样本中的信息内容进行切词和断句处理生成多个词单元和句单 元;根据词单元和句单元之间的共现次数和预设阈值生成故事词句关联信息库。即可以通 过大量故事样本中的信息内容确定词单元和句单元之间的关联性,比如一个词单元和一个 句单元一起出现的次数大于预设阈值比如10次,则将这词单元和句单元保存在故事词句关 联信息库中。
举例而言,比如“有一只小花猫”这句单元和“喵喵叫”这个词单元总是同时出现在一个故事中,那么这句单元和这个词单元的评分就会较高即出现次数大于预设阈值,从而被作为故事词句关联信息保存在故事词句关联信息库中。
进一步地,根据预先训练的故事词句关联信息库生成与关键词和泛化词相关的句子, 即通过关键词、泛化词和预先训练的故事词句关联信息库可以得到的相关的句子,进行关 联创作出一个全新的故事。
进一步地,故事是具有连续性的,即具有一定的情节。可以理解的是,得到相关的句 子有很多,需要通过预先设置的逻辑规则对多个句子进行排序处理生成图片对应的故事并 进行播放。
作为一种场景实现,用户上传一张图片如图3所示,可以自动匹配生成图片对应的故 事“从前,有一个特别漂亮的小女孩,她非常爱笑,她还有一头美丽的秀发,她爱阳光,是个特别开朗的人,大家都喜欢她,为什么大家都喜欢她呢?就是因为人们都喜欢爱笑的人,你也要多笑一笑哦”。由此,进一步提高人工智能的趣味性。
综上所述,本发明实施例的基于图片内容的故事生成方法,通过识别图片内容提取关 键词,并获取与关键词相关的泛化词,然后根据预先训练的故事词句关联信息库生成与关 键词和泛化词相关的句子,最后根据预设的逻辑规则对句子进行排序处理生成与图片对应 的故事并进行播放,实现将识别后的图片内容进行进一步的泛化处理后生成与图片对应的 故事并进行播放,提高了人工智能的便利性和趣味性,提升了用户体验。
图4是根据本发明另一个实施例提供的基于图片内容的故事生成方法的流程图。如图4 所示,在步骤104之前,还包括:
步骤201,获取与关键词对应的第一权重以及与泛化词对应的第二权重。
步骤202,根据第一权重与第二权重对相关的句子进行筛选。
具体地,用户可以根据实际应用需要给予关键词和泛化词不同的权重,比如关键词对 应的第一权重为0.4;泛化词对应的第二权重为0.6等。从而可以得到满足需求的相关句 子,进一步提高用户体验。
为了实现上述实施例,本发明提出了一种基于图片内容的故事生成装置。
图5是根据本发明一个实施例提供的基于图片内容的故事生成装置的流程图。
如图5所示,该基于图片内容的故事生成装置包括:提取模块11、第一获取模块12、第一生成模块13和处理模块14。
其中,提取模块11,用于识别图片内容提取关键词。
第一获取模块12,用于获取与关键词相关的泛化词。
第一生成模块13,用于根据预先训练的故事词句关联信息库生成与关键词和泛化词相 关的句子。
处理模块14,用于根据预设的逻辑规则对句子进行排序处理生成与图片对应的故事并 进行播放。
进一步地,获取模块12,用于查询预设的近义词库获取与关键词对应的近义词,以及 查询预先训练的关联词库获取与关键词对应的关联词。
进一步地,获取模块12,还用于对样本集合中的信息内容进行切词处理生成多个词单 元;根据词单元之间的共现次数和预设阈值生成关联词库。
进一步地,如图6所示,在图5的基础上,该基于图片内容的故事生成装置还包括:第二生成模块15、第三生成模块16、第二获取模块17和筛选模块18。
其中,第二生成模块15,用于对故事样本中的信息内容进行切词和断句处理生成多个 词单元和句单元。
第三生成模块16,用于根据词单元和句单元之间的共现次数和预设阈值生成故事词句 关联信息库。
第二获取模块17,用于获取与关键词对应的第一权重以及与泛化词对应的第二权重。
筛选模块18,用于根据第一权重与第二权重对相关的句子进行筛选。
需要说明的是,前述对基于图片内容的故事生成方法实施例的解释说明也适用于该实 施例的基于图片内容的故事生成装置,此处不再赘述。
综上所述,本发明实施例的基于图片内容的故事生成装置,通过识别图片内容提取关 键词,并获取与关键词相关的泛化词,然后根据预先训练的故事词句关联信息库生成与关 键词和泛化词相关的句子,最后根据预设的逻辑规则对句子进行排序处理生成与图片对应 的故事并进行播放,实现将识别后的图片内容进行进一步的泛化处理后生成与图片对应的 故事并进行播放,提高了人工智能的便利性和趣味性,提升了用户体验。
图7是根据本发明又一个实施例提供的基于图片内容的故事生成装置的流程图。如图 7所示,该基于图片内容的故事生成装置包括:
存储器21、处理器22及存储在存储器21上并可在处理器22上运行的计算机程序。
处理器22执行所述程序时实现上述实施例中提供的基于图片内容的故事生成方法。
进一步地,基于图片内容的故事生成装置还包括:
通信接口23,用于存储器21和处理器22之间的通信。
存储器21,用于存放可在处理器22上运行的计算机程序。
存储器21可能包含高速RAM存储器,也可能还包括非易失性存储器(non-volatilememory),例如至少一个磁盘存储器。
处理器22,用于执行所述程序时实现上述实施例所述的基于图片内容的故事生成方法。
如果存储器21、处理器22和通信接口23独立实现,则通信接口21、存储器21和处理器22可以通过总线相互连接并完成相互间的通信。所述总线可以是工业标准体系结构(Industry Standard Architecture,简称为ISA)总线、外部设备互连(PeripheralComponent,简称为PCI)总线或扩展工业标准体系结构(Extended Industry StandardArchitecture,简称为EISA)总线等。所述总线可以分为地址总线、数据总线、控制总线 等。为便于表示,图7中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
可选的,在具体实现上,如果存储器21、处理器22及通信接口23,集成在一块芯片上实现,则存储器21、处理器22及通信接口23可以通过内部接口完成相互间的通信。
处理器22可能是一个中央处理器(Central Processing Unit,简称为CPU),或者是 特定集成电路(Application Specific Integrated Circuit,简称为ASIC),或者是被配 置成实施本发明实施例的一个或多个集成电路。
为了实现上述实施例,本发明还提出计算机设备,其特征在于,包括存储器、处理器 及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述 程序时,使得能够执行一种基于图片内容的故事生成方法,所述方法包括:识别图片内容 提取关键词;获取与关键词相关的泛化词;根据预先训练的故事词句关联信息库生成与关 键词和泛化词相关的句子;根据预设的逻辑规则对句子进行排序处理生成与图片对应的故 事并进行播放。
为了实现上述实施例,本发明还提出一种非临时性计算机可读存储介质,当所述存储 介质中的指令由处理器被执行时,使得能够执行一种基于图片内容的故事生成方法,所述 方法包括:识别图片内容提取关键词;获取与关键词相关的泛化词;根据预先训练的故事 词句关联信息库生成与关键词和泛化词相关的句子;根据预设的逻辑规则对句子进行排序 处理生成与图片对应的故事并进行播放。
为了实现上述实施例,本发明还提出一种计算机程序产品,当所述计算机程序产品中 的指令处理器执行时,使得能够执行一种基于图片内容的故事生成方法,所述方法包括: 识别图片内容提取关键词;获取与关键词相关的泛化词;根据预先训练的故事词句关联信 息库生成与关键词和泛化词相关的句子;根据预设的逻辑规则对句子进行排序处理生成与 图片对应的故事并进行播放。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示 或者隐含地包括至少一个该特征。在本发明的描述中,“多个”的含义是至少两个,例如两 个,三个等,除非另有明确具体的限定。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者 特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述 不必须针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以 在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领 域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进 行结合和组合。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个 或更多个用于实现定制逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分, 并且本发明的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序, 包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本发明的 实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于实 现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令 执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行 系统、装置或设备取指令并执行指令的系统)使用,或结合这些指令执行系统、装置或设 备而使用。就本说明书而言,"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下:具有一个或多个布 线的电连接部(电子装置),便携式计算机盘盒(磁装置),随机存取存储器(RAM),只读 存储器(ROM),可擦除可编辑只读存储器(EPROM或闪速存储器),光纤装置,以及便携式 光盘只读存储器(CDROM)。另外,计算机可读介质甚至可以是可在其上打印所述程序的纸 或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解 译或必要时以其他合适方式进行处理来以电子方式获得所述程序,然后将其存储在计算机 存储器中。
应当理解,本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实 施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或 固件来实现。如,如果用硬件来实现和在另一实施方式中一样,可用本领域公知的下列技 术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离 散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可 编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可 以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中, 该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本发明各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各 个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既 可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以 软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读 取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。尽管上面已经示出和描述了 本发明的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本发明的限制, 本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (10)

1.一种基于图片内容的故事生成方法,其特征在于,包括以下步骤:
识别图片内容提取关键词;
获取与所述关键词相关的泛化词;
根据预先训练的故事词句关联信息库生成与所述关键词和所述泛化词相关的句子;
根据预设的逻辑规则对所述句子进行排序处理生成与所述图片对应的故事并进行播放。
2.如权利要求1所述的方法,其特征在于,所述获取与所述关键词相关的泛化词,包括:
查询预设的近义词库获取与所述关键词对应的近义词,以及
查询预先训练的关联词库获取与所述关键词对应的关联词。
3.如权利要求2所述的方法,其特征在于,还包括:
对样本集合中的信息内容进行切词处理生成多个词单元;
根据词单元之间的共现次数和预设阈值生成关联词库。
4.如权利要求1所述的方法,其特征在于,还包括:
对故事样本中的信息内容进行切词和断句处理生成多个词单元和句单元;
根据词单元和句单元之间的共现次数和预设阈值生成所述故事词句关联信息库。
5.如权利要求1所述的方法,其特征在于,在所述根据预设的逻辑规则对所述句子进行排序处理生成与所述图片对应的故事并进行播放之前,还包括:
获取与所述关键词对应的第一权重以及与所述泛化词对应的第二权重;
根据所述第一权重与所述第二权重对所述相关的句子进行筛选。
6.一种基于图片内容的故事生成装置,其特征在于,包括:
提取模块,用于识别图片内容提取关键词;
第一获取模块,用于获取与所述关键词相关的泛化词;
第一生成模块,用于根据预先训练的故事词句关联信息库生成与所述关键词和所述泛化词相关的句子;
处理模块,用于根据预设的逻辑规则对所述句子进行排序处理生成与所述图片对应的故事并进行播放。
7.如权利要求6所述的装置,其特征在于,所述获取模块用于:
查询预设的近义词库获取与所述关键词对应的近义词,以及
查询预先训练的关联词库获取与所述关键词对应的关联词。
8.一种计算机设备,其特征在于,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时,实现如权利要求1-5中任一项所述的方法。
9.一种非临时性计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-5中任一项所述的方法。
10.一种计算机程序产品,当所述计算机程序产品中的指令由处理器执行时,执行如权利要求1-5中任一项所述的方法。
CN201710359135.0A 2017-05-19 2017-05-19 基于图片内容的故事生成方法和装置 Pending CN107193941A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201710359135.0A CN107193941A (zh) 2017-05-19 2017-05-19 基于图片内容的故事生成方法和装置
PCT/CN2017/100329 WO2018209845A1 (zh) 2017-05-19 2017-09-04 基于图片内容的故事生成方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710359135.0A CN107193941A (zh) 2017-05-19 2017-05-19 基于图片内容的故事生成方法和装置

Publications (1)

Publication Number Publication Date
CN107193941A true CN107193941A (zh) 2017-09-22

Family

ID=59875363

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710359135.0A Pending CN107193941A (zh) 2017-05-19 2017-05-19 基于图片内容的故事生成方法和装置

Country Status (2)

Country Link
CN (1) CN107193941A (zh)
WO (1) WO2018209845A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107948730A (zh) * 2017-10-30 2018-04-20 百度在线网络技术(北京)有限公司 基于图片生成视频的方法、装置、设备及存储介质
CN108235765A (zh) * 2017-12-05 2018-06-29 华为技术有限公司 一种故事相册的显示方法及装置
CN108986785A (zh) * 2018-08-08 2018-12-11 科大讯飞股份有限公司 一种文本改编方法及装置
CN110941960A (zh) * 2019-11-12 2020-03-31 广州爱学信息科技有限公司 一种基于关键词的儿童绘本故事生成方法、系统及设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103678668A (zh) * 2013-12-24 2014-03-26 乐视网信息技术(北京)股份有限公司 相关搜索结果的提示方法、服务器及系统
CN104142936A (zh) * 2013-05-07 2014-11-12 腾讯科技(深圳)有限公司 匹配音视频的方法和装置
CN105868155A (zh) * 2016-05-11 2016-08-17 黄芳 一种故事生成设备及故事生成方法
CN106202183A (zh) * 2016-06-24 2016-12-07 四川长虹电器股份有限公司 一种实现自动配文配乐生成有声相册/电子书的方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013097033A (ja) * 2011-10-28 2013-05-20 Hitachi Government & Public Corporation System Engineering Ltd 音声合成情報付きのテキストデータ提供装置及びテキストデータ提供方法
CN104951554B (zh) * 2015-06-29 2018-03-06 浙江大学 为风景照配上符合其意境的诗句的方法
CN106203465A (zh) * 2016-06-24 2016-12-07 百度在线网络技术(北京)有限公司 一种基于图像识别生成曲谱的方法及装置
CN107025312A (zh) * 2017-05-19 2017-08-08 北京金山安全软件有限公司 基于视频内容的信息提供方法和装置
CN107122492A (zh) * 2017-05-19 2017-09-01 北京金山安全软件有限公司 基于图片内容的歌词生成方法和装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104142936A (zh) * 2013-05-07 2014-11-12 腾讯科技(深圳)有限公司 匹配音视频的方法和装置
CN103678668A (zh) * 2013-12-24 2014-03-26 乐视网信息技术(北京)股份有限公司 相关搜索结果的提示方法、服务器及系统
CN105868155A (zh) * 2016-05-11 2016-08-17 黄芳 一种故事生成设备及故事生成方法
CN106202183A (zh) * 2016-06-24 2016-12-07 四川长虹电器股份有限公司 一种实现自动配文配乐生成有声相册/电子书的方法

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107948730A (zh) * 2017-10-30 2018-04-20 百度在线网络技术(北京)有限公司 基于图片生成视频的方法、装置、设备及存储介质
CN107948730B (zh) * 2017-10-30 2020-11-20 百度在线网络技术(北京)有限公司 基于图片生成视频的方法、装置、设备及存储介质
CN108235765A (zh) * 2017-12-05 2018-06-29 华为技术有限公司 一种故事相册的显示方法及装置
US11386140B2 (en) 2017-12-05 2022-07-12 Huawei Technologies Co., Ltd. Story album display method and apparatus
CN108986785A (zh) * 2018-08-08 2018-12-11 科大讯飞股份有限公司 一种文本改编方法及装置
CN108986785B (zh) * 2018-08-08 2021-06-08 科大讯飞股份有限公司 一种文本改编方法及装置
CN110941960A (zh) * 2019-11-12 2020-03-31 广州爱学信息科技有限公司 一种基于关键词的儿童绘本故事生成方法、系统及设备

Also Published As

Publication number Publication date
WO2018209845A1 (zh) 2018-11-22

Similar Documents

Publication Publication Date Title
CN107122492A (zh) 基于图片内容的歌词生成方法和装置
CN110427463B (zh) 搜索语句响应方法、装置及服务器和存储介质
US10430689B2 (en) Training a classifier algorithm used for automatically generating tags to be applied to images
CN108182279B (zh) 基于文本特征的对象分类方法、装置和计算机设备
CN110188350B (zh) 文本一致性计算方法及装置
CN107203611A (zh) 基于图片内容的信息提供方法和装置
WO2019084810A1 (zh) 一种信息处理方法及终端、计算机存储介质
US10157619B2 (en) Method and device for searching according to speech based on artificial intelligence
CN107731228A (zh) 英文语音信息的文本转换方法和装置
CN109783666B (zh) 一种基于迭代精细化的图像场景图谱生成方法
US10971133B2 (en) Voice synthesis method, device and apparatus, as well as non-volatile storage medium
CN107680589A (zh) 语音信息交互方法、装置及其设备
CN107679033A (zh) 文本断句位置识别方法和装置
CN109033075B (zh) 意图匹配的方法、装置、存储介质和终端设备
CN107193941A (zh) 基于图片内容的故事生成方法和装置
CN107193807A (zh) 基于人工智能的语言转换处理方法、装置及终端
CN106844341A (zh) 基于人工智能的新闻摘要提取方法及装置
CN107315772A (zh) 基于深度学习的问题匹配方法以及装置
CN107025312A (zh) 基于视频内容的信息提供方法和装置
CN108985133B (zh) 一种人脸图像的年龄预测方法及装置
CN105005616B (zh) 基于文本图片特征交互扩充的文本图解方法及系统
CN106557554B (zh) 基于人工智能的搜索结果的显示方法和装置
CN110413760A (zh) 人机对话方法、装置、存储介质及计算机程序产品
CN112287656B (zh) 文本比对方法、装置、设备和存储介质
CN106446018A (zh) 基于人工智能的查询信息处理方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170922