CN110134298A - 信息处理装置及非暂时性的计算机可读介质 - Google Patents

信息处理装置及非暂时性的计算机可读介质 Download PDF

Info

Publication number
CN110134298A
CN110134298A CN201811019529.2A CN201811019529A CN110134298A CN 110134298 A CN110134298 A CN 110134298A CN 201811019529 A CN201811019529 A CN 201811019529A CN 110134298 A CN110134298 A CN 110134298A
Authority
CN
China
Prior art keywords
grapheme
object data
frame
term
expression
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811019529.2A
Other languages
English (en)
Inventor
得地贤吾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd filed Critical Fuji Xerox Co Ltd
Publication of CN110134298A publication Critical patent/CN110134298A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/26Visual data mining; Browsing structured data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/30Semantic analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/20Natural language analysis
    • G06F40/205Parsing
    • G06F40/211Syntactic parsing, e.g. based on context-free grammar [CFG] or unification grammars
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/20Natural language analysis
    • G06F40/268Morphological analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/24Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]

Abstract

本发明提供一种信息处理装置及非暂时性的计算机可读介质,与确认对象数据的全部内容的情况相比,使利用者可早掌握对象数据的概要。分析部对从作为电子文件、动态图象数据、或语音数据等的对象数据中提取的字符串实施自然语言处理,由此取得对象数据的语义。语义图生成部根据由分析部所获得的对象数据的语义,生成表达对象数据的至少一部分,例如对象数据之中被判断为重要的重要部分的语义的语义图。显示控制部将语义图生成部所生成的语义图显示在显示部中。

Description

信息处理装置及非暂时性的计算机可读介质
技术领域
本发明涉及一种信息处理装置及存储信息处理程序的非暂时性的计算机可读介质。
背景技术
先前,提出有一种被称为词云(word cloud)的技术(专利文献1)。所谓词云,例如是指网页等的文档中出现的各单词被并列(同时)显示者,且为越是出现次数多的单词显示得越大者。
现有技术文献
专利文献
专利文献1:日本专利特开2014-106968号公报
发明内容
发明所要解决的问题
然而,存在想要比确认包含文档、动态图象、或语音数据的对象数据的全部内容更早地掌握所述对象数据的概要这一期望。
本发明的目的在于与确认对象数据的全部内容的情况相比,使利用者可早掌握对象数据的概要。
解决问题的技术手段
技术方案1的发明是一种信息处理装置,其包括根据从对象数据所获得的语义,显示表达所述对象数据的至少一部分的语义的图的显示控制部。
技术方案2的发明是技术方案1中记载的信息处理装置,其中所述对象数据的语义通过对于从所述对象数据中提取的字符串的自然语言处理而获得。
技术方案3的发明是技术方案2中记载的信息处理装置,其中所述图包含图形、照片、文字的至少一者作为构成要素。
技术方案4的发明是技术方案3中记载的信息处理装置,其中所述图包含表达所述字符串之中成为所述图的生成对象的部分字符串中所不含的用语的所述构成要素。
技术方案5的发明是技术方案3中记载的信息处理装置,其中所述显示控制部根据所述图中所含有的所述构成要素所表达的用语在所述对象数据中的重要度,决定此构成要素的显示方式。
技术方案6的发明是技术方案1至4的任一项中记载的信息处理装置,其中所述显示控制部将所述图显示在所述对象数据中的语义上的各区块中。
技术方案7的发明是技术方案2中记载的信息处理装置,其还包括根据从所述对象数据所获得的语义,输出所述图的解说的解说输出部。
技术方案8的发明是一种信息处理程序,其使电脑作为显示控制部发挥功能,所述显示控制部根据从对象数据所获得的语义,显示表达所述对象数据的至少一部分的语义的图。
发明的效果
根据技术方案1、技术方案2、技术方案3或技术方案8的发明,与确认对象数据的全部内容的情况相比,利用者可早掌握对象数据的概要。
根据技术方案4的发明,与仅由表达成为图的生成对象的部分字符串中所含有的用语的构成要素来构成图的情况相比,可容易理解图所表达的语义。
根据技术方案5的发明,可通过图中所含有的构成要素的显示方式来表达此构成要素所表达的用语的重要度。
根据技术方案6的发明,与确认对象数据的全部内容的情况相比,利用者可早掌握对象数据的各区块的概要。
根据技术方案7的发明,与未输出解说的情况相比,利用者可容易地掌握图所表达的语义。
附图说明
图1是本实施方式的信息处理装置的构成概略图。
图2是表示语义图的第一种显示例的图。
图3是表示语义图的第二种显示例的图。
图4是表示显示在各区块中的语义图的第一种显示例的图。
图5是表示显示在各区块中的语义图的第二种显示例的图。
图6是表示显示在各区块中的语义图的第三种显示例的图。
图7是表示语义图的解说的显示例的图。
图8是表示错误通知的显示例的图。
图9是表示在对应于各用语的语义的位置上显示有各用语表达的显示例的图。
图10是用语表达的显示位置的设定画面的例子。
图11是表示在所设定的显示位置上显示有各用语表达的显示例的图。
图12是表示对应于语义类似的用语的用语表达接近来显示的显示例的第1图。
图13是表示对应于语义类似的用语的用语表达接近来显示的显示例的第2图。
图14是表示表达对象数据的多个图像的显示例的图。
图15A至图15C是表示布局的设定画面的例子的图。
图16是表示通过滑动操作来将画格删除的样子的图。
图17是表示滑动操作后的布局的图。
图18是表示通过捏合(pinch in)操作来将画格合并的样子的图。
图19是表示捏合操作后的布局的图。
图20中的(a)及(b)是表示通过撑开(pinch out)操作来将画格分割的样子的图。
图21中的(a)及(b)是表示通过滑动操作来将画格分割的样子的第1图。
图22中的(a)及(b)是表示通过滑动操作来将画格分割的样子的第2图。
符号的说明
10:信息处理装置
12:存储部
14:对象数据
16:输入部
18:显示部
20:控制部
22:分析部
24:计数部
26:语义图生成部
28:布局设定部
30:显示控制部
具体实施方式
<第1实施方式>
图1是第1实施方式的信息处理装置10的构成概略图。作为信息处理装置10的例子,例如为个人计算机、智能手机等便携式终端,或服务器等,但信息处理装置10只要可实现以下的功能,则可为任何装置。
存储部12例如包含只读存储器(Read Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、或硬盘等来构成。在存储部12中存储用于使信息处理装置10的各部动作的信息处理程序。进而,如图1所示,在存储部12中存储对象数据14。
对象数据14是成为信息处理装置10的处理对象的数据,且为包含网页或电子文档等电子文件、动态图象数据、或语音数据者。对象数据14可经由未图示的通信部而从信息处理装置10以外的装置取得,也可以是信息处理装置10所制作的数据。
输入部16例如包含触摸面板、键盘、语音输入设备、或鼠标等来构成。另外,作为输入部16,也可以包含接受利用语音、照相机或传感器的非接触操作(手势(gesture))的界面来构成。输入部16用于输入利用者(用户)对于信息处理装置10的指示。
显示部18例如包含液晶面板等来构成。在显示部18中显示各种画面,尤其显示后述的控制部20的处理结果。
另外,当信息处理装置10为服务器时,在信息处理装置10中也可以不具有输入部16及显示部18。在此情况下,访问此服务器的用户所利用的用户终端的触摸面板、键盘或鼠标等相当于输入部16,此用户终端的液晶面板等相当于显示部18。
控制部20例如包含中央处理器(Central Processing Unit,CPU)或微控制器来构成。控制部20按照存储在存储部12中的信息处理程序,控制信息处理装置10的各部。如图1所示,控制部20也作为分析部22、计数部24、语义图生成部26、布局设定部28、及显示控制部30而发挥功能。
分析部22通过分析对象数据14来取得对象数据14的语义(内容)。具体而言,分析部22对从对象数据14中提取的字符串实施自然语言处理,由此取得对象数据14的语义。
关于来自对象数据14的字符串的提取,在对象数据14为电子文件的情况下,例如对电子文件实施字符识别处理,由此可提取字符串。在对象数据14为动态图象数据或语音数据的情况下,将动态图象数据或语音数据中所含有的语音转换成文本数据,由此可提取字符串。
所谓自然语言处理,是指包含词素分析、句法分析、语义分析、或上下文分析的处理。
所谓词素分析,是指根据对象语言的语法或被称为词典的单词的词类等信息,将字符串分割成多个词素(语言中具有语义的最小单位)的列后,辨别各词素的词类等的处理。
所谓句法分析,是指辨别多个词素间的关系(例如修饰-被修饰的关系)等句法学的关系,由此决定多个词素间的位置关系(从属等)的处理。通过句法分析来形成多种式样的句法树(将各词素作为节点的树结构)。
所谓语义分析,是指考虑各词素的语义,并根据各词素的语义来决定多个词素间的正确的关联的处理。通过语义分析,而从多种式样的句法树中选择语义正确的句法树。
所谓上下文分析,是指遍及包含一个或多个词素的文章进行句法分析及语义分析的处理。例如,根据上下文分析,基于第一篇文章的内容来掌握第二篇文章中出现的指示代名词的内容。
分析部22可对于对象数据14实施自然语言处理,由此确定对象数据14之中特别重要的一个或多个部分。尤其,分析部22也可以将如下的内容确定为重要部分,所述内容不仅包含明示地出现在对象数据14内的字符串,而且包含根据此字符串的内容所推断的内容。
另外,分析部22也可以在分析对象数据14整体的语义后,生成表示对象数据14的整体的要点的要点字符串。所谓要点,是指对象数据14特别想表示的语义(内容),也可以与对象数据14的重要部分重复。但是,作为要点字符串,也可以不是从对象数据14中提取的字符串的一部分。
另外,分析部22也可以根据对象数据14的语义,将对象数据14划分成多个区块。例如,也可以将对象数据14划分成如下的四个区块:目的、课题、解决手段、下次之前的遗留问题。
另外,分析部22也可以针对各区块确定重要部分。进而,分析部22也可以针对各区块生成要点字符串。
另外,将对象数据14划分成何种区块可由用户来设定。
计数部24对在对象数据14中出现的多个用语各自的出现次数进行计数。此处,所谓“用语”,是指包含作为构成文章的最小单位的单词、及多个单词汇集而成的词语或句子的概念。
语义图生成部26根据通过分析部22所获得的对象数据14的语义,生成表达对象数据14的至少一部分的语义的语义图。语义图的一例是如理解成为生成语义图的基础的对象数据14的一部分中所含有的各用语的关系,例如主语(某人)、谓语(做了某事)、宾语(某事)等的关系般的图。语义图包含一个或多个构成要素来构成。构成要素为图形、照片、或文字等。例如,语义图包含表示主语的构成要素、表示谓语的构成要素、表示宾语的构成要素的组合。语义图的详细情况将后述。
语义图生成部26例如生成表达对象数据14之中被判断为重要的重要部分的语义的语义图。重要部分的判定例如根据分析部22的分析结果或计数部24的计数结果来执行。另外,语义图生成部26也可以生成表达分析部22所生成的要点字符串的语义图。
另外,语义图生成部26也可以生成表达对象数据14的多个部分的语义的多个语义图。
布局设定部28设定语义图生成部26所生成的语义图的(显示)布局。所谓布局,例如是指包含使语义图在显示部18的哪个位置或以何种程度的大小显示等的概念。布局设定部28根据来自用户的指示设定语义图的布局。
显示控制部30执行将各种画面显示在显示部18中的处理。尤其,显示控制部30将语义图生成部26所生成的语义图显示在显示部18中。
以下,对第1实施方式中的语义图生成部26及显示控制部30的处理的详细情况进行说明。
图2表示语义图生成部26所生成的语义图40的显示例。从对象数据14中提取的字符串之中,“在便利店中,在17点利用智能手机进行电子结算”这一部分字符串被判定为重要部分,在图2中表示表达此重要部分的语义图40。
如上所述,语义图40包含多个构成要素(42~50)。通过所述多个构成要素(42~50)来表达所述重要部分。例如,构成要素42成为直接表示“智能手机”的图形。另外,构成要素44为表示钱的图形,构成要素46为表示收银机的图形,通过构成要素44与构成要素46来表达“电子结算”。另外,为了更容易理解利用智能手机的电子结算,在语义图40中包含作为从构成要素42(智能手机)朝向构成要素46(收银机)的箭头的图形的构成要素48。
在语义图40中,也可以包含表达从对象数据14中提取的字符串之中,成为语义图40的生成对象的部分字符串(本例中为“在便利店中,在17点利用智能手机进行电子结算”)中所不含的用语的构成要素。在图2的例子中,在语义图40中包含表达作为此部分字符串中所不含的用语的“男性”的构成要素50。通过构成要素50来表达进行电子结算的主体为男性。
存在如下的情况:虽然在成为语义图40的生成对象的部分字符串中未明示进行电子结算的主体,但在包含此部分字符串以外的字符串的自然语言处理中,可判断进行电子结算的是男性。在此种情况下,为了容易理解进行电子结算的是男性,语义图生成部26生成包含表达男性的构成要素50的语义图40。
另外,如上所述,作为语义图40中所含有的构成要素,并不限定于图形,也可以包含照片或文字。例如,在图2的例子中,智能手机由作为图形的构成要素42来表达,但当在对象数据14中特定机种的智能手机重要等时,在想要表达特定机种的智能手机的情况下,语义图生成部26也可以将此特定机种的智能手机的照片代替构成要素42而包含在语义图40中。
另外,在语义图40中也可以包含作为文字的构成要素。例如,在图3中所示的语义图40'中包含构成要素52及构成要素54,所述构成要素52是作为成为语义图40'的生成对象的部分字符串中所含有的用语的“便利店”的文字,所述构成要素54是同样作为部分字符串中所含有的用语的“17点”的文字。此处,在语义图40'中也可以包含表示此部分字符串中所不含的用语的文字的构成要素。
另外,显示控制部30也可以根据语义图40中所含有的构成要素所表达的用语在对象数据14中的重要度,决定此构成要素的显示方式。例如,根据分析部22及计数部24的处理结果,在图3中所示的语义图40'中,当在对象数据14的语义上判定“便利店”比“17点”更重要时,将作为“便利店”的文字的构成要素52显示得比作为“17点”的文字的构成要素54大。当然,构成要素的重要度也可以由大小以外的显示方式来表达。例如,当构成要素为文字时,也可以通过构成要素的字体等来表达重要度。
另外,显示控制部30也可以将语义图40中所不含的图形、照片、或文字(以下记载为“非构成要素”)与语义图40一同显示。在图3的例子中表示非构成要素60~非构成要素64。非构成要素60~非构成要素64例如为表达对象数据14之中,重要度比成为语义图40的生成对象的部分低的部分者。
非构成要素60~非构成要素64通过可与语义图40中所含有的构成要素42~构成要素54进行区分的显示方式来显示。例如,语义图40中所含有的构成要素42~构成要素54相互接近来配置,非构成要素60~非构成要素64在与构成要素42~构成要素54分离的位置上显示。或者,也能够以比非构成要素60~非构成要素64大的尺寸显示构成要素42~构成要素54。另外,也能够以不同的颜色显示构成要素42~构成要素54与非构成要素60~非构成要素64,或者当构成要素为文字时,也能够以不同的字体或粗细显示构成要素42~构成要素54与非构成要素60~非构成要素64。
如上所述,语义图生成部26也可以生成表达对象数据14的多个部分的语义的多个语义图。尤其,语义图生成部26也可以在对象数据14中的语义上的各区块中生成语义图。而且,显示控制部30也可以显示对应于各区块的多个语义图。
图4中表示对应于多个区块的多个语义图的第一种显示例。图4的例子是如下的情况的例子:通过分析部22来将对象数据14划分成目的、课题、解决手段、及下次之前的遗留问题这四个区块,通过语义图生成部26来生成对应于目的的语义图40a、对应于课题的语义图40b、对应于解决手段的语义图40c、对应于下次之前的遗留问题的语义图40d,通过显示控制部30来将语义图40a~语义图40d显示在显示部18中。
对应于各区块的语义图40a~语义图40d可以是表达由分析部22所生成的各区块的要点字符串者。例如,图4的语义图40a为表达对象数据14中的目的的要点字符串者,语义图40b为表达对象数据14中的课题的要点字符串者,语义图40c为表达对象数据14中的解决手段的要点字符串者,语义图40d为表达对象数据14中的下次之前的遗留问题的要点字符串者。
或者,对应于各区块的语义图40a~语义图40d也可以是表达对象数据14的多个区块各自的一部分(例如重要部分)者。
图5中表示对应于多个区块的多个语义图的第二种显示例。图5的例子是如下的情况的例子:通过分析部22来将对象数据14划分成起、承、转、及结这四个区块,通过语义图生成部26来生成对应于起的语义图40e、对应于承的语义图40f、对应于转的语义图40g、对应于结的语义图40h,通过显示控制部30来将语义图40e~语义图40h显示在显示部18中。
另外,图6中表示对应于多个区块的多个语义图的第三种显示例。图6的例子是如下的情况的例子:通过分析部22,从机器、通信、及人这三个概念的观点出发将对象数据14划分成三个区块,通过语义图生成部26来生成对应于机器的语义图40i、对应于通信的语义图40j、对应于人的语义图40k,通过显示控制部30来将语义图40i~语义图40k显示在显示部18中。
语义图40i是从机器这一观点(即在对象数据14中出现何种机器,此机器在对象数据14中发挥何种作用等)出发表达对象数据14的图,语义图40j是从通信这一观点出发表达对象数据14的图,语义图40k变成从人这一观点出发表达对象数据14的图。
在此情况下,也可以根据各语义图(40i~40k)中所含有的构成要件所表达的用语的语义,决定此构成要件的显示方式。例如,在人这一区块中,若“田中先生”比“三郎先生”更重要,则也可以将表示“田中先生(”的构成要件显示得比表示“三郎先生”的构成要件大。另外,在同一区块内,也可以根据两个用语的关联性,决定显示表达所述两个用语的两个构成要件的位置关系。例如,在通信这一区块中,若“无线保真(Wireless Fidelity,Wi-Fi)”与“长期演进(Long Term Evolution,LTE)”的关联性高,则也可以将表示“Wi-fi”的构成要件与表示“LTE”的构成要件显示在接近的位置上。
如图4~图6中所示,可显示对应于对象数据14的多个区块的多个语义图40。由此,即便是相同的对象数据14,也可以利用各种方法来表达。另外,如上所述,以何种区块来划分对象数据14可由用户来指定。
另外,当显示了对应于多个区块的多个语义图40时,也可以在不同的语义图40中包含表示相同的用语的构成要件。例如,在图5的例子中,在语义图40e中包含“便利性”这一文字的构成要件,但在其他语义图(40f~40h)中也可以包含“便利性”这一文字的构成要件。
如上所述,多个语义图40的布局是对应于用户的指示而通过布局设定部28来设定。
当由用户选择了显示在显示部18中的语义图40时,显示控制部30也可以显示所选择的语义图40的解说。即,显示控制部30也作为解说输出部发挥功能。
例如,如图7所示,当显示有对应于对象数据14的多个区块的多个语义图(40a~40d)时,若由用户选择语义图40a,则显示控制部30显示基于由分析部22所获得的对象数据14的语义的语义图40a的解说70。解说70的内容表示语义图40a为什么如此表达的依据。例如,在图7的例子中,通过解说70而可知在语义图40a中包含表示“男性”的图形的原因在于:在对象数据14的目的区块中,出现人物的姓名为男性的姓名。或者,通过解说70而可知在语义图40a中包含表示“智能手机”、“收银机”、“钱”的图形的原因在于:在对象数据14的目的区块中,有与电子货币相关的话题、或与利用电子货币的支付的优点相关的话题。解说70的内容可由分析部22或语义图生成部26生成,也可以是语义图40a所表达的要点字符串的全部或一部分。
图7是在显示有多个语义图40的情况下显示有解说70的例子,但即便在如图2或图3般显示有一个语义图40的情况下,也可以在由用户选择了语义图40时显示解说。
另外,在语义图40并非表达要点字符串者,而是表达从对象数据14中提取的字符串的一部分者的情况下,也可以将此字符串的一部分直接作为解说70来显示。例如,在图2或图3的例子中,当由用户选择了语义图40时,也可以显示“在便利店中,在17点利用智能手机进行电子结算”作为解说。
另外,解说也可以作为语音来输出。在此情况下,信息处理装置10所具有的包含扬声器等的语音输出部(未图示)作为解说输出部发挥功能。
可想到语义图生成部26无法生成关于对象数据14的多个区块中的某一区块的语义图40的情况。作为其主要原因,例如可列举:分析部22无法生成关于此区块的要点字符串、语义图生成部26无法确定此区块内的重要部分等。
在未生成关于多个区块中的某一区块的语义图40的情况下,显示控制部30为了将此情况通知给用户而显示错误通知。图8中表示未生成对应于目的、课题、解决手段、下次之前的遗留问题这四个区块中的解决手段的语义图40c时所显示的错误通知72的例子。
例如在对象数据14为会议的会议记录的情况下,通过显示错误通知72,用户可容易地掌握在会议中未充分地进行与解决手段相关的讨论。另外,也可以在错误通知72的内容中包含无法生成语义图40的理由。例如,也可以将如“未进行解决手段的讨论”或“解决手段有多种,哪一种都缺乏决定性的依据”般的字符串作为错误通知72来显示。
如以上所说明般,根据第1实施方式,通过语义图生成部26来生成表达对象数据14的至少一部分的语义图,通过显示控制部30来将此语义图40显示在显示部18中。用户通过确认所显示的语义图40,与确认对象数据14的全部内容的情况相比,可早掌握对象数据14的概要。
<第2实施方式>
第2实施方式的信息处理装置的构成概略与第1实施方式的信息处理装置(图1的信息处理装置10)相同。因此,省略与第1实施方式重复的部分的说明。
在第2实施方式中,显示控制部30对应于计数部24所计数的在对象数据14中出现的多个用语各自的出现次数,将表达各用语的用语表达显示在显示部18中。此处,用语表达可为文字、图形、或照片等。例如,针对“智能手机”这一用语的用语表达是智能手机这一文字、表示智能手机的图形、或智能手机的照片等。
具体而言,越是对象数据14中的出现次数多的用语,显示控制部30将对应于此用语的用语表达显示得越大。换言之,对应于对象数据14中的出现次数少的用语的用语表达相对显示得小。另外,越是出现次数多的用语,也可以将对应于此用语的用语表达的颜色显示地越浓。换言之,也可以将对应于对象数据14中的出现次数少的用语的用语表达的颜色相对显示地淡。或者,当用语表达为文字时,越是出现次数多的用语,也可以将对应于此用语的用语表达(文字)显示地越粗。换言之,也可以将对应于对象数据14中的出现次数少的用语的用语表达相对显示地细。
更详细而言,显示控制部30将表达各用语的用语表达显示在对应于各用语的语义的位置上。将用语表达显示在对应于各用语的语义的位置上这一概念包含两种方式。
第一种方式是在对应于一个用语的语义的位置上显示此用语的用语表达。例如,在用语为“天空”、“鸟”、“头”、或“屋顶”等的情况下,显示控制部30将对应的用语表达显示在显示部18的上方。另外,在用语为“海”、“地铁”、“地面”、或“脚”等的情况下,显示控制部30将对应的用语表达显示在显示部18的下方。同样地,显示控制部30将对应于“右手”或“右脚”等的用语表达显示在显示部18的右侧,将对应于“左手”或“左脚”等的用语表达显示在显示部18的左侧。图9中表示将各用语表达80显示在与对应的用语的语义相应的位置上的样子。
另外,显示控制部30也可以将对应于特定的用语的所述用语表达显示在由用户所设定的位置上。在本实施方式中,用户可针对特定的用语,设定使对应于此特定的用语的用语表达显示的位置。例如,可如将对应于“机械”这一用语的用语表达显示在显示部18的中心般进行设定。
另外,用户也可以针对用语的各个种类,设定对应的用语表达的显示位置。例如,显示控制部30使如图10中所示的用语表达的显示位置的设定画面显示在显示部18中。用户将用语的种类输入至此设定画面中,由此可设定对应于用语的种类的各用语表达的显示位置。
在图10中所示的设定画面中,用户可设定使对应于何种用语的用语表达显示在显示部18的中心、右上方、右下方、左上方、左下方的各个位置上。在图10中,以如下方式进行设定:在显示部18的中心显示对应于机械系列的用语的用语表达,在显示部18的右上方显示对应于自然系列的用语的用语表达,在显示部18的右下方显示对应于动物系列的用语的用语表达,在显示部18的左上方显示对应于场所系列的用语的用语表达,在显示部18的左下方显示对应于时间系列的用语的用语表达。
图11中表示如图10中所示的设定般显示有各用语表达80的显示例。另外,当在对象数据14中未出现用户所设定的种类的用语时,显示控制部30也可以在应显示对应于用户原来设定的所述种类的用语的用语表达80的位置上,显示对应于其他种类的用语的用语表达80来代替所述种类的用语。作为此种其他种类的用语,例如可根据对象数据14中的出现次数等来决定。在图11的例子中,在对象数据14中未出现动物系的用语,由于料理系的用语大量出现,因此在显示部18的右下方的区域中显示对应于料理系的用语的用语表达80来代替动物系的用语。
第二种方式在对应于多个用语的语义的类似度的位置关系中,显示对应于所述多个用语的两个用语表达。例如,两个用语的语义的类似度越高,显示控制部30将对应于所述两个用语的两个用语表达显示得越靠近。换言之,两个用语的语义的类似度越低,显示控制部30将对应于所述两个用语的两个用语表达显示得越分离。此处,两个用语间的类似度可根据如下的类属词典(thesaurus)来判定,所述类属词典是根据用语的上位/下位关系、部分/整体关系、同义关系、近义关系等对用语进行分类并建立了体系的数据库。另外,本说明书中的“类似”是指不仅包含用语所示的语义类似者(例如“个人计算机(PersonalComputer,PC)”与“机械”),也包含用语所示的语义的关联性高者(例如“虫”与“土”)的概念。当然,也可以对应于三个以上的用语的语义的关系性,调整对应于所述三个以上的用语的三个以上的用语表达的位置关系来进行表达。
另外,当一个用语均等地类似于其他多个用语时,对应于所述一个用语的用语表达显示在对应于其他多个用语的多个用语表达之间。例如,当“虫”这一用语为类似于“土”及“草”两者的用语时,显示控制部30使对应于“虫”的用语表达显示在对应于“土”的用语表达与对应于“草”的用语表达之间。另外,例如当“虫”这一用语为与“土”、“草”、及“林”的任一者均类似的用语时,如图12所示,显示控制部30使对应于“土”的用语表达、对应于“草”的用语表达、及对应于“林”的用语表达显示在对应于“虫”的用语表达的周边。
图13是表示对应于语义类似的用语的用语表达80接近来显示的显示例的图。如图13所示,例如,对应于作为彼此类似度高的用语的“自然”、“花”、“草”、“树”、及“水”的各用语表达80彼此接近来显示。由此,形成对应于语义类似的多个用语的多个用语表达80接近而成的用语表达组84a。
另外,当在语义类似的多个用语之中,存在处于上位下位概念的关系的用语时,显示控制部30使对应于下位概念的用语的用语表达显示在对应于上位概念的用语的用语表达的周围。例如,在图13中所示的用语表达组84a中,“自然”为上位概念,“花”、“草”、“树”、及“水”为“自然”的下位概念。在此情况下,显示控制部30使对应于“自然”的用语表达80显示在用语表达组84a的中心,使对应于“花”、“草”、“树”、及“水”的各用语表达80显示在对应于“自然”的用语表达80的周边。
在图13中,除用语表达组84a以外,对应于作为彼此类似度高的用语的“PC”、“机械”、及“移动电话”的各用语表达彼此接近来显示。由此,形成用语表达组84b。如此,存在通过使对应于类似度高的用语的多个用语表达接近来显示,而形成多个用语表达组(84a、84b)的情况。
显示控制部30可以可识别的显示方式来显示用语表达组84a中所含有的用语表达80、及用语表达组84a中所不含的用语表达80。同样地,显示控制部30可以可识别的显示方式来显示用语表达组84b中所含有的用语表达80、及用语表达组84b中所不含的用语表达80。
例如,如图13所示,也可以显示包围用语表达组84a中所含有的多个用语表达80的框86a、及包围用语表达组84b中所含有的多个用语表达80的框86b。另外,也可以利用不同的颜色对框86a内的区域、框86b内的区域、及其他区域分别进行着色。另外,也可以在将用语表达组84a中所含有的用语表达的颜色统一,将用语表达组84b中所含有的用语表达80的颜色统一后,将用语表达组84a中所含有的用语表达80的颜色、用语表达组84b中所含有的用语表达的颜色、及其他用语表达80的颜色设为互不相同的颜色。
如以上所说明般,根据第2实施方式,将对应于在对象数据14中出现的用语的用语表达显示在对应于此用语的语义的位置上。由此,与不将用语表达的显示位置显示在对应于此用语的语义的位置上的情况相比,用户可更容易地掌握对象数据14的语义。
<第3实施方式>
第3实施方式的信息处理装置的构成概略也与第1实施方式的信息处理装置(图1的信息处理装置10)相同。因此,省略与第1实施方式重复的部分的说明。
在第3实施方式中,显示控制部30将表达对象数据14的图像显示在显示部18中。在第1实施方式中,将语义图生成部26所生成的语义图40(参照图2等)显示在显示部18中,但作为第3实施方式中的表达对象数据14的图像,不仅是语义图生成部26所生成的语义图,在对象数据14为动态图象的情况下,也可以是从所述动态图象中剪切出的静止图像。或者,表达对象数据14的图像也可以是对从动态图象中剪切出的静止图像实施加工(例如单色加工或变成插图风格的加工)而成的图像。
图14中表示第3实施方式中的表达对象数据14的图像的显示例。如图14所示,显示控制部30可如漫画般显示分别包含表达对象数据14的图像90的多个画格92。另外,在本实施方式中,设为在一个画格92中包含一个图像90。
例如,当对象数据14为动态图象时,显示控制部30从所述动态图象中剪切出多个静止图像,并以所述多个静止图像按动态图象中的时间序列顺序排列的方式,将包含静态图像作为图像90的多个画格92并排显示。另外,显示控制部30也可以从动态图象中剪切出相当于对象数据14中的重要部分的静止图像。如上所述,对象数据14中的重要部分例如可根据分析部22的分析结果或计数部24的计数结果来确定。
当然,各图像90也可以是在第1实施方式中生成的语义图。在此情况下,例如,语义图生成部26生成表达对象数据14的多个语义图,显示控制部30使分别包含所生成的语义图的多个画格92以表示对象数据14的语义的方式并排显示。若对象数据14为动态图象,且图14的各图像90为语义图,则例如第一个画格是表达动态图象的0:00~1:00的内容的语义图,第二个画格变成表达动态图象的1:01~2:00的内容的语义图。
第3实施方式是着眼于用户可设定表达对象数据14的图像90的(显示)布局这一点的实施方式。显示控制部30对应于用户所设定的布局,将图像90显示在显示部18中。
布局设定部28根据用户的指示,设定图像90的布局。信息处理装置10通过输入部16来接受与图像90的布局相关的来自用户的指示。即,输入部16也作为接受部发挥功能。具体而言,布局设定部28例如设定一个画面中的画格92的数量(即一个画面中所含有的图像90的数量)、画面数、或者各画格92的位置、大小、排列等作为图像90的布局。
用户可利用若干方法设定图像90的布局。另外,作为用户指示布局的变更时的输入方法,可为触摸操作、语音操作、非接触的手势操作、鼠标的指向操作、文本命令的输入的任一种。但是,考虑到用户的便利性或误操作,也能够以仅通过特定的输入手段来接受的方式,通过用户的任意的设定来切换。例如,在周围的噪音大、或周围人多的情况下为不接受语音输入,而仅接受触摸操作等的设定的变更。
第一种方法是如下的方法:显示控制部30将用于使用户输入布局的布局设定画面显示在显示部18中,用户使用输入部16朝此布局设定画面中输入布局,由此设定布局。
图15A至图15C中表示布局设定画面的例子。若用户操作信息处理装置10而调出布局设定画面,则首先在显示部18中显示如图15A中所示的画面。图15A中所示的画面是设定是否对于对象数据14的整体进行概括的画面。此处,若用户输入对于对象数据14的整体进行概括的指示,则在显示部18中显示图15B中所示的画面。
图15B中所示的画面是用于输入表达对象数据14的整体的图像90(即画格92)的布局的画面。例如,在图15B中所示的画面中,设置有输入显示表达对象数据14的整体的图像90的画面数的栏100、或输入各画面的画格数的栏102。用户将所期望的数量输入至栏100及栏102中,由此可设定图像90的布局。例如,若画面数为1,第一个画面的画格数为4,则表达对象数据14的整体的四个语义图由一个画面来显示。另外,若画面数为2,各画面的画格数为1,则表达对象数据14的整体的两个语义图在一个画面中各显示一个。
另外,在图15B的画面中,仅可设定画面数及一个画面的画格数,但也可以在此画面中设定各画格的位置、大小、排列等。另外,针对画面数或画格数等各设定项目的值能够以自由形式(free form)输入,也可以从下拉菜单等的选择项中选择。
在图15A中所示的画面中,若用户输入对于对象数据14的整体不进行概括的指示,则在显示部18中显示图15C中所示的画面。
显示控制部30可将图像90显示在对象数据14中的语义上的各区块中。例如,显示控制部30可显示表达如目的、课题、解决手段、及下次之前的遗留问题般的各个区块的多个画格92。布局设定部28可在对象数据14中的语义上的各区块中设定图像90的布局。即,各区块的多个画格92的布局可由用户设定。当然,作为区块,并不限于目的、课题、解决手段、及下次之前的遗留问题,例如也可以如所述般以起、承、转、及结,或机器、通信、及人等的概念进行区分。
图15C中所示的画面是用于输入对象数据14的各区块的图像90(即画格92)的布局的画面。例如,在图15C中所示的画面中,设置有输入用于表达对象数据14的各区块(目的、课题、解决手段、及下次之前的遗留问题)的画面数及各画面的画格数的栏104。用户将所期望的数量输入至栏104中,由此可设定各区块的图像90的布局。
第二种方法是通过用户对显示有图像90(画格92)的显示部18进行操作来设定布局的方法。更详细而言,若用户对显示部18输入作为布局变更指示的操作,则布局设定部28对应于此操作而变更图像90的布局。所谓用户对于显示部18的操作,例如包含点击操作、双击操作、长按操作、滑动(轻滑)操作、捏合操作、或撑开操作等。例如,当用户对某一画格92进行了操作时,布局设定部28可进行将此画格92删除来减少画格数的布局变更。或者,例如当用户对两个画格92之间进行了操作时,布局设定部28可进行在所述两个画格92之间追加新的画格92来增加画格数的布局变更。根据第二种方法,与第一种方法相比,用户可更直观地进行布局设定。尤其,将特定的位置的画格92删除、或在特定的位置上追加画格92变得更容易。
图16中表示用户对显示有多个画格92(图像90)的显示部18进行滑动操作的样子。当输入部16从用户处接受了滑动操作时,布局设定部28也可以进行不仅将位于滑动操作的起点的画格92a删除,也将从画格92a起位于滑动操作的滑动方向上的另一画格92b删除,而减少两个画格数的布局变更。或者,也可以进行除画格92a及画格92b以外,将从画格92a起位于与滑动操作的滑动方向相反侧的另一画格92c删除,而减少三个画格数的布局变更。在本实施方式中,设为通过滑动操作来进行将画格92a、画格92b、及画格92c删除而减少三个画格数的布局变更。通过如此设定,用户可输入利用一次滑动操作将任意的多个画格92删除的布局变更的指示。另外,开始位置的决定能够以对于用户所指定的画格的长按为基准而开始。
另外,在用户进行滑动操作的期间内,显示控制部30以如下的方式进行显示:使画格92a、画格92b、及画格92c随着滑动操作缓慢地移动(在图16的例子中缓慢地朝右侧移动),当滑动操作完成时,画格92a、画格92b、及画格92c从显示部18中完全消失。
另外,当用户在中途中止了滑动操作时,布局设定部28不进行布局变更,显示控制部30使移动至中途为止的画格92a、画格92b、及画格92c回到原来的位置上进行显示。
若从用户处接受滑动操作,则在将画格92a、画格92b、及画格92c删除后,布局设定部28将此画面的布局设为剩余的四个画格92的布局。在此情况下,布局设定部28也可以适宜调整剩余的四个画格92的位置,以不使原来画格92a、画格92b、及画格92c所存在的区域不自然地空出。图17中表示作为利用滑动操作的布局变更后的显示例的调整了剩余的四个画格92的位置时的显示例。另外,图17中在显示部18的显示区域中有空余部分,但也能够以填埋显示区域的方式使每一个画格的图像尺寸扩大缩小,适宜地重新调整成最合适的尺寸后进行显示。
当输入部16从用户处接受了使多个画格92重叠的重叠操作时,布局设定部28进行将成为重叠操作的对象的多个画格92合并成一个画格92的布局变更。换言之,进行在显示有成为重叠操作的对象的多个画格92的区域中显示一个画格92的布局变更。
重叠操作例如为以捏住多个画格92的方式进行操作的捏合操作。另外,作为重叠操作,也可以是利用一根手指以叠加在另一画格92上的方式拖拽一个画格92的操作、利用两手的手指分别挪动多个画格92来重叠的操作、或者通过语音输入或手势来输入使多个画格92重叠的指示的操作。
图18中表示用户对显示有多个画格92的显示部18进行捏合操作的样子。当输入部16从用户处接受了捏合操作时,布局设定部28进行将成为捏合操作的对象的多个画格92合并成一个画格92的布局变更。换言之,进行在显示有成为捏合操作的对象的多个画格92的区域中显示一个画格92的布局变更。由此,可同时进行成为布局变更的对象的画格的指定、及布局变更后的显示尺寸的指定。当然,也可以仅为成为对象的画格的指定,而将显示尺寸变成其他指示。当将显示尺寸设为并非将对象画格进行了合并的区域时,若成为对象的画格的指定结束,则也可以使显示尺寸的设定画面显示来进行显示尺寸的指定的接受。另外,捏合操作也可以同时将多个图像(画格)作为对象。即,作为利用右手以拇指、食指来确定对象,利用拇指进行两个画格的指定、且利用食指进行三个画格的指定来进行布局变更等符合。不仅是利用各手指明确地接触画格的区域的至少一部分的情况,只要事先设定了看作已指定此画格的区域(例如此画格附近的区域),则即便各手指不接触此画格本身,在接触了此区域的情况下也可以将此画格作为对象。由此,用户可通过容易进行指定的操作来进行对象的确定。
例如,如图18所示,在进行了捏合操作的情况下,进行将位于捏合操作的两个起点(即捏合操作开始时的两个手指的位置)上的两个画格(92e及92f)合并来变成一个画格92的布局变更。当在位于捏合操作的起点上的两个画格(92e及92f)之间存在另一画格92时,通过捏合操作来将两个画格(92e及92f)、以及所述另一画格92合并。
根据重叠操作,用户可输入将任意的多个画格92合并的布局变更的指示。图19中表示通过重叠操作,将两个画格92e及画格92f合并来变成一个画格92g的布局变更后的画面。如图19般,在伴随合并来变更画格的尺寸的情况下,也可以消除变更前的布局中所存在的画格间的间隔的空间,而将此空间用于布局变更后的经合并的画格的显示区域中。另外,在本次的合并的例子中,将在横向上邻接的画格合并,但不论是在纵向上邻接的画格,还是在斜向上邻接的画格,均可设为合并对象。另外,也可以使进行了一次合并者反复合并。
另外,在用户进行重叠操作(特别是利用手指的重叠操作)的期间内,显示控制部30使画格92e及画格92f随着重叠操作而相互朝靠近的方向移动(在图18的例子中使画格92e朝右侧移动,使画格92f朝左侧移动),当重叠操作完成时,将画格92e及画格92f删除,并使新的画格92g显示。
另外,与滑动操作同样地,当用户在中途中止了重叠操作时,布局设定部28不进行布局变更,显示控制部30使移动至中途为止的画格92e及画格92f回到原来的位置上进行显示。
另外,当输入部16从用户处接受了画格92的扩张操作时,布局设定部28也可以进行将成为扩张操作的对象的画格92的尺寸扩大的布局变更。即,根据扩张操作,用户可输入将任意的画格92的尺寸扩大的布局变更的指示。在此情况下,也可以将成为扩张操作的对象的画格92扩大,并且将位于此画格92的周围的画格92的尺寸缩小。
扩张操作例如是以将单手的多个手指展开的方式对多个画格92进行操作的撑开操作。另外,作为扩张操作,也可以是使两手的手指朝相反的方向滑动的操作、或者通过语音输入或手势来输入将成为对象的画格92扩张的指示的操作。
另外,当输入部16从用户处接受了画格92的分割操作时,布局设定部28也可以进行将成为分割操作的对象的画格92分割成多个画格92的布局变更。即,根据分割操作,用户可输入将任意的画格92分割成多个画格92的布局变更的指示。
作为分割操作,可想到各种操作。例如,如图20中的(a)及(b)所示,分割操作可为将画格92作为对象的撑开操作。另外,在此情况下,也可以显示使用户确认在撑开操作后进行何者的画面(也可以是语音确认),并对应于用户的输入而决定通过撑开操作来将画格92的尺寸扩大、还是进行画格92的分割。或者,通过撑开操作来将画格92的尺寸扩大、还是进行画格92的分割也可以由用户事先设定。
例如,如图20中的(a)所示,用户对画格92b进行撑开操作,如图20中的(b)所示,画格92b便被分割成画格92h及画格92i。
可根据撑开操作的开始位置及撑开操作的操作方向来决定经分割的画格92的布局。例如,在图20中的(a)及(b)的例子中,撑开操作的开始位置为画格92b的大致中央,撑开操作方向为左下方及右上方,因此如图20中的(b)所示,画格92b的分割线变成从左上方穿过中央朝右下方延长的方向。
另外,作为分割操作,如图21中的(a)及(b)所示,可为对于画格92的滑动操作。另外,在此情况下,通过滑动操作来将画格92删除、还是进行画格92的分割可在使用户进行确认后决定,也可以事先设定。
例如,如图21中的(a)所示,若用户对画格92g进行滑动操作,则如图21中的(b)所示,画格92g被分割成画格92j及画格92k。
另外,也可以根据滑动操作的轨迹来决定经分割的画格92的布局。例如,如图22中的(a)所示,若倾斜地对画格92b进行滑动操作,则也可以沿着此滑动操作的轨迹将画格92b倾斜地分割成画格92h及画格92i。另外,在图22中的(a)及(b)的例子中,一个画格92被分割,但也能够以穿过多个画格92的轨迹进行一次滑动操作,由此通过一次滑动操作来分割多个画格92。
考虑各图像90为由语义图生成部26所生成的语义图的情况。在布局设定部28进行了变更语义图的数量的布局变更的情况下,语义图生成部26再次生成布局变更后的数量的语义图,以通过布局变更后的数量的语义图来表达由布局变更前的数量的语义图所表达的语义。而且,显示控制部30显示布局变更后的数量的再次生成的语义图。
语义图生成部26也可以将对象数据14的整体作为基准,再次生成在布局变更后显示的语义图。例如,考虑如下的情况:从对象数据14的整体由十二个语义图来表达,在第一个画面中显示七个语义图(即七个画格),在第二个画面中显示五个语义图的布局,进行了将显示在第一个画面中的语义图的数量减少三个的布局变更。在此情况下,语义图生成部26再次生成九个语义图,以通过九个(变更后的整体的语义图的数量)语义图来表达对象数据14的整体的语义,显示控制部30以变更后的布局(即第一个画面中为四个语义图,第二个画面中为五个语义图),显示再次生成的九个语义图。
另外,语义图生成部26也可以将显示在一个画面中的多个语义图作为基准,再次生成在布局变更后显示的语义图。例如,考虑如下的情况:从如图16所示般在一个画面中显示七个画格92(即七个语义图)的布局,进行了将显示在此画面中的语义图的数量减少三个的布局变更。在此情况下,语义图生成部26再次生成四个语义图(90a~90d),以通过布局变更后的四个语义图来表达在布局变更前由显示在此画面中的七个语义图所表达的语义。而且,如图17所示般,显示控制部30以变更后的布局,显示再次生成的四个语义图(90a~90d)。
另外,语义图生成部26也可以将对象数据14的语义上的区块作为基准,再次生成在布局变更后显示的语义图。例如,考虑如下的情况:在对象数据14的各区块中生成了多个语义图,且作为区块之一的目的的布局从由一个画面的七个语义图来显示的布局变更成由一个画面的四个语义图来显示的布局。在此情况下,语义图生成部26再次生成四个语义图,以通过布局变更后的四个语义图来表达对象数据14的目的的语义。而且,显示控制部30以变更后的布局,显示作为表达目的的语义图而再次生成的四个语义图。
进而,如图18所示,当用户对显示有多个画格92(即多个语义图)的显示部18进行了重叠操作时,语义图生成部26也可以再次生成一个新的语义图90g,以通过一个语义图来表达由作为重叠操作的对象的两个语义图(90e及90f)所表达的语义,显示控制部30也可以如图19所示般,以变更后的布局显示再次生成的一个语义图90g。例如,当语义图90e为表达作为对象数据14的动态图象的0:00~1:00的内容的语义图,语义图90f为表达此动态图象的1:01~2:00的内容的语义图时,语义图90g变成表达此动态图象的0:00~2:00的内容的语义图。
另外,在所述中,使用均进行了减少语义图的数量的布局变更的例子进行了说明,当然在进行了增加语义图的数量的布局变更的情况下,语义图生成部26也可以再次生成布局变更后的数量的语义图,以通过布局变更后的数量的语义图来表达由布局变更前的数量的语义图所表达的语义。
另外,在布局设定部28进行了变更语义图的数量的布局变更的情况下,语义图生成部26也可以根据作为成为布局变更的指示的对象的语义图的生成对象的对象数据14的范围,生成新的语义图,显示控制部30也可以显示布局变更后的数量的再次生成的语义图。
考虑成为重叠操作的对象的多个语义图的生成对象的对象数据14的多个部分未按时间序列连续的情况。例如,在图18的例子中是语义图90e表达对象数据14的0:00~1:00的内容,语义图90f表达对象数据14的5:00~8:00的内容,语义图90e与语义图90f成为重叠操作的对象的情况。
在此种情况下,语义图生成部26生成表达作为成为重叠操作的对象的多个图的生成对象的对象数据14的多个部分的一个新的语义图,显示控制部30以变更后的布局显示所述一个新的语义图。例如,在所述例子中,生成表达作为语义图90e的生成对象的对象数据14的0:00~1:00的内容、及作为语义图90f的生成对象的对象数据14的5:00~8:00的内容的一个语义图90g来进行显示。
另外,语义图生成部26也可以生成表达连续部分的一个新的语义图,所述连续部分包含作为成为重叠操作的对象的多个图的生成对象的对象数据14的多个部分、及在对象数据14中按时间序列位于所述多个部分之间的部分。例如,在所述例子中,也可以生成表达对象数据14的0:00~8:00的内容的一个语义图90g来进行显示,所述对象数据14的0:00~8:00的内容是包含作为语义图90e的生成对象的对象数据14的0:00~1:00的内容、及作为语义图90f的生成对象的对象数据14的5:00~8:00的内容的按时间序列连续的部分。
考虑通过滑动操作等而删除了一个语义图的情况。例如,在图16的例子中是画格92c的语义图表达对象数据的3:00~4:00的内容,画格92a的语义图表达对象数据的8:00~9:00的内容,画格92b的语义图表达对象数据的14:00~15:00的内容,画格92a、画格92b、及画格92c成为删除的对象的情况。
在此种情况下,语义图生成部26在布局变更后的剩余的语义图(图17的语义图90a~语义图90d)的生成对象中加入作为画格92c的语义图的生成对象的对象数据14的3:00~4:00的内容、作为画格92a的语义图的生成对象的对象数据14的8:00~9:00的内容、及作为画格92b的语义图的生成对象的对象数据14的14:00~15:00的内容,而再次生成语义图90a~语义图90d。另外,语义图生成部26也可以在布局变更后的剩余的语义图90a~语义图90d的生成对象中加入作为包含画格92a~画格92c的语义图的生成对象的连续部分的对象数据14的3:00~15:00的内容,而再次生成语义图90a~语义图90d。
考虑通过分割操作而将语义图分割成多个语义图的情况。在此情况下,语义图生成部26生成分割后的多个画格的语义图,以表示由分割前的画格92的语义图所表达的内容。
另外,在分割前的画格92的语义图包含多个构成要素、且由用户指定了某一构成要素后进行了分割操作的情况下,语义图生成部26也可以分别再次生成表达经指定的构成要素所示的(对象数据14的)内容的语义图、及表达其他构成要素所示的内容的语义图,显示控制部30也可以使再次生成的多个语义图显示在分割后的多个画格92中。
例如,在图21中的(a)中,在针对包含男性与智能手机这两个构成要素的语义图90g的画格92g,用户将智能手机的构成要素作为起点(即指定智能手机的构成要素)进行了滑动操作的情况下,如图21中的(b)所示,在分割后的画格92k中再次生成表达用户所指定的智能手机的构成要素所示的内容的语义图90k来进行显示,在分割后的画格92j中再次生成表达用户未指定的男性的构成要素所示的内容的语义图90j来进行显示。
此处,也可以根据分割前的画格92g的语义图90g所表达的内容中的用户所指定的构成要素(智能手机)所示的内容的量、及用户未指定的构成要素(男性)所示的内容的量,决定分割后的画格92j及画格92k的尺寸。例如,当在语义图90g所表达的内容中,与男性相关的内容的量为与智能手机相关的内容的量的3倍时,也可以将画格92j的大小设为画格92k的大小的3倍。
另外,在因滑动操作或撑开操作而受到指定画格92的分割线的分割操作的情况下,语义图生成部26也可以在分割前的画格92中分别再次生成表达位于由分割线所划分的一个区域中的构成要素所示的内容的语义图、及表达位于另一个区域中的构成要素所示的内容的语义图,显示控制部30也可以使再次生成的多个语义图显示在分割后的多个画格92中。
例如,在图22中的(a)中,在针对包含欧元与日元这两个构成要素的语义图90m的画格92b,用户进行了指示在一个区域中包含欧元的构成要素,在另一个区域中包含日元的构成要素的分割线的分割操作的情况下,如图22中的(b)所示,在分割后的画格92h中再次生成表达日元的构成要素所示的内容的语义图90h来进行显示,在分割后的画格92i中再次生成表达欧元的构成要素所示的内容的语义图90i来进行显示。
如以上所说明般,根据第3实施方式,用户可指定表达对象数据14的图像90的布局。因此,用户可使图像90以所希望的布局显示。
以上,对本发明的实施方式进行了说明,但本发明并不限定于所述实施方式,也可以将各实施方式组合来利用,只要不脱离本发明的主旨,则可进行各种变更。

Claims (8)

1.一种信息处理装置,其特征在于,包括:
显示控制部,根据从对象数据所获得的语义,显示表达所述对象数据的至少一部分的语义的图。
2.根据权利要求1所述的信息处理装置,其特征在于:
所述对象数据的语义通过对于从所述对象数据中提取的字符串的自然语言处理而获得。
3.根据权利要求2所述的信息处理装置,其特征在于:
所述图包含图形、照片、文字的至少一者作为构成要素。
4.根据权利要求3所述的信息处理装置,其特征在于:
所述图包含表达所述字符串之中成为所述图的生成对象的部分字符串中所不含的用语的所述构成要素。
5.根据权利要求3所述的信息处理装置,其特征在于:
所述显示控制部根据所述图中所含有的所述构成要素所表达的用语在所述对象数据中的重要度,决定所述构成要素的显示方式。
6.根据权利要求1至4中任一项所述的信息处理装置,其特征在于:
所述显示控制部将所述图显示在所述对象数据中的语义上的各区块中。
7.根据权利要求2所述的信息处理装置,其特征在于,还包括:
根据从所述对象数据所获得的语义,输出所述图的解说的解说输出部。
8.一种存储信息处理程序的非暂时性的计算机可读介质,其特征在于,所述信息处理程序使计算机执行处理,所述处理包括:
根据从对象数据所获得的语义,显示表达所述对象数据的至少一部分的语义的图。
CN201811019529.2A 2018-02-02 2018-09-03 信息处理装置及非暂时性的计算机可读介质 Pending CN110134298A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-017688 2018-02-02
JP2018017688A JP7225541B2 (ja) 2018-02-02 2018-02-02 情報処理装置及び情報処理プログラム

Publications (1)

Publication Number Publication Date
CN110134298A true CN110134298A (zh) 2019-08-16

Family

ID=67476924

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811019529.2A Pending CN110134298A (zh) 2018-02-02 2018-09-03 信息处理装置及非暂时性的计算机可读介质

Country Status (3)

Country Link
US (1) US20190244405A1 (zh)
JP (1) JP7225541B2 (zh)
CN (1) CN110134298A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112463011A (zh) * 2019-09-09 2021-03-09 现代自动车株式会社 触摸屏、具有触摸屏的车辆以及控制车辆的方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080148191A1 (en) * 2004-02-09 2008-06-19 Markus Weinlander Visualization of Structured Data
CN104011711A (zh) * 2011-12-27 2014-08-27 皇家飞利浦有限公司 文本分析系统
US20160224940A1 (en) * 2015-02-04 2016-08-04 Adp, Llc Word Cloud Analysis System
US20170139955A1 (en) * 2015-11-16 2017-05-18 Adobe Systems Incorporated Converting a text sentence to a series of images

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09167251A (ja) * 1995-12-14 1997-06-24 Canon Inc アニメーション生成装置及びその方法
US20010049596A1 (en) * 2000-05-30 2001-12-06 Adam Lavine Text to animation process
US20030009495A1 (en) * 2001-06-29 2003-01-09 Akli Adjaoute Systems and methods for filtering electronic content
US20030223095A1 (en) * 2002-05-28 2003-12-04 Kogod Robert P. Symbol message displays
WO2006075334A2 (en) * 2005-01-16 2006-07-20 Zlango Ltd. Iconic communication
US8672682B2 (en) * 2006-09-28 2014-03-18 Howard A. Engelsen Conversion of alphabetic words into a plurality of independent spellings
EP2188729A1 (en) * 2007-08-08 2010-05-26 Lessac Technologies, Inc. System-effected text annotation for expressive prosody in speech synthesis and recognition
US8281238B2 (en) * 2009-11-10 2012-10-02 Primal Fusion Inc. System, method and computer program for creating and manipulating data structures using an interactive graphical interface
DE102010046439A1 (de) * 2010-09-24 2012-03-29 Belingoo Media Group S. A. System und Verfahren für relevanzbasiertes Kategorisieren und zeitnahes Lernen von Vokabeln
US8510287B1 (en) * 2012-04-08 2013-08-13 Microsoft Corporation Annotating personalized recommendations
US20140310633A1 (en) * 2013-04-12 2014-10-16 Schlumberger Technology Corporation Geographic information system (gis) mapping with logical and physical views of oil & gas production network equipment
JP2015036886A (ja) * 2013-08-13 2015-02-23 ソニー株式会社 情報処理装置、記憶媒体、および方法
US20160163210A1 (en) * 2013-12-04 2016-06-09 The Trustees Of The Stevens Institute Of Technolog Automated Framework For Personalized Learning From Heterogeneous Data Repositories
US20160125628A1 (en) * 2014-11-05 2016-05-05 Geologis Ltd. Geographical information systems
US20170083491A1 (en) * 2015-09-18 2017-03-23 International Business Machines Corporation Emoji semantic verification and recovery
US10546015B2 (en) * 2015-12-01 2020-01-28 Facebook, Inc. Determining and utilizing contextual meaning of digital standardized image characters
US20170185581A1 (en) * 2015-12-29 2017-06-29 Machine Zone, Inc. Systems and methods for suggesting emoji
US20170242849A1 (en) * 2016-02-24 2017-08-24 Yen4Ken, Inc. Methods and systems for extracting content items from content
US20170344224A1 (en) * 2016-05-27 2017-11-30 Nuance Communications, Inc. Suggesting emojis to users for insertion into text-based messages
US10558757B2 (en) * 2017-03-11 2020-02-11 International Business Machines Corporation Symbol management
US10593087B2 (en) * 2017-10-23 2020-03-17 Paypal, Inc. System and method for generating emoji mashups with machine learning

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080148191A1 (en) * 2004-02-09 2008-06-19 Markus Weinlander Visualization of Structured Data
CN104011711A (zh) * 2011-12-27 2014-08-27 皇家飞利浦有限公司 文本分析系统
US20160224940A1 (en) * 2015-02-04 2016-08-04 Adp, Llc Word Cloud Analysis System
US20170139955A1 (en) * 2015-11-16 2017-05-18 Adobe Systems Incorporated Converting a text sentence to a series of images

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112463011A (zh) * 2019-09-09 2021-03-09 现代自动车株式会社 触摸屏、具有触摸屏的车辆以及控制车辆的方法

Also Published As

Publication number Publication date
US20190244405A1 (en) 2019-08-08
JP2019133603A (ja) 2019-08-08
JP7225541B2 (ja) 2023-02-21

Similar Documents

Publication Publication Date Title
US8166418B2 (en) Device and method of conveying meaning
US10223076B1 (en) Generating code based on user interactions with a user interface element in a code editor
CN103970475B (zh) 辞典信息显示装置、方法、系统及服务器装置、终端装置
CN110334332A (zh) 一种演示文稿生成方法、装置、存储介质及电子设备
Roudaki et al. A classification of web browsing on mobile devices
JP2018501551A (ja) 数式処理方法、装置、デバイス及びプログラム
CN105607804A (zh) 一种信息显示方法及终端
CN112667120A (zh) 互动图标的显示方法、装置及电子设备
CN112685025A (zh) 快速搭建前端页面的方法及系统
JP5056133B2 (ja) 情報抽出システム、情報抽出方法および情報抽出用プログラム
CN110134298A (zh) 信息处理装置及非暂时性的计算机可读介质
CN105095285B (zh) 数字出版物导览目录处理方法和装置
JP2019133605A (ja) 情報処理装置及び情報処理プログラム
CN112182310A (zh) 一种内置实时搜索的通用树形组件实现方法
JP7069766B2 (ja) 情報処理装置及び情報処理プログラム
WO2017071190A1 (zh) 输入数据的处理方法、装置、设备及非易失性计算机存储介质
CN114911549A (zh) 一种页面显示方法、装置和电子设备
CN104615261A (zh) 一种联想输入的方法及终端
CN104063118B (zh) 一种网页内容的点击显示方法及装置
CN117235397B (zh) 一种表单数据输入方法、装置、介质
JP6223007B2 (ja) 文書表示装置及び方法とそのプログラム及びデータ構造
CN110456919A (zh) 数据处理方法、装置和用于数据处理的装置
CN110119485B (zh) 一种基于书签的界面访问方法及装置
JP2012168590A (ja) コミック閲覧システム
CN106445902B (zh) 一种移动终端及其处理备忘信息的方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: No. 3, chiban 9, Dingmu 7, Tokyo port, Japan

Applicant after: Fuji film business innovation Co.,Ltd.

Address before: No. 3, chiban 9, Dingmu 7, Tokyo port, Japan

Applicant before: Fuji Xerox Co.,Ltd.

CB02 Change of applicant information