CN102025968B - 图像发送装置和图像发送方法 - Google Patents
图像发送装置和图像发送方法 Download PDFInfo
- Publication number
- CN102025968B CN102025968B CN201010283074.2A CN201010283074A CN102025968B CN 102025968 B CN102025968 B CN 102025968B CN 201010283074 A CN201010283074 A CN 201010283074A CN 102025968 B CN102025968 B CN 102025968B
- Authority
- CN
- China
- Prior art keywords
- user
- identification information
- display screen
- output
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 87
- 230000005540 biological transmission Effects 0.000 claims abstract description 15
- 230000004044 response Effects 0.000 claims abstract description 7
- 238000000605 extraction Methods 0.000 claims description 36
- 238000012790 confirmation Methods 0.000 claims description 11
- 239000000284 extract Substances 0.000 claims description 9
- 238000012545 processing Methods 0.000 description 18
- 238000004891 communication Methods 0.000 description 14
- 238000003860 storage Methods 0.000 description 14
- 230000006870 function Effects 0.000 description 11
- 238000012360 testing method Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 10
- 230000001186 cumulative effect Effects 0.000 description 9
- 238000009825 accumulation Methods 0.000 description 6
- 239000004973 liquid crystal related substance Substances 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 4
- 238000001514 detection method Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
- G10L2015/088—Word spotting
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Facsimiles In General (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
提供了一种图像发送装置和图像发送方法。为了自动将屏幕切换到合乎情形的屏幕,一种MFP包括:图像接受部分,用于接受图像;语音接受部分,用于接受语音;语音识别部分,用于识别语音;显示屏幕生成部分,用于当语音识别出在预定输出设置中包括的关键词时,依据输出设置生成定制显示屏幕,所述定制显示屏幕包括所接受的图像和独立于所接受的图像的预先存储的目标数据的图像中的至少一个;以及发送控制部分,用于依据输出设置向分别由多个用户操作的多个PC中的至少一个PC发送定制显示屏幕。
Description
技术领域
本发明涉及一种图像发送装置和一种图像发送方法。更具体地,本发明涉及一种向由会议的与会者等操作的计算机发送图像的图像发送装置,以及一种由该图像发送装置执行的图像发送方法。
背景技术
近年来,已知视频会议系统允许由处于物理地远离的会议室中的与会者举行会议。在这样的视频会议系统中,在第一会议室中拾取的图像可以被显示在第二会议室中,以使得第二会议室中的与会者能够通过查看第二会议室中的显示器而看到在第一会议室中正在进行什么。也可以显示展示者所准备的文件。然而,为了使得在多个会议室的所有中显示图像,需要向视频会议系统输入特定的操作。在这需要复杂操作的情况下,只有专业技术人员才能够显示图像。
日本专利特开No.2005-197945描述了一种视频会议系统,其中将视频会议终端配置为在其自己的图像显示设备上显示与从多个其它视频会议终端中指定的另一视频会议终端上显示的屏幕相同的屏幕。根据该视频会议系统,当由展示者所准备的文件被显示在设置于展示者所位于的会议室中的视频会议终端上时,在设置于另一会议室中的视频会议终端上显示与在展示者所位于的会议室中显示的图像相同的图像。
然而,利用该系统,在设置于展示者所位于的会议室中的视频会议终端中,展示者需要执行切换要被显示在视频会议终端上的图像的操作,而在设置于其他会议室中的视频会议终端中,会议室中的与会者需要执行指定设置于展示者所位于的会议室中的视频会议终端的操作。这样的输入操作会中断会议的流畅进行。
发明内容
已完成本发明来解决上述问题,并且本发明的目的是提供一种允许屏幕自动切换到合乎于情形的屏幕的图像发送装置和图像发送方法。
本发明的另一目的是提供一种能够提供帮助理解发言的内容的信息的图像发送装置和图像发送方法。
为了获得上述目的,根据本发明的一个方面,一种图像发送装置包括:接受部分,用于接受图像和语音;语音识别部分,用于识别所接受的语音;屏幕生成部分,用于响应于语音识别部分识别出在预定输出设置中包括的关键词的事件,依据输出设置生成显示屏幕,所述显示屏幕包括所接受的图像和预先存储的独立于所接受的图像的目标数据的图像中的至少一个;以及发送控制部分,用于依据输出设置向分别由多个用户操作的多个计算机中的至少一个发送所生成的显示屏幕。
根据本发明的另一方面,一种图像发送装置包括:接受部分,用于接受图像和语音;用户指定部分,用于基于所接受的语音指定多个用户中发出所述语音的一个用户;提取部分,用于从通过识别所接受的语音而获得的字符串中提取词;计数部分,针对所指定的用户中的每一个对所提取的词进行计数;以及发送控制部分,用于在对于所提取的词中的任何一个,所计数的结果等于或大于预定频率的情况下,向分别由多个用户操作的多个计算机中的至少一个发送包括所述词的屏幕。
根据本发明的还一方面,一种图像发送方法包括步骤:接受图像和语音;识别所接受的语音;响应于在所述识别步骤中识别出在预定输出设置中包括的关键词的事件,依据输出设置生成显示屏幕,所述显示屏幕包括所接受的图像和预先存储的独立于所接受的图像的目标数据的图像中的至少一个;以及依据输出设置向分别由多个用户操作的多个计算机中的至少一个发送所生成的显示屏幕。
根据本发明的另一方面,一种图像发送方法包括步骤:接受图像和语音;基于所接受的语音指定多个用户中发出所述语音的一个用户;从通过识别所接受的语音而获得的字符串中提取词;对于所指定的用户中的每一个对所提取的词进行计数;以及在对于所提取的词中的任何一个,所计数的结果等于或大于预定频率的情况下,向分别由多个用户操作的多个计算机中的至少一个发送包括所述词的屏幕。
通过下面结合附图对本发明的详细描述,本发明的上述和其它目的、特征、方面和优点将变得更加明显。
附图说明
图1示意性地示出了根据本发明的实施例的会议系统。
图2是MFP的透视图。
图3是通过示例示出MFP的硬件配置的框图。
图4是通过示例示意性地示出视频会议终端的功能的功能框图。
图5是通过示例示出PC的硬件配置的框图。
图6是通过示例示出包括在MFP中的CPU的功能的功能框图以及存储在HDD中的数据。
图7示出了输出设置表的示例。
图8示出了显示屏幕的示例。
图9示出了定制显示屏幕的示例。
图10示出了定制显示屏幕的另一示例。
图11示出了确认屏幕的示例。
图12示出了定制显示屏幕的另一示例。
图13示出了关键词表的示例。
图14示出了累积数据的示例。
图15示出了累积条件表的示例。
图16示出了添加有意向(tendency)数据的显示屏幕的示例。
图17至图19是图示了中继过程的流程的示例的第一至第三流程图。
图20是图示了冲突处理过程的流程的示例的流程图。
图21是图示了中继过程的流程的示例的第四流程图。
具体实施方式
现在将参照附图描述本发明的实施例。在附图中,相似的参考数字表示类似的部分,其具有类似的名称和功能,因此将不再重复其详细描述。
图1示意性地示出了根据本发明的实施例的会议系统。参考图1,会议系统1被布置在场地上物理上彼此远离并且通过其安置网络2的会议室A、B和C中。在会议室A中,安装了多功能外围设备(MFP)100、视频会议终端200和个人计算机(下文中称为“PC”)300,其每一个连接到网络2。在会议室B中,安装了视频会议终端200A以及PC 300A和300B,其每一个连接到网络2。在会议室C中,安装了视频会议终端200B以及PC 300C和300D,其每一个连接到网络2。MFP 100能够经由网络与视频会议终端200、200A和200B以及PC 300、300A至300D通信。MFP 100充当图像发送装置,以便向PC 300、300A至300D发送显示屏幕的图像。
网络2是可以以有线或无线方式连接的局域网(LAN)。此外,不限于LAN,网络2可以是广域网(WAN)、公共交换电话网络(PSTN)、因特网等。
尽管在这里通过示例示出了会议室A、B和C三个物理上远离的场地的布置,但是场地的数目不限于此;场地可以是会议室A、B和C中的一个,或可以是从多个会议室中选择的至少两个会议室的组。
PC 300、300A至300D中的每一个是典型的计算机,并且安装有允许PC与MFP 100通信的应用程序。应用程序可以是例如用于下载存储在充当Web服务器的MFP 100中的网页的浏览器程序。PC 300、300A至300D中的每一个还安装有用于对运动图像数据进行解码以再现运动图像的运动图像再现程序。
MFP 100包括用于读取原稿的扫描仪设备以及用于基于在诸如纸张的记录介质上的图像数据而形成图像的图像形成设备和传真设备,并且具有图像读取功能、复印功能和传真发送/接收功能。此外,MFP 100安装有允许MFP100充当Web服务器和流传输服务器的程序。尽管在本实施例中将MFP 100描述为图像发送装置的示例,但是不限于MFP 100,图像发送装置可以是打印机、传真机、个人计算机等。
图2是MFP的透视图。图3是通过示例示出MFP的硬件配置的框图。参考图2和图3,MFP 100包括:主电路110;原稿读取部分130,其读取原稿;自动文件馈送器120,其将原稿传递到原稿读取部分130;图像形成部分140,其在纸张等上形成从读取原稿的原稿读取部分130输出的静止图像;纸张馈送部分150,其将纸张提供给图像形成部分140;以及操作面板160,充当用户接口。主电路110包括中央处理单元(CPU)111、通信接口(I/F)部分112、只读存储器(ROM)113、随机存取存储器(RAM)114、电可擦除可编程ROM(EEPROM)115、作为大容量存储器的硬盘驱动(HDD)116、传真部分117和可以安装有闪存118A的卡接口(I/F)118。CPU 111与自动文件馈送器120、原稿读取部分130、图像形成部分140、纸张馈送部分150、操作面板160连接,并且负责MFP 100的整体控制。
ROM 113存储要由CPU 111执行的程序以及执行程序所必需的数据。RAM 114用作当CPU 111执行程序时的工作区域。此外,RAM 114临时存储从原稿读取部分130连续发送的静止图像。
操作面板160被提供在MFP 100的上表面上,并且包括显示部分160A和操作部分160B。显示部分160A是诸如液晶显示器(LCD)或有机电发光显示器(ELD)的显示器,并且显示用于用户的指令菜单、关于所获取的图像数据的信息等。操作部分160B被提供有多个键,并且根据用户的键操作接受诸如指令、字符和数字字符的数据输入。操作部分160B进一步包括提供在显示部分160A上的触摸面板。
通信I/F部分112是用于将MFP 100连接到网络2的接口。CPU 111经由通信I/F部分112与视频会议终端200、200A、200B或PC 300、300A至300D通信以发送/接收数据。此外,通信I/F部分112能够经由网络2与连接到因特网的计算机通信。
传真部分117连接到公共交换电话网络(PSTN)并且向PSTN发送传真数据或从PSTN接收传真数据。传真部分117将所接收的传真数据存储在HDD中116,或将其输出到图像形成部分140。图像形成部分140将从传真部分117接收的传真数据打印在纸张上。此外,传真部分117将存储在HDD 116中的数据转换成传真数据,并且将其发送到连接到PSTN的传真机。
卡I/F 118安装有闪存118A。CPU 111能够经由卡I/F 118访问闪存118A。CPU 111将记录在安装到卡I/F 118的闪存118A上的程序加载到RAM 114以执行。注意,CPU 111执行的程序不限于记录在闪存118A上的程序。CPU 111可以将存储在HDD 116中的程序加载到RAM 114以执行。在这种情况下,连接到网络2的另一计算机可以重写存储在MFP 100的HDD 116中的程序,或可以额外地写入新程序。此外,MFP 100可以从连接到网络2的另一计算机下载程序,并且将程序存储在HDD 116中。如在此使用的,“程序”不仅仅包括CPU 111可直接执行的程序,而且还包括源程序、压缩程序、加密程序等。
视频会议终端200、200A和200B在配置和功能方面相同,因此,现在将代表性地描述视频会议终端200.。图4是通过示例示意性地示出视频会议终端的功能的框图。参考图4,视频会议终端200包括:控制部分201,负责视频会议终端200的整体控制;网络I/F 207,用于将视频会议终端200连接到网络2;操作面板205;投影部分203,用于投影图像;照相机204,用于拾取会议室内的图像;麦克风208,用于收集语音;以及扬声器209,用于输出语音。
照相机204拾取会议室A内的图像,并且将结果视频数据输出到控制部分201。麦克风208收集声音,并且将音频数据输出到控制部分201。
控制部分201包括CPU、用作工作区域的RAM和用于存储由CPU执行的程序的ROM。控制部分201接收来自照相机204的视频数据和来自麦克风208的音频数据,并且经由网络I/F 207将它们输出到其他视频会议终端200A和200B以及MFP 100。结果,在会议室A中拾取的视频图像和在会议室A中收集的语音被输出到视频会议终端200A和200B。类似地,视频会议终端200A将通过拾取会议室B内的图像而获得的视频数据和在会议室B中收集的音频数据发送到MFP 100。视频会议终端200B将通过拾取会议室C内的图像而获得的视频数据和在会议室C中收集的音频数据发送到MFP 100。结果,MFP 100接收通过拾取会议室A、B和C中的图像而获得的视频数据以及在会议室A、B和C中收集的音频数据。
此外,控制部分201在经由网络I/F 207接收到来自其它视频会议终端200A和200B的视频数据后,将视频数据的格式转换成适合于投影的格式,并且将结果投影数据输出到投影部分203。控制部分201还将从其他视频会议终端200A至200B接收的音频数据输出到扬声器209。结果,从视频会议终端200输出示出会议室B和C的内部的视频图像以及在会议室B和C中收集的语音。
投影部分203包括液晶显示器、透镜和光源。液晶显示器显示从控制部分201输入的视频数据。从光源发出的光发送到液晶显示器并且经由透镜被导向到外部。当从投影部分203发出的光到达屏幕时,液晶显示器上显示的图像的放大版本被投到屏幕上。注意,在屏幕是不必要的情况下,可以使用墙壁或任意其它光反射表面。操作面板205是用户接口,并且包括诸如液晶显示器的显示部分和具有多个键的操作部分。
尽管这里假定视频会议终端200、200A和200B的每一个具有投影部分203,但是可以利用诸如LCD或有机ELD的显示器来替换投影部分203。
PC 300和300A至300D在配置和功能上相同,因此现在将代表性地描述PC 300。图5是通过示例示出PC的硬件配置的框图。参考图5,PC 300包括:CPU 301,其负责PC 300的整体控制;ROM 302,除了其他以外,用于存储要由CPU 301执行的程序等;RAM 303,用作CPU 301的工作区域;网络I/F 304,用于将PC 300连接到网络;作为大容量存储器的HDD 305;显示部分306;以及操作部分307,用于接受用户的操作的输入。
在本实施例中,会议的与会者操作PC 300和300A至300D中的一个。PC 300和300A至300D的每一个在其显示部分306上显示从MFP 100接收的显示屏幕。显示屏幕包括由视频会议终端200、200A和200B拾取的图像。这允许与会者在PC 300和300A至300D上查看显示在视频会议终端200、200A和200B上的图像。显示屏幕还可以包括与会者为会议准备的文件的图像。当与会者将以电子数据形式的为会议准备的文件存储在PC 300和300A至300D中的一个中并且将文件发送到MFP 100以存储在其中时,MFP 100生成包括由与会者准备的文件的图像的显示屏幕。下面将描述由MFP 100生成的显示屏幕被显示在PC 300和300A至300D上的特定示例。
图6是通过示例示出了在MFP中包括的CPU的功能的功能框图以及存储在HDD中的数据。参考图6,通过包括在MFP 100中的CPU 111实现的功能包括:输出设置接受部分51,用于接受输出设置;输出设置存储部分53,用于将输出设置存储在HDD 116中;对象数据获取部分55,用于获取对象数据;对象数据存储部分57,用于将对象数据存储在HDD 116中;以及认证部分81,用于认证用户。
认证部分81认证与会者。在与会者通过操作PC 300和300A至300D中的一个登录到MFP 100的情况下,由与会者操作的PC将用于标识与会者的用户标识信息发送到MFP 100。当通信I/F部分112从PC 300和300A至300D中的一个接收到用户标识信息时,认证部分81获取用户标识信息、用于标识从其发送用户标识信息的PC的设备标识信息以及用于指定用户所位于的会议室的会议室标识信息。设备标识信息可以是任何类型的信息,只要它能够标识PC 300和300A至300D中的每一个即可。这里,将分配给网络2中的各PC的网络地址用作设备标识信息。
认证部分81将包括用户标识信息、设备标识信息和会议室标识信息的集合的用户数据存储在HDD 116中。以此方式,用户数据95被存储在HDD 116中。用户数据95包括用于标识与会者的用户标识信息、由与会者操作的PC的设备标识信息和会议室标识信息的集合。因此,PC 300和300A至300D中的每一个的设备标识信息可以被用来指定正在操作PC的与会者和与会者所位于的会议室。这里,假定会议室A中的用户A、会议室B中的用户B和C以及会议室C中的用户D和E分别操作PC 300和300A至300D来登录到MFP 100。可以预先存储将用户标识信息与密码相关联的数据,以便仅允许预定与会者登录到MFP 100。
当通信I/F部分112接收到来自PC 300和300A至300D中的一个的输出设置时,输出设置接受部分51接受所接收的输出设置和用于标识从其发送输出设置的PC 300和300A至300D中的一个的设备标识信息。输出设置接受部分51将所接受的输出设置和设备标识信息输出到输出设置存储部分53。输出设置包括用于设置要在由与会者操作的PC 300和300A至300D上显示的显示屏幕的参数。输出设置包括用于设置要在由与会者本人操作的PC 300和300A至300D中的一个上显示的显示屏幕的一个设置、以及用于设置要在由另一与会者操作的PC 300和300A至300D中的一个上显示的显示屏幕的一个设置。
在接收到输出设置和设备标识信息之后,输出设置存储部分53使用设备标识信息来搜索用户数据95,以便获取与设备标识信息配对的用户标识信息。输出设置存储部分53然后生成包括用户标识信息和输出设置的输出设置记录,并且附加地将所生成的记录存储在于HDD 116中存储的输出设置表91中。
图7示出了输出设置表的示例。输出设置表包括至少一个输出设置记录。输出设置记录包括以下字段:设置者标识信息、关键词、目的地标识信息、内容和方法。在设置者标识信息字段中,设置关于已发送输出设置的与会者的用户标识信息。具体地,在该字段中设置与输出设置一起输入到输出设置存储部分53中的用户标识信息。
关键词字段、目的地标识信息字段、内容字段、和方法字段组成输出设置。在关键词、目的地标识信息、内容和方法字段中,设置包括在从输出设置存储部分53输入的输出设置中的相应值。在关键词字段中,设置组成关键词的字符串。在目的地标识信息字段中,设置用于标识将要向其发送基于输出设置生成的显示屏幕的与会者的用户标识信息。在内容字段中,设置用于标识要基于其生成包括在显示屏幕中的图像的内容的数据标识信息。在方法字段中,设置根据其在输出屏幕上布置图像的方法。
返回图6,当通信I/F部分112接收到来自PC 300和300A至300D中的一个的对象数据时,对象数据获取部分55获取所接收的对象数据以及用于标识发送对象数据的PC 300和300A至300D中的一个的设备标识信息。对象数据获取部分55将所获取的对象数据和设备标识信息发送到对象数据存储部分57。对象数据是以电子数据形式的由与会者准备的文件。具体地,对象数据包括图像或当由PC 300和300A至300D中的一个执行应用程序时生成的应用数据。
向预定类型的对象数据分配预定的文件名称。这里,向作为用于展示的主文件的对象数据分配文件名称“展示文件”。向作为用于展示的补充文件的对象数据分配文件名称“展示补充文件”。向示出展示的议程的对象数据分配文件名称“展示议程”。这些文件名称用于在生成显示屏幕时确定对象数据,如随后将描述的。分配给对象数据的文件名称不限于上述的文件名称;适当时可以预先确定任意名称。在与会者被分类为组的情况下,由与会者发布的对象数据可以被分类为与与会者的组相对应的组。例如,在与会者被分类为展示者和听众的情况下,对象数据可以被分类为由展示者发布的对象数据和由听众发布的对象数据。这允许在如随后将描述的生成显示屏幕时依据其所属于的组来确定对象数据。
当接收到对象数据和设备标识信息时,对象数据存储部分57使用设备标识信息来搜索用户数据95,以便获取与设备标识信息配对的用户标识信息。对象数据存储部分57然后将与用户标识数据相关联的对象数据存储在HDD116中。结果,将对象数据93存储在HDD 116中。
CPU 111进一步包括:图像接受部分59,用于接受图像;语音接受部分61,用于接受语音;语音识别部分63,用于识别语音以输出字符串;输出设置提取部分65,用于基于字符串提取输出设置;显示屏幕生成部分75,用于生成显示屏幕;发送控制部分79,用于发送所生成的显示屏幕;确认屏幕发送部分67;用户指定部分69,用于指定发出语音的用户;词提取部分71,用于从字符串中提取词;以及计数部分73,用于对所提取的词进行计数。
在通信I/F部分112接收到来自视频会议终端200、200A和200B中的一个的图像数据的情况下,图像接受部分59接受所接收的图像数据和用于标识发送图像数据的视频会议终端200、200A和200B中的一个的设备标识信息。图像接受部分59将所接受的图像数据和设备标识信息输出到显示屏幕生成部分75。这里,图像数据包括运动和静止图像。
在通信I/F部分112接收到来自视频会议终端200、200A和200B中的一个的音频数据的情况下,语音接受部分61接受所接收的音频数据和用于标识发送音频数据的视频会议终端200、200A和200B中的一个的设备标识信息。语音接受部分61将所接受的音频数据和设备标识信息输出到语音识别部分63和用户指定部分69。
当接收到来自语音接受部分61的音频数据时,语音识别部分63基于音频数据执行语音识别,以将语音转换成字符串。语音识别部分63将通过语音的转换而获得的字符串输出到输出设置提取部分65和词提取部分71。
输出设置提取部分65从包括在HDD 116中存储的输出设置表91中的输出设置记录中提取包括与从语音识别部分63输入的字符串的一部分相同的关键词的任何输出设置记录。在已从输出设置表91中提取单个输出设置记录的情况下,输出设置提取部分65将所提取的输出设置记录输出到显示屏幕生成部分75。
在已提取了具有相同关键词的两个或更多个输出设置记录的情况下,输出设置提取部分65参考每个所提取的输出设置记录中的目的地标识信息字段。然后,对于仅在一个所提取的输出设置记录中设置的用户标识信息,输出设置提取部分65选择该用户标识信息和输出设置记录中在目的地标识信息字段中设置有该用户标识信息的一个输出设置记录,并且将所选择的输出设置记录和用户标识信息的集合输出到显示屏幕生成部分75。
例如,在图7中所示的输出设置表被存储在HDD 116中的情况下,输出设置表包括在关键词字段中设置有“展示文件”的五个输出设置记录。因而,通过输出设置提取部分65可以提取在关键词字段中设置有“展示文件”的五个输出设置记录。参考这五个输出设置记录的目的地标识信息字段,“用户A”和“用户B”的每一个对应于仅在五个输出设置记录中的一个中设置的用户标识信息。在该情况下,将用户标识信息“用户A”以及在关键词字段中设置有“展示文件”和在目的地标识信息字段中设置有“用户A、C、D和E”的输出设置的集合输出到显示屏幕生成部分75,并且也将用户标识信息“用户B”以及在关键词字段中设置有“展示文件”和在目的地标识信息字段中设置有“用户B”的输出设置的集合输出到显示屏幕生成部分75。
在已提取了包括相同关键词的两个或更多个输出设置记录的情况下,如上所述,输出设置提取部分65参考所提取的输出设置记录中的目的地标识信息字段。然后,在两个或更多个输出设置记录中设置了相同的用户标识信息的情况下,优先于那些输出设置记录中的在设置者标识信息字段中设置了与目的地标识信息字段中设置的用户标识信息不同的用户标识信息的另一个输出设置记录,输出设置提取部分65提取那些输出设置记录中的在设置者标识信息字段中设置了与目的地标识信息字段中设置的用户标识信息相同的用户标识信息的一个输出设置记录。换句话说,在与会者本人和另一与会者都已设置了关于该与会者的输出设置的情况下,优先于由其他与会者设置的输出设置,选择由与会者本人设置的输出设置。这里,其中在目的地标识信息字段中设置的用户标识信息与在设置者标识信息中设置的用户标识信息相同的输出设置记录被称为“自设置记录”,而其中在目的地标识信息字段中设置的用户标识信息与在设置者标识信息字段中设置的用户标识信息不同的输出设置记录被称为“他人设置记录”。
输出设置提取部分65然后将在两个或更多个输出设置记录的目的地标识信息字段中共同设置的用户标识信息和优先选择的自设置记录的集合输出到显示屏幕生成部分75,并且将在两个或更多个输出设置记录的目的地标识信息字段中共同设置的用户标识信息和他人设置记录的集合输出到确认屏幕发送部分67。
例如,在图7中所示的输出设置表被存储在HDD 116中的情况下,输出设置表包括在关键词字段中设置有“展示文件”的五个输出设置记录,并且用户标识信息“用户C”、“用户D”和“用户E”的每一个在这五个输出设置记录中的两个或更多个的目的地标识信息字段中被共同设置。在这种情况下,优先于在目的地标识信息字段中设置有用户标识信息“用户A、C、D和E”的输出设置记录(即用户C的他人设置记录),选择在目的地标识信息字段和设置者标识信息字段两者中都设置有用户标识信息“用户C”的输出设置记录(即用户C的自设置记录)。然后,将用户标识信息“用户C”和在目的地标识信息字段和设置者标识信息字段两者中都设置有用户标识信息“用户C”的输出设置记录(自设置记录)的集合输出到显示屏幕生成部分75,而将用户标识信息“用户C”和在目的地标识信息字段中设置有用户标识信息“用户A、C、D和E”的输出设置记录(他人设置记录)的集合输出到确认屏幕发送部分67。
类似地,优先于在目的地标识信息字段中设置有用户标识信息“用户A、C、D和E”的输出设置记录(即用户D的他人设置记录),选择在目的地标识信息字段和设置者标识信息字段两者中都设置有用户标识信息“用户D”的输出设置记录(即用户D的自设置记录)。然后,将用户标识信息“用户D”和在目的地标识信息字段和设置者标识信息字段两者中都设置有用户标识信息“用户D”的输出设置记录(自设置记录)的集合输出到显示屏幕生成部分75,而将用户标识信息“用户D”和在目的地标识信息字段中设置有用户标识信息“用户A、C、D和E”的输出设置记录(他人设置记录)的集合输出到确认屏幕发送部分67。
进一步类似地,优先于在目的地标识信息字段中设置有用户标识信息“用户A、C、D和E”的输出设置记录(即用户E的他人设置记录),选择在目的地标识信息字段和设置者标识信息字段两者中都设置有用户标识信息“用户E”的输出设置记录(即用户E的自设置记录)。然后,将用户标识信息“用户E”和在目的地标识信息字段和设置者标识信息字段两者中都设置有用户标识信息“用户E”的输出设置记录(自设置记录)的集合输出到显示屏幕生成部分75,而将用户标识信息“用户E”和在目的地标识信息字段中设置有用户标识信息“用户A、C、D和E”的输出设置记录(他人设置记录)的集合输出到确认屏幕发送部分67。
确认屏幕发送部分67基于从输出设置提取部分65输入的输出设置记录(他人设置记录)生成确认屏幕,并且将所生成的确认屏幕发送到PC 300和300A至300D中的由通过从输出设置提取部分65输入的用户标识信息标识的用户所操作的PC。确认屏幕用于确认是否显示依据另一与会者设置的输出而生成的显示屏幕来替代依据与会者本人设置的输出设置而生成的显示屏幕。
具体地,另一与会者参考由在从输出设置提取部分65输入的输出设置记录的设置者标识信息字段中设置的用户标识信息所指定的与会者。确认屏幕包括在从输出设置提取部分65输入的输出设置记录的设置者标识信息字段中设置的用户标识信息,并且进一步包括:询问是否将显示屏幕切换到依据由该用户标识信息指定的与会者设置的输出设置而生成的显示屏幕、用于接受允许切换屏幕的指令的批准按钮以及用于接受不允许切换屏幕的指令的不批准按钮。
确认屏幕发送部分67使用从输出设置提取部分65输入的用户标识信息来搜索存储在HDD 116中的用户数据95,以便指定PC 300和300A至300D中由通过从输出设置提取部分65输入的用户标识信息标识的用户所操作的PC。这里,指定由“用户C”操作PC 300B、由“用户D”操作PC 300C、以及由“用户E”操作PC 300D。然后,确认屏幕发送部分67经由通信I/F部分112将所生成的确认屏幕发送到所指定的PC 300B、300C和300D,并且进而在所指定的PC 300B、300C和300D的每一个中的显示部分306上显示确认屏幕。当与会者中正在查看确认屏幕的一个与会者(用户C、D或E)指定允许将屏幕切换到依据由另一与会者(在该情况下为用户B)设置的输出设置生成的显示屏幕的批准按钮时,相应的PC返回使能信号到MFP 100。当与会者指定不批准按钮时,PC返回禁用信号到MFP 100。
在确认屏幕发送部分67接收到来自PC 300B、300C和300D中对其发送确认屏幕的PC的使能信号时,确认屏幕发送部分67将切换指令和正操作PC300B、300C和300D中从其接收到使能信号的PC的用户的用户标识信息输出到输出设置提取部分65。
在接收到来自确认屏幕发送部分67的用户标识信息和切换指令之后,输出设置提取部分65将用户标识信息和与该用户标识信息相对应的他人设置记录的集合输出到显示屏幕生成部分75。在上述示例中,当用户C已指定批准按钮时,将用户标识信息“用户C”和在目的地标识信息字段中设置有用户标识信息“用户A、C、D和E”的输出设置记录(他人设置记录)的集合输出到显示屏幕生成部分75。当用户D已指定批准按钮时,将用户标识信息“用户D”和在目的地标识信息字段中设置有用户标识信息“用户A、C、D和E”的输出设置记录(他人设置记录)的集合输出到显示屏幕生成部分75。当用户E已指定批准按钮时,将用户标识信息“用户E”和在目的地标识信息字段中设置有用户标识信息“用户A、C、D和E”的输出设置记录(他人设置记录)的集合输出到显示屏幕生成部分75。
显示屏幕生成部分75接收来自图像接受部分59的图像数据,并且生成包括图像数据的显示屏幕以及将所生成的显示屏幕输出到发送控制部分79。发送控制部分79搜索存储在HDD 116中的用户数据95,以便指定由与会者操作的所有PC 300和300A至300D的设备标识信息,并且将所有指定的设备标识信息和显示屏幕输出到通信I/F部分112,以使其将显示屏幕发送到通过设备标识信息指定的PC 300和300A至300D中的每一个。
图8示出了显示屏幕的示例。参考图8,显示屏幕401包括通过拾取会议室B内的图像而获取的视频图像。显示屏幕401示出在会议室A中安装的PC 300上显示的屏幕。其与显示在视频会议终端200上的屏幕相同。
返回图6,在从输出设置提取部分65输入仅一个输出设置记录的情况下,显示屏幕生成部分75依据该输出设置记录生成显示屏幕,并且将所生成的显示屏幕和在输出设置记录的目的地标识信息字段中设置的用户标识信息输出到发送控制部分79。这里,由显示屏幕生成部分79依据输出设置记录生成的显示屏幕被特定地称为“定制显示屏幕”。具体地,显示屏幕生成部分75通过在输出设置记录的方法字段中设置的方法生成包括在输出设置记录的内容字段中设置的数据的图像的定制显示屏幕,并且将定制显示屏幕与在输出设置记录的目的地标识信息字段中设置的用户标识信息一起输出到发送控制部分79。
例如,假定图7中所示的输出设置表被存储在HDD 116中,并且通过输出设置提取部分65提取在关键词字段中包括“用户B”的输出设置记录。在该情况下,将在关键词字段中包括“用户B”的输出设置记录输入到显示屏幕生成部分75。在该输出设置记录中,在内容字段中设置了“展示文件”和“用户B处的图像”,并且在方法字段中设置了“屏幕分隔”。因而,生成定制显示屏幕以便包括:作为由通过在设置者标识信息字段中设置的用户标识信息“用户A”标识的与会者预先存储在HDD 116中的对象数据93的“展示文件”的图像;以及通过用户标识信息“用户B”标识的与会者所位于的会议室B内的图像,即由图像接受部分59从视频会议终端200A接收的视频数据的图像。该定制显示屏幕被划分成两个区域,其中分别显示“展示文件”的图像和用户B所位于的会议室B的图像。
此外,在输出设置记录中,在目的地标识信息字段中设置“用户A”,因此,将用户标识信息“用户A”和定制显示屏幕输出到发送控制部分79。
另一方面,在从输出设置提取部分65输入了输出设置记录和用户标识信息的集合的情况下,显示屏幕生成部分75依据输出设置记录生成定制显示屏幕,并且将所生成的定制显示屏幕与所输入的用户标识信息一起发送到发送控制部分79。具体地,显示屏幕生成部分75通过在输出设置记录的方法字段中设置的方法而生成包括在输出设置记录的内容字段中设置的数据的图像的显示屏幕,并且将定制显示屏幕和从输出设置提取部分65输入的用户标识信息输出到发送控制部分79。
发送控制部分79使用从显示屏幕生成部分75输入的用户标识信息来搜索存储在HDD 116中的用户数据95,以便提取包括用户标识信息的用户数据,并且因而指定由通过该用户标识信息指定的用户所操作的PC的设备标识信息。发送控制部分79将所指定的设备标识信息和显示屏幕输出到通信I/F部分112,以使其将定制显示屏幕发送到由设备标识信息指定的PC。
图9示出了定制显示屏幕的示例。图9中所示的定制显示屏幕411在提取在关键词字段中包括“用户B”的输出设置记录的情况下被显示在由用户A操作的PC 300上。参考图9,定制显示屏幕411包括区域413和区域415。在区域413中,显示示出用户B所位于的会议室B内的图像,即图像接受部分59从视频会议终端200A接收的视频数据的图像。在区域415中,显示预先存储在HDD 116中的对象数据93中具有文件名称“展示文件”的对象数据93的图像。尽管在图中的区域413中示出字符“展示文件”,但是实际上在其中显示对象数据93的图像。
图10示出了定制显示屏幕的另一示例。图10中所示的定制显示屏幕421在提取在关键词字段中包括“展示文件”的多个输出设置记录的情况下被显示在由用户C操作的PC 300B上。该定制显示屏幕421是基于由用户C所设置的输出设置而生成的显示屏幕。参考图10,定制显示屏幕421包括区域423和区域425。在区域423中,显示预先存储在HDD 116中的对象数据93中具有文件名称“展示文件”的对象数据93的图像。在区域425中,显示预先存储在HDD 116中的对象数据93中具有文件名称“展示议程”的对象数据93的图像。尽管在图中的各区域423和425中示出字符“展示文件”和“展示议程”,但是实际上在各区域中显示具有文件名称“展示文件”和“展示议程”的对象数据93的图像。
图11示出了确认屏幕的示例。在图10中所示的定制显示屏幕被显示在由用户C操作的PC 300B上之后,显示图11所示的确认屏幕。参考图11,确认屏幕430被显示为叠加在图10所示的定制显示屏幕421上。确认屏幕430包括消息“使能用户B所设置的设置?”、在其上显示有“OK”的批准按钮和在其上显示有“NO”的不批准按钮。当用户C指定批准按钮时,显示被切换到基于用户B设置的输出设置而生成的定制显示屏幕。
图12示出了定制显示屏幕的另一示例。在图11中所示的确认屏幕中指定批准按钮的情况下显示图12中所示的定制显示屏幕441。该定制显示屏幕441是基于用户B设置的输出设置而生成的显示屏幕。参考图12,定制显示屏幕441包括区域423和区域443。在区域423中,显示预先存储在HDD 116中的对象数据93中具有文件名称“展示文件”的对象数据93的图像。在区域443中,显示预先存储在HDD 116中的对象数据93中具有文件名称“展示补充文件”的对象数据93的图像。尽管在图中的各区域423和443中示出了字符“展示文件”和“展示补充文件”,但是实际上在各区域中显示具有文件名称“展示文件”和“展示补充文件”的对象数据93的图像。
参考图6,当接收到来自语音接收部分61的音频数据时,用户指定部分69基于音频数据执行语音识别,以便指定发出该语音的用户。预先将所有与会者的声波纹数据存储在HDD 116中,并且将语音的音频数据与声波纹数据进行比较,从而指定用户。用户指定部分69将所指定的用户的用户标识信息输出到计数部分73。
词提取部分71从自语音识别部分63输入的字符串中提取词,并且将所提取的词输出到计数部分73。可以预先确定词。计数部分73将从用户指定部分69输入的用户标识信息和从词提取部分71输入的词的集合存储在HDD116中所存储的关键词表97中。关键词表将词与每条用户标识信息相关联。在从词提取部分71输入的词未与从用户指定部分69输入的用户标识信息相关联地存储在关键词表97中的情况下,计数部分73额外地存储该词,而如果从词提取部分71输入的词已被存储在关键词表97中,则不存储该词。
此外,计数部分73相对于从用户指定部分69输入的用户标识信息对从词提取部分71输入相同词的次数进行计数。具体地,计数部分73将包括针对每个用户标识信息和针对每个词的计数器的累积数据存储在HDD 116中,并且当从词提取部分71输入词时,计数部分73对与从用户指定部分69输入的用户标识信息和从词提取部分71输入的词相对应的计数器递增1。
此外,计数部分73预先将累积条件表98存储在HDD 116中,其定义了用于每个用户的检测条件。当存在累积数据99中的计数器值超过检测条件的词时,计数部分73将该词作为意向数据、与用户标识信息一起输出到现在将描述的添加部分77。
添加部分77被包括在显示屏幕生成部分75中。当接收到来自计数部分73的意向数据时,添加部分77将作为从计数部分73输入的意向数据的词的字符串添加到要被输出到发送控制部分79的所有显示屏幕。例如,在用户A演讲期间,用户A所发出的语音经过语音识别,并且对从结果字符串提取的词进行计数。然后,在对某个词的计数器值满足预定检测条件的情况下,将满足检测条件的词添加到被提供给与会者的显示屏幕。被用户A重复发出的词可能具有重要的含义。在PC 300和300A至300D上的显示屏幕上显示该词可以有助于与会者理解用户A的演讲的内容。此外,在与会者没有理解用户A的演讲的情况下,与会者可以能够通过查看正显示在显示屏幕上的词来容易地理解用户A的演讲的内容。
图13示出了关键词表的示例。参考图13,关键词表将词与每个用户标识信息相关联。这里,关键词表包括具有用户标识信息和词的关键词记录。关键词记录包括字段“用户标识信息”和“关键词1”至“关键词n”(其中n是正整数)。具体地,对于展示者的用户标识信息“用户A”,词“问题”、“用户A”、...、“结束”与其相关联。对于负责基金管理的与会者的用户标识信息“用户B”,词“成本”、“金钱”、...、“合同”与其相关联。
图14示出了累积数据的示例。参考图14,累积数据将每个词与用于每条用户标识信息的计数器值相关联。具体地,对于用户标识信息“用户A”,将词“用户A”、“问题”、和“开始”分别与计数器值“20”、“10”和“2”相关联。对于用户标识信息“用户B”,将词“金钱”、“成本”和“批准”分别与计数器值“600”、“600”和“40”相关联。
图15示出了累积条件表的示例。参考图15,累积条件表定义了会议的数目和每个用户的检测条件。会议的数目指示用户已参加多少会议。例如,每次用户登录到MFP 100时,对会议的数目计数增加。检测条件包括检测的次数和检测标准。检测的次数指示阈值,并且检测标准确定根据包括在累积数据中的计数器值计算用于检测的值的方式。具体地,对于用户标识信息“用户A”,会议的数目被设置为“2”,检测的次数被设置为“5”,并且检测标准被设置为“平均次数”。因而,每个会议发言的平均次数是5或更多的任何词满足检测条件。利用被设置为“2”的会议次数,在累积数据中与用户标识信息“用户A”相关联的词中具有计数器值10或更多的任何词满足检测条件。在图14中所示的累积数据中,词“用户A”和“问题”满足检测条件。
图16示出了添加有意向数据的显示屏幕的示例。图16示出了在通过用户标识信息“用户B”标识的用户正在发言期间在图8中所示的显示屏幕上显示意向数据的情况。图16中所示的显示屏幕包括在图8中所示的显示屏幕的下部中的字符串“意向数据:成本”。这允许查看显示屏幕的用户A知道用户B的发言的内容与成本相关。
图17至19和图21是图示中继过程的流程的示例的流程图。当包括在MFP 100中的CPU 111执行图像发送程序时,CPU 111执行中继过程。参考图17,CPU 111确定是否已接受与会者的登录(步骤S01)。当通信I/F部分112接收到来自PC 300和300A至300D中的任何一个的用户标识信息时,接受登录。如果已接受登录,则过程进行到步骤S02;否则,过程进行到步骤S12。在步骤S02中,获取从通信I/F部分112接收的用户标识信息。然后,获取用于标识已发送了用户标识信息的PC 300和300A至300D中的一个的设备标识信息(步骤S03)。
在步骤S04,确定是否已接收到对象数据。具体地,确定通信I/F部分112是否已从由在步骤S03中获取的设备标识信息指定的PC 300和300A至300D中的一个接收到对象数据。如果已接收到对象数据,则过程进行到步骤S05;否则,过程跳过步骤S05而进行到步骤S06。在步骤S05中,所接收的对象数据与在步骤S02中接收的用户标识信息相关联地存储在HDD 116中。
在步骤S06中,生成显示屏幕,其包括从视频会议终端200、200A和200B中的一个输入的图像。然后,所生成的显示屏幕被发送到PC 300和300A至300D中通过在步骤S03中获取的设备标识信息所指定的PC(步骤S07)。
在步骤S08中,生成包括在步骤S02中获取的用户标识信息和在步骤S03中获取的设备标识信息的用户数据,并且所生成的用户数据被存储在HDD116中(步骤S09)。接下来,确定是否已接收到输出设置(步骤S10)。具体地,确定通信I/F部分112是否已从PC 300和300A至300D中由在步骤S03中获取的设备标识信息指定的PC接收到输出设置。如果已接收到输出设置,则过程进行到步骤S11;否则,过程跳过步骤S11而进行到步骤S12。在步骤S11中,生成将所接收的输出设置与在步骤S02中接收的用户标识信息相关联的输出设置记录,并且额外地将其存储在HDD 116中储存的输出设置表91中。然后过程进行到步骤S12。
参考图18,在步骤S12中,读取出被包括在在HDD 116中存储的输出设置表91中的输出设置。然后,提取在所读取的输出设置中的关键词字段中设置的关键词(步骤S13)。将所提取的关键词暂时存储在RAM 114中。
从视频会议终端200、200A和200B中的任一个输入的音频数据的语音经历语音识别(步骤S14),使得获得字符串(步骤S15)。接下来,使用在步骤S13中提取的关键词来搜索所获取的字符串,并且确定在该字符串内是否检测到关键词(步骤S16)。在步骤S13中已提取两个或更多个关键词的情况下,使用每个关键词来进行搜索。如果已检测到关键词,则过程进行到步骤S17;否则,过程进行到步骤S33。
在步骤S17中,根据在步骤S12中读取的输出设置,提取包括在步骤S16中从字符串检测到的关键词的任意输出设置。然后确定是否已提取两个或更多个输出设置(步骤S18)。如果已提取了两个或更多个输出设置,则过程进行到步骤S24;否则,过程进行到步骤S19。
在步骤S19中,获取通过在所提取的输出设置的内容字段中设置的数据标识信息指定的内容。内容可以包括从视频会议终端200、200A和200B输入的图像以及在S05中存储在HDD 116中的对象数据93。接下来,通过在所提取的输出设置的方法字段中设置的方法生成用于显示所获取的内容的定制显示屏幕(步骤S20)。
在下面的步骤S21中,指定向其发送定制显示屏幕的用户。具体地,指定在步骤S17中提取的输出设置的目的地标识信息字段中设置的用户标识信息。接下来,指定目的地设备(步骤S22)。具体地,将与通过存储在HDD 116中的用户数据95在步骤S21中指定的用户标识信息相关联的设备标识信息相对应的设备指定为目的地设备。在其中在输出设置的目的地标识信息字段中设置两条或更多条用户标识信息的情况下,指定与和多条用户标识信息分别相关联的多条设备标识信息相对应的多个设备。
在下面的步骤S23中,将要被发送到在步骤S22中指定的目的地设备的显示屏幕被切换到在步骤S20中生成的定制显示设备,并且过程进行到步骤S33。
在其中在步骤S18中已提取了包括相同关键词的多个输出设置的情况下,过程从步骤S18进行到步骤S24。参考图19,在步骤S24中,将在多个输出设置的目的地标识信息字段中设置的多条用户标识信息中的一条选择为处理目标。
然后确定是否存在其中在目的地标识信息字段中设置了被选择为处理目标的用户标识信息的两个或更多个输出设置(步骤S25)。如果存在两个或更多个这样的输出设置,则过程进行到步骤S26;否则,过程进行到步骤S28。
在步骤S28中,指定其中在目的地标识信息字段中设置被选择为处理目标的用户标识信息的单个输出设置。然后,获取通过在所指定的输出设置的内容字段中设置的数据标识信息指定的内容(步骤S29)。然后,通过在所指定的输出设置的方法字段中设置的方法生成用于显示所获取的内容的定制显示屏幕(步骤S30)。
在下面的步骤S31中,指定向其发送定制显示屏幕的设备。具体地,将在存储在HDD 116中的用户数据95中的与和在步骤S24中被选择为处理目标的用户标识信息相关联的设备标识信息相对应的设备指定为目的地设备。在下面的步骤S32中,要被发送到在步骤S31中指定的目的地设备的显示屏幕被切换到在步骤S30中生成的定制显示屏幕,并且过程进行到步骤S33。
另一方面,在步骤S26中,执行冲突处理过程,并且过程进行到步骤S27。下面将描述冲突处理过程。在步骤S27中,确定是否存在还要被选择为处理目标的任何其它条用户标识信息。如果存在还没有被选择的用户标识信息,则过程返回到步骤S24;否则,过程进行到步骤S33。
图20是图示冲突处理过程的流程的示例的流程图。在图19的步骤S26中执行冲突处理过程。在以下的情况下执行冲突处理过程:其中,已提取了多个输出设置,在图19的步骤S24中已将用户标识信息选择为处理目标,并且存在其中在目的地标识信息字段中设置了该用户标识信息的两个或更多个输出设置。
参考图20,在步骤S61中,确定已提取的输出设置是否包括其中在设置者标识信息字段中设置了被选择为处理目标的用户标识信息的任何输出设置。在设置者标识信息字段中包括被选择为处理目标的用户标识信息的输出设置是已由通过用户标识信息标识的用户所设置的输出设置。如果存在这样的输出设置,则过程进行到步骤S62;否则,过程进行到步骤S69。在步骤S62中,选择其中在设置者标识信息字段中设置了被选择为处理目标的用户标识信息的输出设置,并且过程进行到步骤S63。
在步骤S63中,获取通过在步骤S62中选择的输出设置的内容字段中设置的数据标识信息所指定的内容。接下来,通过在所选择的输出设置的方法字段中设置的方法来生成用于显示所获取的内容的定制显示屏幕(步骤S64)。
在下面的步骤S65中,指定要向其发送定制显示屏幕的设备。具体地,将通过存储在HDD 116中的用户数据95与和被选择为处理目标的用户标识信息相关联的设备标识信息相对应的设备指定为目的地设备。在下面的步骤S66中,要被发送到在步骤S65中指定的目的地设备的显示屏幕被切换到在步骤S64中生成的定制显示屏幕,并且过程进行到步骤S67。
在步骤S67中,确认屏幕被发送到在步骤S65中指定的目的地设备,并且过程进行到步骤S68。确认屏幕是用于询问是否将显示切换到依据由另一与会者设置的输出设置而生成的显示屏幕的屏幕。已接收到确认屏幕的目的地设备显示确认屏幕,并且当与会者允许切换屏幕时返回使能信号,而当与会者不允许切换屏幕时返回禁止信号。
在步骤S68中,确定正在操作目的地设备的与会者是否已允许切换显示屏幕。当接收到使能信号时,确定已允许切换,而当接收到禁止信号时,确定还不允许切换。如果已允许切换,则过程进行到步骤S69;否则,过程返回到中继过程。
在步骤S69中,选择在设置者标识信息字段中不包括被选择为处理目标的用户标识信息的输出设置,并且过程进行到步骤S70。在下面的步骤S70中,获取由在步骤S69中选择的输出设置的内容字段中设置的数据标识信息所指定的内容。接下来,通过在所选择的输出设置的方法字段中设置的方法来生成用于显示所获取的内容的定制显示屏幕(步骤S71)。
在下面的步骤S72中,指定要向其发送定制显示屏幕的设备。具体地,将通过存储在HDD 116中的用户数据95与和被选择为处理目标的用户标识信息相关联的设备标识信息相对应的设备指定为目的地设备。在下面的步骤S73中,要被发送到在步骤S72中指定的目的地设备的显示屏幕被切换到在步骤S71中生成的定制显示屏幕,并且过程返回到中继过程。
参考图21,在步骤S33中,基于从视频会议终端200、200A和200B中的任何一个输入的音频数据,区分正在发言的用户。然后,音频数据的语音经历语音识别,以便从作为语音识别的结果而获得的字符串中提取词(步骤S34)。然后,使用在步骤S33中区分的用户的用户标识信息和在步骤S34中提取的词来更新存储在HDD 116中的关键词表97(步骤S35),并且还更新HDD 116中的累积数据99(步骤S36)。
接下来,读取出存储在HDD 116中的累积条件表98(步骤S37),并且确定在步骤S34中从语音中提取的词是否满足在累积条件表98中包括的检测条件(步骤S38)。如果词满足检测条件,则过程进行到步骤S39;否则,过程进行到步骤S41。
在步骤S39中,词被添加到由在步骤S01中登录的与会者操作的PC的所有显示屏幕。这里,显示屏幕包括定制显示屏幕。要被发送到与会者的显示屏幕被切换到添加了词的显示屏幕(步骤S40),并且过程进行到步骤S41。注意,可以将词仅添加到由在步骤S33中区分的用户所操作的PC的显示屏幕。在这种情况下,添加了词的显示屏幕仅被发送到由在步骤S33中区分的用户所操作的PC。
在步骤S41中,确定会议是否结束。如果会议已结束,则过程终止;否则,过程返回到步骤S01。在从视频会议终端200、200A和200B中的任何一个接收到指示会议结束的信号的情况下,确定会议已结束。
如上所述,根据本实施例的MFP 100对与会者对会议进行的发言执行语音识别,并且响应于已语音识别出与会者对会议做出包括在由预先注册到输出设置中的关键词,其依据包括该关键词的输出设置生成定制显示屏幕,并且将定制显示屏幕发送到由通过在输出设置中包括的目的地标识信息指定的用户所操作的PC。这允许依据多个与会者所讲的发言来切换显示在分别由多个与会者操作的PC上的屏幕。结果,屏幕可以与会议的进展相对应地自动切换到适当的屏幕。
在提取了包括相同关键词和相同目的地标识信息的两个或更多个输出设置的情况下,优先于其它输出设置而选择其中设置者标识信息和目的地标识信息彼此相同的输出设置(即自设置记录),并且发送依据该输出设置生成的定制显示屏幕。这确保优先于由另一与会者设置的输出设置而选择由与会者本人设置的输出设置。
此外,在提取了包括相同关键词和相同目的地标识信息的两个或更多个输出设置的情况下,确认屏幕被发送到由在目的地标识信息字段中设置的用户标识信息指定的用户,并且在允许发送的条件下,发送依据其中在设置者标识信息字段中设置的用户标识信息与在目的地标识信息字段中设置的用户标识信息不同的输出设置(即他人设置记录)而生成的定制显示屏幕。这允许显示依据由另一与会者设置的输出设置而生成的定制显示屏幕。
发送用于询问是否显示依据由另一与会者设置的输出设置而生成的定制显示屏幕的确认屏幕,以使得能够确认与会者的意图。
而且,MFP 100指定已发出语音的用户并且从自语音转换的字符串中提取词。然后,响应于至少已经以满足检测条件的频率发出的所提取的词中的任何一个的事件,MFP 100将该词添加到显示屏幕。显示在用户的发言中频繁重复的词,这可以提供有助于理解发言的内容的信息。
尽管在上述实施例中已描述了作为图像发送装置的MFP 100,但是当然能够理解本发明作为用于执行图17至图21中所示的过程的图像发送方法、或作为用于使得计算机执行该图像发送方法的图像发送程序。
经过已详细描述和图示了本发明,但是能够清楚地理解其是以说明的方式并且仅作为示例,而且不是用于限制,本发明的精神和范围仅通过所附权利要求来限定。
Claims (10)
1.一种图像发送装置,包括:
接受部分,用于接受图像和语音;
语音识别部分,用于识别所述所接受的语音;
屏幕生成部分,用于响应于所述语音识别部分识别出在预定输出设置中包括关键词的事件,依据所述输出设置生成显示屏幕,所述显示屏幕包括所述所接受的图像和独立于所述所接受的图像的预先存储的目标数据的图像中的至少一个;以及
发送控制部分,用于依据所述输出设置向分别由多个用户操作的多个计算机中的至少一个发送所述所生成的显示屏幕,
其中,所述输出设置包括:设置者标识信息,用于标识所述多个用户中已设置所述输出设置的用户;以及目的地标识信息,用于标识所述多个用户中要向其发送所述显示屏幕的至少一个用户。
2.根据权利要求1所述的图像发送装置,其中,
所述图像发送装置进一步包括提取部分,用于从多个所述输出设置中提取包括与由所述语音识别部分获取的字符串的一部分相同的关键词的任何输出设置,其中
在提取了包括相同目的地标识信息的多个输出设置的情况下,所述发送控制部分发送依据所述输出设置中的所述设置者标识信息与目的地标识信息相同的输出设置而生成的所述显示屏幕。
3.根据权利要求2所述的图像发送装置,其中,在提取了包括相同目的地标识信息的多个输出设置的情况下,在由所述目的地标识信息指定的用户允许发送显示屏幕的情况下,所述发送控制部分发送依据所述输出设置中的所述设置者标识信息与目的地标识信息不同的输出设置而生成的所述显示屏幕。
4.根据权利要求3所述的图像发送装置,其中,所述发送控制部分包括确认部分,其向由通过所述目的地标识信息指定的用户操作的计算机发送确认屏幕,用于询问是否显示依据其中所述设置者标识信息与目的地标识信息不同的输出设置而生成的所述显示屏幕。
5.根据权利要求1所述的图像发送装置,进一步包括:
用户指定部分,用于指定所述多个用户中的已发出所述所接受的语音的用户;
提取部分,用于从由所述语音识别部分自所述语音中转换的字符串中提取词;以及
计数部分,用于针对每一个所述所指定的用户对所述所提取的词进行计数;其中
所述屏幕生成部分包括添加部分,在所述所提取的词中的任何一个的发出次数等于或大于预定频率的情况下,该添加部分将所述词添加到被发送到分别由所述多个用户操作的多个计算机中的至少一个。
6.一种图像发送方法,包括步骤:
接受图像和语音;
识别所述所接受的语音;
响应于在所述识别步骤中识别出在预定输出设置中包括关键词的事件,依据所述输出设置生成显示屏幕,所述显示屏幕包括所述所接受的图像和独立于所接受的图像的预先存储的目标数据的图像中的至少一个;以及
依据所述输出设置向分别由多个用户操作的多个计算机中的至少一个发送所述所生成的显示屏幕,
其中,所述输出设置包括:设置者标识信息,用于标识所述多个用户中已设置所述输出设置的用户;以及目的地标识信息,用于标识要向其发送所述显示屏幕的所述多个用户中的至少一个。
7.根据权利要求6所述的图像发送方法,其中,
所述图像发送方法进一步包括步骤:从多个所述输出设置中提取包括与在所述识别步骤中获取的字符串的一部分相同的关键词的任何输出设置,其中
所述发送步骤包括第一发送步骤,即在提取了包括相同目的地标识信息的多个输出设置的情况下,发送依据所述输出设置中的所述设置者标识信息与目的地标识信息相同的输出设置而生成的所述显示屏幕。
8.根据权利要求7所述的图像发送方法,其中,所述发送步骤包括第二发送步骤,即在提取了包括相同目的地标识信息的多个输出设置的情况下,在由所述目的地标识信息指定的用户允许发送显示屏幕的条件下,发送依据所述输出设置中的所述设置者标识信息与目的地标识信息不同的输出设置而生成的所述显示屏幕。
9.根据权利要求8所述的图像发送方法,其中,所述发送步骤包括第三发送步骤,即向由通过所述目的地标识信息指定的用户所操作的计算机发送确认屏幕,用于询问是否显示依据其中所述设置者标识信息与所述目的地标识信息不同的输出设置而生成的所述显示屏幕。
10.根据权利要求6所述的图像发送方法,进一步包括步骤:
指定所述多个用户中已发出所述所接受的语音的用户;
从在所述识别步骤中自所述语音中转换的字符串中提取词;以及
针对每一个所述所指定的用户对所述所提取的词进行计数;其中
所述生成步骤包括以下步骤:在所提取的词中的任何一个的发出次数等于或大于预定频率的情况下,将所述词添加到被发送到分别由所述多个用户操作的多个计算机中的至少一个的显示屏幕。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP213158/09 | 2009-09-15 | ||
JP2009213158A JP5223824B2 (ja) | 2009-09-15 | 2009-09-15 | 画像送信装置、画像送信方法および画像送信プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102025968A CN102025968A (zh) | 2011-04-20 |
CN102025968B true CN102025968B (zh) | 2014-09-10 |
Family
ID=43731403
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201010283074.2A Active CN102025968B (zh) | 2009-09-15 | 2010-09-15 | 图像发送装置和图像发送方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US8615395B2 (zh) |
JP (1) | JP5223824B2 (zh) |
CN (1) | CN102025968B (zh) |
Families Citing this family (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101990536B1 (ko) * | 2012-11-02 | 2019-06-18 | 삼성전자주식회사 | 영상 통화 수행 시 사용자들의 관심 정보를 제공하는 정보 제공 방법 및 이를 적용한 전자 장치 |
CN103607556B (zh) * | 2013-11-25 | 2017-06-13 | 广东威创视讯科技股份有限公司 | 视频会议系统及其实现方法 |
US9779756B2 (en) * | 2015-12-11 | 2017-10-03 | International Business Machines Corporation | Method and system for indicating a spoken word has likely been misunderstood by a listener |
US10424297B1 (en) * | 2017-02-02 | 2019-09-24 | Mitel Networks, Inc. | Voice command processing for conferencing |
US10360916B2 (en) | 2017-02-22 | 2019-07-23 | Plantronics, Inc. | Enhanced voiceprint authentication |
CN106982309B (zh) * | 2017-03-30 | 2020-04-21 | 理光图像技术(上海)有限公司 | 图像收发装置以及图像收发系统 |
CN108534187A (zh) * | 2018-03-08 | 2018-09-14 | 新智数字科技有限公司 | 一种控制燃气灶的方法及装置、一种燃气灶 |
JP6973232B2 (ja) * | 2018-03-27 | 2021-11-24 | コニカミノルタ株式会社 | サーバー、画像処理装置、カスタム画面表示方法およびカスタム画面表示プログラム |
CN108922530A (zh) * | 2018-07-23 | 2018-11-30 | 广州维纳斯家居股份有限公司 | 智能升降桌会议记录方法、装置、智能升降桌及存储介质 |
JP7159746B2 (ja) * | 2018-09-25 | 2022-10-25 | 京セラドキュメントソリューションズ株式会社 | 情報処理システム、情報処理方法 |
JP2020123817A (ja) * | 2019-01-30 | 2020-08-13 | シャープ株式会社 | 画像形成システム、画像形成装置、画像形成方法及びプログラム |
JP7159892B2 (ja) * | 2019-02-04 | 2022-10-25 | コニカミノルタ株式会社 | 画像形成装置、画像形成システム、および情報処理方法 |
JP7415350B2 (ja) * | 2019-07-08 | 2024-01-17 | コニカミノルタ株式会社 | 音声操作システム、制御装置、および制御プログラム |
CN110602432B (zh) * | 2019-08-23 | 2021-01-26 | 苏州米龙信息科技有限公司 | 基于生物识别的会议系统及会议数据传输方法 |
JP7363425B2 (ja) * | 2019-12-03 | 2023-10-18 | セイコーエプソン株式会社 | プログラム、情報処理装置の制御方法、および画像処理システム |
US20230069287A1 (en) * | 2020-02-27 | 2023-03-02 | Nec Corporation | Server device, conference assistance system, conference assistance method, and non-transitory computer readable storage medium |
US11368653B1 (en) * | 2021-03-17 | 2022-06-21 | Ampula Inc. | Projection-type video conference device |
CN117640861A (zh) * | 2022-08-16 | 2024-03-01 | 华为技术有限公司 | 一种导播控制方法及装置 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101340544A (zh) * | 2008-08-11 | 2009-01-07 | 北京中星微电子有限公司 | 一种远程控制方法及装置 |
CN101365033A (zh) * | 2007-08-08 | 2009-02-11 | 柯尼卡美能达商用科技株式会社 | 会议系统、数据处理设备和数据输出方法 |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09331385A (ja) * | 1996-06-12 | 1997-12-22 | Hitachi Ltd | 音声画像通信システムおよび画像情報検索システム |
JP2000032422A (ja) | 1998-07-08 | 2000-01-28 | Nec Corp | 画像伝送装置 |
JP2000341659A (ja) * | 1999-05-31 | 2000-12-08 | Toshiba Corp | リモートプレゼンテーションシステム、処理装置、及び記録媒体 |
WO2004006475A2 (en) * | 2002-07-04 | 2004-01-15 | Nokia Corporation | Managing a packet switched conference call |
US6839417B2 (en) * | 2002-09-10 | 2005-01-04 | Myriad Entertainment, Inc. | Method and apparatus for improved conference call management |
US6931113B2 (en) * | 2002-11-08 | 2005-08-16 | Verizon Services Corp. | Facilitation of a conference call |
JP2004336358A (ja) * | 2003-05-07 | 2004-11-25 | Ricoh Co Ltd | ファクシミリシステム |
US20050131931A1 (en) * | 2003-12-11 | 2005-06-16 | Sanyo Electric Co., Ltd. | Abstract generation method and program product |
JP2005197945A (ja) | 2004-01-06 | 2005-07-21 | Tietech Co Ltd | テレビ会議システム |
JP2005266980A (ja) * | 2004-03-16 | 2005-09-29 | Fuji Xerox Co Ltd | 情報処理装置及び情報処理方法、並びにコンピュータ・プログラム |
KR100652672B1 (ko) * | 2004-09-20 | 2006-12-06 | 엘지전자 주식회사 | 이동 통신 단말기의 시력 검사 장치와 방법 및 시력에따른 글자 크기 변경 방법 |
US20070106724A1 (en) | 2005-11-04 | 2007-05-10 | Gorti Sreenivasa R | Enhanced IP conferencing service |
JP4466572B2 (ja) | 2006-01-16 | 2010-05-26 | コニカミノルタビジネステクノロジーズ株式会社 | 画像形成装置、音声コマンド実行プログラムおよび音声コマンド実行方法 |
JP2008147921A (ja) | 2006-12-08 | 2008-06-26 | Yamaha Corp | テレビ会議装置 |
US8503653B2 (en) * | 2008-03-03 | 2013-08-06 | Alcatel Lucent | Method and apparatus for active speaker selection using microphone arrays and speaker recognition |
KR101462930B1 (ko) * | 2008-04-30 | 2014-11-19 | 엘지전자 주식회사 | 이동 단말기 및 그 화상통화 제어방법 |
US8037070B2 (en) * | 2008-06-25 | 2011-10-11 | Yahoo! Inc. | Background contextual conversational search |
-
2009
- 2009-09-15 JP JP2009213158A patent/JP5223824B2/ja not_active Expired - Fee Related
-
2010
- 2010-09-13 US US12/880,864 patent/US8615395B2/en active Active
- 2010-09-15 CN CN201010283074.2A patent/CN102025968B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101365033A (zh) * | 2007-08-08 | 2009-02-11 | 柯尼卡美能达商用科技株式会社 | 会议系统、数据处理设备和数据输出方法 |
CN101340544A (zh) * | 2008-08-11 | 2009-01-07 | 北京中星微电子有限公司 | 一种远程控制方法及装置 |
Non-Patent Citations (2)
Title |
---|
JP特开2000-32422A 2000.01.28 |
JP特开2004-336358A 2004.11.25 |
Also Published As
Publication number | Publication date |
---|---|
US8615395B2 (en) | 2013-12-24 |
JP5223824B2 (ja) | 2013-06-26 |
JP2011065237A (ja) | 2011-03-31 |
CN102025968A (zh) | 2011-04-20 |
US20110066435A1 (en) | 2011-03-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102025968B (zh) | 图像发送装置和图像发送方法 | |
JP6024848B1 (ja) | 情報処理装置及びプログラム | |
JP6090511B1 (ja) | 端末装置及びプログラム | |
JP5146479B2 (ja) | 文書管理装置、文書管理方法、文書管理プログラム | |
JP2003052032A (ja) | 情報配信システム及び情報配信方法、情報供給装置及び情報供給方法 | |
JP7130929B2 (ja) | 情報処理装置、プログラム及び制御方法 | |
JP7106827B2 (ja) | 情報処理装置、プログラム及び制御方法 | |
JP6889360B2 (ja) | 管理装置、画像作成印刷装置、管理装置の制御方法、画像作成印刷装置の制御方法、制御プログラム、および記録媒体 | |
CN102549543A (zh) | 用户接口 | |
JP2014085644A (ja) | カラオケシステム | |
CN102572172A (zh) | 图像处理系统 | |
JP2010220119A (ja) | 会議システムおよび画像データ管理方法 | |
JP6075502B1 (ja) | 情報処理装置及びプログラム | |
JP6075501B1 (ja) | 情報処理装置及びプログラム | |
JP2019160187A (ja) | フォトブック作製システム及びサーバ装置 | |
JP5835018B2 (ja) | 会議システムおよび連絡方法 | |
JP6432612B2 (ja) | 情報処理装置及びプログラム | |
JP5082699B2 (ja) | 議事録作成装置、議事録作成システム、議事録作成方法および議事録作成プログラム | |
JP2010166356A (ja) | 端末接続方法、端末接続装置、端末接続プログラム | |
JP2017201515A (ja) | 情報処理装置及びプログラム | |
JP2003069925A (ja) | 付帯情報入力方法および装置並びにプログラム | |
JP6075503B1 (ja) | 情報処理装置及びプログラム | |
JP2009070207A (ja) | データ処理装置、データ出力方法およびデータ出力プログラム | |
JP2019160186A (ja) | フォトブック作製システム及びサーバ装置 | |
TWM547794U (zh) | 影像列印終端裝置及管理伺服器 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |