CN114846781A - 交流管理装置及方法 - Google Patents

交流管理装置及方法 Download PDF

Info

Publication number
CN114846781A
CN114846781A CN202180007237.0A CN202180007237A CN114846781A CN 114846781 A CN114846781 A CN 114846781A CN 202180007237 A CN202180007237 A CN 202180007237A CN 114846781 A CN114846781 A CN 114846781A
Authority
CN
China
Prior art keywords
proxy
utterance
text
mobile communication
communication
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN202180007237.0A
Other languages
English (en)
Inventor
挂村笃
吉泽凉太
佐伯祐太郎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Toshiba Digital Solutions Corp
Original Assignee
Toshiba Corp
Toshiba Digital Solutions Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2020112961A external-priority patent/JP2021117965A/ja
Application filed by Toshiba Corp, Toshiba Digital Solutions Corp filed Critical Toshiba Corp
Publication of CN114846781A publication Critical patent/CN114846781A/zh
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/26Speech to text systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/12Messaging; Mailboxes; Announcements
    • H04W4/14Short messaging services, e.g. short message services [SMS] or unstructured supplementary service data [USSD]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M11/00Telephonic communication systems specially adapted for combination with other electrical systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M3/00Automatic or semi-automatic exchanges
    • H04M3/42Systems providing special services or facilities to subscribers
    • H04M3/42382Text-based messaging services in telephone networks such as PSTN/ISDN, e.g. User-to-User Signalling or Short Message Service for fixed networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M3/00Automatic or semi-automatic exchanges
    • H04M3/42Systems providing special services or facilities to subscribers
    • H04M3/56Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00Speech synthesis; Text to speech systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2201/00Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/38Displays
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2201/00Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/39Electronic components, circuits, software, systems or apparatus used in telephone systems using speech synthesis
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2201/00Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/40Electronic components, circuits, software, systems or apparatus used in telephone systems using speech recognition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2203/00Aspects of automatic or semi-automatic exchanges
    • H04M2203/20Aspects of automatic or semi-automatic exchanges related to features of supplementary services
    • H04M2203/205Broadcasting
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00Reducing energy consumption in communication networks
    • Y02D30/70Reducing energy consumption in communication networks in wireless communication networks

Abstract

【课题】对包含传达状态或者状况变化的代理在内的多个用户间的信息传达进行支援。【解决手段】实施方式的交流系统包括管理装置和代理装置。管理装置将某用户的发言语音向其他多个移动通信终端中的各个移动通信终端进行广播传送,并且将发言语音的发言语音识别结果作为用户彼此的交流履历按照时间序列加以积蓄,并进行文本传送控制以使其在各移动通信终端上被同步显示。代理装置具备生成基于从监视对象的状态检测设备输出的检测信息的代理发言文本并向管理装置发送的功能,管理装置将代理发言文本的合成语音数据向多个移动通信终端中的各个移动通信终端进行广播传送,使代理发言文本包含在用户彼此的交流履历中按照时间序列加以积蓄,并进行向各移动通信终端的文本传送控制。

Description

交流管理装置及方法
技术领域
本发明的实施方式涉及使用语音及文本的交流(达成共识、意愿沟通等)支援技术。
背景技术
作为语音交流的一例,有收发器(transceiver)。收发器是兼具无线电波的发送功能和接收功能的无线机,1人的用户能够与多人的用户进行通话(单向或者双向的信息传达)。收发器的应用例能够举出施工现场、集会会场、酒店、旅馆等设施等。另外,出租汽车无线也能够作为收发器应用的一例举出。
现有技术文献:
专利文献:
专利文献1:日本特开2013-187599号公报
发明内容
发明所要解决的课题
目的在于,提供形成包含传达状态或者状况变化的代理在内的交流组并对多个用户间的信息传达进行支援的交流系统。
用于解决课题的手段
实施方式的交流系统经由各个用户分别携带的多个移动通信终端,将用户的发言语音向其他用户的移动通信终端进行广播传送。交流系统包括:交流管理装置,与各所述移动通信终端以无线通信连接;以及代理装置,被输入从监视对象的状态检测设备输出的检测信息,与所述交流管理装置连接。所述交流管理装置具备交流控制部,该交流控制部具有:第一控制部,将从移动通信终端接收的发言语音数据向其他多个移动通信终端中的各个移动通信终端进行广播传送;以及第二控制部,将通过对接收的发言语音数据进行语音识别处理而得到的发言语音识别结果作为用户彼此的交流履历按照时间序列加以积蓄,并且进行文本传送控制以使在各所述移动通信终端中所述交流履历被同步显示。所述代理装置具备:发言文本发送部,生成基于所述检测信息的代理发言文本,并向所述交流管理装置发送。另外,所述交流控制部将通过合成语音处理而生成的所述代理发言文本的合成语音数据向多个所述移动通信终端中的各个移动通信终端进行广播传送,并且使接收的所述代理发言文本包含在用户彼此的所述交流履历中按照时间序列加以积蓄,并进行向各所述移动通信终端的文本传送控制。
附图说明
图1是第一实施方式的交流系统的网络构成图。
图2是第一实施方式的交流管理装置、代理装置、用户终端各自的构成框图。
图3是表示第一实施方式的用户信息及组信息的一例的图。
图4是第一实施方式的用户终端上显示的画面例。
图5是表示第一实施方式的设定管理信息的一例的图。
图6是表示第一实施方式的交流系统的处理流程的图。
图7是表示第一实施方式的交流系统的基于第一事例的处理流程的图。
图8是第二实施方式的交流系统的网络构成图。
图9是第二实施方式的交流管理装置、代理装置、用户终端各自的构成框图。
图10是表示第二实施方式的交流系统的基于第二事例的处理流程的图。
图11是第二实施方式的用户终端上显示的画面例。
图12是用于说明第三实施方式的组通话模式中的个别通话模式中断处理的一例的图。
图13是第三实施方式的交流管理装置、代理装置、用户终端各自的构成框图。
图14是表示第三实施方式的特定通知设定信息的一例的图。
图15是表示第三实施方式的交流系统的基于第三事例的处理流程的图。
具体实施方式
(第一实施方式)
图1至图7是用于说明第一实施方式的图。图1是本实施方式所涉及的交流系统的网络构成图。交流系统以交流管理装置(以下称为管理装置)100为中心,提供使用语音及文本的信息传达支援功能。以下,以设施管理作为一例,对适用了交流系统的方式进行说明。
管理装置100与各个用户分别携带的多个用户终端(移动通信终端)500以无线通信连接,将用户的发言语音向其他用户终端500进行广播传送。
用户终端500例如是智能电话等多功能便携电话机、PDA(个人数码助手(PersonalDigital Assistant))、平板电脑型终端等可携带的便携终端(移动终端)。用户终端500具备通信功能、运算功能及输入功能,经由IP(互联网协议(Internet protocol))网或者移动通信线路网(Mobile communication network)以无线通信与管理装置100连接,并进行数据通信。
用户的发言语音向其他多个用户终端500广播传送的范围(或者后述的交流履历被同步显示的范围)被设定为交流组,登记有对象用户(现场用户)的各个用户终端500。另外,如图1所示,在本实施方式中,被输入从设施管理中的监视对象的状态检测设备(传感器设备1)输出的检测信息且以无线通信或者有线通信与管理装置100连接的代理装置300,作为登记有多个用户的交流组的一员(代理)而被登记。
在监视对象是温泉的情况下,温泉的状态例如是温度。在该情况下,状态检测设备是温度传感器1等计测设备。温度传感器1将检测温度作为检测信息向代理装置300输出。代理装置300如果被输入了检测温度,则生成基于检测温度的代理发言文本并向管理装置100发送。也就是说,代理装置300与携带用户终端500的用户同样地作为交流组内的一员,是进行基于检测信息的发言的设备,定位为替代状态检测设备进行发言的发言代理者。
代理装置300是桌面型计算机、平板电脑型计算机或笔记本型计算机。代理装置300具备经由IP网或者移动通信线路网的利用无线通信或者有线通信的数据通信功能及运算功能(CPU等)。另外,代理装置300也能够构成为具备显示器装置(或者触摸面板方式的显示装置)及字符输入机构。另外,代理装置300也可以是具备本实施方式的各功能的专用设备。
本实施方式的交流系统支援以多个用户各自能够以免提方式进行对话作为前提的、用于达成共识或意愿沟通的信息传达。而且,形成包含用于传达设施管理中的监视对象的状态或者状况变化的代理在内的交流组,通过代理的发言功能,对迄今为止通过人工进行的监视对象的状态或者状况变化的信息取得及传达的高效化进行支援。
特别是,设施的设备管理依靠人工的劳动力,必然存在对设施设备进行操作/控制的作业。需要持续地确认设施设备的状态、状况来进行这样的设施设备的操作/控制,因此,用户不得不前往设施设备并对状况进行确认,或者前往状态检测设备的设置场所并对检测信息进行确认。因此,需要很大的劳力。另一方面,近年来,基于IoT(物联网(Internet ofThings))化的传感器设备与设施设备的操作、控制等之间的协作受到关注,但由于成本方面的课题等,如上所述,在实际情况下仍依靠人工的劳力。
在本实施方式中,在利用人工进行设施设备的操作/控制时,导入如下机制而减轻了用户的劳力:输出用于掌握设施设备的状态、状况的检测信息的传感器设备等作为用户交流组的一员,进行基于检测信息的发言。而且,对于已设的传感器设备等状态检测设备,仅通过将接收检测信息的代理装置300设置于设施管理的现场,就能够容易地参加用户交流组,由此实现了简单且低成本的系统构成。
图2是管理装置100、代理装置300、用户终端500各自的构成框图。
管理装置100包含控制装置110、存储装置120及通信装置130。通信装置130进行与多个用户终端500各自之间的通信连接管理及数据通信控制,且进行将相同的内容的发言语音及发言文本向多个用户终端500中的各个用户终端500一齐发送的广播传送通信控制。
控制装置110构成为包括用户管理部111、交流控制部112、语音识别部113及语音合成部114。存储装置120构成为包括用户信息121、组信息122、交流履历(交流日志)信息123、语音识别词典124及语音合成词典125。
代理装置300与管理对象的设施中设置的状态检测装置(传感器设备1)以无线或者有线方式连接,具备经由通信部310受理从状态检测装置输出的检测信息的传感器信息取得部320。另外,还具备控制部(判断部)330、发言文本发送部340、设定管理部350及存储部360。
用户终端500构成为包括通信/通话部510、交流应用控制部520、麦克风530、扬声器540、触摸面板等显示输入部550、以及存储部560。此外,扬声器540在实际上由耳机、头戴耳机(有线或者无线)等构成。
图3是表示各种信息的一例的图,用户信息121是利用本交流系统的用户登记信息。用户管理部111进行控制以使得能够经由规定的管理画面设定用户ID、用户名、属性、组。另外,代理装置300也被作为用户登记。组信息122是划分交流组的组识别信息。按交流组ID控制传达信息的收发及广播传送,并进行控制以使在不同的交流组间信息不混杂。在用户信息121中,能够将组信息122中登记的交流组与各用户建立关联。
本实施方式的用户管理部111提供设定作为后述的第一控制(发言语音数据的广播传送)及第二控制(代理发言文本或/及用户的发言语音识别结果的文本广播传送)的对象的、登记有多个用户的交流组的功能,并且提供将代理装置300向交流组登记的功能。
此外,关于分组,也能够与导入本实施方式的交流系统的设施等相应地将设施分割给多个部门进行管理。例如,以住宿设施作为一例进行说明,也能够将服务员(行李搬运)、接待员、内务(清扫)设定为分别不同的组,构筑将客房管理按各个组进行细分的交流环境。作为其他观点,也可以考虑在职能上无需交流的情形。例如,菜品的上菜员与服务员(行李搬运)无需进行直接交流,因此能够分组。另外,也可以考虑在地理上无需交流的情形,例如,在A分店、B分店等在地理上远离而且无需频繁进行交流的情况等下,能够分组。
因此,能够以登记有代理装置300的交流组、未登记代理装置300的交流组、登记有多个代理装置300的交流组等各种交流组混合存在的方式进行设定。在设施内存在多个作为管理对象的设施的情况下,能够按各设施个别地设置代理装置300,另外,即使是相同的设施,在设置有多个状态检测设备的情况下,也能够对于各状态检测设备分别设置代理装置300,并登记至1个交流组。
管理装置100的交流控制部112作为第一控制部和第二控制部的各控制部发挥功能。第一控制部将从用户终端500接收的发言语音数据向其他多个用户终端500中的各个用户终端500进行广播传送控制。第二控制部将通过对接收的发言语音数据进行语音识别处理而得到的发言语音识别结果作为用户彼此的交流履历123按照时间序列加以积蓄,并进行文本传送控制以使在各用户终端500中交流履历123被同步显示。
作为第一控制部的功能是发言语音数据的广播传送。在发言语音数据中,包括从文本(例如代理发言文本)通过语音合成处理而人工生成的语音数据、以及用户所发声的语音数据。语音合成部114使用语音合成词典125,合成与代理发言文本的字符对应的语音数据,并生成语音合成数据。此时,构成语音合成数据的语音数据的素材是任意的。
作为第二控制部的功能是代理发言文本及用户的发言语音识别结果的文本广播传送。在本实施方式中,用户终端500中输入的语音及用户终端500中再现的语音全部被文本化并按照时间序列积蓄至交流履历123,且被控制为在各用户终端500中被同步显示。语音识别部113使用语音识别词典124进行语音识别处理,并输出文本数据作为发言语音识别结果。关于语音识别处理,能够适用公知的技术。
另外,代理装置300具备发言文本发送部340,该发言文本发送部340生成基于从状态检测设备输出的检测信息的代理发言文本,并向管理装置100发送。管理装置100的交流控制部112作为第一控制的功能,对于从发言文本发送部340接收的代理发言文本进行合成语音处理来生成代理发言文本的合成语音数据,并向多个用户终端500中的各个用户终端500进行广播传送。而且,作为第二控制的功能,使从发言文本发送部340接收的代理发言文本包含在用户彼此的交流履历123中按照时间序列加以积蓄,并进行向各用户终端500的文本传送控制。
此外,交流履历信息123是各用户的发言内容和代理装置300的代理发言文本与时间信息一起基于文本按照时间序列加以积蓄而成的日志信息。与各文本对应的语音数据能够作为语音文件事先存放在规定的存储区域中,例如,在交流履历123中记录语音文件的存放场所。按交流组分别生成并积蓄交流履历信息123。
图4是表示各用户终端500上显示的交流履历123的一例的图。用户终端500各自能够从管理装置100实时地或者在规定的定时接收交流履历123,在多个用户间取得显示同步,按照时间序列参照过去的交流日志。
此外,在显示栏D中,能够针对与合成语音数据对应的文本显示语音标记M,或者能够针对发言者自身的发言文本在显示栏D中显示麦克风标记H。
如图4的例子那样,各用户终端500将代理装置300的发言内容与自己的发言内容及除了自己以外的其他用户的发言内容一起按照时间序列显示在显示栏D中,而管理装置100中积蓄的交流履历123作为日志信息被共享。
图5是表示代理装置300中使用的设定管理信息的一例的图。代理装置300进行发言的条件及发言文本的内容被作为设定管理信息加以登记。控制部330作为基于设定管理信息中设定的判断条件判断检测信息是否满足判断条件的判断部发挥功能。
在图5的例子中,在“设定1”中,设定了条件:温度小于36度、代理发言文本“温度已低于36度”。在“设定2”中,设定了条件:温度为42度以上、代理发言文本“温度已超过42度”。控制部330使用由传感器信息取得部320以任意的时间间隔取得的检测信息,与设定管理信息中设定的判断条件匹配,判断是否满足判断条件。
发言文本发送部340在由控制部330判断为满足判断条件的情况下,提取设定管理信息的发言文本并生成代理发言文本数据,向管理装置100发送。
能够经由代理装置300所具备的管理信息登记画面输入设定管理信息,或者由其他计算机装置制作将相互不同的判断条件及发言文本的多个对记录而成的设定管理信息文件,并使其存储至代理装置300。
图6是表示本实施方式的交流系统的处理流程的图。
各用户在用户终端500中,启动交流应用控制部520,交流应用控制部520进行与管理装置100的连接处理。然后,从规定的登入画面输入自己的用户ID及密码并登入管理装置100。登入认证处理由用户管理部111执行。登入后的各用户终端500在任意的定时或者以规定的时间间隔,与管理装置100之间进行信息取得处理。
如果用户A发言,则交流应用控制部520收集发言语音,并将发言语音数据向管理装置100发送(S501a)。管理装置100的语音识别部113对接收的发言语音数据进行语音识别处理(S101),并输出发言内容的语音识别结果。交流控制部112将语音识别结果存储至交流履历123,并将发言语音数据存储至存储装置120(S102)。
交流控制部112将用户A的发言语音数据向除了发言的用户A以外的其他用户终端500中的各个用户终端500进行广播发送。另外,为了显示同步而将交流履历123中存储的用户A的发言内容(文本)向包含用户A自身的交流组内的各用户终端500发送(S103)。
除了用户A以外的各用户终端500的交流应用控制部520进行所接收的发言语音数据的自动再现处理,进行发言语音输出(S502b、S502c),并且使与语音输出的发言语音对应的文本形式的发言内容显示在显示栏D中。
接下来,代理装置300对从状态检测设备输出的检测信息进行监视,在判别为检测信息满足判断条件的情况下,发言文本发送部340基于判断结果生成代理发言文本,并向管理装置100发送(S301)。
此时,在代理发言文本中既可以包含传感器值等检测信息,也可以不包含。也就是说,只要是通知其状态满足判断条件的内容即可,例如,也可以是“温度下降了”、“温度过高”等不包含传感器值自身的发言文本。另外,也能够像“温度已低于36度。当前的温度是35.1度”那样,以包含传感器值的方式生成代理发言文本。通过包含实测值,能够使用户知晓是必须进行紧急应对,还是在应对之前在时间上有宽裕等。
管理装置100的交流控制部112将接收的代理发言文本存储至交流履历123(S104),语音合成部114生成与代理发言文本对应的合成语音(S105),并将生成的合成语音数据存储至存储装置120。
交流控制部112将代理装置300的发言语音数据向交流组中登记的各个用户终端500全部进行广播发送。另外,为了显示同步,将交流履历123中存储的代理发言文本向交流组内的各用户终端500发送(S106)。
各用户终端500的交流应用控制部520进行所接收的代理的发言语音数据的自动再现处理,并进行发言语音输出(S503a、S503b、S503c),并且使与发言语音对应的文本形式的代理发言内容显示在显示栏D中。
图7是表示适用了本实施方式的交流系统的基于第一事例的处理流程的图。
如图7所示,代理装置300的传感器信息取得部320在任意的定时或者以规定的时间间隔,取得状态检测设备(传感器设备1)所输出的温泉的温度信息(S3001)。在温泉信息每次被取得时,控制部330进行判断温泉的温度是否满足作为设定管理信息登记的判断条件的判断处理(S3002)。
在温泉的温度是满足判断条件的温度的情况下(S3003:是),发言文本发送部340提取设定管理信息中设定的发言文本,生成代理发言文本数据“温度已低于36度”(S3004)。发言文本发送部340将生成的代理发言文本向管理装置100发送(S3005)。
管理装置100的语音合成部114生成所接收的代理发言文本的合成语音数据(S1001)。另外,管理装置100的交流控制部112使从代理装置300接收的代理发言文本包含在用户彼此的交流履历123中按照时间序列加以存储(S1002)。
交流控制部112为了显示同步,将文本形式的代理发言文本向用户终端500发送(S1003),并且将代理发言内容的合成语音数据向多个用户终端500中的各个用户终端500进行广播传送(S1004)。
各用户终端500的交流应用控制部520使文本形式的代理发言内容显示在显示栏D中,而且进行合成语音数据的自动再现处理,进行语音输出。此时,在各用户终端500的显示栏D中,相同的代理发言内容被同步显示,而且分别进行代理发言内容“温度已低于36度”的语音输出。
接下来,如果听到了代理发言内容的用户C进行了“暂时没空”的发言,则交流应用控制部520收集发言语音,并将发言语音数据向管理装置100发送。管理装置100的语音识别部113对接收的发言语音数据进行语音识别处理(1005),并输出发言内容的语音识别结果。交流控制部112将语音识别结果存储至交流履历123,并将发言语音数据存储至存储装置120(S1006)。
交流控制部112将用户C的发言语音数据向除了发言的用户C以外的其他用户终端500中的各个用户终端500进行广播发送(1008)。另外,为了显示同步,将交流履历123中存储的用户C的发言内容“暂时没空”向包含用户C自身的交流组内的各用户终端500发送(S1007)。
各用户终端500的交流应用控制部520进行所接收的发言语音数据的自动再现处理,进行“暂时没空”的发言语音输出,并使与语音输出的发言语音对应的文本形式的发言内容“暂时没空”显示在显示栏D中。此外,在管理装置100侧控制为不向发言的用户C的用户终端500发送自己发言的发言语音数据。
如果听到了用户C的发言的用户B进行了“我在旁边所以我来对应”的发言,则交流应用控制部520收集发言语音,将发言语音数据向管理装置100发送。管理装置100的语音识别部113对接收的发言语音数据进行语音识别处理(1009),并输出发言内容的语音识别结果。交流控制部112将语音识别结果存储至交流履历123,并将发言语音数据存储至存储装置120(S1010)。
交流控制部112将用户B的发言语音数据向除了发言的用户B以外的其他用户终端500中的各个用户终端500进行广播发送(1012)。另外,为了显示同步,将交流履历123中存储的用户B的发言内容“我在旁边所以我来对应”向包含用户B自身的交流组内的各用户终端500发送(S1011)。
各用户终端500的交流应用控制部520进行所接收的发言语音数据的自动再现处理,进行“我在旁边所以我来对应”的发言语音输出,并使与语音输出的发言语音对应的文本形式的发言内容“我在旁边所以我来对应”显示在显示栏D中。此时也在管理装置100侧控制为不向发言的用户B的用户终端500发送自己发言的发言语音数据。
(第二实施方式)
图8至图11是用于说明第二实施方式的图。图8是本实施方式所涉及的交流系统的网络构成图。本实施方式的交流系统相对于上述第一实施方式而言,是与用户终端500中发言的用户所发出的询问相应地提供代理功能的方式。此外,针对与上述第一实施方式同样的构成,附加相同标记并省略说明。
图9是本实施方式的交流管理装置100、代理装置300、用户终端500各自的构成框图。相对于第一实施方式的图2,对代理装置300的构成进行了部分变更/追加,以用户终端500中的用户的发言作为触发,代理装置300生成基于检测信息的代理发言文本并向管理装置100发送。
具体而言,管理装置100的交流控制部111具备将从用户终端500接收的发言语音的语音识别结果向代理装置300发送的功能。代理装置300具备:接收用户的发言语音的语音识别结果的文本接收部370、对文本形式的语音识别结果进行解析的文本解析部380、以及基于文本解析部380的解析结果判断是否提供代理发言文本的控制部(信息提供部)330A。发言文本发送部340基于控制部330A的判断结果,生成代理发言文本,并向管理装置100发送。
图10是表示本实施方式的交流系统的基于第二事例的处理流程的图。
如图10所示,如果用户C进行了“请告诉我现在B温泉的温度”的发言,则交流应用控制部520收集发言语音,并将发言语音数据向管理装置100发送。管理装置100的语音识别部113对接收的发言语音数据进行语音识别处理(1005),并输出发言内容的语音识别结果。交流控制部112将语音识别结果存储至交流履历123,并将发言语音数据存储至存储装置120(S1006)。
交流控制部112将用户C的发言语音数据向除了发言的用户C以外的其他用户终端500中的各个用户终端500进行广播发送(1008)。另一方面,为了显示同步,将交流履历123中存储的用户C的发言内容“请告诉我现在B温泉的温度”向包含用户C自身的交流组内的各用户终端500发送,并且也向代理装置300发送文本形式的发言内容“请告诉我现在B温泉的温度”(S1007A)。
代理装置300经由文本接收部370接收“请告诉我现在B温泉的温度”的发言文本。由文本解析部380对接收的发言文本进行解析,例如进行公知的语素解析来提取关键字(S3101)。例如,提取“B温泉”、“温度”、“请告诉我”的各关键字。
代理装置300的控制部(信息提供部)330A使用作为文本解析部380的解析结果的关键字,进行信息提供判断处理(3102)。例如,作为设定管理信息,事先登记代理装置300的管理对象的名称(B温泉)、由与代理装置300连接的状态检测设备检测的检测属性(温度)、询问语例示信息(“请告诉我”、“是?”、“多少”、“想知道”)等。此外,在本实施方式中,也经由设定管理部350进行这些设定管理信息的登记处理。
控制部(信息提供部)330A判断在用户C的语音识别结果中是否包含与针对状态检测设备或者检测信息的询问相关的关键字,在判断为包含的情况下(S3103:是),经由传感器信息取得部320取得检测信息(3001)。在上述例示的情况下,在用户C的语音识别结果中包含“B温泉”,而且有作为检测属性的“温度”以及询问语“请告诉我”,因此控制部330A输出“能够”作为信息提供判断结果。
此外,在上述说明中,设想了在交流组中登记有多个代理装置300,各代理装置300为了判断是否是针对自身的询问,而引入了是否包含代理装置300的管理对象的名称作为判断要素。但是,例如在交流组中仅出现了1个代理装置300的情况下,能够构成为基于“请告诉我温度”等用户的发言,从状态检测设备取得检测信息。另外,能够构成为:将状态检测设备的名称(温度传感器)等作为信息提供判断信息加以登记,对于用户C的“温度传感器的值是?”这样的询问,代理装置300进行基于检测信息的发言。
代理装置300的传感器信息取得部320在控制部330A的判断结果是“能够”的情况下,取得状态检测设备(传感器设备1)所输出的温泉的温度信息(S3001)。发言文本发送部340提取设定管理信息中设定的发言文本,生成代理发言文本数据“当前的温度是37.5度”(S3004)。发言文本发送部340将生成的代理发言文本向管理装置100发送(S3005)。此时,能够将惯用语“当前的温度是○○度”事先登记为设定管理信息,并将“○○”的部分置换为检测信息“37.5”,来生成代理发言文本。
管理装置100的语音合成部114生成所接收的代理发言文本的合成语音数据(S1001)。另外,管理装置100的交流控制部112使从代理装置300接收的代理发言文本包含在用户彼此的交流履历123中,按照时间序列加以存储(S1002)。
交流控制部112为了显示同步,将文本形式的代理发言文本向用户终端500发送(S1003),并且将代理发言内容的合成语音数据向多个用户终端500中的各个用户终端500进行广播传送(S1004)。
各用户终端500的交流应用控制部520使文本形式的代理发言内容显示在显示栏D中,而且进行合成语音数据的自动再现处理,进行语音输出。此时,在各用户终端500的显示栏D中,相同的代理发言内容被同步显示,而且分别进行代理发言内容“当前的温度是○○度”的语音输出。
接下来,如果通过语音听到了代理发言内容的用户C进行了“虽然比基准温度高,但请接通锅炉”的发言,则交流应用控制部520收集发言语音,并将发言语音数据向管理装置100发送。管理装置100的语音识别部113对接收的发言语音数据进行语音识别处理(1009),并输出发言内容的语音识别结果。交流控制部112将语音识别结果存储至交流履历123,并将发言语音数据存储至存储装置120(S1010)。
交流控制部112将用户C的发言语音数据向除了发言的用户C以外的其他用户终端500进行广播发送(1012)。另外,为了显示同步,将交流履历123中存储的用户C的发言内容“虽然比基准温度高,但请接通锅炉”向包含用户C自身的交流组内的各用户终端500发送(S1012)。
图11是本实施方式的用户终端500上显示的画面例。如图11所示,各用户终端500将向代理装置300的询问或呼唤所对应的发言内容、以及以询问或呼唤作为触发而发言的代理装置300的发言内容,与自己的发言内容及除了自己以外的其他用户的发言内容一起按照时间序列显示在显示栏D中。然后,管理装置100中积蓄的交流履历123作为日志信息被共享。
本实施方式中,代理装置300理解用户的询问或呼唤,并每次生成基于状态检测设备的检测信息的代理发言文本并提供,因此代理装置300作为交流组内的伪用户出现,能够提供更接近于用户彼此的信息传达会话的交流环境。
另外,除了上述例示的设施以外,还有保安行业中的楼宇设施、物流行业的停靠(出发/到达场所)等。另外,状态检测设备除了温度传感器以外,还能够与本交流系统的适用场景相应地使用各种检测设备。
例如,作为状态检测设备的有相机。能够使用由相机摄影的图像对人的动作或拥挤度进行解析/判断,以“多人移动到浴场”、“前台排队”等解析结果作为触发,代理装置300将针对这些解析结果的代理发言文本向管理装置100发送,并向用户终端500进行合成语音通知及文本显示通知。另外,作为与拥挤等相关的其他例,例如也能够对停车场的拥挤度进行解析/判断,将“停车场即将车满”、“请进行第二停车场的准备”等向用户终端500进行合成语音通知及文本显示通知。
另外,代理装置300也能够构成为具备从相机图像提取特定的人物的功能。在该情况下,例如能够进行预先登记的人物图像与摄影的图像的匹配处理,使用作为状态检测设备的相机所设置的场所的信息,得到“何人到达了何处”这样的解析结果。能够将这样的解析结果作为触发使用,例如,代理装置300输出“~在~处”这样的代理发言文本,经由管理装置100利用合成语音向各用户终端500进行通知。
另外,作为其他例,能够适用重量传感器作为状态检测设备。例如,能够与电梯等中使用的重量传感器协作,以10分钟内检测出5次以上发生了重量过大的情况作为触发,代理装置300输出“电梯拥挤”等代理发言文本,经由管理装置100利用合成语音向各用户终端500(各用户)通知。各用户能够根据需要对人流进行管理。
进而,能够适用GPS装置(位置信息检测设备)作为状态检测设备。例如,在以人力拖动的搬运车等上事先安装GPS装置,代理装置300构成为能够从GPS装置取得搬运车的位置信息。然后,代理装置300将预先设定的路线或禁止进入场所与搬运车的当前位置匹配,对从路线偏差了规定的范围或进入禁止进入场所的状况进行检测。然后,在检测出这些状况的情况下,输出“路线是否错误?”、“此处是禁止进入场所”这样的代理发言文本,并经由管理装置100利用合成语音向各用户终端500(各用户)通知。此时,除了用户终端500的用户以外,也可以设想到设施利用者进入禁止进入场所。在该情况下,接受了通知的各用户终端500的用户能够前往禁止进入场所,对设施利用者恰当地进行引导。
此外,交流管理装置100也能够构成为具备代理装置300的各功能。即,将图2或者图9所示的代理装置300的功能在交流管理装置100内作为代理部设置。另外构成为,状态检测设备的检测信息向交流管理装置100发送。此时,状态检测设备也可以在内部具备数据通信功能,另外也可以构成为:将状态检测设备与独立的数据通信设备连接,能够经由数据通信设备发送交流管理装置100的检测信息。交流管理装置100的代理部能够受理从监视对象的状态检测设备输出的检测信息,生成基于检测信息的代理发言文本,与上述实施方式同样作为交流组的一员进行动作。
(第三实施方式)
图12至图15是用于说明第三实施方式的图。此外,关于与上述第一、第二实施方式同样的构成,附加相同标记并省略说明。
本实施方式的交流管理装置100除了上述的组通话功能之外,还具备个别通话功能。图12是用于说明本实施方式的组通话模式中的个别通话模式中断处理的一例的图。如图12所示,仅向组通话中的交流组内的特定的用户,发送基于从代理装置300发送的代理发言文本的合成语音。
如上所述,代理装置300作为交流组内的成员(代理)被登记。在本实施方式中,经由管理装置100提供在代理与特定的用户之间的个别通话功能。
图13是本实施方式的管理装置(交流管理装置)100、代理装置300、用户终端500各自的构成框图。如图13所示,上述第一实施方式及第二实施方式中说明的第一控制部及第二控制部作为组通话控制部112A被示出。交流控制部112构成为具备组通话控制部112A及个别通话控制部112B。
管理装置100生成包含交流组中登记的多个用户的组成员列表并加以保持。个别通话控制部112B基于从代理装置300发送的个别通话请求,从组成员列表中指定相应的用户。
个别通话控制部112B以组通话中被广播传送的交流组内的用户作为对象,提供仅向特定的用户发送发言语音数据的个别通话功能。个别通话控制部112B在组通话模式中,为了使代理装置300经由管理装置100与特定的用户一对一进行通话,对于被指定的用户进行发送呼叫(call)的呼叫处理。呼叫处理是针对正维持的组通话模式的中断处理,如果用户对于呼叫处理进行了应答,则进行呼叫连接处理(个别通话通信信道的建立处理)。由此,经由被建立的通话信道,开始从代理仅向特定的用户传送发言语音数据的传送处理。这些处理在整体上作为个别通话中断处理被执行,所述个别通话中断处理用于维持交流组内的组通话状态并且在将特定的用户与交流组内的其他用户划分开的状态下进行通话。
此外,本实施方式的个别通话功能也能够适用于除了代理以外的2个用户之间。也就是说,管理装置100能够将包含交流组中登记的多个用户的组成员列表事先向各用户终端500传送。然后,用户终端500如果从组成员列表中选择了个别通话对方的用户,则能够将包含所选择的用户的个别通话请求向管理装置100发送。个别通话控制部112B能够对于被选择的用户进行呼叫处理,基于被呼叫的用户的应答动作,建立个别通话通信信道。
此外,个别通话控制部112B即使不处于组通话模式中,也能够受理个别通话请求,与被指定或者选择的用户之间展开个别通话信道,提供一对一通话功能。
在个别通话结束后,能够进行向在交流组内正维持的组通话模式的自动恢复处理。自动恢复处理由交流控制部112执行。如果在用户终端500中进行了针对个别通话模式的挂断操作,则交流控制部112进行已建立的个别通话信道的挂断处理,使其自动恢复至执行中的组通话模式的通话信道。另外也可以构成为:随着来自个别通话控制部112B侧的个别通话通信信道的挂断处理,进行向组通话模式的自动恢复。
个别通话模式的通话时间(呼叫开始时刻、呼叫应答后的通话时间、通话结束时刻)作为个别通话模式执行履历,与个别通话对方的履历一起积蓄至管理装置100。另外,个别通话中的发言语音数据能够与组通话模式同样地被进行语音识别处理而文本化,并在交流履历信息123内存放,或者与交流履历信息123的时间经过建立关联地个别存放。个别通话模式中的发言语音数据也同样能够存放至存储装置120。
像这样,本实施方式的管理装置100(通信装置130)对应于组通话功能,进行将一个用户的发言语音数据及其发言内容的文本信息(通过对发言语音数据进行语音识别处理而得到的文本信息)向多个用户终端500中的各个用户终端500一齐发送的广播传送通信控制。另外,对应于个别通话功能,进行在特定的用户(个别通话用户)间的发言语音数据的个别传送通信控制。
接下来,代理装置300能够事先保持图14所示的特定通知设定信息。如图14所示,设定了状况判断条件,按各条件决定了通过个别通话来联系的特定用户。另外,联系的内容(代理发言文本)也被预先设定。
图14所示的特定通知设定信息是对上述第一、第二实施方式中的图5的设定管理信息追加了要联系的用户(特定用户、用户特性)以及作为联系手段的线路类别(个别通话、组通话)而成的信息。图5的判断条件相当于图14的状况判断条件。
图15是表示本实施方式的交流系统的基于第三事例的处理流程的图。
代理装置300的控制部(判断部)330受理从监视对象的传感器设备(状态检测设备)1输出的检测信息(S3001),与特定通知设定信息的“状况判断条件”匹配(S3002)。判断受理的检测信息是否满足状况判断条件(S3003),在判断为满足状况判断条件的情况下(S3003:是),提取预先设定的发言文本(S3004),向管理装置100发送包含要联系的用户、线路类别及发言文本的各信息在内的联系请求(S3005)。
管理装置100如果从代理装置300受理了联系请求,则语音合成部114生成所接收的代理发言文本的语音合成数据(S1001)。
接下来,交流控制部112参照所受理的联系请求中包含的线路类别以及作为联系对象的特定用户,确认是否是向特定用户的个别通话设定(S1001A)。如果线路类别是“组通话”,则向步骤S1002前进,不是以个别通话模式而是以组通话模式进行联系处理(S1003、S1004)。此时,发言文本等按照时间序列积蓄至交流履历123(S1002)。
在步骤S1001A中,判断为有向特定用户的个别通话设定的情况下(S1001A:是),个别通话控制部112B对于当前的组通话模式,进行向联系请求中包含的特定用户的个别通话模式(中断)处理(S1001B)。具体而言,使用个别通话通信信道,进行向特定用户的呼叫处理(1001C)。接受了呼叫的特定用户进行针对来电呼叫的应答操作(S504a)。如果特定用户进行了表示针对来电呼叫的应答之意的操作,则管理装置100利用个别通话通信信道,进行用于建立管理装置100与特定用户的个别通话线路的通话处理(S1001D)。个别通话控制部112B经由个别通话线路,将代理发言文本的语音合成数据向特定用户的用户终端500传送。因此,实现了代理与特定用户之间的基于个别通话线路的联系。
此外,转变至个别通话模式的特定用户对于组通话的通话信道成为与“保留”相同的处理,在个别通话结束后能够自动恢复至组通话的通信信道。另外,交流控制部112将利用个别通话模式向特定用户的联系履历也存放至交流履历123(S1002)。
另外,针对代理的个别通话对方可以是2人以上。在该情况下,能够对于各特定用户建立个别的个别通话信道,并分别传送基于代理发言文本的语音合成数据。另外,也能够按个别通话对方设定不同的代理发言文本。也就是说,如图14的例子那样,能够针对楼层经理设定“温度已低于阈值。向设定用户进行需要应对通知。”的代理发言文本,并针对有资格者(例如锅炉技工)设定“请紧急进行温度调节作业。”的代理发言文本。对于相同的状况判断条件,楼层经理及有资格者被传送基于不同的发言文本的语音合成数据。
另外,联系对象用户也可以不是预先设定的用户。如图14的例子那样,能够预先掌握各用户(用户终端)的位置信息,作为对由于满足状况判断条件而发生的事件进行应对的应对人,将靠近发生了该事件的场所的1人或者2人以上的用户决定为特定用户。在图14的例中,在检测出进入了禁止进入区域的情况下,能够与用户的位置信息相应地选定特定用户,将发言文本“在禁止进入区域中发生了传感器检测。作为近距离用户请进行应对。”的语音合成数据,向选定的特定用户传送。
此外,如上所述,管理装置100也能够构成为具备代理装置300的各功能,因此作为本实施方式的变形例,构成为在管理装置100内具备相当于代理装置300的代理功能部。另外,管理装置100能够构成为从传感器设备1受理检测信息,执行图15的步骤S3002、S3003及S3004,在组通话中进行个别通话模式下的联系。
以上,说明了本实施方式,但交流管理装置100及代理装置300的各功能能够通过程序实现,为了实现各功能而预先准备的计算机程序被存放于辅助存储装置,CPU等控制部将辅助存储装置中存放的程序读出至主存储装置,并由控制部执行被读出至主存储装置的该程序,由此能够使各部的功能进行动作。
另外,上述程序也能够在被记录于计算机可读取的记录介质的状态下向计算机提供。作为计算机可读取的记录介质,可以举出CD-ROM等光盘、DVD-ROM等相变型光盘、MO(磁光(Magnet Optical))或MD(迷你盘(Mini Disk))等光磁盘、软盘(Floppy)(注册商标)或可移动硬盘等磁盘、紧凑式闪存(注册商标)、智能介质、SD存储卡、存储棒等存储卡。另外,作为记录介质也包含为了实现本发明的目的而特别设计并构成的集成电路(IC芯片等)等硬件装置。
此外,说明了本发明的实施方式,但该实施方式作为例子来提示,意图不在于限定发明的范围。该新的实施方式能够以其他各种方式实施,在不脱离发明的主旨的范围内能够进行各种省略、置换、变更。这些实施方式及其变形包含在发明的范围或主旨中,并包含在专利权利要求书所记载的发明及其等同的范围中。
附图标记说明
100 交流管理装置
110 控制装置
111 用户管理部
112 交流控制部(第一控制部、第二控制部)
112A 组通话控制部(第一控制部、第二控制部)
112B 个别通话控制部
113 语音识别部
114 语音合成部
120 存储装置
121 用户信息
122 组信息
123 交流履历信息
124 语音识别词典
125 语音合成词典
130 通信装置
300 代理装置
310 通信部
320 传感器信息取得部
330 控制部(判断部)
330A 控制部(信息提供部)
340 发言文本发送部
350 设定管理部
360 存储部
370 文本接收部
380 文本解析部
500 用户终端(移动通信终端)
510 通信/通话部
520 交流应用控制部
530 麦克风(集音部)
540 扬声器(语音输出部)
550 显示/输入部
560 存储部
D 显示栏。

Claims (9)

1.一种交流系统,经由各个用户分别携带的多个移动通信终端,将用户的发言语音向其他用户的移动通信终端进行广播传送,其特征在于,包括:
交流管理装置,与各所述移动通信终端以无线通信连接;以及
代理装置,被输入从监视对象的状态检测设备输出的检测信息,与所述交流管理装置连接,
所述交流管理装置具备交流控制部,该交流控制部具有:
第一控制部,将从移动通信终端接收的发言语音数据向其他多个移动通信终端中的各个移动通信终端进行广播传送;以及
第二控制部,将通过对接收的发言语音数据进行语音识别处理而得到的发言语音识别结果作为用户彼此的交流履历按照时间序列加以积蓄,并且进行文本传送控制以使在各所述移动通信终端中所述交流履历被同步显示,
所述代理装置具备:发言文本发送部,生成基于所述检测信息的代理发言文本,并向所述交流管理装置发送,
所述交流控制部将通过合成语音处理而生成的所述代理发言文本的合成语音数据向多个所述移动通信终端中的各个移动通信终端进行广播传送,并且使接收的所述代理发言文本包含在用户彼此的所述交流履历中按照时间序列加以积蓄,并进行向各所述移动通信终端的文本传送控制。
2.如权利要求1所述的交流系统,其特征在于,
所述交流管理装置具备设定交流组的用户管理部,所述交流组是登记有多个所述移动通信终端且作为所述第一控制部及所述第二控制部的控制对象的交流组,
所述用户管理部提供将所述代理装置登记至所述交流组的功能。
3.如权利要求1或者2所述的交流系统,其特征在于,
所述代理装置还具备:控制部,基于预先设定的判断条件,判断所述检测信息是否满足所述判断条件,
在判断为所述检测信息满足所述判断条件的情况下,所述发言文本发送部生成所述代理发言文本。
4.如权利要求1至3中任1项所述的交流系统,其特征在于,
所述交流控制部将所述发言语音识别结果向所述代理装置发送,
所述代理装置具备:
文本接收部,接收所述发言语音识别结果;以及
信息提供部,基于所述发言语音识别结果,判断是否提供所述代理发言文本,
所述发言文本发送部基于所述信息提供部的判断结果,生成所述代理发言文本,并向所述交流管理装置发送。
5.如权利要求4所述的交流系统,其特征在于,
所述信息提供部判断在所述发言语音识别结果中是否包含与针对所述状态检测设备或者所述检测信息的询问相关的关键字。
6.如权利要求1至5中任1项所述的交流系统,其特征在于,
所述交流控制部具备:个别通话控制部,仅向被广播传送的交流组内的特定的用户发送发言语音数据,
所述个别通话控制部进行将通过合成语音处理而生成的所述代理发言文本的合成语音数据向特定的用户发送的个别通话控制。
7.一种交流方法,经由各个用户分别携带的多个移动通信终端,将用户的发言语音向其他用户的移动通信终端进行广播传送,其特征在于,
各所述移动通信终端以无线通信与交流管理装置连接,被输入从监视对象的状态检测设备输出的检测信息的代理装置与所述交流管理装置连接,
所述交流方法包括:
第一步骤,交流管理装置将从移动通信终端接收的发言语音数据向其他多个移动通信终端中的各个移动通信终端进行广播传送;
第二步骤,交流管理装置将通过对接收的发言语音数据进行语音识别处理而得到的发言语音识别结果作为用户彼此的交流履历按照时间序列加以积蓄,并且进行文本传送控制以使在各所述移动通信终端中所述交流履历被同步显示;以及
第三步骤,所述代理装置生成基于所述检测信息的代理发言文本,并向所述交流管理装置发送,
所述第一步骤中,将通过合成语音处理而生成的所述代理发言文本的合成语音数据向多个所述移动通信终端中的各个移动通信终端进行广播传送,
所述第二步骤中,使接收的所述代理发言文本包含在用户彼此的所述交流履历中按照时间序列加以积蓄,并进行向各所述移动通信终端的文本传送控制。
8.一种由管理装置执行的程序,该管理装置与各个用户分别携带的多个移动通信终端以无线通信连接,将用户的发言语音向其他用户的移动通信终端进行广播传送,其特征在于,
所述程序实现如下功能:
第一功能,将从移动通信终端接收的发言语音数据向其他多个移动通信终端中的各个移动通信终端进行广播传送;
第二功能,将通过对接收的发言语音数据进行语音识别处理而得到的发言语音识别结果作为用户彼此的交流履历按照时间序列加以积蓄,并且进行文本传送控制以使在各所述移动通信终端中所述交流履历被同步显示;以及
第三功能,接收由代理装置生成的基于检测信息的代理发言文本,并生成所述代理发言文本的合成语音数据,所述代理装置被输入从监视对象的状态检测设备输出的所述检测信息且与所述管理装置连接,
所述第一功能将所述代理发言文本的合成语音数据向多个所述移动通信终端中的各个移动通信终端进行广播传送,
所述第二功能使接收的所述代理发言文本包含在用户彼此的所述交流履历中按照时间序列加以积蓄,并进行向各所述移动通信终端的文本传送控制。
9.一种交流系统,经由各个用户分别携带的多个移动通信终端,将用户的发言语音向其他用户的移动通信终端进行广播传送,其特征在于,具备:
交流控制部,具有:第一控制部,将从移动通信终端接收的发言语音数据向其他多个移动通信终端中的各个移动通信终端进行广播传送;以及第二控制部,将通过对接收的发言语音数据进行语音识别处理而得到的发言语音识别结果作为用户彼此的交流履历按照时间序列加以积蓄,并且进行文本传送控制以使在各所述移动通信终端中所述交流履历被同步显示;以及
代理部,受理从监视对象的状态检测设备输出的检测信息,生成基于所述检测信息的代理发言文本,
所述交流控制部将通过合成语音处理而生成的所述代理发言文本的合成语音数据向多个所述移动通信终端中的各个移动通信终端进行广播传送,并且使接收的所述代理发言文本包含在用户彼此的所述交流履历中按照时间序列加以积蓄,并进行向各所述移动通信终端的文本传送控制。
CN202180007237.0A 2020-01-27 2021-01-22 交流管理装置及方法 Withdrawn CN114846781A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2020010639 2020-01-27
JP2020-010639 2020-01-27
JP2020112961A JP2021117965A (ja) 2020-01-27 2020-06-30 コミュニケーション管理装置及び方法
JP2020-112961 2020-06-30
PCT/JP2021/002181 WO2021153438A1 (ja) 2020-01-27 2021-01-22 コミュニケーション管理装置及び方法

Publications (1)

Publication Number Publication Date
CN114846781A true CN114846781A (zh) 2022-08-02

Family

ID=77079764

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202180007237.0A Withdrawn CN114846781A (zh) 2020-01-27 2021-01-22 交流管理装置及方法

Country Status (3)

Country Link
US (1) US20230054530A1 (zh)
CN (1) CN114846781A (zh)
WO (1) WO2021153438A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023013093A1 (ja) * 2021-08-04 2023-02-09 パナソニックIpマネジメント株式会社 音声通知システム、音声通知方法及びプログラム

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9325749B2 (en) * 2007-01-31 2016-04-26 At&T Intellectual Property I, Lp Methods and apparatus to manage conference call activity with internet protocol (IP) networks
JP5414604B2 (ja) * 2010-03-31 2014-02-12 株式会社東芝 遠隔情報管理システム及び方法
JP5634824B2 (ja) * 2010-10-21 2014-12-03 保全サービス株式会社 遠隔監視通報方法および遠隔監視通報装置

Also Published As

Publication number Publication date
US20230054530A1 (en) 2023-02-23
WO2021153438A1 (ja) 2021-08-05

Similar Documents

Publication Publication Date Title
US11671473B2 (en) Implementing push-to-talk in a multimedia conferencing system
CN108100791A (zh) 电梯系统
EP3227864A1 (en) Method for providing a visitor controlled access into a building
AU2003266593B2 (en) Telephone interpretation system
CN101273616A (zh) 用于多方协作增强的方法和设备
CN111971647A (zh) 语音识别设备、语音识别设备的协作系统和语音识别设备的协作方法
EP1296290A1 (en) Method and system for providing a visitor identification badge
CA2078995A1 (en) Method for providing service access information in a communication system
WO2016198132A1 (en) Communication system, audio server, and method for operating a communication system
JP2002120976A (ja) エレベータ制御装置
CN114846781A (zh) 交流管理装置及方法
JP6689953B2 (ja) 通訳サービスシステム、通訳サービス方法及び通訳サービスプログラム
US8363574B2 (en) Monitoring participants in a conference call
JP2008158717A (ja) 通信システム及び通信プログラム及び通信方法
CN115699719A (zh) 交流系统
JP7332690B2 (ja) コミュニケーション管理装置
JP2021117965A (ja) コミュニケーション管理装置及び方法
JP5299142B2 (ja) 情報収集システム、移動体端末及びプログラム
US20230129342A1 (en) Communication system
JP2008124597A (ja) 音声会議システム
US20140093064A1 (en) Communication processing system, communication processing method, communication processing device, and control method and control program of communication processing device
JP6548280B1 (ja) 安否確認装置、システム、方法及びプログラム
US20220014625A1 (en) Communication terminal device, control device, communication control method, and non-transitory, computer-readable control medium
US20240056279A1 (en) Communication system
EP3694199A1 (en) Interphone master unit, information terminal, distribution notification system, distribution system, program, and control method

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication
WW01 Invention patent application withdrawn after publication

Application publication date: 20220802