KR102168913B1 - 신호 처리 장치, 통신 시스템, 신호 처리 장치에서 실시되는 방법, 신호 처리 장치에서 실행되는 프로그램, 통신 단말에서 실시되는 방법, 및 통신 단말에서 실행되는 프로그램 - Google Patents

신호 처리 장치, 통신 시스템, 신호 처리 장치에서 실시되는 방법, 신호 처리 장치에서 실행되는 프로그램, 통신 단말에서 실시되는 방법, 및 통신 단말에서 실행되는 프로그램 Download PDF

Info

Publication number
KR102168913B1
KR102168913B1 KR1020197023457A KR20197023457A KR102168913B1 KR 102168913 B1 KR102168913 B1 KR 102168913B1 KR 1020197023457 A KR1020197023457 A KR 1020197023457A KR 20197023457 A KR20197023457 A KR 20197023457A KR 102168913 B1 KR102168913 B1 KR 102168913B1
Authority
KR
South Korea
Prior art keywords
text data
communication
data
text
communication terminal
Prior art date
Application number
KR1020197023457A
Other languages
English (en)
Other versions
KR20190105622A (ko
Inventor
히데카즈 히라오카
가즈아키 오키모토
가츠미 요코미치
Original Assignee
가부시키가이샤 사이언스 아츠
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 가부시키가이샤 사이언스 아츠 filed Critical 가부시키가이샤 사이언스 아츠
Publication of KR20190105622A publication Critical patent/KR20190105622A/ko
Application granted granted Critical
Publication of KR102168913B1 publication Critical patent/KR102168913B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M3/00—Automatic or semi-automatic exchanges
    • H04M3/42—Systems providing special services or facilities to subscribers
    • H04M3/56—Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
    • H04M3/563—User guidance or feature selection
    • H04M3/566—User guidance or feature selection relating to a participants right to speak
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M3/00—Automatic or semi-automatic exchanges
    • H04M3/42—Systems providing special services or facilities to subscribers
    • H04M3/56—Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/40—Processing or translation of natural language
    • G06F40/58—Use of machine translation, e.g. for multi-lingual retrieval, for server-side translation for client devices or for real-time translation
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/005—Language recognition
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/16—Arrangements for providing special services to substations
    • H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/16—Arrangements for providing special services to substations
    • H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1822—Conducting the conference, e.g. admission, detection, selection or grouping of participants, correlating users to one or more conference sessions, prioritising transmission
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M3/00—Automatic or semi-automatic exchanges
    • H04M3/42—Systems providing special services or facilities to subscribers
    • H04M3/56—Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
    • H04M3/568—Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities audio processing specific to telephonic conferencing, e.g. spatial distribution, mixing of participants
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/06—Selective distribution of broadcast services, e.g. multimedia broadcast multicast service [MBMS]; Services to user groups; One-way selective calling services
    • H04W4/08—User group management
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/06—Selective distribution of broadcast services, e.g. multimedia broadcast multicast service [MBMS]; Services to user groups; One-way selective calling services
    • H04W4/10—Push-to-Talk [PTT] or Push-On-Call services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/18—Information format or content conversion, e.g. adaptation by the network of the transmitted or received information for the purpose of wireless delivery to users or terminals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L5/00—Arrangements affording multiple use of the transmission path
    • H04L5/14—Two-way operation using the same type of signal, i.e. duplex
    • H04L5/16—Half-duplex systems; Simplex/duplex switching; Transmission of break signals non-automatically inverting the direction of transmission
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2203/00—Aspects of automatic or semi-automatic exchanges
    • H04M2203/20—Aspects of automatic or semi-automatic exchanges related to features of supplementary services
    • H04M2203/2061—Language aspects

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Human Computer Interaction (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Telephonic Communication Services (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Time-Division Multiplex Systems (AREA)
  • Communication Control (AREA)

Abstract

신호 처리 장치는, 복수의 통신 단말을 대응지어 군으로 하고, 상기 군에 속하는 어느 1개의 통신 단말로부터 상기 군에 속하는 그 외의 통신 단말로의 일대다의 통신을 제공한다. 신호 처리 장치는, 송신권 부여부, 텍스트화 처리부, 및 통신 제어부를 구비한다. 송신권 부여부는, 상기 군에 속하는 통신 단말의 어느 1개에 송신권을 준다. 텍스트화 처리부는, 상기 송신권을 갖는 통신 단말로부터 송신된 음성 데이터에 근거하여 텍스트 데이터를 작성한다. 통신 제어부는, 작성된 텍스트 데이터를 상기 군에 속하는 복수의 통신 단말의 적어도 1개에 송신한다.

Description

신호 처리 장치, 통신 시스템, 신호 처리 장치에서 실시되는 방법, 신호 처리 장치에서 실행되는 프로그램, 통신 단말에서 실시되는 방법, 및 통신 단말에서 실행되는 프로그램
본 발명은, 신호 처리 장치, 통신 시스템, 신호 처리 장치에서 실시되는 방법, 신호 처리 장치에서 실행되는 프로그램, 통신 단말에서 실시되는 방법, 및 통신 단말에서 실행되는 프로그램에 관한 것이다.
반이중의 음성 통신 방식인 PTT(Push To Talk) 통신이, 일대다(one to many)의 그룹 일제 음성 통신을 실현하는 기술로서 알려져 있다. PTT 통신에서는, 예컨대, 트랜시버, 및 무선기 등이 단말로서 이용된다. PTT 통신에서는, 단말에 마련되어 있는 통화용의 버튼을 유저가 누르고 있는 동안, 유저는, 그룹을 구성하는 상대에게 음성을 보내는 것이 가능하게 된다.
그리고, 최근, 스마트폰 등의, 복수의 용도에 대응 가능한 통신 단말의 보급에 따라, 음성 데이터를 포함하는 패킷을 동보(broadcast)적으로 복수의 장치에 송신하는 PoC(Push-to-Talk over Cellular)가 주목을 모으고 있다. PoC에서는, 음성 데이터를 송신하는 송신권을, 그룹을 구성하는 복수 대의 통신 단말 중 1대의 통신 단말이 취득한다. 그리고, 송신권을 취득한 통신 단말이 다른 통신 단말에 동보적으로 음성 데이터를 송신한다.
일대다의 그룹 일제 음성 통신을 실현하는 통신 시스템에서는, 음성 데이터의 수신자가 잘못 듣는 것 등에 근거하는 정보의 전달 미스가 일어날 수 있다. 그 때문에, 이런 종류의 통신 시스템에서는, 정보의 전달 미스를 저감 가능한 기술이 요구되고 있다.
그래서, 목적은, 일대다의 그룹 일제 음성 통신을 실현하는 통신 시스템으로서, 정보의 전달 미스를 저감 가능한 통신 시스템, 이 통신 시스템에서 이용되는 신호 처리 장치, 이 신호 처리 장치에서 실시되는 방법, 이 신호 처리 장치에서 실행되는 프로그램, 이 시스템에서 이용되는 통신 단말에서 실시되는 방법, 및 이 통신 단말에서 실행되는 프로그램을 제공하는 것에 있다.
본 발명과 관련되는 신호 처리 장치는, 복수의 통신 단말을 대응지어 군(群)으로 하고, 상기 군에 속하는 어느 1개의 통신 단말로부터 상기 군에 속하는 그 외의 통신 단말로의 일대다의 통신을 제공한다. 신호 처리 장치는, 송신권 부여부, 텍스트화 처리부, 및 통신 제어부를 구비한다. 송신권 부여부는, 상기 군에 속하는 복수의 통신 단말의 어느 1개에, 데이터를 송신할 권리인 송신권을 준다. 텍스트화 처리부는, 상기 송신권을 갖는 통신 단말로부터 송신된 음성 데이터에 근거하여 텍스트 데이터를 작성하고, 상기 텍스트 데이터를 작성하면 텍스트화가 완료된 취지를, 상기 군에 속하는 복수의 통신 단말에 통지한다. 통신 제어부는, 상기 텍스트화가 완료된 취지의 통지 후에, 상기 작성된 텍스트 데이터를 상기 군에 속하는 복수의 통신 단말의 적어도 1개에 송신한다.
또한, 본 발명과 관련되는 통신 시스템은, 복수의 통신 단말, 및 신호 처리 장치를 구비한다. 신호 처리 장치는, 상기 복수의 통신 단말을 대응지어 군으로 하고, 상기 군에 속하는 어느 1개의 통신 단말로부터 상기 군에 속하는 그 외의 통신 단말로의 일대다의 통신을 제공한다. 신호 처리 장치는, 송신권 부여부, 텍스트화 처리부, 및 통신 제어부를 갖는다. 송신권 부여부는, 상기 군에 속하는 복수의 통신 단말의 어느 1개에, 데이터를 송신할 권리인 송신권을 준다. 텍스트화 처리부는, 상기 송신권을 갖는 통신 단말로부터 송신된 음성 데이터에 근거하여 텍스트 데이터를 작성하고, 상기 텍스트 데이터를 작성하면 텍스트화가 완료된 취지를, 상기 군에 속하는 복수의 통신 단말에 통지한다. 통신 제어부는, 상기 텍스트화가 완료된 취지의 통지 후에, 상기 작성된 텍스트 데이터를 상기 군에 속하는 복수의 통신 단말의 적어도 1개에 송신한다.
또한, 본 발명과 관련되는 통신 방법은, 복수의 통신 단말을 대응지어 군으로 하고, 상기 군에 속하는 어느 1개의 통신 단말로부터 상기 군에 속하는 그 외의 통신 단말로의 일대다의 통신을 제공하는 신호 처리 장치에서 실시된다. 통신 방법은, 상기 군에 속하는 복수의 통신 단말 중, 데이터를 송신할 권리인 송신권이 주어진 통신 단말로부터 송신되는 음성 데이터에 근거하여 텍스트 데이터를 작성하는 스텝과, 상기 텍스트 데이터를 작성하면 텍스트화가 완료된 취지를, 상기 군에 속하는 복수의 통신 단말에 통지하는 스텝과, 상기 텍스트화가 완료된 취지의 통지 후에, 상기 작성한 텍스트 데이터를 상기 군에 속하는 복수의 통신 단말의 적어도 1개에 송신하는 스텝을 포함한다.
또한, 본 발명과 관련되는 통신 방법은, 복수의 통신 단말로 대응지어진 군에 속하는 복수의 통신 단말 사이에서, 일대다의 통신을 실시하는 통신 단말에서 실시된다. 통신 방법은, 상기 복수의 통신 단말의 어느 1개로부터 송신된 음성 데이터의 텍스트화가 완료된 취지의 텍스트화 완료 통지를 수신하는 스텝과, 상기 수신한 텍스트화 완료 통지에 따라, 상기 텍스트화에 의해 작성된 텍스트 데이터의 송신을 요구하는 요구 신호를 송신하는 스텝과, 상기 요구 신호에 따라 회신되는 텍스트 데이터를 수신하는 스텝과, 상기 수신한 텍스트 데이터에 근거하는 문자를 표시부에 표시하는 스텝을 포함한다.
도 1은 본 실시 형태와 관련되는 통신 시스템의 기능 구성을 나타내는 블록도이다.
도 2는 도 1에 나타내어지는 처리 서버의 기능 구성을 나타내는 블록도이다.
도 3은 도 1에 나타내어지는 통신 단말의 기능 구성을 나타내는 블록도이다.
도 4는 도 1에 나타내어지는 통신 시스템에 있어서 음성 통신이 실시될 때의, 처리 서버, 및 통신 단말의 동작을 설명하는 도면이다.
도 5는 도 1에 나타내어지는 기억부에 기억되는 관리 테이블을 나타내는 도면이다.
도 6은 도 1에 나타내어지는 기억부에 기억되는 이용자 관리 테이블을 나타내는 도면이다.
도 7은 도 3에 나타내어지는 처리부가 작성하는 음성 데이터의 구조를 나타내는 도면이다.
도 8은 도 1에 나타내어지는 처리 서버가 텍스트 데이터, 및 번역 텍스트 데이터를 작성할 때의 동작을 설명하는 도면이다.
도 9는 도 2에 나타내어지는 기억 제어부가 작성하는 통화 데이터의 구조를 나타내는 모식도이다.
도 10은 도 2에 나타내어지는 텍스트화 처리부가 작성하는 텍스트 데이터의 구조를 나타내는 도면이다.
도 11은 도 2에 나타내어지는 번역 처리부가 작성하는 번역 텍스트 데이터의 구조를 나타내는 도면이다.
도 12는 도 1에 나타내어지는 통신 단말이 음성과 대응하는 문자를 디스플레이에 표시시킬 때의 처리 서버, 및 통신 단말의 동작을 설명하는 도면이다.
도 13은 도 12에 나타내어지는 처리를 거쳐 표시되는 문자를 나타내는 도면이다.
도 14는 도 1에 나타내어지는 통신 단말이 텍스트 데이터 및 번역 텍스트 데이터에 근거하는 문자를 디스플레이에 표시시킬 때의 처리 서버, 및 통신 단말의 동작을 설명하는 도면이다.
도 15는 도 14에 나타내어지는 처리를 거쳐 통신 단말에 표시되는 문자를 나타내는 도면이다.
도 16은 도 1에 나타내어지는 통신 단말이 음성과 대응하는 문자를 디스플레이에 표시시킬 때의 처리 서버, 및 통신 단말의 동작을 설명하는 도면이다.
도 17은 도 1에 나타내어지는 통신 단말에 표시되는 텍스트화 완료 통지를 나타내는 도면이다.
도 18은 도 1에 나타내어지는 통신 단말이 텍스트 데이터 및 번역 텍스트 데이터에 근거하는 문자를 디스플레이에 표시시킬 때의 처리 서버, 및 통신 단말의 동작을 설명하는 도면이다.
도 19는 도 1에 나타내어지는 통신 단말이 디스플레이에 표시하고 있는 문자에 대응하는 음성을 재생시킬 때의 처리 서버, 및 통신 단말의 동작을 설명하는 도면이다.
도 20은 도 1에 나타내어지는 통신 단말이, 디스플레이에 표시되는 문자를 수정할 때의 처리 서버, 및 통신 단말의 동작을 설명하는 도면이다.
도 21은 도 1에 나타내어지는 통신 단말이, 수정된 문자를 디스플레이에 표시시킬 때의 처리 서버, 및 통신 단말의 동작을 설명하는 도면이다.
도 22는 도 1에 나타내어지는 통신 단말이, 수정 후에 번역된 문자를 디스플레이에 표시시킬 때의 처리 서버, 및 통신 단말의 동작을 설명하는 도면이다.
이하, 실시의 형태에 대하여, 도면을 참조하여 설명한다.
도 1은 본 실시 형태와 관련되는 통신 시스템(1)의 기능 구성의 예를 나타내는 블록도이다. 도 1에 나타내어지는 통신 시스템(1)은, 예컨대, PoC(Push-to-Talk over Cellular)를 이용하고, 그룹 단위에서의 일대다의 음성 통신을 실현한다. 도 1에 나타내어지는 통신 시스템(1)은, 예컨대, 처리 서버(10), 통신 단말(20-1~20-m), 및 기지국(30-1~30-n)을 구비하고 있다.
처리 서버(10), 및 기지국(30-1~30-n)은, 인터넷, 및 통신 사업자가 제공하는 통신망 등의 네트워크를 통해서 접속하고 있다. 통신 단말(20-1~20-m)은, 기지국(30-1~30-n) 중, 현재 존재하고 있는 위치를 포함하여 무선 에리어를 형성하고 있는 기지국과 무선 접속한다.
처리 서버(10)는, 예컨대, 통신 단말(20-1~20-m) 중, 송신권을 갖는 통신 단말로부터 송신된 음성 데이터를, 송신원의 이용자와 동일한 토크 그룹에 참가하는 복수의 이용자가 소지하는 통신 단말에 동보적으로 송신하기 위한 제어를 실시하는 신호 처리 장치이다. 본 실시 형태에 있어서, 송신권이란, PoC에 있어서, 음성 데이터를 송신할 수 있는 권리를 의미한다.
도 2는 도 1에 나타내어지는 처리 서버(10)의 기능 구성의 예를 나타내는 블록도이다. 도 2에 나타내어지는 처리 서버(10)는, 예컨대, 처리부(11), 기억부(12), 및 통신 인터페이스(13)를 구비한다. 처리부(11), 기억부(12), 및 통신 인터페이스(13)는, 예컨대, 버스를 통해서 서로 통신 가능하게 접속되어 있다.
처리부(11)는, 예컨대, CPU(Central Processing Unit), CPU가 처리를 실행할 때에 이용하는 제 1 메모리, 및 CPU와 제 1 메모리의 사이에 마련되는 제 2 메모리를 구비한다. 제 1 메모리는, 이른바 주 기억 장치이고, 예컨대, DRAM(Dynamic Random Access Memory)에 의해 구성된다. 제 2 메모리는, 이른바 캐시 메모리이고, 예컨대, SRAM(Static RAM)에 의해 구성된다.
CPU는, 예컨대, 기억부(12)에 기억되어 있는 애플리케이션 프로그램을 제 1, 및 제 2 메모리에 읽어 들인다. CPU는, 제 1, 및 제 2 메모리에 읽어 들여진 애플리케이션 프로그램을 실행한다. 이것에 의해, 처리부(11)는, 애플리케이션 프로그램에 대응하는 다양한 기능을 실현한다.
기억부(12)는, 다양한 정보를 기억하는 HDD(hard disk drive), 및 SSD(solid state drive) 등의 비휘발성의 기억 회로를 구비하는, 이른바 보조 기억 장치이다. 또, 기억부(12)는, CD-ROM, DVD, 및 플래시 메모리 등의 가반성 기억 매체와의 사이에서 다양한 정보를 읽고 쓰는 구동 장치 등이더라도 좋다. 기억부(12)는, 본 실시 형태와 관련되는 애플리케이션 프로그램을 기억하고 있다.
또한, 기억부(12)는, 처리부(11)로부터의 제어에 따라, 토크 그룹에 참가하는 이용자에 관한 이용자 정보를 기억한다. 또한, 기억부(12)는, 처리부(11)로부터의 제어에 따라, 송신권을 갖는 통신 단말로부터 송신되는 음성 데이터에 근거하여 작성되는 통화 데이터를 기억한다. 또한, 기억부(12)는, 처리부(11)로부터의 제어에 따라, 통화 데이터를 텍스트화하여 얻어지는 텍스트 데이터, 및 송신권을 갖는 통신 단말에 의해 수정된 텍스트 데이터를 기억한다. 또한, 기억부(12)는, 처리부(11)로부터의 제어에 따라, 텍스트 데이터를 번역하여 얻어지는 번역 텍스트 데이터를 기억한다.
통신 인터페이스(13)는, 네트워크와 접속하는 회로이다. 통신 인터페이스(13)는, 네트워크를 통해서, 기지국(30-1~30-n)과 무선 접속하고 있는 통신 단말(20-1~20-m) 중 적어도 어느 하나에 데이터를 송신한다. 또한, 통신 인터페이스(13)는, 네트워크를 통해서, 기지국(30-1~30-n)과 무선 접속하고 있는 통신 단말(20-1~20-m) 중 적어도 어느 하나로부터 송신되는 데이터를 수신한다.
도 2에 나타내어지는 처리부(11)는, 기억부(12)에 기억되어 있는 애플리케이션 프로그램을 실행함으로써, 그 애플리케이션 프로그램에 대응하는 기능을 실현한다. 예컨대, 처리부(11)는, 애플리케이션 프로그램을 실행함으로써, 등록 처리부(111), 송신권 부여부(112), 통신 제어부(113), 기억 제어부(114), 텍스트화 처리부(115), 및 번역 처리부(116)의 기능을 실현한다.
도 2에 나타내어지는 처리부(11)는, 복수의 CPU가 조합되어 형성되어 있더라도 상관없다. 즉, 도 2에 나타내어지는 등록 처리부(111), 송신권 부여부(112), 통신 제어부(113), 기억 제어부(114), 텍스트화 처리부(115), 및 번역 처리부(116)는, 예컨대, 각 CPU가 애플리케이션 프로그램을 실행함으로써 실현되더라도 상관없다.
또한, 처리부(11)는, 등록 처리부(111), 송신권 부여부(112), 통신 제어부(113), 기억 제어부(114), 텍스트화 처리부(115), 및 번역 처리부(116)의 기능을 각각 갖는 전용 하드웨어 구성에 의해 형성되어 있더라도 상관없다. 또한, 처리부(11)는, 등록 처리부(111), 송신권 부여부(112), 통신 제어부(113), 기억 제어부(114), 텍스트화 처리부(115), 및 번역 처리부(116)의 기능을 각각 갖는 전용 하드웨어 회로를 포함한 특정 용도용 집적 회로(Application Specific Integrated Circuit : ASIC), 필드 프로그래머블 게이트 어레이(Field Programmable Gate Array : FPGA), 다른 복합 프로그래머블 논리 디바이스(Complex Programmable Logic Device : CPLD), 또는 단순 프로그래머블 논리 디바이스(Simple Programmable Logic Device : SPLD)에 의해 형성되어 있더라도 상관없다.
등록 처리부(111)는, 일대다의 음성 통신을 실시하는 토크 그룹에 참가하는 이용자를 등록한다. 구체적으로는, 예컨대, 등록 처리부(111)는, 통신 단말(20-1~20-m)로부터의 요구에 근거하여, 소정의 토크 그룹에 참가하는 이용자에 대한 정보인 이용자 정보를 취득한다. 등록 처리부(111)는, 취득한 이용자 정보를, 참가하는 토크 그룹과 관련지어 기억부(12), 및 제 1 메모리에 기억한다.
이용자 정보에는, 예컨대, 토크 그룹의 ID, 토크 그룹에 참가하는 이용자의 ID, 이용자가 소지하는 통신 단말의 IP 어드레스, 이용자가 설정한 언어에 대한 언어 코드, 이용자의 로그인 상태, 및 이용자가 소지하는 통신 단말의 위치 정보 등이 포함된다. 등록 처리부(111)는, 어느 토크 그룹에 어느 유저가 참가하는지의 정의 정보, 즉, 예컨대, 토크 그룹의 ID, 및 토크 그룹에 참가하는 이용자의 ID를, 기억부(12)에 기억한다. 또한, 등록 처리부(111)는, 통신 단말(20)의 상태에 따라 동적으로 변화하는 정보, 즉, 예컨대, IP 어드레스, 언어 코드, 로그인 상태, 및 위치 정보 등을, 제 1 메모리에 기억한다.
송신권 부여부(112)는, 소정의 토크 그룹에 참가하고 있는 이용자가 소지하는 통신 단말 중 어느 하나에 송신권을 준다.
통신 제어부(113)는, 토크 그룹에 참가하는 이용자가 소지하는 통신 단말 사이에서, 일대다의 음성 통신이 실현되도록 통신을 제어한다. 구체적으로는, 예컨대, 통신 제어부(113)는, 송신권이 주어진 통신 단말로부터 송신되는 음성 데이터를, 동일한 토크 그룹에 참가하고 있는 이용자가 소지하는 통신 단말에 송신한다.
또한, 통신 제어부(113)는, 토크 그룹에 참가하는 이용자가 소지하는 통신 단말에, 음성 데이터로부터 변환되는 텍스트 데이터를 송신하도록 통신을 제어한다. 구체적으로는, 예컨대, 통신 제어부(113)는, 음성 데이터가 텍스트 데이터로 변환되면, 텍스트화가 완료된 취지를, 토크 그룹에 참가하고 있는 이용자가 소지하는 통신 단말에 송신한다. 통신 제어부(113)는, 통신 단말로부터 텍스트 데이터의 송신이 요구되면, 텍스트 데이터를 요구원의 통신 단말에 송신한다.
또한, 통신 제어부(113)는, 번역을 요하는 통신 단말에, 텍스트 데이터를 소정의 언어로 번역한 번역 텍스트 데이터를 송신하도록 통신을 제어한다. 구체적으로는, 예컨대, 통신 제어부(113)는, 텍스트 데이터의 번역이 완료되면, 번역이 완료된 취지를, 토크 그룹에 참가하고 있는 이용자가 소지하는 통신 단말에 송신한다. 통신 제어부(113)는, 통신 단말로부터 번역 텍스트 데이터의 송신이 요구되면, 번역 텍스트 데이터를 요구원의 통신 단말에 송신한다.
또한, 통신 제어부(113)는, 송신권을 갖는 통신 단말에 의해 텍스트 데이터가 수정된 경우, 토크 그룹에 참가하는 이용자가 소지하는 통신 단말에, 수정된 텍스트 데이터를 송신하도록 통신을 제어한다. 구체적으로는, 예컨대, 통신 제어부(113)는, 송신권을 갖는 통신 단말에 의해 텍스트 데이터가 수정되면, 표시를 갱신하는 취지를, 토크 그룹에 참가하고 있는 이용자가 소지하는 통신 단말에 송신한다. 통신 제어부(113)는, 통신 단말로부터 수정된 텍스트 데이터의 송신이 요구되면, 수정된 텍스트 데이터를 요구원의 통신 단말에 송신한다.
또한, 통신 제어부(113)는, 통화 데이터의 재생을 요구하는 통신 단말에, 통화 데이터를 송신하도록 통신을 제어한다. 구체적으로는, 예컨대, 통신 제어부(113)는, 토크 그룹에 참가하고 있는 이용자로부터 통화 데이터의 재생이 요구되면, 기억부(12)에 기억되는 통화 데이터를, 요구원의 통신 단말에 송신한다.
기억 제어부(114)는, 수신한 음성 데이터, 및 작성된 각종 데이터의 기억 처리를 제어한다. 구체적으로는, 예컨대, 기억 제어부(114)는, 송신권을 갖는 통신 단말로부터 송신되어 온 음성 데이터를 캐시 메모리에 유지한다. 또한, 예컨대, 기억 제어부(114)는, 캐시 메모리에 유지되어 있는 소정 용량의 음성 데이터를 합쳐서, 통화 데이터로서 기억부(12)에 기억한다. 또한, 예컨대, 기억 제어부(114)는, 텍스트화 처리부(115)에 의해 취득된 텍스트 데이터, 및 송신권을 갖는 통신 단말에 의해 수정된 텍스트 데이터를 기억부(12)에 기억한다. 또한, 예컨대, 기억 제어부(114)는, 번역 처리부(116)에 의해 작성되는 번역 텍스트 데이터를 기억부(12)에 기억한다. 또한, 예컨대, 기억 제어부(114)는, 기억부(12)에 기억되어 있는 통화 데이터, 텍스트 데이터, 및 번역 텍스트 데이터를, 요구에 따라 읽어내고, 요구원에 송신한다.
텍스트화 처리부(115)는, 송신권을 갖는 통신 단말로부터 송신되어 온 음성 데이터를, 텍스트 데이터로 변환한다. 구체적으로는, 예컨대, 텍스트화 처리부(115)는, 캐시 메모리에 유지되어 있는 소정 용량의 음성 데이터를, 문법에 관한 정보, 언어 구조에 관한 정보, 음성 데이터의 조성에 관한 정보, 및 기억하고 있는 단어 정보 등에 근거하여 텍스트 데이터로 변환한다. 또, 텍스트화 처리부(115)에 의해 채용되는 음성-텍스트 변환 처리는, 기존의 기술을 이용하더라도 상관없다.
번역 처리부(116)는, 텍스트화 처리부(115)에 의해 변환된 텍스트 데이터에 대하여 번역 처리를 실시함으로써, 번역 텍스트 데이터를 작성한다. 구체적으로는, 예컨대, 번역 처리부(116)는, 텍스트화 처리부(115)에 의해 변환된 텍스트 데이터를, 토크 그룹에 참가하고 있는 이용자와 관련지어져 있는 언어 코드에 대응하는 언어의 텍스트 데이터로 번역한다. 또, 번역 처리부(116)에 의해 채용되는 번역 처리는, 통계적 기계 번역, 및 뉴럴 기계 번역 등, 기존의 기술을 이용하더라도 상관없다.
또, 처리 서버(10)는, 입력 인터페이스를 갖고 있더라도 좋다. 입력 인터페이스는, 예컨대, 마우스, 키보드, 및, 조작면에 접촉함으로써 지시가 입력되는 터치 패널 등에 의해 실현된다. 입력 인터페이스는, 조작자로부터의 입력 지시를 전기 신호로 변환하고, 전기 신호를 처리부(11)에 출력한다. 또, 입력 인터페이스는, 마우스, 및 키보드 등의 물리적인 조작 디바이스로 한정되지 않는다. 입력 인터페이스에는, 예컨대, 외부의 입력 기기로부터 입력되는 전기 신호를 받아들이는 수신 포트가 포함되더라도 좋다.
또한, 처리 서버(10)는, 출력 인터페이스를 갖고 있더라도 좋다. 출력 인터페이스는, 예컨대, 표시 기기, 및 인쇄 기기 등에 의해 실현된다. 표시 기기로서는, 예컨대, CRT 디스플레이, 액정 디스플레이, 유기 EL 디스플레이, LED 디스플레이, 및 플라즈마 디스플레이 등, 임의의 디스플레이가 이용 가능하다. 표시 기기는, 표시 대상에 대한 화상 데이터를 표시한다. 인쇄 기기는, 예컨대, 프린터이다. 인쇄 기기는, 인쇄 대상에 대한 화상 데이터를 소정 용지에 인쇄한다. 또, 출력 인터페이스는, 표시 기기, 및 인쇄 기기 등의 물리적인 출력 장치로 한정되지 않는다. 출력 인터페이스에는, 예컨대, 외부의 출력 장치에 화상 데이터를 송신하는 송신 포트가 포함되더라도 좋다.
기지국(30-1~30-n)은, 소정 사이즈의 에리어마다 마련되고, 소정의 무선 에리어를 형성한다. 기지국(30-1~30-n)은, 자신의 장치가 형성하는 무선 에리어 내에 존재하는 통신 단말(20-1~20-m)과 무선 접속한다.
통신 단말(20-1~20-m)은, 이용자가 소지하는 단말이고, 예컨대, 휴대 전화, 스마트폰, 태블릿 PC, 및 소정의 전용 단말 등이다. 통신 단말(20-1~20-m)은, 처리 서버(10)를 통해서, PoC를 이용한 일대다의 음성 통신을 실시한다. 예컨대, 통신 단말(20-1~20-m)은, 이용자로부터의 조작에 따라, 그룹 토크에 참가한다. 통신 단말(20-1~20-m)의 어느 하나는, 이용자로부터의 조작에 따라 송신권을 취득한다. 송신권을 취득한 통신 단말은, 이용자로부터 입력되는 음성을 받아들이고, 받아들인 음성에 근거하는 음성 데이터를, 처리 서버(10)를 통해서 동일한 그룹 토크에 참가하는 다른 통신 단말에 송신한다. 또한, 통신 단말(20-1~20-m)은, 처리 서버(10)에서 음성에 근거하여 작성되는 텍스트 데이터를 수신하고, 텍스트 데이터에 근거하는 문자를 자신의 장치의 디스플레이에 표시한다.
도 3은 도 1에 나타내어지는 통신 단말(20)의 기능 구성의 예를 나타내는 블록도이다. 도 3에 나타내어지는 통신 단말(20)은, 예컨대, 처리부(21), 기억부(22), 입력 인터페이스(23), 출력 인터페이스(24), 통신 인터페이스(25), 및 GPS 수신기(26)를 구비한다. 또, 통신 단말(20-1~20-m)의 구성은 각각 마찬가지이기 때문에, 도 3의 설명에서는, 통신 단말(20)로서 설명을 한다.
처리부(21)는, 예컨대, CPU, 및 CPU가 처리를 실행할 때에 이용하는 주 기억 장치인, 예컨대, RAM(Random Access Memory) 등의 휘발성 메모리를 구비한다. CPU는, 예컨대, 기억부(22)에 기억되어 있는 애플리케이션 프로그램을 RAM에 읽어 들인다. CPU는, RAM에 읽어 들여진 애플리케이션 프로그램을 실행한다. 이것에 의해, 처리부(21)는, 애플리케이션 프로그램에 대응하는 다양한 기능을 실현한다.
기억부(22)는, NAND형, 또는 NOR형 플래시 메모리 등의 비휘발성의 기억 회로를 구비하는, 이른바 보조 기억 장치이다. 또, 기억부(22)는, SD 카드, 및 마이크로 SD 카드 등의 가반성 기억 매체와의 사이에서 다양한 정보를 읽고 쓰는 구동 장치 등이더라도 좋다. 기억부(22)는, 본 실시 형태와 관련되는 애플리케이션 프로그램을 기억하고 있다. 또한, 기억부(22)는, 자신의 단말이 참가 가능한 그룹 토크에 대한 정보가 기억되어 있다.
입력 인터페이스(23)는, 예컨대, 버튼, 조작면에 접촉함으로써 지시가 입력되는 터치 패널, 및 음성을 입력하는 마이크 등에 의해 실현된다. 입력 인터페이스(23)는, 조작자로부터의 입력 지시를 전기 신호로 변환하고, 전기 신호를 처리부(21)에 출력한다.
출력 인터페이스(24)는, 예컨대, 표시 기기, 및 스피커에 의해 실현된다. 표시 기기로서는, 예컨대, 액정 디스플레이, 및 유기 EL 디스플레이 등이다. 표시 기기는, 표시 대상에 대한 화상 데이터를 표시한다. 스피커는, 음성 통신에 수반하는 음성 데이터를 재생한다.
통신 인터페이스(25)는, 기지국(30-1~30-n)과 무선 접속하는 회로이다. 통신 인터페이스(25)는, 예컨대, 안테나, 및 무선부에 의해 실현된다. 안테나는, 도래하여 온 무선 신호를 수신한다. 또한, 무선부로부터 출력되는 무선 신호를 송신한다. 무선부는, 안테나에 의해 수신된 무선 신호를, 미리 설정되는 복조 방식에 준거하여 변환하고, 변환한 데이터를 처리부(21)에 출력한다. 또한, 무선부는, 처리부(21)에서 작성된 데이터를, 미리 설정되는 변조 방식에 준거하여 무선 신호로 변환하고, 변환한 무선 신호를 안테나에 출력한다.
GPS 수신기(26)는, GPS 위성으로부터 송신되는 신호를 수신하고, 수신한 신호에 근거하여 위치 정보를 작성한다.
도 3에 나타내어지는 처리부(21)는, 기억부(22)에 기억되어 있는 애플리케이션 프로그램을 실행함으로써, 그 애플리케이션 프로그램에 대응하는 기능을 실현한다. 예컨대, 처리부(21)는, 애플리케이션 프로그램을 실행함으로써, 통신 제어부(211), 기억 제어부(212), 표시 제어부(213), 재생 제어부(214), 낭독 제어부(215), 및 수정 제어부(216)의 기능을 실현한다.
통신 제어부(211)는, 처리 서버(10)와의 통신을 제어한다. 구체적으로는, 예컨대, 송신권을 갖는 통신 단말(20)의 통신 제어부(211)는, 마이크로부터 입력된 음성을, TCP/IP 베이스의 독자 프로토콜에 준거하여 변환한다. 통신 제어부(211)는, 변환 후의 음성 데이터를, 네트워크 및 기지국(30)을 통해서 처리 서버(10)에 송신한다. 또한, 송신권을 갖는 통신 단말(20)의 통신 제어부(211)는, 네트워크 및 기지국(30)을 통해서 처리 서버(10)로부터 송신되는 텍스트 데이터를 수신한다.
또한, 예컨대, 송신권을 갖고 있지 않은 통신 단말(20)의 통신 제어부(211)는, 처리 서버(10)로부터 송신되는 음성 데이터, 및 이 음성 데이터가 텍스트화된 텍스트 데이터를 수신한다. 또한, 송신권을 갖고 있지 않은 통신 단말(20)에 설정되어 있는 언어가, 송신권을 갖고 있는 통신 단말(20)에 설정되어 있는 언어와 상이한 경우, 통신 제어부(211)는, 텍스트 데이터가 설정되어 있는 언어로 번역된 번역 텍스트 데이터를, 처리 서버(10)로부터 수신한다.
기억 제어부(212)는, 수신한 다양한 통지, 텍스트 데이터, 및 번역 텍스트 데이터의 기억 처리를 제어한다. 구체적으로는, 예컨대, 기억 제어부(212)는, 다양한 통지, 텍스트 데이터, 및 번역 텍스트 데이터가 수신되면, 다양한 통지, 텍스트 데이터, 및 번역 텍스트 데이터를 RAM 등의 휘발성 메모리에 기억시킨다. 휘발성 메모리에 기억된 다양한 통지, 텍스트 데이터, 및 번역 텍스트 데이터는, PoC를 이용한 일대다의 음성 통신을 실행하는 애플리케이션 프로그램의 실행을 종료했을 때, 및 통신 단말(20)의 전원을 오프로 했을 때 등에, 휘발성 메모리로부터 소거된다. 이것에 의해, 정보 누설 등의 위험을 회피하는 것이 가능하게 된다.
표시 제어부(213)는, 출력 인터페이스(24)인 디스플레이로의 표시 처리를 제어한다. 구체적으로는, 예컨대, 표시 제어부(213)는, 수신한 다양한 통지, 및, 수신한 텍스트 데이터 및 번역 텍스트 데이터에 근거하는 문자를 표시하도록, 디스플레이를 제어한다.
재생 제어부(214)는, 디스플레이에 표시되어 있는, 텍스트 데이터에 근거하는 문자에 대응하는 음성의 재생을 제어한다. 구체적으로는, 예컨대, 재생 제어부(214)는, 디스플레이에 표시되어 있는, 텍스트 데이터에 근거하는 문자에 대응하는 통화 데이터를 재생하도록, 출력 인터페이스(24)인 스피커를 제어한다.
낭독 제어부(215)는, 디스플레이에 표시되어 있는, 번역 텍스트 데이터에 근거하는 문자의 낭독을 제어한다. 구체적으로는, 예컨대, 낭독 제어부(215)는, 디스플레이에 표시되어 있는, 번역 텍스트 데이터에 근거하는 문자에 대한 낭독 요구가 있는 경우, 요구의 대상이 되는 문자를 음성 데이터로 변환한다. 그리고, 낭독 제어부(215)는, 변환한 음성 데이터를 재생하도록, 출력 인터페이스(24)인 스피커를 제어한다. 또, 낭독 제어부(215)는, 예컨대, OS(Operating System)에 의해 제공되고 있는 API(Application Program Interface)에 의해 실현되더라도 상관없다.
수정 제어부(216)는, 디스플레이에 표시되어 있는 문자의 수정 처리를 제어한다. 구체적으로는, 예컨대, 수정 제어부(216)는, 디스플레이에 표시되어 있는 문자로의 수정 요구에 따라, 표시되어 있는 문자를 수정함과 아울러, 수정된 텍스트 데이터를 처리 서버(10)에 송신한다.
다음으로, 이상과 같이 구성된 통신 시스템(1)에 있어서의 처리 서버(10), 및 통신 단말(20-1~20-m)의 동작을 설명한다. 또, 이하에서는, 통신 단말(20-1~20-3)이 토크 그룹 G1에 참가하고, 음성 통신을 이용하는 경우를 예로 설명을 진행시킨다.
도 4는 도 1에 나타내어지는 통신 시스템(1)에 있어서 음성 통신이 실시될 때의, 처리 서버(10), 및 통신 단말(20-1~20-3)의 동작의 예를 설명하는 도면이다. 또, 도 4의 설명에 있어서, 통신 단말(20-1~20-3)의 기억부(22)에는, 토크 그룹 G1에 대한 정보가 기억되어 있다. 즉, 통신 단말(20-1~20-3)이 토크 그룹 G1에 참가 가능한 상태로 되어 있다.
우선, 통신 단말(20-1~20-3)의 이용자는, 통신 단말(20-1~20-3)을 조작하여, PoC를 이용한 일대다의 음성 통신을 실행하는 애플리케이션 프로그램을 기동한다(스텝 S41). 통신 단말(20-1~20-3)의 표시 제어부(213)는, 출력 인터페이스(24)인 디스플레이에, 선택 가능한 토크 그룹으로서, 예컨대, 토크 그룹 G1을 표시한다(스텝 S42). 또, 디스플레이에는, 참가 가능한 복수의 토크 그룹이 표시되어 있더라도 상관없다.
통신 단말(20-1~20-3)의 이용자는, 디스플레이에 표시되는 토크 그룹 G1을 선택한다. 또, 참가 빈도, 및 이용자의 설정 등에 근거하여, 통신 단말(20-1~20-3)의 처리부(21)가, 참가하는 토크 그룹 G1을 자동적으로 선택하더라도 상관없다. 토크 그룹 G1이 선택되면, 통신 단말(20-1~20-3)의 표시 제어부(213)는, 본 서비스에 있어서, 사용 가능한 언어의 리스트를 디스플레이에 표시시킨다. 통신 단말(20-1~20-3)의 이용자는, 디스플레이에 표시되는 복수의 언어 중, 사용을 희망하는 언어를 선택한다(스텝 S43). 또한, 토크 그룹 G1이 선택되면, 통신 단말(20-1~20-3)의 처리부(21)는, 토크 그룹이 선택되었을 때의 위치 정보를, GPS 수신기(26)에 작성시킨다.
통신 단말(20-1~20-3)의 통신 제어부(211)는, 토크 그룹, 및 사용 언어가 선택되면, 선택된 토크 그룹의 ID(이하, 토크 그룹 ID라고 칭한다), 자신의 단말에 설정되어 있는 ID(이하, 유저 ID라고 칭한다), 선택된 언어에 대한 정보(이하, 언어 코드라고 칭한다), 및 취득한 위치 정보 등을 포함하는 정보 데이터를 작성한다. 정보 데이터는, 예컨대, 패킷 구조를 갖는다. 통신 단말(20-1, 20-2)은, 작성한 정보 데이터를, 기지국(30-1), 및 네트워크 NW를 통해서 처리 서버(10)에 송신한다(스텝 S44). 또한, 통신 단말(20-3)은, 작성한 정보 데이터를, 기지국(30-2), 및 네트워크 NW를 통해서 처리 서버(10)에 송신한다(스텝 S44).
처리 서버(10)의 등록 처리부(111)는, 통신 단말(20-1~20-3)로부터 송신되어 온 정보 데이터에 근거하여, 토크 그룹에 참가하는 이용자를, 참가하는 토크 그룹과 관련지어 기억부(12), 및 처리부(11)의 제 1 메모리에 기억한다(스텝 S45). 구체적으로는, 예컨대, 등록 처리부(111)는, 정보 데이터에 근거하여, 기억부(12)에 기억하는, 토크 그룹에 참가하는 이용자를 관리하기 위한 관리 테이블을 갱신한다. 도 5는 도 1에 나타내어지는 기억부(12)에 기억되는 관리 테이블의 예를 나타내는 도면이다. 도 5에 나타내어지는 관리 테이블에서는, 3개의 토크 그룹이 관리되고 있다. 예컨대, 토크 그룹 ID:Group01의 토크 그룹 G1에는, 통신 단말(20-1~20-3)의 이용자인, 유저 ID:User01~03이 참가하고 있는 것이 기억되어 있다.
또한, 등록 처리부(111)는, 통신 단말(20-1~20-3)로부터 송신되어 온 정보 데이터에 근거하여, 토크 그룹에 참가하는 이용자에 관한 정보를 처리부(11)의 제 1 메모리에 기억한다. 구체적으로는, 예컨대, 등록 처리부(111)는, 정보 데이터에 근거하여, 제 1 메모리에 기억하는, 동적으로 변화하는 이용자의 정보를 관리하기 위한 이용자 관리 테이블을 갱신한다. 도 6은 도 1에 나타내어지는 처리부(11)의 제 1 메모리에 기억되는 이용자 관리 테이블의 예를 나타내는 도면이다. 도 6에 나타내어지는 이용자 관리 테이블에서는, 토크 그룹에 참가하고 있는 이용자에 관한 정보가 관리되고 있다. 예컨대, User01에는, 통신 단말(20-1)의 IP 어드레스 01, 예컨대, 일본어를 나타내는 언어 코드 01, 및 위치 정보 01이 관련지어져 있다. 또한, User02에는, 통신 단말(20-2)의 IP 어드레스 02, 언어 코드 01, 및 위치 정보 02가 관련지어져 있다. 또한, User03에는, 통신 단말(20-3)의 IP 어드레스 03, 예컨대, 영어를 나타내는 언어 코드 02, 및 위치 정보 03이 관련지어져 있다.
또, 처리 서버(10)는, 통신 단말(20-1~20-3)의 위치 정보는 반드시 취득할 필요는 없다. 이때, 통신 단말(20-1~20-3)은, 위치 정보를 작성하지 않더라도 상관없다. 또한, 통신 단말(20-1~20-3)로부터 처리 서버(10)에 송신되는 정보 데이터에, 위치 정보가 포함되지 않더라도 상관없다.
통신 단말(20-1~20-3)의 표시 제어부(213)는, 토크 그룹, 및 사용 언어가 선택되면, 디스플레이에 PTT 통화 개시 요구 버튼을 표시한다(스텝 S46). 통신 단말(20-1)의 이용자는, 예컨대, 통신 단말(20-1)의 디스플레이에 표시되어 있는 PTT 통화 개시 요구 버튼을 누른다(스텝 S47). 이용자가 PTT 통화 개시 요구 버튼을 누르면, 통신 단말(20-1)의 통신 제어부(211)는, 기지국(30-1), 및 네트워크 NW를 통해서, 처리 서버(10)에 송신권의 취득을 요구하는 송신권 취득 요구 통지를, 유저 ID를 부여하여 송신한다(스텝 S48). 또, PTT 통화 개시 요구 버튼은, 디스플레이에 표시되는 것으로 한정되지 않는다. PTT 통화 개시 요구 버튼은, 예컨대, 통신 단말(20-1)의 입력 인터페이스(23)를 커넥터로서 접속하는 조작 디바이스에 마련되는 물리 버튼이더라도 상관없다.
처리 서버(10)의 송신권 부여부(112)는, 통신 단말(20-1)로부터 송신되는 송신권 취득 요구 통지를 수신하면, 통신 단말(20-1)에 송신권을 부여한다(스텝 S49). 통신 단말(20-1)의 이용자는, 송신권을 취득하면, 통신 단말(20-1)의 마이크로부터 음성을 입력한다(스텝 S410). 통신 단말(20-1)의 통신 제어부(211)는, 마이크로부터 입력된 음성에 근거하여 음성 데이터를 작성한다(스텝 S411). 음성 데이터는, 예컨대, TCP/IP 베이스의 독자 프로토콜에 준거한 패킷 구조를 갖는다.
도 7은 도 3에 나타내어지는 처리부(21)가 작성하는 음성 데이터의 구조의 예를 나타내는 모식도이다. 도 7에 나타내어지는 음성 데이터는, 토크 그룹 ID를 저장하는 영역, 발화자 ID를 저장하는 영역, 타임 스탬프를 저장하는 영역, 데이터 길이를 저장하는 영역, 및 실제 데이터를 저장하는 영역을 갖는다. 통신 단말(20-1)의 통신 제어부(211)는, 예컨대, 토크 그룹 ID를 저장하는 영역에 Group01을 저장하고, 발화자 ID를 저장하는 영역에 User01을 저장하고, 타임 스탬프를 저장하는 영역에 발화 개시 시각을 저장하고, 실제 데이터를 저장하는 영역에, 소정의 프레임 수만큼의 음성의 디지털 데이터를 저장하고, 데이터 길이를 저장하는 영역에, 음성의 디지털 데이터의 데이터 길이를 저장한다. 발화 개시 시각은, 통화가 개시된 시각을 나타낸다. 구체적으로는, 통신 제어부(211)는, 예컨대, 이용자가 PTT 통화 개시 요구 버튼을 누른 시각을, 통화 개시 시각으로서 설정한다.
통신 단말(20-1)은, 작성한 음성 데이터를 기지국(30-1), 및 네트워크 NW를 통해서 처리 서버(10)에 송신한다(스텝 S412).
처리 서버(10)의 통신 제어부(113)는, 송신권을 갖는 통신 단말(20-1)로부터 송신된 음성 데이터를 수신하면, 음성 데이터를, 그룹 토크 G1에 참가하는 통신 단말(20-2, 20-3)에 전송하기 위한 제어를 실시한다(스텝 S413). 구체적으로는, 예컨대, 통신 단말(20-1)로부터 송신된 음성 데이터를 수신하면, 통신 제어부(113)는, 음성 데이터에 저장되어 있는 발화자 ID:User01과, 송신권을 부여한 유저 ID:User01이 일치하는지 여부를 판단한다. 음성 데이터에 저장되어 있는 발화자 ID와, 송신권을 부여한 유저 ID는 User01로 일치하기 때문에, 통신 제어부(113)는, 음성 데이터를, 그룹 토크 G1에 참가하는 이용자의 인원수에 따른 수만큼 복제한다. 통신 제어부(113)는, 복제한 음성 데이터를, 통신 단말(20-2, 20-3)의 IP 어드레스를 참조하여 송신한다(스텝 S414).
통신 단말(20-2, 20-3)의 통신 제어부(211)는, 처리 서버(10)로부터 송신되는 음성 데이터를 수신하면, 수신한 음성 데이터를 재생하여, 스피커로부터 음성으로서 출력한다(스텝 S415). 이것에 의해, PTT 통화, 즉 PoC 통신이 확립된다.
도 8은 도 1에 나타내어지는 처리 서버(10)가 텍스트 데이터, 및 번역 텍스트 데이터를 작성할 때의 동작의 예를 설명하는 도면이다.
통신 단말(20-1)로부터 송신되는 음성 데이터를 수신하면, 처리 서버(10)는, 도 4의 스텝 S413에서 통신 제어를 실행함과 아울러, 도 8에 나타내어지는 처리를 실행한다. 구체적으로는, 처리 서버(10)의 기억 제어부(114)는, 통신 단말(20-1)로부터 송신되는 음성 데이터를 수신하면, 수신한 음성 데이터를 캐시 메모리에 유지한다(스텝 S81). 기억 제어부(114)는, 통신 단말(20-1)로부터 송신되는 음성 데이터를 순차적으로 캐시 메모리에 유지한다.
기억 제어부(114)는, 미리 설정된 용량의 음성 데이터가 캐시 메모리에 유지되면, 또는 미리 설정된 용량에 도달하기 전에 통화가 종료되면, 캐시 메모리에 유지하고 있는 복수의 음성 데이터에 근거하여 통화 데이터를 작성한다(스텝 S82). 본 실시 형태에 있어서, 미리 설정된 용량이란, 예컨대, 약 20초의 음성에 상당하는 정도의 용량이다.
도 9는 도 2에 나타내어지는 기억 제어부(114)가 작성하는 통화 데이터의 구조의 예를 나타내는 모식도이다. 도 9에 나타내어지는 통화 데이터는, 토크 그룹 ID를 저장하는 영역, 발화자 ID를 저장하는 영역, 음성 ID를 저장하는 영역, 통화 ID를 저장하는 영역, 타임 스탬프를 저장하는 영역, 데이터 길이를 저장하는 영역, 및 실제 데이터를 저장하는 영역을 갖는다. 음성 ID는, 발화자가 발한 통화를 식별하기 위한 고유의 ID이다. 통화 ID는, 발화자가 발한 통화가 복수의 통화 데이터 에 걸치는 경우에, 1개의 통화를 구성하는 복수의 통화 데이터 중, 몇 번째의 통화 데이터인지를 식별하기 위한 고유의 ID이다. 통화 ID에는, 작성된 것이 빠른 통화 데이터의 순으로, 예컨대, 0, 1, 2, …가 설정된다. 타임 스탬프는, 발화 개시 시각, 및 발화 종료 시각을 포함한다. 발화 종료 시각은, 발화자가 발한 통화가 종료된 시각을 나타낸다. 발화자가 발한 통화가 복수의 통화 데이터에 걸치는 경우에는, 타임 스탬프에는, 발화 종료 시각 대신에, 통화 데이터 작성 시각이 포함된다. 통화 데이터 작성 시각은, 통화를 구분했을 때의 시각, 예컨대, 복수의 음성 데이터에 근거하여 통화 데이터를 작성할 때의 시각을 나타낸다.
구체적으로는, 예컨대, 기억 제어부(114)는, 캐시 메모리에 유지되어 있는, 토크 그룹 ID가 Group01이고, 또한, 발화자 ID가 User01인 음성 데이터의 용량이 미리 설정한 용량에 도달하면, 음성 ID:Talk01을 설정한다. 또한, 기억 제어부(114)는, Talk01에 대한 최초의 통화 데이터인 것을 나타내는 통화 ID:0을 설정한다. 또한, 기억 제어부(114)는, 음성 데이터에 포함되어 있는, 발화 개시 시각을 나타내는 타임 스탬프에 근거하여, 타임 스탬프:TimeS1을 설정한다. 또한, 기억 제어부(114)는, 통화 데이터를 작성할 때의 시각에 근거하여, 타임 스탬프:TimeE1을 설정한다. 기억 제어부(114)는, 대응하는 데이터를 소정의 영역에 저장함으로써 통화 데이터를 작성한다. 즉, 기억 제어부(114)는, Group01, User01, Talk01, 0, TimeS1, TimeE1, 및, 캐시 메모리에 유지되어 있는 소정 용량의 복수의 음성 데이터에 포함되는 데이터 길이 및 실제 데이터를, 대응하는 각 영역에 저장함으로써 통화 데이터를 작성한다. 기억 제어부(114)는, 작성한 통화 데이터를 기억부(12)에 기억한다.
또한, 기억 제어부(114)는, 캐시 메모리에 유지되어 있는, 토크 그룹 ID가 Group01이고, 또한, 발화자 ID가 User01인 음성 데이터의 용량이 미리 설정한 용량에 도달하기 전에 송신권이 개방되면, 음성 ID, 통화 ID, 및 타임 스탬프를 설정한다. 송신권의 개방은, 송신권을 갖고 있는 통신 단말(20-1)에 있어서, 이용자가, 예컨대, PTT 통화 개시 요구 버튼으로부터 손가락을 뗌으로써 실현된다. 예컨대, 이용자가 PTT 통화 개시 요구 버튼으로부터 손가락을 떼면, 통신 단말(20-1)로부터 처리 서버(10)에, 송신권 개방 요구 통지가 송신된다. 처리 서버(10)의 송신권 부여부(112)는, 송신권 개방 요구 통지를 수신하면, 통신 단말(20-1)이 갖는 송신권을 개방한다. 또, 송신권을 취득, 또는 개방하기 위한 동작은, PTT 통화 개시 요구 버튼을 누르는 것, 또는 PTT 통화 개시 요구 버튼을 떼는 것으로 한정되지 않는다.
처리 서버(10)의 기억 제어부(114)는, 예컨대, 송신권 개방 요구 통지를 수신하면, 송신권 개방 요구 통지를 수신한 시각을 발화 종료 시각으로서 설정한다. 기억 제어부(114)는, 설정한 발화 종료 시각에 근거하여, 타임 스탬프:TimeE1을 설정한다. 기억 제어부(114)는, 캐시 메모리로부터, 토크 그룹 ID가 Group01이고, 또한, 발화자 ID가 User01인 복수의 음성 데이터를 읽어낸다. 기억 제어부(114)는, 토크 그룹 ID, 발화자 ID, 음성 ID, 통화 ID, 및 타임 스탬프를 저장하는 영역에 각각 데이터를 저장하고, 읽어낸 음성 데이터에 포함되는 데이터 길이 및 실제 데이터를 소정의 영역에 저장함으로써 통화 데이터를 작성한다. 기억 제어부(114)는, 작성한 통화 데이터를 기억부(12)에 기억한다. 통화 데이터는 발화 개시 시각, 및 발화 종료 시각 등을 포함하는 타임 스탬프가 부가되어 기억되어 있기 때문에, 이용자는, 발화 개시 시각, 및 발화 종료 시각 등의 시각 정보를, 통화 데이터를 검색할 때의 검색 키로서 이용하는 것이 가능하게 된다.
처리 서버(10)의 텍스트화 처리부(115)는, 미리 설정된 용량의 음성 데이터가 캐시 메모리에 유지되면, 또는 미리 설정된 용량에 도달하기 전에 통화가 종료되면, 캐시 메모리에 유지하고 있는 복수의 음성 데이터에 근거하여 텍스트 데이터를 작성한다(스텝 S83).
도 10은 도 2에 나타내어지는 텍스트화 처리부(115)가 작성하는 텍스트 데이터의 구조의 예를 나타내는 모식도이다. 도 10에 나타내어지는 텍스트 데이터는, 토크 그룹 ID를 저장하는 영역, 텍스트 ID를 저장하는 영역, 음성 ID를 저장하는 영역, 통화 ID를 저장하는 영역, 및 텍스트 실제 데이터를 저장하는 영역을 갖는다. 음성 ID는, 텍스트화 처리가 실시된 통화 데이터와 동일한 ID가 설정된다. 통화 ID는, 텍스트화 처리가 실시된 통화 데이터와 동일한 ID가 설정된다.
구체적으로는, 예컨대, 텍스트화 처리부(115)는, 캐시 메모리에 유지되어 있는, 토크 그룹 ID가 Group01이고, 또한, 발화자 ID가 User01인 음성 데이터의 용량이 미리 설정한 용량에 도달하면, 이들 음성 데이터를 읽어낸다. 텍스트화 처리부(115)는, 읽어낸 음성 데이터에 포함되는 실제 데이터를, 도 6에 있어서 User01과 관련지어져 있는 언어 코드 01, 즉 일본어에 대한, 문법에 관한 정보, 언어 구조에 관한 정보, 음성 데이터의 조성에 관한 정보, 및 기억하고 있는 단어 정보 등에 근거하여 텍스트 실제 데이터로 변환한다. 텍스트화 처리부(115)는, 실제 데이터를 텍스트 실제 데이터로 변환하면, 텍스트 ID:Text01을 설정한다. 텍스트화 처리부(115)는, 대응하는 데이터를 소정의 영역에 저장함으로써 텍스트 데이터를 작성한다. 즉, 텍스트화 처리부(115)는, Group01, Text01, Talk01, 및 텍스트 실제 데이터를, 대응하는 각 영역에 저장함으로써 텍스트 데이터를 작성한다.
또한, 텍스트화 처리부(115)는, 캐시 메모리에 유지되어 있는, 토크 그룹 ID가 Group01이고, 또한, 발화자 ID가 User01인 음성 데이터의 용량이 미리 설정한 용량에 도달하기 전에 송신권이 개방되면, 캐시 메모리로부터, 토크 그룹 ID가 Group01이고, 또한, 발화자 ID가 User01인 복수의 음성 데이터를 읽어낸다. 텍스트화 처리부(115)는, 읽어낸 음성 데이터에 포함되는 실제 데이터에 근거하여 텍스트 데이터를 작성한다.
텍스트 데이터를 작성하면, 텍스트화 처리부(115)는, 텍스트화가 완료된 취지를 통신 제어부(113)에 통지한다(스텝 S84). 텍스트화가 완료된 취지의 통지에는, 예컨대, 작성한 텍스트 데이터의 텍스트 ID가 포함되어 있다. 음성 데이터 군의 텍스트화가 완료된 취지의 통지를 받으면, 통신 제어부(113)는, 텍스트화가 완료된 취지의 통지를, 토크 그룹 G1에 참가하는 통신 단말(20-1~20-3)에 네트워크 NW, 및 기지국(30-1)을 통해서 송신한다(스텝 S85). 또, 통신 제어부(113)는, User01과 상이한 언어 코드가 설정되어 있는 User03이 소지하는 통신 단말(20-3)에는, 텍스트화가 완료된 취지의 통지를, 후술하는 번역이 완료된 취지의 통지와 함께 송신하더라도 상관없다. 또한, 통신 제어부(113)는, 통신 단말(20-3)에는, 텍스트화가 완료된 취지의 통지를 송신하지 않더라도 상관없다.
또, 도 8의 예에서는, 토크 그룹 G1에 참가하고 있는 통신 단말(20-1~20-3)에 텍스트화 완료 통지를 송신하는 경우의 처리를 설명하고 있다. 그렇지만, 이것으로 한정되지 않는다. 텍스트화 완료 통지는, 토크 그룹 G1에는 참가하고 있지 않지만, 토크 그룹 G1에 참가 가능한 통신 단말에도 송신되더라도 상관없다. 이때, 처리 서버(10)의 기억부(12)는, 예컨대, 토크 그룹마다 참가 가능한 이용자의 리스트를 기억하고 있다. 처리 서버(10)의 통신 제어부(113)는, 기억부(12)에 기억되어 있는 리스트를 참조하여, 토크 그룹 G1에 참가 가능한 이용자에게 텍스트화 완료 통지를 송신한다.
또한, 텍스트화 완료 통지는, 토크 그룹 G1에 참가 가능한 통신 단말 중, 소정의 조건을 만족시키는 통신 단말에 송신되도록 하더라도 상관없다. 소정의 조건이란, 예컨대, 기억부(12)에 기억되어 있는 통신 단말의 위치 정보에 근거하여, 송신권을 갖는 통신 단말로부터 소정의 거리 내에 위치하는 것, 및 소정의 플래그가 부여되어 있는 것 등이다.
작성된 텍스트 데이터는, 기억 제어부(114), 및 번역 처리부(116)에 출력된다(스텝 S86). 기억 제어부(114)는, 텍스트화 처리부(115)에서 작성된 텍스트 데이터를 기억부(12)에 기억한다(스텝 S87).
번역 처리부(116)는, 텍스트화 처리부(115)에서 작성된 텍스트 데이터에 대하여 번역 처리를 실시함으로써, 번역 텍스트 데이터를 작성한다(스텝 S88).
도 11은 도 2에 나타내어지는 번역 처리부(116)가 작성하는 번역 텍스트 데이터의 구조의 예를 나타내는 모식도이다. 도 11에 나타내어지는 번역 텍스트 데이터는, 텍스트 ID를 저장하는 영역, 언어 코드를 저장하는 영역, 및 번역 텍스트 실제 데이터를 저장하는 영역을 갖는다. 언어 코드는, 번역 텍스트 실제 데이터와 대응하는 언어를 나타낸다. 텍스트 ID는, 번역원의 텍스트 데이터와 번역 텍스트 데이터에서 동일한 ID가 설정된다.
구체적으로는, 예컨대, 번역 처리부(116)는, 텍스트화 처리부(115)에서 작성된 텍스트 데이터로부터 텍스트 실제 데이터를 읽어낸다. 번역 처리부(116)는, 읽어낸 텍스트 실제 데이터를, User01의 언어 코드와 상이한 모든 언어 코드, 도 6에 있어서는 언어 코드 02에 대응하는 언어, 즉, 영어의 텍스트 실제 데이터로 번역한다. 번역 처리부(116)는, 대응하는 데이터를 소정의 영역에 저장함으로써 번역 텍스트 데이터를 작성한다. 즉, 번역 처리부(116)는, Text01, 언어 코드 02, 및 번역 텍스트 실제 데이터를, 대응하는 각 영역에 저장함으로써 번역 텍스트 데이터를 작성한다.
번역 텍스트 데이터를 작성하면, 번역 처리부(116)는, 번역이 완료된 취지를 통신 제어부(113)에 통지한다(스텝 S89). 번역이 완료된 취지의 통지에는, 예컨대, 작성한 번역 텍스트 데이터의 텍스트 ID, 및 언어 코드가 포함되어 있다. 번역이 완료된 취지의 통지를 받으면, 통신 제어부(113)는, User01과 상이한 언어 코드가 설정되어 있는 User03이 소지하는 통신 단말(20-3)에, 번역이 완료된 취지의 통지를, 네트워크 NW, 및 기지국(30-3)을 통해서 송신한다(스텝 S810). 또, 스텝 S85에 있어서, 텍스트화 완료 통지가, 통신 단말(20-3)에 송신되어 있지 않은 경우에는, 번역 완료 통지와 함께 텍스트화 완료 통지를 통신 단말(20-3)에 송신하더라도 상관없다. 작성된 번역 텍스트 데이터는, 기억 제어부(114)에 출력된다(스텝 S811). 기억 제어부(114)는, 번역 처리부(116)에서 작성된 번역 텍스트 데이터를 기억부(12)에 기억한다(스텝 S812). 스텝 S81~스텝 S812에 나타내어지는 처리는, 통화가 종료될 때까지 반복된다.
또, 도 8에 나타내어지는 예에서는, 텍스트화 처리가 완료될 때마다 텍스트화 완료 통지가 통신 단말에 송신되는 경우를 설명했다. 그렇지만, 이것으로 한정되지 않는다. 토크 그룹에는 참가하고 있지 않지만, 이 토크 그룹에 참가 가능한 통신 단말에는, 통화가 끝난 후에, 1번만 텍스트화 완료 통지를 송신하도록 하더라도 상관없다. 이것에 의해, 이용자는, 통화에 대응한 텍스트 데이터가 있는 것을 인식하는 것이 가능하게 된다.
계속하여, 통신 단말(20-1~20-3)에 있어서의 텍스트 데이터 및 번역 텍스트 데이터의 표시에 대하여 설명한다. 본 실시 형태에 있어서, 통신 단말(20-1~20-3)의 표시 형식에는, 예컨대, 제 1 표시 형식과, 제 2 표시 형식이 있다. 제 1 표시 형식은, PTT 통화 개시 요구 버튼과, 전달되는 음성과 대응하는 문자가 함께 표시되는 형식이다. 제 2 표시 형식은, PTT 통화 개시 요구 버튼이 표시되는 한편, 음성과 대응하는 문자는 표시되지 않는 형식이다. 표시 형식을 제 1 표시 형식, 또는 제 2 표시 형식으로 할지는, 이용자의 설정에 근거한다. 이하에서는, 우선 제 1 표시 형식에 대하여 설명하고, 그 후에, 제 2 표시 형식에 대하여 설명한다.
도 12는 도 1에 나타내어지는 통신 단말(20-1, 20-2)이 음성과 대응하는 문자를 디스플레이에 표시시킬 때의 처리 서버(10), 및 통신 단말(20-1, 20-2)의 동작의 예를 설명하는 도면이다. 또, 도 12에서는, 제 1 표시 형식이 설정되어 있는 경우를 예로 설명한다.
송신권을 갖는 통신 단말(20-1), 및 통신 단말(20-1)과 동일한 언어 코드가 설정되어 있는 통신 단말(20-2)은, 처리 서버(10)로부터 텍스트화 완료 통지를 수신한다(스텝 S121). 이때, 텍스트화 완료 통지에는, 텍스트화가 완료된 텍스트 데이터에 대한 텍스트 ID가 포함되어 있다. 도 12의 설명에서는, 도 8에서의 설명을 이어받아, 텍스트 ID:Text01이 텍스트화 완료 통지에 포함되어 있다고 한다.
텍스트화 완료 통지를 수신하면, 통신 단말(20-1)의 통신 제어부(211)는, 텍스트 ID:Text01이 포함되어 있는 텍스트 데이터를 요구하는 취지의 텍스트 데이터 요구 통지를, 기지국(30-1), 및 네트워크 NW를 통해서 처리 서버(10)에 송신한다(스텝 S122). 이때, 텍스트 데이터 요구 통지에는, 요구원인 통신 단말(20-1)의 유저 ID:User01이 부여되어 있다. 또한, 통신 단말(20-2)의 통신 제어부(211)는, 텍스트 ID:Text01이 포함되어 있는 텍스트 데이터를 요구하는 취지의 텍스트 데이터 요구 통지를, 통신 단말(20-2)의 유저 ID:User02를 부여하여, 처리 서버(10)에 송신한다(스텝 S122).
텍스트 데이터 요구 통지를 수신하면, 처리 서버(10)의 기억 제어부(114)는, 텍스트 ID:Text01이 포함되어 있는 텍스트 데이터를, 기억부(12)로부터 읽어낸다(스텝 S123). 처리 서버(10)의 통신 제어부(113)는, 기억부(12)로부터 읽어내어진 텍스트 데이터를, 패킷 형식의 데이터로 변환한다(스텝 S124). 통신 제어부(113)는, 패킷 형식으로 변환한 데이터를, 텍스트 데이터 요구 통지에 부여되어 있는 유저 ID에 따른 수만큼 복제한다. 통신 제어부(113)는, 복제한 데이터를, 유저 ID를 이용하여 특정되는 IP 어드레스로 향하여 송신한다(스텝 S125). 이것에 의해, 패킷 형식으로 변환된 텍스트 데이터가 통신 단말(20-1, 20-2)에 송신된다.
처리 서버(10)로부터 송신된 텍스트 데이터를 수신하면, 통신 단말(20-1, 20-2)의 기억 제어부(212)는, 수신한 텍스트 데이터를 RAM에 기억한다. 통신 단말(20-1, 20-2)의 표시 제어부(213)는, RAM에 기억되어 있는 텍스트 데이터로부터 텍스트 실제 데이터를 읽어낸다. 표시 제어부(213)는, 읽어낸 텍스트 실제 데이터에 근거하는 문자를, 토크 그룹 ID:Group01에 의해 식별되는 토크 그룹 G1에 대한 표시 화면에, 음성 ID:Talk01에 대응하는 문자로서 표시한다(스텝 S126).
이때, 통신 단말(20-1)의 표시 제어부(213)는, 음성 ID:Talk01에 근거하여, 본 통화가 자신의 장치가 발신한 통화인 것을 인식한다. 표시 제어부(213)는, 자신의 장치가 발신한 통화인 것이 식별 가능한 양상으로, 문자를 디스플레이에 표시한다. 자신의 장치가 발신한 통화인 것이 식별 가능한 양상으로서는, 예컨대, 표시 위치를 바꾸는 것, 표시 색을 바꾸는 것, 및 글자체를 바꾸는 것 등, 임의의 수법을 채용하더라도 좋다.
도 13은 도 12에 나타내어지는 처리를 거쳐 표시되는 문자의 예를 나타내는 모식도이다. 도 13의 좌측 도면은 송신권을 갖는 통신 단말(20-1)의 디스플레이의 표시의 예를 나타내는 모식도이다. 도 13의 우측 도면은 수신자 단말인 통신 단말(20-2)의 디스플레이의 표시의 예를 나타내는 모식도이다. 도 13에 있어서, 통신 단말(20-1)에서는, 문자 L1은 디스플레이의 우단에 표시된다. 한편, 통신 단말(20-2)에서는, 문자 L2는 디스플레이의 좌단에 표시된다. 또, 도 13에서는, PTT 통화 개시 요구 버튼 B1이 디스플레이의 좌측 아래에 표시되는 경우를 예로 나타내고 있지만, PTT 통화 개시 요구 버튼 B1의 표시 위치는 이것으로 한정되지 않는다. 이용자가 용이하게 탭 가능한 위치라면 제한은 없다.
도 14는 도 1에 나타내어지는 통신 단말(20-3)이 텍스트 데이터 및 번역 텍스트 데이터에 근거하는 문자를 디스플레이에 표시시킬 때의 처리 서버(10), 및 통신 단말(20-3)의 동작의 예를 설명하는 도면이다. 또, 도 14에서는, 제 1 표시 형식이 설정되어 있는 경우를 예로 설명한다.
통신 단말(20-1)과 상이한 언어 코드가 설정되어 있는 통신 단말(20-3)은, 처리 서버(10)로부터 텍스트화 완료 통지, 및 번역 완료 통지를 수신한다(스텝 S141). 이때, 텍스트화 완료 통지에는, 텍스트화가 완료된 텍스트 데이터에 대한 텍스트 ID가 포함되어 있다. 또한, 번역 완료 통지에는, 번역이 완료된 번역 텍스트 데이터에 대한 텍스트 ID, 및 번역에서 이용된 언어 코드가 포함되어 있다. 도 14의 설명에서는, 도 8에서의 설명을 이어받아, 텍스트 ID:Text01이 텍스트화 완료 통지에 포함되어 있다고 한다. 또한, 텍스트 ID:Text01, 및 언어 코드:언어 코드 02가 번역 완료 통지에 포함되어 있다고 한다.
텍스트화 완료 통지, 및 번역 완료 통지를 수신하면, 통신 단말(20-3)의 통신 제어부(211)는, 텍스트 ID:Text01이 포함되어 있는 텍스트 데이터, 및, 텍스트 ID:Text01, 및 언어 코드:언어 코드 02가 포함되어 있는 번역 텍스트 데이터를 요구하는 취지의 요구 통지를, 기지국(30-2), 및 네트워크 NW를 통해서 처리 서버(10)에 송신한다(스텝 S142). 이때, 요구 통지에는, 요구원인 통신 단말(20-3)의 유저 ID:User03이 부여되어 있다.
요구 통지를 수신하면, 처리 서버(10)의 기억 제어부(114)는, 텍스트 ID:Text01이 포함되어 있는 텍스트 데이터와, 텍스트 ID:Text01, 및 언어 코드:언어 코드 02가 포함되어 있는 번역 텍스트 데이터를, 기억부(12)로부터 읽어낸다(스텝 S143). 처리 서버(10)의 통신 제어부(113)는, 기억부(12)로부터 읽어내어진 텍스트 데이터 및 번역 텍스트 데이터를, 패킷 형식의 데이터로 변환한다(스텝 S144). 통신 제어부(113)는, 패킷 형식으로 변환한 데이터를, 텍스트 데이터 요구 통지에 부여되어 있는 유저 ID에 따른 수만큼 복제한다. 통신 제어부(113)는, 복제한 데이터를, 유저 ID를 이용하여 특정되는 IP 어드레스로 향하여 송신한다(스텝 S145). 이것에 의해, 패킷 형식으로 변환된 텍스트 데이터 및 번역 텍스트 데이터가 통신 단말(20-3)에 송신된다.
처리 서버(10)로부터 송신된 텍스트 데이터 및 번역 텍스트 데이터를 수신하면, 통신 단말(20-3)의 기억 제어부(212)는, 수신한 텍스트 데이터 및 번역 텍스트 데이터를 RAM에 기억한다. 통신 단말(20-3)의 표시 제어부(213)는, RAM에 기억되어 있는 텍스트 데이터 및 번역 텍스트 데이터로부터, 텍스트 실제 데이터 및 번역 텍스트 실제 데이터를 각각 읽어낸다. 표시 제어부(213)는, 텍스트 실제 데이터 및 번역 텍스트 실제 데이터에 근거하는 문자를, 토크 그룹 ID:Group01에 의해 식별되는 토크 그룹 G1에 대한 표시 화면에, 음성 ID:Talk01에 대응하는 문자로서 표시한다(스텝 S146).
도 15는 도 14에 나타내어지는 처리를 거쳐 통신 단말(20-3)에 표시되는 문자의 예를 나타내는 모식도이다. 도 15에 있어서, 수신자 단말인 통신 단말(20-3)에서는, 문자 L3은 디스플레이의 좌단에 표시된다. 또한, 문자 L3에는, 텍스트 실제 데이터에 근거하는 문자, 및 번역 텍스트 실제 데이터에 근거하는 문자가 포함되어 있다. 또, 텍스트 실제 데이터에 근거하는 문자, 및 번역 텍스트 실제 데이터에 근거하는 문자의 표시는, 1개의 영역에서 표시되지 않더라도 상관없다. 예컨대, 이들 문자는, 따로따로의 영역에서 표시되더라도 상관없다.
또, 도 14에서는, 통신 단말(20-3)이 텍스트화 완료 통지, 및 번역 완료 통지를 동시에 수신하는 경우를 예로 설명했다. 그렇지만, 도 8의 예에서 설명한 바와 같이, 번역 완료 통지가 텍스트화 완료 통지로부터 늦게 송신되는 경우가 있다. 이와 같은 경우, 통신 단말(20-3)의 통신 제어부(211)는, 텍스트화 완료 통지의 수신으로는 텍스트 데이터의 요구 통지를 처리 서버(10)에 송신하지 않고, 번역 완료 통지의 수신을 기다려 텍스트 데이터, 및 번역 텍스트 데이터의 요구 통지를 송신하더라도 좋다.
또한, 번역 완료 통지가 텍스트화 완료 통지로부터 늦게 송신되는 경우, 통신 단말(20-3)의 통신 제어부(211)는, 텍스트화 완료 통지의 수신에 따라 텍스트 데이터의 요구 통지를 처리 서버(10)에 송신하고, 번역 완료 통지의 수신에 따라 번역 텍스트 데이터의 요구 통지를 처리 서버(10)에 송신하더라도 좋다.
계속하여, 제 2 표시 형식이 설정되어 있는 경우의 동작에 대하여 설명한다. 도 16은 도 1에 나타내어지는 통신 단말(20-1, 20-2)이 음성과 대응하는 문자를 디스플레이에 표시시킬 때의 처리 서버(10), 및 통신 단말(20-1, 20-2)의 동작의 예를 설명하는 도면이다.
송신권을 갖는 통신 단말(20-1), 및 통신 단말(20-1)과 동일한 언어 코드가 설정되어 있는 통신 단말(20-2)은, 처리 서버(10)로부터 텍스트화 완료 통지를 수신한다(스텝 S161). 도 16의 설명에 있어서는, 텍스트 ID:Text06이 텍스트화 완료 통지에 포함되어 있다고 한다.
텍스트화 완료 통지를 수신하면, 통신 단말(20-1, 20-2)의 표시 제어부(213)는, 텍스트화가 완료된 취지를, 디스플레이에 표시되어 있는 PTT 통화 개시 요구 버튼과 겹치지 않도록, 디스플레이에 표시한다(스텝 S162). 도 17은 도 1에 나타내어지는 통신 단말(20-1, 20-2)에 표시되는 텍스트화 완료 통지의 예를 나타내는 모식도이다. 도 17에 따르면, 텍스트화가 완료된 취지가, "읽지 않은 텍스트가 있습니다."로서 통지되고 있다. 또, 텍스트화가 완료된 취지는, 기호 등에 의해 나타내어지더라도 상관없다. 또, 도 17에서는, PTT 통화 개시 요구 버튼 B2가 디스플레이의 중앙에 표시되는 경우를 예로 나타내고 있지만, PTT 통화 개시 요구 버튼 B2의 표시 위치는 이것으로 한정되지 않는다. 이용자가 용이하게 탭 가능한 위치라면 제한은 없다.
통신 단말(20-1, 20-2)의 이용자는, 디스플레이에 표시되는 텍스트화 완료 통지를 시인하면, 음성과 대응하는 문자를 표시시킬 필요가 있는지 여부를 판단한다. 문자를 표시시킬 필요가 있다고 판단하는 경우, 이용자는, 문자의 표시 요구를 입력 인터페이스(23)로부터 입력한다(스텝 S163). 예컨대, 이용자는, 디스플레이에 표시되는 텍스트화 완료 통지의 표시 영역을 탭한다.
이용자로부터 문자 표시 요구가 입력되면, 통신 단말(20-1)의 통신 제어부(211)는, 텍스트 ID:Text06이 포함되어 있는 텍스트 데이터로부터 문자 표시의 개시를 요구하는 취지의 표시 개시 요구 통지를, 기지국(30-1), 및 네트워크 NW를 통해서 처리 서버(10)에 송신한다. 이때, 표시 개시 요구 통지에는, 요구원인 통신 단말(20-1)의 유저 ID:User01이 부여되어 있다. 또한, 이용자로부터 문자 표시 요구가 입력되면, 통신 단말(20-2)의 통신 제어부(211)는, 텍스트 ID:Text06이 포함되어 있는 텍스트 데이터로부터 문자 표시의 개시를 요구하는 취지의 표시 개시 요구 통지를, 통신 단말(20-2)의 유저 ID:User02를 부여하여, 처리 서버(10)에 송신한다(스텝 S164).
표시 개시 요구 통지를 수신하면, 처리 서버(10)의 기억 제어부(114)는, 텍스트 ID:Text06이 포함되어 있는 텍스트 데이터를 기억부(12)로부터 읽어내고, 읽어낸 텍스트 데이터에 포함되어 있는, 예컨대, 토크 그룹 ID를 취득한다. 기억 제어부(114)는, 취득한 토크 그룹 ID와 동일한 토크 그룹 ID가 포함되어 있는 텍스트 데이터를, 미리 설정된 데이터분만큼 기억부(12)로부터 읽어낸다(스텝 S165). 이때, 미리 설정된 데이터분이란, 예컨대, 텍스트 ID:Text06이 포함되어 있는 텍스트 데이터보다 이전에 기억된, 미리 설정된 개수의 텍스트 데이터를 나타낸다. 다시 말해, 예컨대, 기억부(12)로부터는, 텍스트 ID:Text01~Text06이 포함되어 있는 텍스트 데이터가 읽어내어진다.
처리 서버(10)의 통신 제어부(113)는, 기억부(12)로부터 읽어내어진 복수의 텍스트 데이터를, 패킷 형식의 데이터로 순차적으로 변환한다(스텝 S166). 통신 제어부(113)는, 패킷 형식으로 변환한 데이터를, 표시 개시 요구 통지에 부여되어 있는 유저 ID에 따른 수만큼 복제한다. 통신 제어부(113)는, 복제한 데이터를, 유저 ID를 이용하여 특정되는 IP 어드레스로 향하여 송신한다(스텝 S167). 이것에 의해, 패킷 형식으로 변환된 복수의 텍스트 데이터가 통신 단말(20-1, 20-2)에 송신된다.
처리 서버(10)로부터 송신되는 복수의 텍스트 데이터를 수신하면, 통신 단말(20-1, 20-2)의 기억 제어부(212)는, 수신한 텍스트 데이터를 RAM에 순차적으로 기억한다. 통신 단말(20-1, 20-2)의 표시 제어부(213)는, RAM에 텍스트 데이터가 기억되면, 텍스트 데이터로부터 텍스트 실제 데이터를 읽어낸다. 표시 제어부(213)는, 읽어낸 텍스트 실제 데이터에 근거하는 문자를, 소정의 토크 그룹 ID에 의해 식별되는 토크 그룹에 대한 표시 화면에 표시한다(스텝 S168).
또, 도 16의 예에서는, 토크 그룹 G1에 참가하고 있는 통신 단말(20-1, 20-2)이 텍스트화 완료 통지를 수신했을 때의 처리를 설명했다. 그렇지만, 이것으로 한정되지 않는다. 텍스트화 완료 통지는, 토크 그룹 G1에는 참가하고 있지 않지만, 토크 그룹 G1에 참가 가능한 통신 단말에도 송신될 수 있다. 텍스트화 완료 통지가 토크 그룹 G1에 참가 가능하지만 실제로는 참가하고 있지 않은 통신 단말에 송신되는 경우, 통신 단말에서는, 토크 그룹 G1에서 텍스트화가 완료된 취지가, 예컨대, "토크 그룹 G1에서 읽지 않은 텍스트가 있습니다."와 같이 표시되더라도 좋다. 또, 토크 그룹 G1에서 텍스트화가 완료된 취지는, 통신 단말의 디스플레이 상의, 토크 그룹 G1에 대응하는 위치에, 기호 등에 의해 나타내어지더라도 상관없다. 이것에 의해, 이용자는, 토크 그룹에 참가하고 있지 않은 경우이더라도, 참가 가능한 토크 그룹에 있어서의 통화를 문자로 확인하는 것이 가능하게 된다. 또, 토크 그룹 G1에 참가하고 있지 않은 이용자가 토크 그룹 G1의 통화 내용을 문자로 확인하는 경우, 이 이용자를, 토크 그룹 G1에 참가시키도록 하더라도 좋다.
도 18은 도 1에 나타내어지는 통신 단말(20-3)이 텍스트 데이터 및 번역 텍스트 데이터에 근거하는 문자를 디스플레이에 표시시킬 때의 처리 서버(10), 및 통신 단말(20-3)의 동작의 예를 설명하는 도면이다.
도 18에 있어서, 통신 단말(20-1)과 상이한 언어 코드가 설정되어 있는 통신 단말(20-3)은, 처리 서버(10)로부터 텍스트화 완료 통지, 및 번역 완료 통지를 수신한다(스텝 S181). 도 18의 설명에 있어서는, 텍스트 ID:Text06이 텍스트화 완료 통지에 포함되어 있다고 한다. 또한, 텍스트 ID:Text06, 및 언어 코드:언어 코드 02가 번역 완료 통지에 포함되어 있다고 한다.
텍스트화 완료 통지, 및 번역 완료 통지를 수신하면, 통신 단말(20-3)의 표시 제어부(213)는, 텍스트화, 및 번역 처리가 완료된 취지를, 디스플레이에 표시되어 있는 PTT 통화 개시 요구 버튼과 겹치지 않도록, 디스플레이에 표시한다(스텝 S182).
또, 도 8에 나타내어지는 예에서 설명한 바와 같이, 통신 단말(20-3)은, 텍스트화 완료 통지 및 번역 완료 통지를 동시에 수신하는 경우와, 번역 완료 통지를 텍스트화 완료 통지로부터 늦게 수신하는 경우가 있다. 텍스트화 완료 통지 및 번역 완료 통지를 동시에 수신하는 경우, 통신 단말(20-3)의 표시 제어부(213)는, 텍스트화 완료 통지 및 번역 완료 통지의 수신에 따라, 텍스트화가 완료된 취지, 및 번역 처리가 완료된 취지를 표시한다. 이때, 표시 제어부(213)는, 텍스트화가 완료된 취지의 표시만으로, 번역 처리가 완료된 것도 의미하도록 하더라도 좋다.
또한, 번역 완료 통지가 텍스트화 완료 통지보다 늦게 수신되는 경우, 통신 단말(20-3)의 표시 제어부(213)는, 텍스트화 완료 통지의 수신에 따라 텍스트화가 완료된 취지를 표시하고, 번역 완료 통지의 수신에 따라 번역 처리가 완료된 취지를 표시하더라도 좋다. 또한, 표시 제어부(213)는, 텍스트화 완료 통지의 수신으로는 텍스트화가 완료된 취지의 표시는 하지 않고, 번역 완료 통지의 수신에 따라 텍스트화가 완료된 취지, 및 번역 처리가 완료된 취지를 표시하더라도 좋다. 이때, 표시 제어부(213)는, 텍스트화가 완료된 취지의 표시만으로, 번역 처리가 완료된 것도 의미하도록 하더라도 좋다.
통신 단말(20-3)의 이용자는, 디스플레이에 표시되는 텍스트화 완료 통지, 및 번역 완료 통지를 시인하면, 음성과 대응하는 문자, 및 그 문자의 번역을 표시시킬 필요가 있는지 여부를 판단한다. 문자 및 번역을 표시시킬 필요가 있다고 판단하는 경우, 이용자는, 문자 및 번역의 표시 요구를 입력 인터페이스(23)로부터 입력한다(스텝 S183). 예컨대, 이용자는, 디스플레이에 표시되는 텍스트화 완료 통지, 및 번역 완료 통지의 표시 영역을 탭한다.
이용자로부터 문자 및 번역의 표시 요구가 입력되면, 통신 단말(20-3)의 통신 제어부(211)는, 텍스트 ID:Text06이 포함되어 있는 텍스트 데이터, 및, 텍스트 ID:Text06, 및 언어 코드:언어 코드 02가 포함되어 있는 번역 텍스트 데이터로부터 문자 표시의 개시를 요구하는 취지의 표시 개시 요구 통지를, 기지국(30-1), 및 네트워크 NW를 통해서 처리 서버(10)에 송신한다(스텝 S184). 이때, 표시 개시 요구 통지에는, 요구원인 통신 단말(20-3)의 유저 ID:User03이 부여되어 있다.
표시 개시 요구 통지를 수신하면, 처리 서버(10)의 기억 제어부(114)는, 텍스트 ID:Text06이 포함되어 있는 텍스트 데이터를 기억부(12)로부터 읽어내고, 읽어낸 텍스트 데이터에 포함되어 있는, 예컨대, 토크 그룹 ID를 취득한다. 기억 제어부(114)는, 취득한 토크 그룹 ID와 동일한 토크 그룹 ID가 포함되어 있는 텍스트 데이터를, 미리 설정된 데이터분만큼 기억부(12)로부터 읽어낸다. 이때, 미리 설정된 데이터분이란, 예컨대, 텍스트 ID:Text06이 포함되어 있는 텍스트 데이터보다 이전에 기억된, 미리 설정된 개수의 텍스트 데이터를 나타낸다. 다시 말해, 예컨대, 기억부(12)로부터는, 텍스트 ID:Text01~Text06이 포함되어 있는 텍스트 데이터가 읽어내어진다. 또한, 기억 제어부(114)는, 읽어낸 복수의 텍스트 데이터에 포함되는 텍스트 ID와 동일한 텍스트 ID와, 언어 코드:언어 코드 02를 포함하는 번역 텍스트 데이터를, 기억부(12)로부터 읽어낸다(스텝 S185). 다시 말해, 예컨대, 기억부(12)로부터는, 텍스트 ID:Text01~Text06, 및 언어 코드:언어 코드 02가 포함되어 있는 번역 텍스트 데이터가 읽어내어진다.
처리 서버(10)의 통신 제어부(113)는, 기억부(12)로부터 읽어내어진 텍스트 데이터 및 번역 텍스트 데이터를, 패킷 형식의 데이터로 순차적으로 변환한다(스텝 S186). 통신 제어부(113)는, 패킷 형식으로 변환한 데이터를, 표시 개시 요구 통지에 부여되어 있는 유저 ID에 따른 수만큼 복제한다. 통신 제어부(113)는, 복제한 데이터를, 유저 ID를 이용하여 특정되는 IP 어드레스로 향하여 송신한다(스텝 S187). 이것에 의해, 패킷 형식으로 변환된 복수의 텍스트 데이터 및 번역 텍스트 데이터가 통신 단말(20-3)에 송신된다.
처리 서버(10)로부터 송신되는 복수의 텍스트 데이터 및 번역 텍스트 데이터를 수신하면, 통신 단말(20-3)의 기억 제어부(212)는, 수신한 텍스트 데이터 및 번역 텍스트 데이터를 RAM에 순차적으로 기억한다. 통신 단말(20-3)의 표시 제어부(213)는, RAM에 기억되어 있는, 동일한 텍스트 ID가 부여되어 있는 텍스트 데이터 및 번역 텍스트 데이터로부터, 텍스트 실제 데이터 및 번역 텍스트 실제 데이터를 각각 읽어낸다. 표시 제어부(213)는, 읽어낸 텍스트 실제 데이터 및 번역 텍스트 실제 데이터에 근거하는 문자를, 소정의 토크 그룹 ID에 의해 식별되는 토크 그룹에 대한 표시 화면에 표시한다(스텝 S188).
또, 도 14 및 도 18에서는, 처리 서버(10)로부터, 송신권을 갖는 통신 단말(20-1)과 상이한 언어가 설정되어 있는 통신 단말(20-3)에, 텍스트화 완료 통지 및 번역 완료 통지가 송신되는 경우를 예로 설명했다. 그렇지만, 이것으로 한정되지 않는다. 처리 서버(10)로부터 통신 단말(20-3)에는, 번역 완료 통지만이 송신되는 경우도 있다. 이와 같은 경우, 통신 단말(20-3)의 디스플레이에는, 번역 텍스트 데이터에 근거하는 문자만이 표시되게 된다.
계속하여, 통신 단말(20-1, 20-2)의 디스플레이에 표시되는 문자에 대응하는 음성의 재생에 대하여 설명한다.
도 19는 도 1에 나타내어지는 통신 단말(20-1, 20-2)이 디스플레이에 표시하고 있는 문자에 대응하는 음성을 재생시킬 때의 처리 서버(10), 및 통신 단말(20-1, 20-2)의 동작의 예를 설명하는 도면이다.
우선, 통신 단말(20-1, 20-2)의 디스플레이에 문자가 표시되어 있다(스텝 S191). 도 19의 설명에서는, 디스플레이에 표시되어 있는 문자에 대한 텍스트 데이터에는, 음성 ID:Talk01, 및 통화 ID:0이 포함되어 있는 것으로 한다. 통신 단말(20-1, 20-2)의 이용자는, 디스플레이에 표시되어 있는 문자에 대응하는 음성을 재생하고 싶은 경우, 문자의 재생 요구를 입력 인터페이스(23)로부터 입력한다(스텝 S192). 예컨대, 이용자는, 디스플레이에 표시되는 문자의 표시 영역을 탭한다.
문자에 대응하는 음성의 재생 요구가 이용자로부터 입력되면, 통신 단말(20-1)의 통신 제어부(211)는, 음성 ID:Talk01, 통화 ID:0이 포함되어 있는 통화 데이터의 재생을 요구하는 취지의 재생 요구 통지를, 기지국(30-1), 및 네트워크 NW를 통해서 처리 서버(10)에 송신한다. 이때, 재생 요구 통지에는, 요구원인 통신 단말(20-1)의 유저 ID:User01이 부여되어 있다. 또한, 문자에 대응하는 음성의 재생 요구가 이용자로부터 입력되면, 통신 단말(20-2)의 통신 제어부(211)는, 음성 ID:Talk01, 통화 ID:0이 포함되어 있는 통화 데이터의 재생을 요구하는 취지의 재생 요구 통지를, 통신 단말(20-2)의 유저 ID:User02를 부여하여, 처리 서버(10)에 송신한다(스텝 S193).
재생 요구 통지를 수신하면, 처리 서버(10)의 기억 제어부(114)는, 음성 ID:Talk01, 통화 ID:0이 포함되어 있는 통화 데이터를 기억부(12)로부터 읽어낸다. 처리 서버(10)의 통신 제어부(113)는, 기억부(12)로부터 읽어내어진 통화 데이터를, 필요에 따라 구조를 변경함과 아울러, 패킷 형식의 데이터로 변환한다(스텝 S195). 통신 제어부(113)는, 패킷 형식으로 변환한 데이터를 요구원에 따른 수만큼 복제한다. 통신 제어부(113)는, 복제한 데이터를, 유저 ID를 이용하여 특정되는 IP 어드레스로 향하여 송신한다(스텝 S196). 이것에 의해, 패킷 형식으로 변환된 통화 데이터가 통신 단말(20-1, 20-2)에 송신된다.
처리 서버(10)로부터 송신되는 통화 데이터를 수신하면, 통신 단말(20-1, 20-2)의 기억 제어부(212)는, 수신한 통화 데이터를 RAM에 기억한다. 통신 단말(20-1, 20-2)의 재생 제어부(214)는, RAM에 기억되어 있는 통화 데이터로부터 실제 데이터를 읽어내고, 읽어낸 실제 데이터에 근거하여 스피커를 제어한다(스텝 S197).
계속하여, 송신권을 갖는 통신 단말(20-1)이, 음성에 대응하는 문자를 수정할 때의 처리에 대하여 설명한다.
도 20은 도 1에 나타내어지는 통신 단말(20-1)이, 디스플레이에 표시되는 문자를 수정할 때의 처리 서버(10), 및 통신 단말(20-1)의 동작의 예를 설명하는 도면이다.
우선, 송신권을 갖는 통신 단말(20-1), 및 통신 단말(20-1)과 동일한 토크 그룹 G1에 참가하는 통신 단말(20-2, 20-3)의 디스플레이에 문자가 표시되어 있다(스텝 S201). 도 20의 설명에 있어서는, 문자는, 토크 그룹 ID:Group01, 텍스트 ID:Text01을 포함하는 텍스트 데이터에 근거하여 표시되어 있다고 한다.
통신 단말(20-1)의 이용자는, 디스플레이에 표시되는 문자를 시인하고, 수정할 필요가 있는지 여부를 판단한다. 문자를 수정할 필요가 있다고 판단하는 경우, 이용자는, 문자의 수정 요구를 입력 인터페이스(23)로부터 입력한다(스텝 S202). 예컨대, 이용자는, 디스플레이에 표시되는 문자의 표시 영역을 탭한다.
이용자로부터 문자 수정 요구가 입력되면, 통신 단말(20-1)의 수정 제어부(216)는, 텍스트 실제 데이터를 수정한 텍스트 데이터를 작성한다(스텝 S203). 구체적으로는, 예컨대, 이용자로부터 문자 수정 요구가 입력되면, 수정 제어부(216)는, 문자 수정 요구가 입력된 문자가, 자신의 단말이 송신권을 갖는 통화에 속하는 문자인지 여부를, 텍스트 데이터에 포함되는 토크 그룹 ID에 근거하여 판단한다. 문자 수정 요구가 입력된 문자가, 자신의 단말이 송신권을 갖는 통화에 속하는 문자인 경우, 수정 제어부(216)는, 문자의 수정 폼을 디스플레이에 표시시킨다. 수정 제어부(216)는, 수정 폼을 통한 입력에 따라, 디스플레이에 표시되어 있는 문자를 수정한다. 수정 제어부(216)는, 수정한 텍스트 실제 데이터를, 수정 전의 문자에 대한 텍스트 데이터와 동일한 토크 그룹 ID, 텍스트 ID, 음성 ID, 및 통화 ID를 포함하는 텍스트 데이터에 저장한다. 통신 단말(20-1)의 통신 제어부(211)는, 수정한 텍스트 실제 데이터를 포함하는 텍스트 데이터를, 필요에 따라 구조를 변경함과 아울러, 패킷 형식의 데이터로 변환하고, 처리 서버(10)에 송신한다(스텝 S204).
처리 서버(10)의 통신 제어부(113)는, 통신 단말(20-1)로부터 송신된 텍스트 데이터를 수신하면, 수신한 텍스트 데이터에 포함되는 토크 그룹 ID:Group01, 및 텍스트 ID:Text01을 읽어낸다. 통신 제어부(113)는, 읽어낸 토크 그룹 ID:Group01에 의해 식별되는 토크 그룹 G1에 참가하고 있는 User02 및 User03이 각각 소지하는 통신 단말(20-2, 20-3)에, 텍스트 ID:Text01이 포함되는 텍스트 데이터에 근거하는 문자의 표시를 갱신하는 취지를 통지한다(스텝 S205).
또한, 처리 서버(10)의 기억 제어부(114)는, 통신 단말(20-1)로부터 송신된 텍스트 데이터를 수신하면, 수신한 텍스트 데이터에 포함되는 텍스트 ID:Text01을 읽어낸다. 기억 제어부(114)는, 텍스트 ID:Text01을 포함하는 기억이 끝난 텍스트 데이터를 기억부(12)로부터 소거함과 아울러, 수신한 텍스트 데이터를 기억부(12)에 기억한다(스텝 S206).
또한, 처리 서버(10)의 번역 처리부(116)는, 통신 단말(20-1)로부터 송신된 텍스트 데이터를 수신하면, 수신한 텍스트 데이터에 대하여, 예컨대, 언어 코드 02에 대응하는 언어로 번역 처리를 실시함으로써, 번역 텍스트 데이터를 작성한다(스텝 S207). 번역 텍스트 데이터를 작성하면, 번역 처리부(116)는, 번역이 완료된 취지를 통신 제어부(113)에 통지한다(스텝 S208). 번역이 완료된 취지의 통지를 받으면, 통신 제어부(113)는, User01과 상이한 언어 코드가 설정되어 있는 User03이 소지하는 통신 단말(20-3)에, 번역이 완료된 취지의 통지를 송신한다(스텝 S209). 작성된 번역 텍스트 데이터는, 기억 제어부(114)에 출력된다(스텝 S2010). 기억 제어부(114)는, 텍스트 ID:Text01, 및 언어 코드:언어 코드 02를 포함하는 기억이 끝난 번역 텍스트 데이터를 기억부(12)로부터 소거함과 아울러, 번역 처리부(116)에서 작성된 번역 텍스트 데이터를 기억부(12)에 기억한다(스텝 S2011).
도 21은 도 1에 나타내어지는 통신 단말(20-2)이, 통신 단말(20-1)에 의해 수정된 문자를 디스플레이에 표시시킬 때의 처리 서버(10), 및 통신 단말(20-2)의 동작의 예를 설명하는 도면이다. 또, 도 21에서는, 제 1 표시 형식이 설정되어 있는 경우를 예로 설명한다.
통신 단말(20-1)과 동일한 언어 코드가 설정되어 있는 통신 단말(20-2)은, 처리 서버(10)로부터 갱신 통지를 수신한다(스텝 S211). 이때, 갱신 통지에는, 수정된 텍스트 데이터에 대한 텍스트 ID가 포함되어 있다. 도 21의 설명에서는, 도 20에서의 설명을 이어받아, 텍스트 ID:Text01이 텍스트화 완료 통지에 포함되어 있다고 한다. 갱신 통지를 수신하면, 통신 단말(20-2)의 통신 제어부(211)는, 텍스트 ID:Text01이 포함되어 있는 텍스트 데이터를 요구하는 취지의 텍스트 데이터 요구 통지를, 처리 서버(10)에 송신한다(스텝 S212). 이때, 텍스트 데이터 요구 통지에는, 요구원인 통신 단말(20-2)의 유저 ID:User02가 부여되어 있다.
텍스트 데이터 요구 통지를 수신하면, 처리 서버(10)의 기억 제어부(114)는, 텍스트 ID:Text01이 포함되어 있는 텍스트 데이터를, 기억부(12)로부터 읽어낸다(스텝 S213). 처리 서버(10)의 통신 제어부(113)는, 기억부(12)로부터 읽어내어진 텍스트 데이터를, 패킷 형식의 데이터로 변환한다(스텝 S214). 통신 제어부(113)는, 패킷 형식으로 변환한 데이터를, 텍스트 데이터 요구 통지에 부여되어 있는 유저 ID에 따른 수만큼 복제한다. 통신 제어부(113)는, 복제한 데이터를, 유저 ID를 이용하여 특정되는 IP 어드레스로 향하여 송신한다(스텝 S215). 이것에 의해, 패킷 형식으로 변환된 텍스트 데이터가 통신 단말(20-2)에 송신된다.
처리 서버(10)로부터 송신된 텍스트 데이터를 수신하면, 통신 단말(20-2)의 기억 제어부(212)는, 수신한 텍스트 데이터를 RAM에 기억한다. 기억 제어부(212)는, RAM에 텍스트 데이터가 기억되면, 기억된 텍스트 데이터로부터 텍스트 ID:Text01을 읽어낸다. 기억 제어부(212)는, 읽어낸 텍스트 ID:Text01을 참조하여, RAM에 과거에 기억된, 텍스트 ID:Text01을 포함하는 텍스트 데이터를 삭제한다. 이것에 의해, 수정 전의 텍스트 데이터가 RAM으로부터 삭제되게 된다. 통신 단말(20-2)의 표시 제어부(213)는, RAM에 새롭게 기억된 텍스트 데이터로부터 텍스트 실제 데이터를 읽어낸다. 표시 제어부(213)는, 읽어낸 텍스트 실제 데이터에 근거하는 문자를, 토크 그룹 ID:Group01에 의해 식별되는 토크 그룹 G1에 대한 표시 화면에, 음성 ID:Talk01에 대응하는 문자로서 표시한다(스텝 S216). 이것에 의해, 수정 전의 텍스트 데이터에 근거하여 표시되어 있는 문자가, 수신한 텍스트 데이터에 근거하는 문자로 고쳐 쓰이게 된다.
도 22는 도 1에 나타내어지는 통신 단말(20-3)이, 통신 단말(20-1)에 의해 수정된 문자를 디스플레이에 표시시킬 때의 처리 서버(10), 및 통신 단말(20-3)의 동작의 예를 설명하는 도면이다. 또, 도 22에서는, 제 1 표시 형식이 설정되어 있는 경우를 예로 설명한다.
통신 단말(20-1)과 상이한 언어 코드가 설정되어 있는 통신 단말(20-3)은, 처리 서버(10)로부터 갱신 통지, 및 번역 완료 통지를 수신한다(스텝 S221). 이때, 갱신 통지에는, 수정된 텍스트 데이터에 대한 텍스트 ID가 포함되어 있다. 또한, 번역 완료 통지에는, 번역이 완료된 번역 텍스트 데이터에 대한 텍스트 ID, 및 언어 코드가 포함되어 있다. 도 22의 설명에서는, 도 20에서의 설명을 이어받아, 텍스트 ID:Text01이 텍스트화 완료 통지에 포함되어 있다고 한다. 또한, 텍스트 ID:Text01, 및 언어 코드:언어 코드 02가 번역 완료 통지에 포함되어 있다고 한다.
갱신 통지, 및 번역 완료 통지를 수신하면, 통신 단말(20-3)의 통신 제어부(211)는, 텍스트 ID:Text01이 포함되어 있는 텍스트 데이터, 및, 텍스트 ID:Text01, 및 언어 코드:언어 코드 02가 포함되어 있는 번역 텍스트 데이터를 요구하는 취지의 요구 통지를, 처리 서버(10)에 송신한다(스텝 S222). 이때, 요구 통지에는, 요구원인 통신 단말(20-3)의 유저 ID:User03이 부여되어 있다.
요구 통지를 수신하면, 처리 서버(10)의 기억 제어부(114)는, 텍스트 ID:Text01이 포함되어 있는 텍스트 데이터와, 텍스트 ID:Text01, 및 언어 코드:언어 코드 02가 포함되어 있는 번역 텍스트 데이터를, 기억부(12)로부터 읽어낸다(스텝 S223). 처리 서버(10)의 통신 제어부(113)는, 기억부(12)로부터 읽어내어진 텍스트 데이터 및 번역 텍스트 데이터를, 패킷 형식의 데이터로 변환한다(스텝 S224). 통신 제어부(113)는, 패킷 형식으로 변환한 데이터를, 텍스트 데이터 요구 통지에 부여되어 있는 유저 ID에 따른 수만큼 복제한다. 통신 제어부(113)는, 복제한 데이터를, 유저 ID를 이용하여 특정되는 IP 어드레스로 향하여 송신한다(스텝 S225). 이것에 의해, 패킷 형식으로 변환된 텍스트 데이터 및 번역 텍스트 데이터가 통신 단말(20-3)에 송신된다.
처리 서버(10)로부터 송신된 텍스트 데이터 및 번역 텍스트 데이터를 수신하면, 통신 단말(20-3)의 기억 제어부(212)는, 수신한 텍스트 데이터 및 번역 텍스트 데이터를 RAM에 기억한다. 기억 제어부(212)는, RAM에 텍스트 데이터 및 번역 텍스트 데이터가 기억되면, 기억된 텍스트 데이터 및 번역 텍스트 데이터로부터, 텍스트 ID:Text01, 및 언어 코드:언어 코드 02를 읽어낸다. 기억 제어부(212)는, 읽어낸 텍스트 ID:Text01, 및 언어 코드:언어 코드 02를 참조하여, RAM에 과거에 기억된, 텍스트 ID:Text01을 포함하는 텍스트 데이터와, 텍스트 ID:Text01, 및 언어 코드:언어 코드 02를 포함하는 번역 텍스트 데이터를 삭제한다. 이것에 의해, 수정 전의 텍스트 데이터, 및 수정 전의 텍스트 데이터에 대한 번역 텍스트 데이터가 RAM으로부터 삭제되게 된다. 통신 단말(20-3)의 표시 제어부(213)는, RAM에 새롭게 기억된 텍스트 데이터 및 번역 텍스트 데이터로부터, 텍스트 실제 데이터 및 번역 텍스트 실제 데이터를 각각 읽어낸다. 표시 제어부(213)는, 텍스트 실제 데이터 및 번역 텍스트 실제 데이터에 근거하는 문자를, 토크 그룹 ID:Group01에 의해 식별되는 토크 그룹 G1에 대한 표시 화면에, 음성 ID:Talk01에 대응하는 문자로서 표시한다(스텝 S226). 이것에 의해, 수정 전의 텍스트 데이터 및 번역 텍스트 데이터에 근거하여 표시되어 있는 문자가, 수신한 텍스트 데이터 및 번역 텍스트 데이터에 근거하는 문자로 고쳐 쓰이게 된다.
이상과 같이, 본 실시 형태에서는, 처리 서버(10)의 텍스트화 처리부(115)는, 송신권을 갖는 통신 단말(20-1)로부터 송신되는 음성 데이터에 근거하여 텍스트 데이터를 작성한다. 그리고, 처리 서버(10)의 통신 제어부(113)는, 작성한 텍스트 데이터를 토크 그룹 G1에 참가하는 통신 단말(20-1~20-3)에 송신하도록 하고 있다. 이것에 의해, 토크 그룹에 참가하는 통신 단말(20-1~20-m)의 이용자는, 통화를 텍스트화한 문자 표시로 통화의 내용을 확인하는 것이 가능하게 된다. 또한, 음성을 알아듣기 힘든 환경 하, 및 음성을 알아듣기 힘든 사람이더라도, 통화의 내용을 확인하는 것이 가능하게 된다.
따라서, 본 실시 형태와 관련되는 통신 시스템(1), 및 처리 서버(10)에 따르면, 정보의 전달 미스를 저감할 수 있다.
또한, 본 실시 형태에서는, 처리 서버(10)의 텍스트화 처리부(115)는, 캐시 메모리에 유지되는 복수의 음성 데이터에 근거하여 텍스트 데이터를 작성하도록 하고 있다. 이것에 의해, 처리 서버(10)는, 음성 통신의 품질을 유지한 채로, 텍스트 데이터를 작성하는 것이 가능하게 된다.
또한, 본 실시 형태에서는, 처리 서버(10)의 텍스트화 처리부(115)는, 캐시 메모리에 미리 설정된 용량의 음성 데이터가 유지되거나, 또는, 이 용량에 도달하기 전에 통신 단말(20-1)의 송신권이 개방되면, 캐시 메모리에서 유지되는 복수의 음성 데이터에 근거하여 텍스트 데이터를 작성하도록 하고 있다. 즉, 장시간의 통화는, 일정 시간마다 구분하여 텍스트화된다. 이것에 의해, 처리 서버(10)는, 음성 데이터와의 지연을 최소화하면서, 텍스트 데이터를 작성하는 것이 가능하게 된다. 또한, 발화자가 장시간 발화하고 있는 경우이더라도, 순서대로 음성 데이터를 텍스트화하는 것이 가능하게 된다.
또한, 본 실시 형태에서는, 처리 서버(10)의 기억 제어부(114)는, 작성된 텍스트 데이터를 기억부(12)에 기억한다. 텍스트화 처리부(115)는, 텍스트 데이터를 작성하면 텍스트화가 완료된 취지를, 토크 그룹 G1에 참가하는 통신 단말(20-1~20-3)에 통지한다. 그리고, 텍스트화가 완료된 취지를 통지한 통신 단말로부터 텍스트 데이터를 요구하는 취지의 통지가 있으면, 통신 제어부(113)는, 기억부(12)에 기억되는 텍스트 데이터를, 요구원의 통신 단말에 송신한다. 이것에 의해, 처리 서버(10)는, 통신 단말(20-1~20-m)의 기억부(22)에 텍스트 데이터를 기억시키지 않더라도, 텍스트 데이터에 근거하는 문자를 디스플레이에 표시시키는 것이 가능하게 된다. 이와 같이, 통신 단말(20-1~20-m)에서는 텍스트 데이터가 기억되지 않기 때문에, 정보의 누설을 막는 것이 가능하게 된다.
또한, 본 실시 형태에서는, 처리 서버(10)의 통신 제어부(113)는, 텍스트화가 완료된 취지를 통지한 통신 단말로부터, 텍스트 데이터에 근거하는 문자의 표시 개시를 요구하는 통지가 있는 경우, 기억부(12)에 기억되는 과거의 복수의 텍스트 데이터를, 요구원의 통신 단말에 송신하도록 하고 있다. 이것에 의해, 도중에 토크 그룹에 참가한 경우, 및, 음성의 문자 표시를 통화의 도중에 시작한 경우이더라도, 통신 단말(20-1~20-m)의 이용자는, 통화의 흐름을 문자로 확인하는 것이 가능하게 된다.
또한, 본 실시 형태에서는, 처리 서버(10)의 기억 제어부(114)는, 텍스트 데이터를 작성할 때에 이용한 음성 데이터를 통화 데이터로서 기억부(12)에 기억한다. 통신 제어부(113)는, 텍스트 데이터를 송신한 통신 단말(20)로부터, 텍스트 데이터와 대응하는 음성의 재생 요구가 있으면, 기억부(12)에 기억되어 있는 통화 데이터 중, 재생이 요구된 텍스트 데이터와 대응하는 통화 데이터를, 재생 요구가 있던 통신 단말에 송신하도록 하고 있다. 이것에 의해, 통신 단말(20-1~20-m)의 이용자는, 디스플레이에 표시되는 문자에 대응하는 실제의 통화를, 임의의 타이밍에 듣는 것이 가능하게 된다. 또한, 디스플레이에 표시되는 문자에 오류가 있더라도 올바른 내용을 확인하는 것이 가능하게 된다.
또한, 본 실시 형태에서는, 처리 서버(10)의 통신 제어부(113)는, 송신권을 갖는 통신 단말(20-1)에서 텍스트 데이터가 수정된 경우, 수정된 텍스트 데이터를 토크 그룹 G1에 참가하는 통신 단말(20-2, 20-3)에 송신하도록 하고 있다. 이것에 의해, 텍스트화 처리부(115)에 의한 통화 데이터의 텍스트화에서 잘못된 변환이 있었을 경우이더라도, 발화자는, 통화 단말에 표시되는 문자를 수정하고, 수정한 문자를 다른 통신 단말에 반영시키는 것이 가능하게 된다.
또한, 본 실시 형태에서는, 처리 서버(10)의 통신 제어부(113)는, 송신권을 갖는 통신 단말(20-1)에서 텍스트 데이터가 수정되면, 표시를 갱신하는 취지를, 토크 그룹 G1에 참가하는 통신 단말(20-2, 20-3)에 통지한다. 통신 제어부(113)는, 갱신을 통지한 통신 단말(20)로부터, 수정된 텍스트 데이터의 송신이 요구되면, 기억부(12)에 기억되는 수정된 텍스트 데이터를, 요구원의 통신 단말(20)에 송신한다. 이것에 의해, 처리 서버(10)는, 통신 단말(20-1~20-m)의 기억부(22)에 수정된 텍스트 데이터를 기억시키지 않더라도, 수정된 텍스트 데이터에 근거하는 문자를 디스플레이에 표시시키는 것이 가능하게 된다.
또한, 본 실시 형태에서는, 처리 서버(10)의 번역 처리부(116)는, 텍스트화 처리부(115)에서 작성된 텍스트 데이터에 대하여 번역 처리를 실시함으로써 번역 텍스트 데이터를 작성한다. 그리고, 통신 제어부(113)는, 작성된 번역 텍스트 데이터를, 토크 그룹 G1에 참가하는 통신 단말(20-1~20-3) 중, 송신권을 갖는 통신 단말(20-1)과 상이한 언어가 설정되어 있는 통신 단말(20-3)에 송신하도록 하고 있다. 이것에 의해, 토크 그룹에 상이한 언어를 사용하는 이용자가 있더라도, 이 이용자는, 통화의 내용을 이해하는 것이 가능하게 된다. 즉, 다언어간에서의 커뮤니케이션을 도모하는 것이 가능하게 된다.
또한, 본 실시 형태에서는, 처리 서버(10)의 기억 제어부(114)는, 번역 처리부(116)에서 작성된 번역 텍스트 데이터를 기억부(12)에 기억한다. 번역 처리부(116)는, 번역 텍스트 데이터를 작성하면, 번역 처리가 완료된 취지를, 토크 그룹 G1에 참가하는 통신 단말(20-1~20-3) 중, 송신권을 갖는 통신 단말(20-1)과 상이한 언어가 설정되어 있는 통신 단말(20-3)에 송신한다. 그리고, 통신 제어부(113)는, 번역 완료 통지를 송신한 통신 단말(20-3)로부터, 번역 텍스트 데이터의 송신이 요구되면, 요구된 번역 텍스트 데이터를 기억부(12)로부터 읽어내고, 읽어낸 번역 텍스트 데이터를, 요구원의 통신 단말(20-3)에 송신한다. 이것에 의해, 처리 서버(10)는, 통신 단말(20-1~20-m)의 기억부(22)에 번역 텍스트 데이터를 기억시키지 않더라도, 번역 텍스트 데이터에 근거하는 문자를 디스플레이에 표시시키는 것이 가능하게 된다. 이와 같이, 통신 단말(20-1~20-m)에서는 번역 텍스트 데이터가 기억되지 않기 때문에, 정보의 누설을 막는 것이 가능하게 된다.
또한, 본 실시 형태에서는, 처리 서버(10)의 통신 제어부(113)는, 번역 처리가 완료된 취지를 통지한 통신 단말(20-3)로부터, 번역 텍스트 데이터에 근거하는 문자의 표시 개시를 요구하는 통지가 있는 경우, 기억부(12)에 기억되는 과거의 복수의 번역 텍스트 데이터를, 요구원의 통신 단말(20-3)에 송신하도록 하고 있다. 이것에 의해, 도중에 토크 그룹에 참가한 경우, 및, 음성의 문자 표시를 통화의 도중에 시작한 경우이더라도, 통신 단말(20-1~20-m)의 이용자는, 번역된 문자로 통화의 흐름을 확인하는 것이 가능하게 된다.
또한, 본 실시 형태에서는, 처리 서버(10)의 번역 처리부(116)는, 송신권을 갖는 통신 단말에서 수정된 텍스트 데이터에 대하여 번역 처리를 실시함으로써 번역 텍스트 데이터를 작성한다. 통신 제어부(113)는, 수정된 텍스트 데이터에 대한 번역 텍스트 데이터를, 토크 그룹 G1에 참가하는 통신 단말(20-1~20-3) 중, 송신권을 갖는 통신 단말(20-1)과 상이한 언어가 설정되어 있는 통신 단말(20-3)에 송신하도록 하고 있다. 이것에 의해, 처리 서버(10)는, 수정된 텍스트 데이터를 자동적으로 번역하고, 수정을 반영시킨 번역 텍스트 데이터를, 송신권을 갖는 통신 단말(20)과 상이한 언어가 설정되어 있는 통신 단말(20)에 전달하는 것이 가능하게 된다.
또한, 본 실시 형태에서는, 처리 서버(10)의 기억 제어부(114)는, 송신권을 갖는 통신 단말(20-1)에서 수정된 텍스트 데이터에 대한 번역 텍스트 데이터가 작성되면, 수정 전의 텍스트 데이터에 대한 번역 텍스트 데이터를 기억부(12)로부터 소거하고, 수정된 텍스트 데이터에 대한 번역 텍스트 데이터를 기억부(12)에 기억한다. 번역 처리부(116)는, 통신 단말(20-1)에서 수정된 텍스트 데이터에 대한 번역 텍스트 데이터를 작성하면, 번역 처리가 완료된 취지를, 토크 그룹 G1에 참가하는 통신 단말(20-1~20-3) 중, 송신권을 갖는 통신 단말(20-1)과 상이한 언어가 설정되어 있는 통신 단말(20-3)에 송신한다. 그리고, 통신 제어부(113)는, 번역 완료 통지를 송신한 통신 단말(20-3)로부터, 번역 텍스트 데이터의 송신이 요구되면, 요구된 번역 텍스트 데이터를 기억부(12)로부터 읽어내고, 읽어낸 번역 텍스트 데이터를, 요구원의 통신 단말(20-3)에 송신하도록 하고 있다. 이것에 의해, 처리 서버(10)는, 통신 단말(20-1~20-m)의 기억부(22)에 수정된 텍스트 데이터에 대한 번역 텍스트 데이터를 기억시키지 않더라도, 번역 텍스트 데이터에 근거하는 문자를 디스플레이에 표시시키는 것이 가능하게 된다.
또한, 본 실시 형태에서는, 통신 단말(20-1~20-3)의 통신 제어부(211)는, 송신권을 갖는 통신 단말(20-1)로부터 송신된 음성 데이터의 텍스트화가 완료된 취지의 텍스트화 완료 통지를 수신한다. 통신 제어부(211)는, 수신한 텍스트화 완료 통지에 의해 텍스트화 완료가 통지된 텍스트 데이터의 송신을 처리 서버(10)에 요구한다. 통신 제어부(211)는, 요구에 따라 처리 서버(10)로부터 회신되는 텍스트 데이터를 수신한다. 그리고, 표시 제어부(213)는, 수신한 텍스트 데이터에 근거하는 문자를 출력 인터페이스(24)로서의 디스플레이에 표시하도록 하고 있다. 이것에 의해, 토크 그룹에 참가하는 통신 단말(20-1~20-m)의 이용자는, 통화를 텍스트화한 문자 표시로 통화의 내용을 확인하는 것이 가능하게 된다. 또한, 음성을 알아듣기 힘든 환경 하, 및 음성을 알아듣기 힘든 사람이더라도, 통화의 내용을 확인하는 것이 가능하게 된다.
또한, 본 실시 형태에서는, 통신 단말(20-1~20-3)의 기억 제어부(212)는, 수신한 텍스트 데이터를 휘발성 메모리인 RAM에 기억한다. 그리고, 표시 제어부(213)는, RAM에 기억된 텍스트 데이터에 근거하는 문자를 디스플레이에 표시하도록 하고 있다. 이것에 의해, 통신 단말(20-1~20-m)은, 기억부(22)에 텍스트 데이터를 기억시키지 않더라도, 텍스트 데이터에 근거하는 문자를 디스플레이에 표시시키는 것이 가능하게 된다.
또한, 본 실시 형태에서는, 통신 단말(20-1~20-3)의 표시 제어부(213)는, 수신한 텍스트화 완료 통지를 디스플레이에 표시한다. 그리고, 통신 제어부(211)는, 텍스트화 완료 통지의 표시에 대하여, 문자의 표시 요구가 있었을 경우, 텍스트화 완료가 통지된 텍스트 데이터의 송신을 처리 서버(10)에 요구하도록 하고 있다. 이것에 의해, 통신 단말(20-1~20-m)은, 음성에 대응한 문자 표시가 필요한 경우에만, 디스플레이에 문자를 표시하는 것이 가능하게 된다.
또한, 본 실시 형태에서는, 통신 단말(20-1~20-3)의 통신 제어부(211)는, 디스플레이에서 표시되는 문자에 대응하는 음성의 재생 요구가 있었을 경우, 텍스트 데이터를 작성할 때에 이용한 음성 데이터의 송신을 처리 서버(10)에 요구한다. 통신 제어부(211)는, 요구에 따라 처리 서버(10)로부터 회신되는 음성 데이터를 수신한다. 그리고, 재생 제어부(214)는, 수신한 음성 데이터에 근거하는 음성을 스피커로부터 재생하도록 하고 있다. 이것에 의해, 통신 단말(20-1~20-m)의 이용자는, 디스플레이에 표시되는 문자에 대응하는 실제의 통화를, 임의의 타이밍에 듣는 것이 가능하게 된다. 또한, 디스플레이에 표시되는 문자에 오류가 있더라도 올바른 내용을 확인하는 것이 가능하게 된다.
또한, 본 실시 형태에서는, 통신 단말(20-1)의 수정 제어부(216)는, 디스플레이에서 표시되는 문자에 대하여 수정 요구가 있는 경우, 수정이 요구된 문자가, 자신의 단말이 송신권을 갖는 통화에 속하는 문자인지 여부를 판단한다. 수정이 요구된 문자가, 자신의 단말이 송신권을 갖는 통화에 속하는 문자인 경우, 수정 제어부(216)는, 텍스트 데이터로의 수정을 입력하기 위한 수정 폼을 디스플레이에 표시하고, 수정 폼을 통해서 입력된 수정에 근거하여 텍스트 데이터를 작성한다. 그리고, 수정 제어부(216)는, 작성한 텍스트 데이터를 처리 서버(10)에 송신한다. 이것에 의해, 텍스트화 처리에서 잘못된 변환이 있었을 경우, 발화자는, 통화 단말에 표시되는 문자를 수정하는 것이 가능하게 된다.
또한, 본 실시 형태에서는, 송신권을 갖는 통신 단말(20-1)이 텍스트 데이터를 수정하면, 통신 단말(20-2, 20-3)의 통신 제어부(211)는, 표시를 갱신하는 취지의 갱신 통지를 수신한다. 통신 제어부(211)는, 수신한 갱신 통지에 따라, 수정된 텍스트 데이터의 송신을 처리 서버(10)에 요구한다. 통신 제어부(211)는, 요구에 따라 처리 서버(10)로부터 회신되는 텍스트 데이터를 수신한다. 그리고, 표시 제어부(213)는, 디스플레이에 표시되어 있는 수정 전의 텍스트 데이터에 근거하는 문자를, 수신한 수정 후의 텍스트 데이터에 근거하는 문자로 고쳐 쓰도록 하고 있다. 이것에 의해, 통신 단말(20-1~20-m)은, 송신권을 갖는 통신 단말에 의한 텍스트 데이터의 수정을 자신의 단말의 디스플레이의 표시에 반영시키는 것이 가능하게 된다. 또한, 통신 단말(20-1~20-m)은, 기억부(22)에 텍스트 데이터를 기억시키지 않더라도, 수정된 텍스트 데이터에 근거하는 문자를 디스플레이에 표시시키는 것이 가능하게 된다.
또한, 본 실시 형태에서는, 통신 단말(20-1~20-3)의 통신 제어부(211)는, 단말에서 사용하는 언어가 설정되면, 설정된 언어에 대한 정보를 처리 서버(10)에 송신한다. 통신 제어부(211)는, 텍스트 데이터에 대하여 번역 처리가 완료된 취지의 번역 완료 통지를 수신한다. 통신 제어부(211)는, 수신한 번역 완료 통지에 따라, 번역 텍스트 데이터의 송신을 처리 서버(10)에 요구한다. 통신 제어부(211)는, 처리 서버(10)로부터 회신되는 번역 텍스트 데이터를 수신한다. 그리고, 표시 제어부(213)는, 수신한 번역 텍스트 데이터에 근거하는 문자를 디스플레이에 표시한다. 이것에 의해, 통신 단말(20-1~20-m)은, 이용자가 사용하는 언어가 송신권을 갖는 통신 단말의 언어와 상이한 경우, 음성이 자동적으로 번역된 문자를 디스플레이에 표시하는 것이 가능하게 된다.
또한, 본 실시 형태에서는, 통신 단말(20-3)의 기억 제어부(212)는, 수신한 번역 텍스트 데이터를 휘발성 메모리인 RAM에 기억한다. 그리고, 표시 제어부(213)는, 휘발성 메모리에 기억한 번역 텍스트 데이터에 근거하는 문자를 디스플레이에 표시하도록 하고 있다. 이것에 의해, 통신 단말(20-1~20-m)은, 기억부(22)에 텍스트 데이터를 기억시키지 않더라도, 번역 텍스트 데이터에 근거하는 문자를 디스플레이에 표시시키는 것이 가능하게 된다.
또한, 본 실시 형태에서는, 통신 단말(20-3)의 표시 제어부(213)는, 수신한 번역 완료 통지를 디스플레이에 표시한다. 그리고, 통신 제어부(211)는, 번역 완료 통지의 표시에 대하여, 번역 텍스트 데이터에 근거하는 문자의 표시 요구가 있었을 경우, 번역 완료가 통지된 번역 텍스트 데이터의 송신을 처리 서버(10)에 요구하도록 하고 있다. 이것에 의해, 통신 단말(20-1~20-m)은, 번역 텍스트 데이터에 근거하는 문자의 표시가 필요한 경우에만, 디스플레이에 문자를 표시하는 것이 가능하게 된다.
또한, 본 실시 형태에서는, 통신 단말(20)의 낭독 제어부(215)는, 디스플레이에서 표시되는, 번역 텍스트 데이터에 근거하는 문자에 대하여 낭독 요구가 있었을 경우, 번역 텍스트 데이터에 근거하는 문자를 음성 데이터로 변환한다. 그리고, 낭독 제어부(215)는, 변환한 음성 데이터에 근거하는 음성을 스피커로부터 재생하도록 하고 있다. 이것에 의해, 통신 단말(20-1~20-m)은, 통화의 내용을, 다른 언어로도 재생하는 것이 가능하게 된다.
또한, 본 실시 형태에서는, 통신 단말(20-3)의 통신 제어부(211)는, 수정된 텍스트 데이터에 대한 번역 텍스트 데이터를 수신한다. 그리고, 표시 제어부(213)는, 디스플레이에 표시되어 있는 수정 전의 텍스트 데이터에 대한 번역 텍스트 데이터에 근거하는 문자를, 수신한 수정 후의 텍스트 데이터에 대한 번역 텍스트 데이터에 근거하는 문자로 고쳐 쓰도록 하고 있다. 이것에 의해, 통신 단말(20-1~20-m)은, 송신권을 갖는 통신 단말에 의한 텍스트 데이터의 수정을, 번역 텍스트 데이터에 근거하는 문자에 반영시키는 것이 가능하게 된다.
또, 상기 실시 형태에서는, 캐시 메모리에 미리 설정된 용량의 음성 데이터가 유지되면, 또는 미리 설정된 용량에 도달하기 전에 송신권이 개방되면, 기억 제어부(114)가, 캐시 메모리에 유지하고 있는 복수의 음성 데이터에 근거하여 통화 데이터를 작성하는 경우를 예로 설명했다. 그렇지만, 이것으로 한정되지 않는다. 예컨대, 기억 제어부(114)는, 송신권을 갖는 통신 단말로부터 송신되는 음성 데이터를 캐시 메모리에 순차적으로 유지한다. 그리고, 기억 제어부(114)는, 송신권이 개방되면, 캐시 메모리에 유지되어 있는 1통화분의 복수의 음성 데이터에 근거하여 통화 데이터를 작성하도록 하더라도 상관없다. 이것에 의해, 1개의 통화가 복수로 분단되는 일이 없기 때문에, 텍스트화가 보다 정확하게 이루어지게 된다.
또, 송신권의 개방 통지에 근거하여 통화 데이터가 작성되는 경우, 1통화분의 데이터가 분단되는 일은 없으므로, 통화 데이터에서는, 도 9에 나타내어지는 통화 ID를 저장하는 영역을 확보할 필요는 없다. 그 때문에, 텍스트 데이터에 있어서도, 도 10에 나타내어지는 통화 ID를 저장하는 영역을 확보할 필요는 없다.
또한, 상기 실시 형태에서는, 통신 단말(20-1~20-m)의 이용자는, 설정되어 있는 언어를 변경하는 것도 가능하다. 설정되어 있는 언어는, 예컨대, 토크 그룹에 다시 참가함으로써, 변경하는 것이 가능하다. 예컨대, 통신 단말(20-1~20-m)의 이용자는, 토크 그룹에 참가하고 있는 도중에, 설정되어 있는 언어를 전환하더라도 좋다. 통신 단말(20-1~20-m)은, 토크 그룹에 참가하고 있는 도중에 언어가 전환되면, 지금까지 수신한 텍스트 데이터에 대응하는, 전환한 후의 언어로 번역된 번역 텍스트 데이터를 전달하는 취지의 요구를 처리 서버(10)에 통지한다. 이 요구 통지에는, 예컨대, 요구원인 통신 단말의 유저 ID, 전환 후의 언어에 대한 언어 코드, 및 표시를 요하는 문자에 대한 텍스트 코드의 텍스트 ID가 포함된다.
처리 서버(10)의 기억 제어부(114)는, 전환 후의 언어에 대응하는 번역 텍스트 데이터를 요구하는 통지를 수신하면, 소망하는 텍스트 ID, 및 언어 코드가 포함되어 있는 번역 텍스트 데이터를 기억부(12)로부터 읽어낸다. 처리 서버(10)의 통신 제어부(113)는, 기억부(12)로부터 읽어내어진 번역 텍스트 데이터를, 요구원의 통신 단말에 송신한다.
통신 단말(20-1~20-m)의 기억 제어부(212)는, 전환한 후의 언어로 번역된 번역 텍스트 데이터를 수신하면, 수신한 번역 텍스트 데이터를 RAM에 기억한다. 기억 제어부(212)는, RAM에 번역 텍스트 데이터가 기억되면, 기억된 번역 텍스트 데이터로부터, 텍스트 ID를 읽어낸다. 기억 제어부(212)는, 읽어낸 텍스트 ID를 참조하여, RAM에 과거에 기억된, 동일한 텍스트 ID를 포함하는 번역 텍스트 데이터를 삭제한다. 통신 단말(20-1~20-m)의 표시 제어부(213)는, RAM에 새롭게 기억된 번역 텍스트 데이터로부터, 번역 텍스트 실제 데이터를 읽어낸다. 표시 제어부(213)는, 읽어낸 번역 텍스트 실제 데이터에 근거하는 문자를, 대응하는 텍스트 실제 데이터에 근거하는 문자와 함께 표시한다. 이것에 의해, 언어를 전환하기 전의 번역 텍스트 데이터에 근거하는 문자가, 수신한 번역 텍스트 데이터에 근거하는 문자로 고쳐 쓰이게 된다.
또, 통신 단말(20-1~20-m)의 기억 제어부(212)는, 동일한 텍스트 ID를 포함하는 번역 텍스트 데이터를 RAM으로부터 삭제하지 않더라도 상관없다. 통신 단말(20-1~20-m)의 표시 제어부(213)는, RAM에 기억되어 있는 번역 텍스트 데이터로부터, 번역 텍스트 실제 데이터를 읽어낸다. 표시 제어부(213)는, 읽어낸 번역 텍스트 실제 데이터에 근거하는 문자를, 대응하는 텍스트 실제 데이터에 근거하는 문자와 함께 표시한다. 이것에 의해, 언어를 전환하기 전의 표시에 맞추어, 전환한 후의 번역 텍스트 데이터에 근거하는 문자가 표시되게 된다.
이상, 본 발명과 관련되는 실시 형태를 설명했지만, 이 실시 형태는, 예로서 제시한 것이고, 발명의 범위를 한정하는 것은 의도하고 있지 않다.

Claims (42)

  1. 복수의 통신 단말을 대응지어 군으로 하고, 상기 군에 속하는 어느 1개의 통신 단말로부터 상기 군에 속하는 그 외의 통신 단말로의 일대다의 통신을 제공하는 신호 처리 장치에 있어서,
    상기 군에 속하는 복수의 통신 단말의 어느 1개에, 데이터를 송신할 권리인 송신권을 주는 송신권 부여부와,
    상기 송신권을 갖는 통신 단말로부터 송신된 음성 데이터에 근거하여 텍스트 데이터를 작성하고, 상기 텍스트 데이터를 작성하면 텍스트화가 완료된 취지를, 상기 군에 속하는 복수의 통신 단말에 통지하는 텍스트화 처리부와,
    상기 텍스트화가 완료된 취지의 통지 후에, 상기 작성된 텍스트 데이터를 상기 군에 속하는 복수의 통신 단말의 적어도 1개에 송신하는 통신 제어부
    를 구비하는 신호 처리 장치.
  2. 복수의 통신 단말을 대응지어 군으로 하고, 상기 군에 속하는 어느 1개의 통신 단말로부터 상기 군에 속하는 그 외의 통신 단말로의 일대다의 통신을 제공하는 신호 처리 장치에 있어서,
    상기 군에 속하는 복수의 통신 단말의 어느 1개에, 데이터를 송신할 권리인 송신권을 주는 송신권 부여부와,
    상기 송신권을 갖는 통신 단말로부터 송신된 음성 데이터에 근거하여 텍스트 데이터를 작성하는 텍스트화 처리부와,
    상기 작성된 텍스트 데이터를 상기 군에 속하는 복수의 통신 단말의 적어도 1개에 송신하는 통신 제어부
    를 구비하고,
    상기 텍스트화 처리부는, 상기 송신권이 개방되면, 상기 텍스트 데이터를 작성하는
    신호 처리 장치.
  3. 제 1 항 또는 제 2 항에 있어서,
    상기 음성 데이터를 유지하는 메모리를 더 구비하고,
    상기 텍스트화 처리부는, 상기 메모리에서 유지되는 음성 데이터에 근거하여 상기 텍스트 데이터를 작성하는
    신호 처리 장치.
  4. 제 1 항에 있어서,
    상기 음성 데이터를 유지하는 메모리를 더 구비하고,
    상기 텍스트화 처리부는, 상기 메모리에 미리 설정된 용량의 음성 데이터가 유지되거나, 또는, 상기 용량에 도달하기 전에 상기 송신권이 개방되면, 상기 메모리에서 유지되는 음성 데이터에 근거하여 상기 텍스트 데이터를 작성하는
    신호 처리 장치.
  5. 제 1 항에 있어서,
    상기 텍스트화 처리부는, 상기 송신권이 개방되면, 상기 텍스트 데이터를 작성하는 신호 처리 장치.
  6. 제 1 항에 있어서,
    상기 텍스트화 처리부는, 상기 텍스트화가 완료된 취지를, 상기 군에 소속 가능한 통신 단말에도 통지하는 신호 처리 장치.
  7. 제 1 항 또는 제 6 항에 있어서,
    상기 통신 제어부는, 상기 텍스트화가 완료된 취지를 통지한 통신 단말의 적어도 1개로부터 송신되는, 상기 텍스트 데이터에 근거하는 문자의 표시를 개시하는 개시 요구에 따라, 상기 개시 요구를 송신한 통신 단말에, 상기 텍스트 데이터를 송신하는 신호 처리 장치.
  8. 제 1 항 또는 제 2 항에 있어서,
    상기 통신 제어부는, 상기 텍스트 데이터를 송신한 통신 단말의 적어도 1개로부터 송신되는, 상기 텍스트 데이터에 대응하는 음성의 재생 요구에 따라, 상기 텍스트 데이터와 대응하는 통화 데이터를, 상기 재생 요구를 송신한 통신 단말에 송신하는 신호 처리 장치.
  9. 제 1 항 또는 제 2 항에 있어서,
    상기 통신 제어부는, 상기 송신권을 갖는 통신 단말에서 수정된 텍스트 데이터를 수신하면, 상기 군에 속하는 복수의 통신 단말에 표시를 갱신하는 취지를 통지하고, 상기 표시를 갱신하는 취지의 통지 후에, 상기 수정된 텍스트 데이터를 상기 군에 속하는 복수의 통신 단말의 적어도 1개에 송신하는 신호 처리 장치.
  10. 제 1 항 또는 제 2 항에 있어서,
    상기 텍스트화 처리부에 의해 작성된 텍스트 데이터에 대하여, 설정되어 있는 언어에 따른 번역 처리를 실시함으로써 번역 텍스트 데이터를 작성하고, 상기 번역 텍스트 데이터를 작성하면 번역 처리가 완료된 취지를, 상기 군에 속하는 복수의 통신 단말 중, 상기 언어가 설정되어 있는 통신 단말에 통지하는 번역 처리부를 더 구비하고,
    상기 통신 제어부는, 상기 번역 처리가 완료된 취지의 통지 후에, 상기 번역 텍스트 데이터를 송신하는
    신호 처리 장치.
  11. 제 10 항에 있어서,
    상기 통신 제어부는, 상기 번역 처리가 완료된 취지를 통지한 통신 단말의 적어도 1개로부터 송신되는, 상기 번역 텍스트 데이터에 근거하는 문자의 표시를 개시하는 개시 요구에 따라, 상기 개시 요구를 송신한 통신 단말에, 상기 번역 텍스트 데이터를 송신하는 신호 처리 장치.
  12. 제 10 항에 있어서,
    상기 번역 처리부는, 상기 송신권을 갖는 통신 단말에서 수정된 텍스트 데이터에 대하여, 설정되어 있는 언어에 따른 번역 처리를 실시함으로써 번역 텍스트 데이터를 작성하고, 상기 번역 텍스트 데이터를 작성하면 번역 처리가 완료된 취지를, 상기 군에 속하는 복수의 통신 단말 중, 상기 언어가 설정되어 있는 통신 단말에 통지하는 신호 처리 장치.
  13. 제 10 항에 있어서,
    상기 통신 제어부는, 상기 군에 속하는 복수의 통신 단말의 적어도 1개에서, 설정되어 있는 언어가 전환되면, 상기 언어가 전환된 통신 단말에, 상기 전환된 언어에 대한 번역 텍스트 데이터를 송신하는 신호 처리 장치.
  14. 복수의 통신 단말과,
    상기 복수의 통신 단말을 대응지어 군으로 하고, 상기 군에 속하는 어느 1개의 통신 단말로부터 상기 군에 속하는 그 외의 통신 단말로의 일대다의 통신을 제공하는 신호 처리 장치
    를 구비하고,
    상기 신호 처리 장치는,
    상기 군에 속하는 복수의 통신 단말의 어느 1개에, 데이터를 송신할 권리인 송신권을 주는 송신권 부여부와,
    상기 송신권을 갖는 통신 단말로부터 송신된 음성 데이터에 근거하여 텍스트 데이터를 작성하고, 상기 텍스트 데이터를 작성하면 텍스트화가 완료된 취지를, 상기 군에 속하는 복수의 통신 단말에 통지하는 텍스트화 처리부와,
    상기 텍스트화가 완료된 취지의 통지 후에, 상기 작성된 텍스트 데이터를 상기 군에 속하는 복수의 통신 단말의 적어도 1개에 송신하는 통신 제어부
    를 구비하는
    통신 시스템.
  15. 복수의 통신 단말과,
    상기 복수의 통신 단말을 대응지어 군으로 하고, 상기 군에 속하는 어느 1개의 통신 단말로부터 상기 군에 속하는 그 외의 통신 단말로의 일대다의 통신을 제공하는 신호 처리 장치
    를 구비하고,
    상기 신호 처리 장치는,
    상기 군에 속하는 복수의 통신 단말의 어느 1개에, 데이터를 송신할 권리인 송신권을 주는 송신권 부여부와,
    상기 송신권을 갖는 통신 단말로부터 송신된 음성 데이터에 근거하여 텍스트 데이터를 작성하는 텍스트화 처리부와,
    상기 작성된 텍스트 데이터를 상기 군에 속하는 복수의 통신 단말의 적어도 1개에 송신하는 통신 제어부
    를 구비하고,
    상기 텍스트화 처리부는, 상기 송신권이 개방되면, 상기 텍스트 데이터를 작성하는
    통신 시스템.
  16. 복수의 통신 단말을 대응지어 군으로 하고, 상기 군에 속하는 어느 1개의 통신 단말로부터 상기 군에 속하는 그 외의 통신 단말로의 일대다의 통신을 제공하는 신호 처리 장치에서 실시되는 방법으로서,
    상기 군에 속하는 복수의 통신 단말 중, 데이터를 송신할 권리인 송신권이 주어진 통신 단말로부터 송신되는 음성 데이터에 근거하여 텍스트 데이터를 작성하고,
    상기 텍스트 데이터를 작성하면 텍스트화가 완료된 취지를, 상기 군에 속하는 복수의 통신 단말에 통지하고,
    상기 텍스트화가 완료된 취지의 통지 후에, 상기 작성한 텍스트 데이터를 상기 군에 속하는 복수의 통신 단말의 적어도 1개에 송신하는
    통신 방법.
  17. 복수의 통신 단말을 대응지어 군으로 하고, 상기 군에 속하는 어느 1개의 통신 단말로부터 상기 군에 속하는 그 외의 통신 단말로의 일대다의 통신을 제공하는 신호 처리 장치에서 실시되는 방법으로서,
    상기 군에 속하는 복수의 통신 단말 중, 데이터를 송신할 권리인 송신권이 주어진 통신 단말로부터 송신되는 음성 데이터를 수신하고,
    상기 송신권이 개방되면, 상기 수신한 음성 데이터에 근거하여 텍스트 데이터를 작성하고,
    상기 작성한 텍스트 데이터를 상기 군에 속하는 복수의 통신 단말의 적어도 1개에 송신하는
    통신 방법.
  18. 제 16 항 또는 제 17 항에 있어서,
    상기 송신권을 갖는 통신 단말로부터 송신되는 음성 데이터를 메모리에 유지하고,
    상기 메모리에서 유지되는 음성 데이터에 근거하여 상기 텍스트 데이터를 작성하는
    통신 방법.
  19. 제 16 항에 있어서,
    상기 송신권을 갖는 통신 단말로부터 송신되는 음성 데이터를 메모리에 유지하고,
    상기 메모리에 미리 설정된 용량의 음성 데이터가 유지되거나, 또는, 상기 용량에 도달하기 전에 상기 송신권이 개방되면, 상기 메모리에서 유지되는 음성 데이터에 근거하여 상기 텍스트 데이터를 작성하는
    통신 방법.
  20. 제 16 항에 있어서,
    상기 송신권이 개방되면, 상기 텍스트 데이터를 작성하는 통신 방법.
  21. 제 16 항에 있어서,
    상기 텍스트화가 완료된 취지를, 상기 군에 소속 가능한 통신 단말에도 통지하는 통신 방법.
  22. 제 16 항 또는 제 21 항에 있어서,
    상기 텍스트화가 완료된 취지를 통지한 통신 단말의 적어도 1개로부터 송신되는, 상기 텍스트 데이터에 근거하는 문자의 표시를 개시하는 개시 요구에 따라, 상기 개시 요구를 송신한 통신 단말에, 상기 텍스트 데이터를 송신하는 통신 방법.
  23. 제 16 항 또는 제 17 항에 있어서,
    상기 텍스트 데이터를 송신한 통신 단말의 적어도 1개로부터 송신되는, 상기 텍스트 데이터에 대응하는 음성의 재생 요구에 따라, 상기 텍스트 데이터와 대응하는 통화 데이터를, 상기 재생 요구를 송신한 통신 단말에 송신하는 통신 방법.
  24. 제 16 항 또는 제 17 항에 있어서,
    상기 송신권을 갖는 통신 단말에서 수정된 텍스트 데이터를 수신하면, 상기 군에 속하는 복수의 통신 단말에 표시를 갱신하는 취지를 통지하고,
    상기 표시를 갱신하는 취지의 통지 후에, 상기 수정된 텍스트 데이터를 상기 군에 속하는 복수의 통신 단말의 적어도 1개에 송신하는
    통신 방법.
  25. 제 16 항 또는 제 17 항에 있어서,
    상기 작성한 텍스트 데이터에 대하여, 설정되어 있는 언어에 따른 번역 처리를 실시함으로써 번역 텍스트 데이터를 작성하고,
    상기 번역 텍스트 데이터를 작성하면 번역 처리가 완료된 취지를, 상기 군에 속하는 복수의 통신 단말 중, 상기 언어가 설정되어 있는 통신 단말에 통지하고,
    상기 번역 처리가 완료된 취지의 통지 후에, 상기 번역 텍스트 데이터를 송신하는
    통신 방법.
  26. 제 25 항에 있어서,
    상기 번역 처리가 완료된 취지를 통지한 통신 단말의 적어도 1개로부터 송신되는, 상기 번역 텍스트 데이터에 근거하는 문자의 표시를 개시하는 개시 요구에 따라, 상기 개시 요구를 송신한 통신 단말에, 상기 번역 텍스트 데이터를 송신하는 통신 방법.
  27. 제 25 항에 있어서,
    상기 송신권을 갖는 통신 단말에서 수정된 텍스트 데이터에 대하여, 설정되어 있는 언어에 따른 번역 처리를 실시함으로써 번역 텍스트 데이터를 작성하고,
    상기 번역 텍스트 데이터를 작성하면 번역 처리가 완료된 취지를, 상기 군에 속하는 복수의 통신 단말 중, 상기 언어가 설정되어 있는 통신 단말에 통지하는
    통신 방법.
  28. 제 25 항에 있어서,
    상기 군에 속하는 복수의 통신 단말의 적어도 1개에서, 설정되어 있는 언어가 전환되면, 상기 언어가 전환된 통신 단말에, 상기 전환된 언어에 대한 번역 텍스트 데이터를 송신하는 통신 방법.
  29. 청구항 1 또는 청구항 2에 기재된 신호 처리 장치가 구비하는 상기 각 부로서 컴퓨터를 기능시키는 컴퓨터 판독 가능한 기록 매체에 저장된 프로그램.
  30. 복수의 통신 단말로 대응지어진 군에 속하는 복수의 통신 단말 사이에서, 일대다의 통신을 실시하는 통신 단말에서 실시되는 방법으로서,
    상기 복수의 통신 단말의 어느 1개로부터 송신된 음성 데이터의 텍스트화가 완료된 취지의 텍스트화 완료 통지를 수신하고,
    상기 수신한 텍스트화 완료 통지에 따라, 상기 텍스트화에 의해 작성된 텍스트 데이터의 송신을 요구하는 요구 신호를 송신하고,
    상기 요구 신호에 따라 회신되는 텍스트 데이터를 수신하고,
    상기 수신한 텍스트 데이터에 근거하는 문자를 표시부에 표시하는
    통신 방법.
  31. 제 30 항에 있어서,
    상기 수신한 텍스트 데이터를 휘발성 메모리에 기억하고,
    상기 휘발성 메모리에 기억한 텍스트 데이터에 근거하는 문자를 상기 표시부에 표시하는
    통신 방법.
  32. 제 30 항 또는 제 31 항에 있어서,
    상기 수신한 텍스트화 완료 통지를 상기 표시부에 표시하고,
    상기 텍스트화 완료 통지의 표시에 대한, 상기 텍스트화에 의해 작성된 텍스트 데이터에 근거하는 문자의 표시 요구를 받아들이고,
    상기 표시 요구가 있었을 경우, 상기 요구 신호를 송신하는
    통신 방법.
  33. 제 30 항 또는 제 31 항에 있어서,
    상기 표시부에서 표시되는 문자에 대한, 상기 문자에 대응하는 음성의 재생 요구를 받아들이고,
    상기 재생 요구가 있었을 경우, 상기 텍스트 데이터를 작성할 때에 이용한 음성 데이터의 송신을 요구하는 음성 요구 신호를 송신하고,
    상기 음성 요구 신호에 따라 회신되는 음성 데이터를 수신하고,
    상기 수신한 음성 데이터에 근거하는 음성을 스피커로부터 재생하는
    통신 방법.
  34. 제 30 항 또는 제 31 항에 있어서,
    상기 표시부에서 표시되는 문자에 대한 수정 요구를 받아들이고,
    상기 수정 요구가 입력된 문자가, 자신의 단말이 데이터를 송신할 권리인 송신권을 갖는 통화에 속하는 문자인지 여부를 판단하고,
    상기 수정 요구가 입력된 문자가, 자신의 단말이 상기 송신권을 갖는 통화에 속하는 문자인 경우, 상기 텍스트 데이터로의 수정을 입력하기 위한 수정 폼을 상기 표시부에 표시하고,
    상기 입력된 수정에 근거하여 텍스트 데이터를 작성하고,
    상기 작성한 텍스트 데이터를 송신하는
    통신 방법.
  35. 제 30 항 또는 제 31 항에 있어서,
    상기 텍스트 데이터가 상기 복수의 통신 단말의 어느 1개에 의해 수정되면, 상기 텍스트 데이터에 대한 표시를 갱신하는 취지의 갱신 통지를 수신하고,
    상기 수신한 갱신 통지에 따라, 상기 수정된 텍스트 데이터의 송신을 요구하는 요구 신호를 송신하고,
    상기 요구 신호에 따라 회신되는 텍스트 데이터를 수신하고,
    상기 표시부에 표시되어 있는 수정 전의 텍스트 데이터에 근거하는 문자를, 상기 수신한 수정 후의 텍스트 데이터에 근거하는 문자로 고쳐 쓰는
    통신 방법.
  36. 제 30 항 또는 제 31 항에 있어서,
    사용하는 언어의 설정을 받아들이고,
    상기 설정한 언어에 대한 정보를 송신하고,
    상기 작성된 텍스트 데이터에 대한 상기 언어에 따른 번역 처리가 완료된 취지의 번역 완료 통지를 수신하고,
    상기 수신한 번역 완료 통지에 따라, 상기 번역 처리에 의해 작성된 번역 텍스트 데이터의 송신을 요구하는 번역 요구 신호를 송신하고,
    상기 번역 요구 신호에 따라 회신되는 번역 텍스트 데이터를 수신하고,
    상기 수신한 번역 텍스트 데이터에 근거하는 문자를 상기 표시부에 표시하는
    통신 방법.
  37. 제 36 항에 있어서,
    상기 수신한 번역 텍스트 데이터를 휘발성 메모리에 기억하고,
    상기 휘발성 메모리에 기억한 번역 텍스트 데이터에 근거하는 문자를 상기 표시부에 표시하는
    통신 방법.
  38. 제 36 항에 있어서,
    상기 수신한 번역 완료 통지를 상기 표시부에 표시하고,
    상기 번역 완료 통지의 표시에 대한, 상기 번역 처리에 의해 작성된 번역 텍스트 데이터에 근거하는 문자의 표시 요구를 받아들이고,
    상기 표시 요구가 있었을 경우, 상기 번역 요구 신호를 송신하는
    통신 방법.
  39. 제 36 항에 있어서,
    상기 표시부에서 표시되는, 상기 번역 텍스트 데이터에 근거하는 문자에 대한 낭독 요구를 받아들이고,
    상기 낭독 요구가 있었을 경우, 상기 번역 텍스트 데이터에 근거하는 문자를 음성 데이터로 변환하고,
    상기 변환한 음성 데이터에 근거하는 음성을 스피커로부터 재생하는
    통신 방법.
  40. 제 36 항에 있어서,
    수정된 텍스트 데이터에 대한 번역 텍스트 데이터를 수신하고,
    상기 표시부에 표시되어 있는 수정 전의 텍스트 데이터에 대한 번역 텍스트 데이터에 근거하는 문자를, 상기 수신한 수정 후의 텍스트 데이터에 대한 번역 텍스트 데이터에 근거하는 문자로 고쳐 쓰는
    통신 방법.
  41. 제 36 항에 있어서,
    사용하는 언어의 설정의 전환을 받아들이고,
    전환한 후의 언어로 번역된 번역 텍스트 데이터의 송신을 요구하는 요구 신호를 송신하고,
    상기 요구 신호에 따라 회신되는 번역 텍스트 데이터를 수신하고,
    상기 표시부에 표시되어 있는 언어 전환 전의 번역 텍스트 데이터에 근거하는 문자와 함께, 또는 고쳐 써서, 상기 수신한 언어 전환 후의 번역 텍스트 데이터에 근거하는 문자를 상기 표시부에 표시하는
    통신 방법.
  42. 청구항 30에 기재된 처리를 컴퓨터에 실시시키는 컴퓨터 판독 가능한 기록 매체에 저장된 프로그램.
KR1020197023457A 2017-06-16 2018-06-06 신호 처리 장치, 통신 시스템, 신호 처리 장치에서 실시되는 방법, 신호 처리 장치에서 실행되는 프로그램, 통신 단말에서 실시되는 방법, 및 통신 단말에서 실행되는 프로그램 KR102168913B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2017119046A JP6318292B1 (ja) 2017-06-16 2017-06-16 信号処理装置、通信システム、信号処理装置で実施される方法、信号処理装置で実行されるプログラム、通信端末で実施される方法、及び通信端末で実行されるプログラム
JPJP-P-2017-119046 2017-06-16
PCT/JP2018/021725 WO2018230414A1 (ja) 2017-06-16 2018-06-06 信号処理装置、通信システム、信号処理装置で実施される方法、信号処理装置で実行されるプログラム、通信端末で実施される方法、及び通信端末で実行されるプログラム

Publications (2)

Publication Number Publication Date
KR20190105622A KR20190105622A (ko) 2019-09-17
KR102168913B1 true KR102168913B1 (ko) 2020-10-22

Family

ID=62069465

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020197023457A KR102168913B1 (ko) 2017-06-16 2018-06-06 신호 처리 장치, 통신 시스템, 신호 처리 장치에서 실시되는 방법, 신호 처리 장치에서 실행되는 프로그램, 통신 단말에서 실시되는 방법, 및 통신 단말에서 실행되는 프로그램

Country Status (7)

Country Link
US (2) US11568154B2 (ko)
EP (2) EP3641287B1 (ko)
JP (1) JP6318292B1 (ko)
KR (1) KR102168913B1 (ko)
CN (1) CN110291769B (ko)
SG (1) SG11201906536QA (ko)
WO (1) WO2018230414A1 (ko)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11189289B2 (en) * 2016-12-05 2021-11-30 Sony Corporation Information processing device, information processing method, and information processing system
JP6318292B1 (ja) * 2017-06-16 2018-04-25 株式会社シアンス・アール 信号処理装置、通信システム、信号処理装置で実施される方法、信号処理装置で実行されるプログラム、通信端末で実施される方法、及び通信端末で実行されるプログラム
US11397600B2 (en) * 2019-05-23 2022-07-26 HCL Technologies Italy S.p.A Dynamic catalog translation system
JP7284400B2 (ja) * 2019-08-29 2023-05-31 アイコム株式会社 音声通信システム、中継装置および音声中継方法
JP2021086264A (ja) * 2019-11-26 2021-06-03 凸版印刷株式会社 翻訳管理システム
CN111028837B (zh) * 2019-12-16 2022-10-04 深圳云之家网络有限公司 语音会话方法、语音识别系统及计算机存储介质
CN112272361B (zh) * 2020-10-29 2022-05-31 哈尔滨海能达科技有限公司 语音处理方法及系统
US20230385726A1 (en) * 2022-05-31 2023-11-30 Weavix, Inc. Automatic facility accident reporting augmented by worker event tracking and correlation
US20240040340A1 (en) * 2022-07-27 2024-02-01 Zoom Video Communications, Inc. Integrated push-to-talk communication
JP7396758B1 (ja) * 2023-06-27 2023-12-12 株式会社サイエンスアーツ 情報処理装置、情報処理方法および情報処理プログラム
JP7488625B1 (ja) 2023-11-15 2024-05-22 テレネット株式会社 情報処理システム、情報処理方法及びプログラム

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001083990A (ja) 1999-09-09 2001-03-30 Toshiba Corp 音声認識装置および方法
JP2007165951A (ja) 2005-12-09 2007-06-28 Mitsubishi Electric Corp 無線端末制御システムおよび無線端末
JP2008227592A (ja) 2007-03-08 2008-09-25 Sanyo Electric Co Ltd 移動体通信機、通信システム、及び通信方法
JP2013009434A (ja) 2011-05-24 2013-01-10 Ntt Docomo Inc サービスサーバ装置、サービス提供方法、サービス提供プログラム

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2364850B (en) * 2000-06-02 2004-12-29 Ibm System and method for automatic voice message processing
US7236580B1 (en) * 2002-02-20 2007-06-26 Cisco Technology, Inc. Method and system for conducting a conference call
US9710819B2 (en) * 2003-05-05 2017-07-18 Interactions Llc Real-time transcription system utilizing divided audio chunks
US20050144012A1 (en) * 2003-11-06 2005-06-30 Alireza Afrashteh One button push to translate languages over a wireless cellular radio
US20070088553A1 (en) * 2004-05-27 2007-04-19 Johnson Richard G Synthesized interoperable communications
JP2006050500A (ja) * 2004-08-09 2006-02-16 Jfe Systems Inc 会議支援システム
JP3938379B2 (ja) * 2004-08-10 2007-06-27 富士通株式会社 電子音声会議における話者権についての情報処理方法及びプログラム、並びに無線通信携帯端末
US8660244B2 (en) * 2006-02-17 2014-02-25 Microsoft Corporation Machine translation instant messaging applications
EP1928189A1 (en) * 2006-12-01 2008-06-04 Siemens Networks GmbH & Co. KG Signalling for push-to-translate-speech (PTTS) service
US7826872B2 (en) 2007-02-28 2010-11-02 Sony Ericsson Mobile Communications Ab Audio nickname tag associated with PTT user
JP2008219297A (ja) 2007-03-01 2008-09-18 Sharp Corp １対多通信システム、送信権管理装置、送信権管理装置の制御方法、制御プログラム、およびそれを記録したコンピュータ読み取り可能な記録媒体
US20090135741A1 (en) * 2007-11-28 2009-05-28 Say2Go, Inc. Regulated voice conferencing with optional distributed speech-to-text recognition
US8204486B2 (en) * 2008-12-19 2012-06-19 Cox Communications, Inc. Dynamic messaging routing and audio-to-text linking for visual voicemail
JP5243646B2 (ja) 2011-05-24 2013-07-24 株式会社エヌ・ティ・ティ・ドコモ サービスサーバ装置、サービス提供方法、サービス提供プログラム
US8886169B2 (en) * 2011-10-25 2014-11-11 At&T Intellectual Property I, Lp Apparatus and method for providing enhanced telephonic communications
US10875525B2 (en) * 2011-12-01 2020-12-29 Microsoft Technology Licensing Llc Ability enhancement
US9110891B2 (en) * 2011-12-12 2015-08-18 Google Inc. Auto-translation for multi user audio and video
US8838459B2 (en) * 2012-02-29 2014-09-16 Google Inc. Virtual participant-based real-time translation and transcription system for audio and video teleconferences
KR101907406B1 (ko) 2012-05-08 2018-10-12 삼성전자 주식회사 통신 서비스 운용 방법 및 시스템
JP6318292B1 (ja) * 2017-06-16 2018-04-25 株式会社シアンス・アール 信号処理装置、通信システム、信号処理装置で実施される方法、信号処理装置で実行されるプログラム、通信端末で実施される方法、及び通信端末で実行されるプログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001083990A (ja) 1999-09-09 2001-03-30 Toshiba Corp 音声認識装置および方法
JP2007165951A (ja) 2005-12-09 2007-06-28 Mitsubishi Electric Corp 無線端末制御システムおよび無線端末
JP2008227592A (ja) 2007-03-08 2008-09-25 Sanyo Electric Co Ltd 移動体通信機、通信システム、及び通信方法
JP2013009434A (ja) 2011-05-24 2013-01-10 Ntt Docomo Inc サービスサーバ装置、サービス提供方法、サービス提供プログラム

Also Published As

Publication number Publication date
SG11201906536QA (en) 2019-08-27
CN110291769A (zh) 2019-09-27
US11836457B2 (en) 2023-12-05
US20230153549A1 (en) 2023-05-18
CN110291769B (zh) 2021-04-20
JP2019004392A (ja) 2019-01-10
US11568154B2 (en) 2023-01-31
EP4089994B1 (en) 2024-08-14
KR20190105622A (ko) 2019-09-17
US20190347332A1 (en) 2019-11-14
WO2018230414A1 (ja) 2018-12-20
EP3641287A4 (en) 2021-06-23
EP4089994A1 (en) 2022-11-16
JP6318292B1 (ja) 2018-04-25
EP3641287A1 (en) 2020-04-22
EP3641287B1 (en) 2022-07-27

Similar Documents

Publication Publication Date Title
KR102168913B1 (ko) 신호 처리 장치, 통신 시스템, 신호 처리 장치에서 실시되는 방법, 신호 처리 장치에서 실행되는 프로그램, 통신 단말에서 실시되는 방법, 및 통신 단말에서 실행되는 프로그램
US10425365B2 (en) System and method for relaying messages
US6490343B2 (en) System and method of non-spoken telephone communication
US20120257731A1 (en) Speech to Message Processing
US11474662B2 (en) Information processing method, information processing apparatus, and information processing program
CN102075509A (zh) 用于使用社交网络进行实时语言翻译的方法和系统
US20080102802A1 (en) Presence information delivery apparatus and method for mobile communication network
AU2005283023A1 (en) System, method, and computer program product for content delivery in a push-to-talk communication system
KR20170132715A (ko) 통신 단말, 메시지 번역 시스템, 메시지 번역 방법 및 메시지 번역용 프로그램
US11490142B2 (en) One-to-many communication system
KR20200059442A (ko) 그림을 이용한 영어학습 방법 및 시스템
US20190087416A1 (en) Information processing apparatus and non-transitory computer readable medium
JP2005182234A (ja) 入力支援装置、メッセージ送信装置、ユーザインターフェース、入力支援方法、およびプログラム
CN114840576A (zh) 数据标准匹配方法及装置
JP2013157672A (ja) 通信端末、通信方法及び通信プログラム
JP7396758B1 (ja) 情報処理装置、情報処理方法および情報処理プログラム
WO2022219706A1 (ja) メッセージ配信システム、メッセージ配信方法、及び、非一時的なコンピュータ可読媒体
JP7488625B1 (ja) 情報処理システム、情報処理方法及びプログラム
JP7421326B2 (ja) 遺言管理システム及び遺言管理装置
KR20040098912A (ko) 휴대전화를 이용한 외국어학습 시스템 및 방법
CN114417895A (zh) 通过语言转换进行交流的方法、系统及装置
CN115455989A (zh) 信息交互方法、装置、系统、电子设备以及存储介质
JP2020072414A (ja) 自動音声応答装置、サーバ装置、自動音声応答方法、テキストメッセージ送信方法、およびプログラム
JP2020136784A (ja) インターカムシステム、インターカム端末、およびインターカム通話方法
US20180011898A1 (en) Data collection method and system

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right