CN100355280C - 视频电话手语对谈辅助装置及使用其的手语翻译系统 - Google Patents

Abstract

本发明提供一种一面将手语以外的对象的影像传送给对方，一面同时进行手语说明的手语对谈用影像输入装置、手语对谈用影像输入输出装置及使用该手语对谈用影像输入输出装置的手语翻译系统。手语对谈用影像输入装置由用以拍摄手语以外的对象的对象拍摄摄像机(16)、用以拍摄聋哑者手语的手语拍摄摄像机(14)、将手语拍摄摄像机(14)固定于聋哑者腰部的腰部固定器具(15)、合成摄像机(14、16)的影像的影像合成装置(17)、及将合成的影像提供给视频电话终端机(10)的视频电话连接装置(18)所构成。手语对谈用影像输入输出装置还具有显示手语影像的显示装置(12)及将显示装置(12)固定于聋哑者眼前的眼前固定器具(13)，以通过视频电话终端机(10)将接收中的手语影像提供给显示装置(12)。手语翻译系统(100)使用手语对谈用影像输入输出装置，提供聋哑者与非聋哑者对谈时的手语翻译服务。

Description

视频电话手语对谈辅助装置及使用其的手语翻译系统

技术领域

本发明是涉及一种用于聋哑者使用视频电话进行手语对谈时的视频电话手语对谈辅助装置及使用了该视频电话手语对谈辅助装置的手语翻译系统，特别是涉及一种适合于一面传送手语以外的影像，一面就该影像进行手语说明时的视频电话手语对谈辅助装置及使用了该视频电话手语对谈辅助装置的手语翻译系统。

背景技术

手语对聋哑者而言是重要的交流手段，而由于以往的视频电话的影像品质不佳，故远距离的聋哑者之间进行手语对谈并不完善。然而，随著近年的通信技术的进步，视频电话的影像品质随之提高，远距离的聋哑者间以手语进行对谈已可进入实用程度。

图13表示以现有的视频电话进行的聋哑者间的手语对谈的示意图。在图中，10为供聋哑者A使用的视频电话终端机，20为供聋哑者B使用的视频电话终端机。聋哑者A设定视频电话终端机10，以使自己的手语可为拍摄部10b所拍摄，同时可目视辨认在影像显示部10a显示的聋哑者B的手语。同样地，聋哑者B设定视频电话终端机20，以使自己的手语可为拍摄部20b所拍摄，同时可目视辨认显示于影像显示部20a的聋哑者A的手语。由此，聋哑者A与聋哑者B可通过视频电话，以手语进行对谈。另外，在此，视频电话终端机是以使用便携电话型视频电话终端机时的情形为例进行说明，而使用桌面型时的情形亦相同。

接着，就聋哑者与非聋哑者使用视频电话，通过手语翻译者，进行对谈的情形说明。该手语翻译可通过使用连接例如3个以上的视频电话终端机，提供视频会议服务的多点连接装置而实现。

图14表示使用现有的多点连接装置的手语翻译服务的示意图。在图中，10为供聋哑者A使用的视频电话终端机(以下称为聋哑者终端机)，20为供非聋哑者B使用的视频电话终端机(以下称为非聋哑者终端机)，30为供手语翻译者使用的手语翻译者用视频电话终端机(以下称为手语翻译者终端机)，1为多点连接装置。

多点连接装置1接受来自各终端机10、20、30的连接，以接收从各终端机传送的影像及声音，再将所接收的影像及声音加以合成，传送至各终端机。由此，于各终端机的显示画面(10a、20a、30a)显示合成有各终端机影像的影像，并将合成有以各终端机的头戴耳机(20c、30c)等的麦克风取得的声音的声音输出到各终端机的头戴耳机(20c、30c)的扬声器。影像的合成可使用例如将所有连接的影像均等地合成的4分割合成等。另外，由于聋哑者A未使用声音输入输出，故在此，省略聋哑者终端机10的头戴耳机，而仅在非聋哑者与手语翻译者之间进行声音通话，而当在聋哑者终端机10有收集环境音进行传达或看护员存在的情形时，亦可设置集音麦克风或头戴耳机。

由此构造，当聋哑者A进行手语时，手语翻译者C可观看聋哑者A的影像，将其翻译成声音，非聋哑者B通过聆听手语翻译者C的声音，可理解聋哑者A的手语。另外，当非聋哑者发声时，聋哑者通过观看手语翻译者C的手语，可理解非聋哑者B的发声内容。

然而，在以上的使用视频电话的聋哑者之间的手语对谈或聋哑者与非聋哑者间通过手语翻译进行的对谈中，由于聋哑者用视频电话终端机在聋哑者做手语的期间须拍摄其手语，将其传送至对方，而无法将其他影像传送至对方。因而，聋哑者在视频电话对谈中，无法一面传送手语以外的影像，一面同时以手语进行该影像的说明。

如此，在健全者的视频电话对谈时，可一面传送对象的影像，一面同时以声音进行该影像的说明，若为聋哑者间的视频电话对谈时，则无法一面传送对象的影像，一面同时进行该影像的说明，存在无法充分地进行对象进行说明，或难以进行迅速对谈的问题。

发明内容

因此，本发明主要目的在于提供一种聋哑者可一面将手语以外的对象的影像传送给对方，一面同时以手语进行说明的视频电话手语对谈辅助装置及使用了该视频电话手语对谈辅助装置的手语翻译系统。

本发明方案一的视频电话手语对谈辅助装置，在聋哑者使用视频电话进行手语对谈时所使用，其特征在于，包含有：手势拍摄机构，其具有固定于聋哑者的腰部的腰部固定机构，该手势拍摄机构用于拍摄聋哑者的手势，以取得所述聋哑者的手语影像；视线方向拍摄机构，其固定于所述聋哑者的头部，按照拍摄所述聋哑者的视线方向的方式设置；影像信号合成机构，其将由所述视线方向拍摄机构所拍摄的影像信号作为母画面，由所述手势拍摄机构所取得的影像信号作为子画面，以母子画面方式合成两个动态图像；及视频电话连接机构，其具有将由所述影像信号合成机构所合成的影响信号发送到视频电话终端机，可一边发送聋哑者所视的视线方向的影像，一边附加针对该画面的手势说明。

由此，聋哑者可充分地进行对象的说明，而可迅速地进行手语对谈。

另外，通过将视频电话连接机构可与便携电话型的视频电话连接，即使在聋哑者处于移动中，也可以将手语说明附加在手语以外的影像中的影像发送到对象方，因此对聋哑者来说可以提高便利性。

由此，由于即使聋哑者改变身体的方向或位置，亦可一直在一定的条件下拍摄手语，将其传送至对方，故可稳定地进行手语对谈。

本发明方案二视频电话手语对谈辅助装置，根据方案一的视频电话手语对谈辅助装置，其特征在于，所述影像信号合成机构具有将由所述视线方向拍摄机构所拍摄的影像信号作为母画面，由所述手势拍摄机构所取得的影像信号作为子画面合成母子画面的功能，和改变所述子画面的位置设定的功能。

本发明方案三的视频电话手语对谈辅助装置，根据方案一或二所述的视频电话手语对谈辅助装置，其特征在于，还备有眼前显示装置，该眼前显示装置固定在所述聋哑者的头部，在眼前显示由所述视频电话终端机接收到的影像，同时可目视辨认包含作为手语对谈对象的对象物的外界，所述视频电话连接机构，具有接收来自所述视频电话终端机的影像信号并供给到所述眼前显示装置的功能。

由此，聋哑者在发送手语以外的影像时可以附加手语说明，同时一面自由地移动视线目视辨认外界，一面接收手语说明。另外，固定在聋哑者眼前的显示机构，只要不妨碍目视辨识外界优选尽可能小。

本发明方案四的视频电话手语对谈辅助装置，根据方案三所述的视频电话手语对谈辅助装置，其特征在于，所述视线方向拍摄机构和所述眼前显示机构，以在可固定于所述聋哑者的耳朵和鼻子的框上一体地形成。

由此，聋哑者可以将视线方向拍摄机构和眼前显示机构容易地设置在眼前最适当的位置。

本发明方案五的视频电话手语对谈辅助装置，根据方案一至四所述的视频电话手语对谈辅助装置，所述视频电话连接机构包含与所述视频电话终端机进行无线通信的无线通信机构。

由此，因为手语对谈用影像输入装置不需与视频电话终端机电缆连接，所以操作极为容易。

本发明方案六的手语翻译系统，在聋哑者的视频电话终端机中连接方案一至五中的任一项所述的视频电话手语对谈辅助装置，将所述聋哑者视频电话终端机和非聋哑者的视频电话终端机和手语翻译者的视频电话终端机互相连接，在聋哑者和非聋哑者的视频电话对谈中，提供由手语翻译者的手语翻译，其特征在于，终端机连接机构，其备有登录手语翻译者的视频电话终端机的终端机号码的手语翻译者登录表，并具有以下功能：受理来自所述聋哑者的视频电话终端机或所述非聋哑者的视频电话终端机中的任一个的传呼的功能；对受理了所述传呼的呼出源视频电话终端机，促使传呼目标的终端机号码输入的功能；自所述手语翻译者登录表取出手语翻译者的视频电话终端机的终端机号码的功能；根据所述所取出的终端机号码，传呼手语翻译者的视频电话终端机的功能；根据所述取得的传呼目标的终端机号码，传呼传呼目标视频电话终端机的功能，及影像声音通信机构，其具有以下功能：对所述聋哑者的视频电话终端机，发送至少合成来自所述非聋哑者的视频电话终端机的影像与来自所述手语翻译者的视频电话终端机的影像的功能；对所述非聋哑者的视频电话终端机，发送至少合成来自所述聋哑者的视频电话终端机的影像与来自所述手语翻译者的视频电话终端机的声音的功能；对所述手语翻译者的视频电话终端机，发送至少合成来自所述聋哑者的视频电话终端机的影像与来自所述非聋哑者的视频电话终端机的声音的功能。

这样，因为具有呼叫登录在手语翻译者登录表中的手语翻译者的终端机号码的传呼功能，所以只要手语翻译者处于可传呼状态无论在何处，都可应用，构成灵活有效的手语翻译系统。

本发明方案七的手语翻译系统，根据方案六手语翻译系统，其特征在于，在所述手语翻译者登录表中登录用以选择手语翻译者的选择信息，所述终端机连接机构具有从所述呼出源视频电话终端机中取得手语翻译者的选择条件的功能，及取出与从所述手语翻译者登录表取出的手语翻译者的选择条件相符的手语翻译者的视频电话终端机的终端机号码的功能。

由此，可以从登录在手语翻译者登录表中的手语翻译者当中选择适合聋哑者与非聋哑者的对谈目的的人。

另外，在手语翻译者登录表中登录的手语翻译者具有登录可否受理的受理标志，控制机构通过具有参照手语翻译者登录表的受理标志，取出可受理的手语翻译者的终端机号码的功能，可以自动地选择并传呼可受理的手语翻译者，排出无谓的传呼，构成更灵活有效的手语翻译系统。

本发明方案八的手语翻译系统，根据方案六或七的手语翻译系统，其特征在于，备有用语登录表，其登录在手语翻译中使用的用语，所述终端机连接机构具有：根据来自视频电话终端机的操作在所述用语登录表中登录用语的功能；根据来自视频电话终端机的操作，自登录在所述用语登录表的用语中选择使用的用语的功能；生成所述选择的用语的字幕的功能；将所述生成的字幕合成在发送到通信对象方的影像中的功能。

由此，例如在手语翻译中存在用手语难以说明的用语或难以发音的单词等的情况下，可将该用语使用在对象方的视频电话终端机进行字幕显示以此传达。

本发明的上述目的、其他目的、特征及优点可从参照图式所进行的以下发明实施方式的详细说明中更清楚明白。

附图说明

图1是本发明一实施方式的手语对谈用影像输入输出装置的系统结构图。

图2是表示由本发明手语对谈用影像输入输出装置进行手语对谈时，显示于对方终端机的影像的例图。

图3是本发明一实施方式的手语翻译系统的系统结构图。

图4是表示使用本发明的手语翻译系统的手语翻译中的聋哑者终端机、非聋哑者终端机、手语翻译者终端机各画面的影像的例。

图5是本发明一实施方式的手语翻译系统的控制装置的处理流程图。

图6是表示手语翻译者登录表的例图。

图7是表示促使传呼目标终端机号码输入的画面的例图。

图8是表示促使手语翻译者选定条件输入的画面的例图。

图9是表示用以显示手语翻译者候补者名单的画面的例图。

图10是本发明另一实施方式的手语翻译系统的系统结构图。

图11是表示连接目标表的一例图。

图12是本发明另一实施方式的手语翻译系统的连接处理的处理流程图。

图13是表示以现有视频电话终端机进行的聋哑者间的手语对谈的示意图。

图14是使用现有多点连接装置的手语翻译服务的示意图。

具体实施方式

图1显示本发明一实施方式的手语对谈用影像输入输出装置的系统结构图。在图中，12为用以显示手语影像的显示装置，13为用以将显示装置固定在聋哑者眼前的眼前固定器具，14为拍摄聋哑者手语的手语拍摄摄像机，15为将手语拍摄摄像机14固定在聋哑者腰部的腰部固定器具，16为拍摄手语以外的对象的对象拍摄摄像机，17为将手语拍摄摄像机14的影像与对象拍摄摄像机16的影像合成的影像合成装置，18为将显示装置12及影像合成装置17与视频电话终端机10连接的视频电话连接装置。

显示装置12是使用例如具有可充分显示手语影像的分辨率的小型液晶显示装置，并于表面设置凸透镜，以便将影像扩大，以使聋哑者在安装了眼前固定器具13的状态下可确实地辨识所显示的手语，同时，聋哑者可将对谈对象或景色等外界与目视辨认中同时显示于显示装置12的手语对焦。由此，聋哑者可一面目视辨认外界，一面在不失调地辨视同时在显示装置12中显示的手语。

眼前固定器具13具有可戴在耳朵及鼻子的镜框状构造，为在不阻碍外界的视野下，可目视辨认手语，显示装置12安装于眼前的框附近。在此，于聋哑者眼前左下方设置显示装置12，而只要在不阻碍外界的视野的范围内，不论设在何处皆可。

另外，在此，为更清楚地辨识显示的手语，而于眼前固定器具13左右相同位置设置显示装置12，但只要聋哑者可辨识所显示的手语，于眼前固定器具13的任一侧设置显示装置12亦可。

由于眼前固定器具13为用以将显示装置12安装于聋哑者的眼前，故亦可于中空框固定显示装置12，或亦可于框内设置透明板，而将显示装置12贴设于该透明板。另外，当聋哑者为近视、远视、乱视或老花眼，而需要矫正镜片时，亦可于框内设置矫正镜片，而将显示装置12贴设于该矫正镜片。

手语拍摄摄像机14可使用例如小型的CCD摄像机，并将其固定于腰部固定器具15。此时，手语拍摄摄像机14在固定于腰部固定器具15的状态下，设定可足以拍摄聋哑者所进行的手语的视角。

腰部固定器具15为例如安装于聋哑者腰部的带子，并于其带扣部具有用以固定手语拍摄摄像机14的臂体，而只要在可拍摄聋哑者的手语的方向设定手语拍摄摄像机14即可。由此，即使聋哑者改变身体的方向或位置，亦可由手语拍摄摄像机14，稳定地拍摄聋哑者的手语。

对象拍摄摄像机16同样地使用小型的CCD摄像机，并将其固定于眼前固定器具13侧部。由此，当聋哑者配戴眼前固定器具13时，由于通过对象拍摄摄像机16所拍摄的方位与聋哑者的视线方向几乎一致，故可确实地捕捉对谈对象，以将该影像传送给对方。

影像合成装置17为将对象拍摄摄像机的对象影像与手语拍摄摄像机14的手语影像集中在1个影像，做成1个合成影像，合成的方法如图2所示，有各种合成方法，亦可从其中依据目的来选择。图2(a)为以对象影像为母画面，以手语影像为子画面，而合成子母画面，图2(b)则相反地以手语画面为母画面，以对象画面为子画面，而合成子母画面，图2(c)为均等合成对象影像与手语影像，图2(d)为以手语影像为单独影像，图2(e)为以对象影像为单独影像，图2(f)为以使对象影像冻结而成为静止画面为母画面，以手语影像为子画面而合成子母画面，图2(g)则相反地以手语影像为母画面，以使对象影像冻结而成为静止画面为子画面，而合成子母画面。

此外，子母画面合成的子画面位置可予以设定变更，以便不致覆盖母画面的重要信息或在后述手语翻译中，插入其他子画面时与其重叠。

影像合成装置17亦可收容于腰部固定器具15内或眼前固定器具13内，而以有线或无线将对象拍摄摄像机16或手语拍摄拍摄摄像机14的影像信号提供给收容在腰部固定器具15内或眼前固定器具13内的影像合成装置17。

视频电话连接装置18为将视频电话终端机10的外部机器连接端子与显示装置12及影像合成装置17连接的装置，将视频电话终端机10接收的影像信号提供给显示装置12，同时将来自影像合成装置17的影像信号提供给视频电话终端机10。由此，显示装置12即成为视频电话终端机10的外接影像显示装置，而对象拍摄摄像机16及手语拍摄摄像机14则成为视频电话终端机10的外接影像输入装置。

由于当将以上的手语对谈用影像输入输出装置连接于视频电话终端机，进行手语对谈时，聋哑者可在对象影像附加手语说明，将其传送给对方，故可获得与健全者在对象影像附加声音说明相同的效果，而可进行迅速的对谈，并将有关对象的信息更确实地传达给对方。

在上述实施方式中，将显示装置12固定于聋哑者眼前的眼前固定器具13以使用镜框状进行说明，亦可用固定于头部的头带具有安装显示装置12的臂体，因而只要为可将显示装置12固定于聋哑者眼前即可。

另外，对象拍摄摄像机16以安装于眼前固定器具13侧面进行说明，本发明并不限于此，亦可与眼前固定器具分离单独地固定于聋哑者的头部。

在上述实施方式中，手语拍摄摄像机14以具有用以将其固定于聋哑者腰部的腰部固定器具15进行说明，而只要手语拍摄摄像机14可拍摄聋哑者的手语，不论使用任何固定机构皆可，而可达到本发明的效果。

在上述实施方式中，对设置用以拍摄手语以外的对谈对象的对象拍摄摄像机进行说明，亦可设置从外部输入影像信号的外部影像信号输入端子，而在影像合成装置17中合成从外部影像信号输入端子输入的影像信号与手语拍摄摄像机14的影像信号，将其传送至对谈对象。由此，可采用外部摄像机的影像或VTR的影像作为对谈对象，而一面与对谈对象一同观看该影像，一面就该内容以手语进行谈论。

在上述实施方式中，视频电话连接装置18以有线将视频电话终端机10的外部机器连接端子与显示装置12及影像合成装置17连接进行说明，亦可分别在视频电话终端机10的外部机器连接端子与眼前固定器具13及影像合成装置17中设置以无线通信影像信号的无线通信装置。由此，由于不需以电缆连接视频电话终端机10与眼前固定器具13及影像合成装置17，因而处理极为容易。

此外，视频电话终端机10若为具有与例如蓝牙(Bluetooth：注册商标)的外部机器无线通信的标准规格的无线界面时，在眼前固定器具13及影像合成装置17中设置同一规格的通信装置即可。由此，只要设置在眼前固定器具13及影像合成装置17中的通信装置在视频电话终端机10的无线界面的通信范围内，在视频电话终端机10方面不须物理性连接，亦可进行影像信号的通信，而可更容易处理。

在上述实施方式中，视频电话终端机使用电话型的视频电话终端机，特别是使用便携电话型的视频电话终端机进行说明，但本发明不限于此，使用连接于互联网的IP型视频电话终端机时亦是完全相同的情形。

在上述实施方式中，对具有手语拍摄摄像机14、对象拍摄摄像机16、影像合成装置17、显示装置12、眼前固定器具13与视频电话连接装置18，并具有合成手语影像与对象影像，将其提供给视频电话终端机10的功能及以视频电话终端机10取得接收中的手语影像，而将其显示于显示装置12的功能的手语对谈用影像输入输出装置进行说明，但是通过具有拍摄手语的手语拍摄摄像机14、拍摄手语以外的对象的对象拍摄摄像机16、合成手语拍摄摄像机14的影像与对象拍摄摄像机16的影像的影像合成装置17与将合成的影像信号提供给视频电话终端机10的视频电话连接装置18的手语对谈用影像输入输出装置，聋哑者亦可一面将手语以外的对象影像传送至对方，一面同时以手语进行说明，而达到本发明的效果。

接着，就聋哑者使用本发明的手语对谈用影像输入输出装置，与非聋哑者通过手语翻译，进行视频电话对谈时，可选择符合对谈目的的手语翻译者的手语翻译系统进行描述。

图3表示本发明一实施方式的手语翻译系统的系统结构图。在图中，100为设置于提供手语翻译服务的手语翻译中心的手语翻译系统，其是经由公用电话线路40，连接供聋哑者A使用的聋哑者用视频电话终端机(以下称为聋哑者终端机)，供非聋哑者B使用的非聋哑者用视频电话终端机(以下称为非聋哑者终端机)20及供手语翻译者C使用的手语翻译者用视频电话终端机(以下称为手语翻译者终端机)30，以在聋哑者与非聋哑者的视频电话对谈中提供手语服务。在本实施方式中，聋哑者终端机10、非聋哑者终端机20及手语翻译者终端机30皆为连接于公用电话线路的电话型视频电话终端机，特别是就使用可在外出地点一边行走一边手持使用的无线式便携电话型视频电话机的情形举例说明。

此外，连接于公用电话线路的视频电话终端机有例如以ITU-T建议的H.320为标准的ISDN视频电话终端机等，但本发明不限于此，亦可使用使用独立的协议的视频电话终端机。

聋哑者终端机10连接所述手语对谈用影像输入输出装置，聋哑者A由配戴眼前固定器具13与腰部固定器具15，在固定到眼前的显示装置12中显示由聋哑者终端机10接收的手语影像，同时安装用以拍摄聋哑者A视线方向的对象拍摄摄像机16与用以拍摄聋哑者手语的手语拍摄摄像机14，而将于对象影像附加了手语说明的合成影像传送至对方。

非聋哑者终端机20为具有显示自对方接收的影像的影像显示部20a、拍摄使用或对象的拍摄部20b及进行声音的输入输出的头戴耳机20c的一般视频电话终端机。

手语翻译者终端机30亦为具有与非聋哑者终端机20相同的构造的一般视频电话终端机，而影像显示部30a主要用于目视辨认聋哑者A的手语，拍摄部30b用于拍摄手语翻译者翻译的手语。另一方面，头戴耳机30c主要用于听取非聋哑者B的声音与输入翻译聋哑者A手语的声音。

在一般的电话型终端机中，声音的输入输出是使用手持式听筒，由于在此以手语为对象，手需要自由活动，故在以下的说明中，包括非聋哑者B在内，皆以使用固定于头部的头戴耳机进行说明。此外，聋哑者终端机10未于图中显示头戴耳机，若有看护员存在等时，亦可使用头戴耳机，并进行声音通话。

手语翻译系统100具有供与聋哑者终端机连接的聋哑者终端机用线路界面(以下，界面简称为I/F)120、供与非聋哑者终端机连接的非聋哑者终端机用线路I/F140、供与手语翻译者终端机连接的手语翻译者终端机用线路I/P160，且该等分别连接使影像信号、声音信号、资料信号多路复用或分离的多路复用分离装置122、142、162、用以进行影像信号的压缩及解压缩的影像编解码器124、144、164、用以进行声音信号的压缩及解压缩的声音编解码器126、146、166。在此，各线路I/F、各多路复用分离装置、各影像编解码器、各声音编解码器是对应在各终端机使用的协议，以进行传呼控制、串流控制、影像信号或声音信号的压缩及解压缩。

于聋哑者终端机用的影像编解码器124的影像输入中连接用以合成非聋哑者终端机用的影像编解码器144的影像输出、手语翻译者终端机用的影像编解码器164的影像输出及聋哑者终端机用字幕存储器132的输出的影像合成装置128。

在聋哑者终端机用的声音编解码器126的声音输入中连接有用以合成非聋哑者终端机用的声音编解码器146的声音输出及手语翻译者终端机用的声音编解码器166的声音输出的声音合成装置130。

此外，由于在聋哑者终端机基本上不进行声音的输入输出，故聋哑者终端机用声音编解码器126或声音合成装置130可省略，但欲将聋哑者终端机方面的环境声音传达至非聋哑者终端机的情形或聋哑者有看护员的情形，故宜设置声音通话功能。

在非聋哑者终端机用的影像编解码器144的影像输入中连接有用以合成聋哑者终端机用的影像编解码器124的影像输出、手语翻译者终端机用的影像编解码器164的影像输出及非聋哑者终端机用字幕存储器152的输出的影像合成装置148。

在非聋哑者终端机用的声音编解码器146的声音输入中连接有用以合成聋哑者终端机用的声音编解码器126的声音输出和手语翻译者终端机用的声音编解码器166的声音输出的声音合成装置150。

此外，在非聋哑者终端机中，手语翻译者的影像显示可省略，但由于通过显示手语翻译者的影像，可容易辨认通过手语翻译者翻译的声音，故以可合成手语翻译者的影像为佳。

在手语翻译者终端机用的影像编解码器164的影像输入中连接有用以合成聋哑者终端机用的影像编解码器124的影像输出、非聋哑者终端机用的影像编解码器144的影像输出及手语翻译者终端机用字幕存储器172的出的影像合成装置168。

在手语翻译者终端机用的声音编解码器166的声音输入中连接有用以合成聋哑者终端机用的声音编解码器126的声音输出和非聋哑者终端机用的声音编解码器146的声音输出的声音合成装置170。

此外，在手语翻译者终端机中，非聋哑者的影像显示可省略，但由于通过显示非聋哑者的影像，可容易辨认以手语翻译非聋哑者的声音时的声音，故以可合成非聋哑者的影像为佳。

另外，该手语翻译系统100具有控制装置180，该控制装置180备用登录手语翻译者所使用的手语翻译者用终端机的终端机号码的手语翻译者登录表182，并分别与各线路I/F120、140、160、各多路复用分离装置122、142、162、各影像合成装置128、148、168、各声音合成装置130、150、170、各字幕存储器132、152、172连接，且除了提供受理来自聋哑者使用的终端机或非聋哑者使用的终端机任一者的传呼的功能、对呼出源终端机促使传呼目标终端机号码输入的功能、自手语翻译者登录表182取出手语翻译者终端机号码的功能、传呼所取出的终端机号码的功能、传呼传呼目标的终端机号码的功能，及通过以上的功能连接呼出源终端机、手语翻译者终端机与传呼目标终端机间的功能外，另外提供各影像合成装置或各声音合成装置中的影像声音合成方法的切换功能及生成字幕将其发送至字幕存储器的功能。

图4表示由本发明的手语翻译系统进行的视频交谈中显示在各终端机画面的影像的例。图4(a)为聋哑者终端机的画面，显示由影像合成装置128于非聋哑者终端机的影像合成手语翻译者终端机的影像的影像。在此，以非聋哑者的影像为母画面、以手语翻译者的影像为子画面，显示子母画面，而以手语翻译者的影像为母画面、以非聋哑者的影像为子画面，显示子母画面亦可，或均等地显示两者亦可。若将手语翻译者的影像放大显示时，通过手语翻译者翻译的手语可更容易辨认。此外，为不致使显示的子画面的位置覆盖母画面的重要信息，可由来自终端机的命令予以变更。

图4(b)为非聋哑者终端机的画面，显示由影像合成装置148于聋哑者终端机的影像合成手语翻译者终端机的影像的影像。在此，聋哑者终端机的影像为在对象拍摄摄像机16拍摄的对象影像的左下方所合成由手语拍摄摄像机14拍摄的手语影像而成为子母画面的影像，并于该影像右下方显示合成手语翻译者的影像而成为子母画面的影像，但亦可省略手语翻译者的影像。此外，由于通过如此合成手语翻译者的影像并加以显示，非聋哑者在画面中可确认手语翻译者的表情，而可更容易判读通过手语翻译者翻译的声音。

图4(c)为手语翻译者终端机的画面，显示由影像合成装置168在聋哑者终端机的影像中合成非聋哑者终端机的影像后的影像。此时，聋哑者终端机的影像也是由对象拍摄摄像机16所拍摄的对象影像在左下方合成由手语拍摄摄像机14拍摄的手语影像而成为子母画面的影像，并于该影像右下方显示合成非聋哑者的影像而成为为子母画面的影像，但亦可省略非聋哑者的影像。此外，由于通过如此合成非聋哑者的影像并加以显示，手语翻译者可确认非聋哑者的表情，而可更容易判读通过作为手语翻译对象的非聋哑者的声音。

另外，就声音而言，为对应于传达来自聋哑者终端机的环境音的情况或有看护员存在的情况，将通过声音合成装置130合成非聋哑者终端机的声音与手语翻译者终端机的声音的声音输出至聋哑者终端机，将由声音合成装置150合成聋哑者终端机的声音与手语翻译者终端机的声音的声音输出至非聋哑者终端机，将由声音合成装置170合成非聋哑者终端机的声音与聋哑者终端机的声音的声音输出至手语翻译者终端机。

此外，不须应用传达来自聋哑者终端机的环境音或看护员时，亦可省略声音合成装置130、150、170，仅将非聋哑者用声音编解码器146的输出连接于手语翻译者用声音编解码器166的输入，将手语翻译者用声音编解码器166的输出连接于非聋哑者用声音编解码器146的输入。

各影像合成装置128、148、168及各声音合成装置130、150、170的动作为控制装置180所控制，通过从各终端机按下拨号盘的预定的号码键，可改变影像显示方法或声音输出方法。这可由在各多路复用分离装置122、142、162检测出在各终端机按下的号码键的动作为资料信号或音调信号，并将该信号传送控制装置而付诸实现。

由此，在各终端机可进行仅选择配合目的所需的影像或声音而显示，或切换母画面与子画面，或者改变子画面的位置等灵活的使用方法。

另外，在各影像合成装置128、148、168的输入中分别连接有聋哑者终端机用字幕存储器132、非聋哑者终端机用字幕存储器152、手语翻译者终端机用字幕存储器172，各字幕存储器132、152、172的内容可从控制装置180设定。由此，设定通过手语翻译的视频电话交谈时，在各字幕存储器132、152、172设定相对于各终端机的信息，且由对各影像合成装置128、148、168发出选择各字幕存储器132、152、172的信号的指令，可对各终端机传达所需的信息，以确立三方间的通话。

另外，在视频电话交谈中，若以手语有说明困难的用语或发音困难的词时，可预先使该用语对应各终端机拨号盘的号码，并将其登录于控制装置180的用语登录表184，而于视频电话交谈中检测按下各终端机的拨号盘的动作，自用语登录表取出对应所按下的拨号盘的号码的用语，生成文字字幕，以于各字幕存储器设定，而可于各终端机显示该用语。

由此，通过文字字幕，可以手语将说明困难的用语或发音困难的词传送至对方，故可进行更迅速且确实的视频电话交谈。

接着，对用以设定通过手语翻译进行的视频电话交谈的控制装置180的处理进行说明。

在处理之前，预先从适当的终端机(图式省略)各手语翻译者的选定信息与各手语翻译者所使用的终端机的终端机号码登录于控制装置180的手语翻译者登录表182。图6表示登录于手语翻译登录表182的登录项目的例。手语翻译者的选定信息是指用以选定使用者所希望的手语翻译者的信息，登录性别、年龄、居住地、专业领域、手语翻译的等级等。居住地是假设使用者希望拥有有关特定的区域的地理知识的人的情形，在此，可以邮递区号指定区域。专业领域是假设交谈的内容为专业时，使用者希望拥有该领域的专业知识的人或对该领域的话题了解的人的情况，在此，可将手语翻译者所拿手的领域分为政治、法律、商务、教育、科学技术、医疗、语言学、体育、兴趣等来登录。此外，专业领域涉及多方面，故亦可有层次地登录，而于选择时，可以在使用者所希望的等级中搜寻。

除此之外，亦可登录各翻译者所持有的资格，将使用者希望的资格持有者选定为手语翻译者。

由于终端机号码在此以连接于公共电话线路的电话型视频电话终端机为对象，故登录终端机的电话号码。

另外，于手语翻译者登录表182设置显示是否可受理手语翻译的受理标志，而由所登录的手语翻译者自本身的终端机传呼本手语翻译系统，使用拨号盘，输入命令，可设定或重新设定标志。由此，登录在手语翻译者登录表的手语翻译者仅于可受理翻译时，设定受理标志，而可排除无谓的传呼，且使用者亦可迅速地选择可应用的手语翻译者。

图5表示控制装置180的处理流程。本手语翻译系统100可在聋哑者终端机与非聋哑者终端机的任一者申请手语翻译服务，若从聋哑者终端机申请时，于聋哑者终端机用线路I/F的电话号码拨接，若从非聋哑者终端机申请时，于非聋哑者终端机用线路I/F的电话号码拨接，而可传呼手语翻译者终端机与对方的终端机，以确立通过手语翻译的视频电话连接。

如图所示，首先检测出聋哑人工终端机用线路I/F120或非聋哑者终端机用线路I/F140任一者有传呼(S100)。其次，于呼出源终端机显示促使如图7所示的传呼目标的终端机号码输入的画面(S102)，对应此动作，取得呼出源输入的传呼目标的终端机号码(S104)。且，于呼出源终端机显示促使图8所示的手语翻译者的选定条件输入的画面(S106)，对应此动作，取得呼出源输入的手语翻译者选定条件(S108)。在此，呼出源输入的手语翻译者选定条件为性别、年龄区分、区域、专业领域、手语等级，并以登录于手语翻译者登录表182的性别、年龄、居住地、专业领域、等级为基准，选定符合的手语翻译者。此外，区域为使用邮递区号指定，手语翻译者则从接近指定居住地的区域依据序选定。不论任何选定项目若不需特别指定时可选择不限。

然后，从符合参照手语翻译者登录表182而取得的选定条件的手语翻译者中，选定设定有受理标志手语翻译者，且于呼出源终端机显示图9所示的手语翻译者的候补者名单，促使所希望的手语翻译者的选择号码输入(S110)。对应此动作，取得呼出源所输入的手语翻译者的选择号码(S112)，自手语翻译者登录表182取出传呼该选出的手语翻译者的终端机号码(S114)。若从该手语翻译者终端机有回应时(S116)，便取出传呼目标的终端机号码并传呼(S118)，若从该传呼目标终端机有回应时(S120)，便开始有手语翻译的视频电话交谈(S122)。

在S116中，若从选出的手语翻译者终端机无回应时，判断是否有下一个候补(S124)，若有下一个候补时，便返回S114重覆进行，若无下一个候补时，则将该内容通知呼出源终端机，并切断连接(S126)。

在S120中，若从传呼目标终端机无回应时，将该内容通知呼出源终端机及所选择的手语翻译者终端机并切断连接(S128)。

在上述实施方式中，从选出的手语翻译者终端机无回应时，仅说明将内容通知呼出源并切断连接，亦可设置手语翻译者预约表，以登录呼出源的终端机号码与传呼目标的终端机号码，而当有来自所选择的手语翻译者的回应时，便通知呼出源与传呼目标，以设定视频电话对谈。

在上述实施方式中，手语翻译系统100以由线路I/F、多路复用分离装置、影像编解码器、声音编解码器、影像合成装置、声音合成装置、控制装置等构成进行说明，该等元件未必须以独立的H/W构成，亦可构造成使用电脑，由软件处理实现各装置的功能。

在上述实施方式中，手语翻译者终端机30以与聋哑者终端机10及非聋哑者终端机20同样地位在手语翻译中心外，而自手语翻译中心通过公用电话线路传呼，以提供手语翻译服务进行说明，本发明并不限于此，亦可将部份或所有手语翻译者设置于手语翻译中心内，而从手语翻译中心提供手语翻译服务是无须赘述的。

另外，在上述实施方式中，由于手语翻译者只要有可连接于公用电话线路的终端机，不论在何处皆可参加手语翻译服务，故可使用所述的受理标志，有效地活用空暇时间，来提供手语翻译服务。如此，可有效且稳定地运用人员确保困难的手语翻译服务。特别是最近手语翻译的志愿者逐渐增加，即使时间不稳定的志愿者亦可有效地活用有限的时间，来提供手语翻译服务。

在上述实施方式中，未于影像合成装置128、148、168输入本身终端机的影像信号，亦可设置亦输入本身终端机的影像信号，并加以合成作为影像确认用而显示的功能。

另外，在上述实施方式中，由影像合成装置128、148、168及声音合成装置130、150、170，分别于各终端机合成影像或声音，亦可一次合成所有终端机的影像或声音，再传送至各终端机。

在上述实施方式中，设置了由设置字幕存储器132、152、172，并搭配各终端机用的影像合成装置128、148、168，而于各终端机显示文字字幕的功能，亦可设置设置用以记忆声音信息的字幕存储器，并搭配各终端机用的声音合成装置130、150、170，以将声音信息输出至各终端机。由此，若非聋哑者为视觉障碍者时，亦可设定通过手语翻译进行的视频电话对谈。

图10表示本发明另一实施方式的手语翻译系统的系统构造图。在本实施方式中，表示供聋哑者、非聋哑者、手语翻译者使用的各终端机为连接于互联网的IP(Internet Protocol)型视频电话终端机，并具有Web浏览器功能者时的系统构造例。

在图中，200为设置于提供手语翻译服务的手语翻译中心的手语翻译系统，并经由互联网70连接供聋哑者使用的聋哑者终端机50、供非聋哑者使用的非聋哑者终端机60与供手语翻译者使用的手语翻译者终端机231、232、…中的任一者，以在聋哑者与非聋哑者间提供通过手语翻译进行的视频对谈服务。

聋哑者终端机50、非聋哑者终端机60、手语翻译者终端机231、232、...在此为使用于具有影像输入I/F功能、声音输入输出I/F功能与网络连接功能的个人电脑等通用处理装置(a)中包含用以输入信息的键盘(b)及鼠标(c)、显示从Web服务器210提示的Web网页画面及从通信服务器220提供的视频电话画面的显示器(d)、用以拍摄手语翻译者的手语的视频摄像机(e)及对手语翻译者进行声音的输入输出的头戴耳机(f)，并安装有IP视频电话软件与Web浏览器者，亦可使用专用的视频电话终端机。

此外，连接于互联网的视频电话终端机有例如以ITU-T建议的H.323为标准的IP视频电话终端机等，但本发明并不限于此，亦可使用使用独立的协议的视频电话终端机。

另外，互联网包括无线LAN式，而视频电话终端机亦可使用具有视频电话功能的便携电话或便携终端机，且提供Web访问功能。

手语翻译系统200由通信服务器220、Web服务器210、路由器250、多个手语翻译者终端机231、232…、23N构成，该通信服务器220备有设定所连接的聋哑者终端机、非聋哑者终端机与手语翻译者终端机的各终端机地址的连接目标表222，并具有连接登录在连接目标表222中的终端机之间，以合成从各终端机接收的影像及声音，而将其传送至各终端机的功能，该Web服务器210如所述备有登录手语翻译者的选定信息、终端机地址与受理标志的手语翻译者登录表212，并具有从呼出源终端机使用Web浏览器访问，选择所希望的手语翻译者，而于通信服务器220的连接目标表222设定呼出源终端机、传呼目标终端机与手语翻译者终端机的各终端机地址的功能，该路由器是用以将Web服务器210及通信服务器220连接于互联网，该多个手语翻译者终端机231、232…、23N是以网络与通信服务器220连接。

图11表示连接目标表222的例子。如图示，将聋哑者终端机的终端机地址、非聋哑者终端机的终端机地址与手语翻译者终端机的终端机地址成组地登录于连接目标表222，由此，设定一套手语翻译服务。连接目标表422依据通信服务器220的处理能力，可登录多个组此种终端机地址，由此，可同时提供数套手语翻译服务。

此外，由于登录于连接目标222的终端机地址为互联网上的地址，故一般是使用IP地址，但不限于此，亦可为使用由目录服务器付与的名称等的地址。

通信服务器220对设定在连接目标表222的聋哑者终端机、非聋哑者终端机与手语翻译者终端机，进行根据一定的协议的分组通信，并通过软件处理提供与所述手语翻译系统100的多路复用分离装置122、142、162、影像编解码器124、144、164、声音编解码器126、146、166、影像合成装置128、148、168及声音合成装置130、150、170同等的功能。

由此，可与所述手语翻译系统100同样地，在聋哑者终端机与非聋哑者终端机间进行预定的影像及声音的通信，而可实现在聋哑者与非聋哑者间通过手语翻译进行的视频电话对谈。

另外，在所述手语翻译系统100中，具有使用控制装置180与字幕存储器132、152、172，在视频电话对谈中依据来自终端机的指令，取出登录在用语登录表184中的用语，以于终端机显示作为文字字幕的功能，而在本实施方式中，亦可由通信服务器220的软件处理，设定同样的功能。另外，亦可由Web服务器210对其他终端机将自各终端机指定的用语显示作弹出式(pop-up)信息，亦可于通信服务器220设置字幕存储器，经由Web服务器210将自各终端机指定的用语写入该字幕存储器，以于各终端机显示文字字幕。

在所述的手语翻译系统100中，连接聋哑者终端机、非聋哑者终端机与手语翻译者终端机的连接处理是通过控制装置180实现，而在本实施方式中由于以各终端机具有Web访问功能的情形为对象，故由Web服务器210进行连接处理。

图12表示由Web服务器210进行的连接处理的处理流程。在本手语翻译系统200中。亦可从聋哑者终端机与非聋哑者终端机中任一者申请手语翻译服务。申请手语翻译的聋哑者或非聋哑者通过从自己的终端机使用Web浏览器，进入并登入手语翻译中心的Web服务器210，而开始手语翻译服务的受理处理。

如图示，Web服务器210首先取得呼出源的终端机地址后(S200)，于连接目标表222设定(S202)。其次，于呼出源终端机传送与所述图7相同的促使传呼目标的终端机地址输入的画面(S204)，与此对应，取得呼出源输入的传呼目标终端机地址(S206)。接着，于呼出源终端机传送与所述图8相同的促使手语翻译者选定条件输入的画面(S208)，与此对应，取得呼出源输入的手语翻译者选定条件(S210)。

然后，在符合自手语翻译者登录表212所取得的选定条件的手语翻译者中，选定设置有受理标志手语翻译者，将与所述图9相同的候补者名单传送至呼出源终端机，促使所希望的手语翻译者的选择号码输入(S212)。对应此动件，取得呼出源所输入的手语翻译者的选择号码，而从手语翻译者登录表取得所选择的手语翻译者的终端机地址(S214)。依据所取得的手语翻译者的终端机地址，将传呼画面配信至手语翻译者终端机(S216)，当有受理传呼的内容的回答时(S218)，便于连接目标表222设定该手语翻译者的终端机地址(S220)。接着，依据所取得的传呼目标的终端机地址对传呼目标终端机配信传呼画面(S222)，当有受理传呼的内容的回答时(S224)，便于连接目标表222设定该传呼目标终端机地址(S226)。由此，开始有手语翻译的视频电话对谈(S228)。

在S218，若从手语翻译者终端机无受理传呼的内容的回答时，判断是否有下一个候补(S230)，若有下一个候补时，便将促使选择其他候补的信息传送至呼出源终端机(S232)，而返回至S214。若无下一个候补时，则将该内容通知呼出源终端机(S234)，而告结束。

在S224，若从传呼目标终端机无受理传呼的内容的回答时，则将该内容通知呼出源终端机及所选择的手语翻译者终端机(S236)，而告结束。

在上述实施方式中，亦是以从所选择的手语翻译者终端机无受理传呼的内容的回答时，仅将该内容通知呼出源作说明，亦可设定手语翻译预约表，登录呼出源的终端机地址与传呼目标的终端机地址，当有来自所选择的手语翻译者的回应时，便通知呼出源及传呼目标，以设定视频电话对谈。

在上述实施方式中，手语翻译者终端机是以在手语翻译中心的手语翻译系统200内进行说明，但本发明并不限于此，即使部份或全部的手语翻译者终端机位在手语翻译中心外，而由互联网连接，亦可以同样方式处理。

在上述实施方式中，供聋哑者、非聋哑者与手语翻译者使用的视频电话终端机分为连接于公用电话线路的电话型视频电话终端机与连接于互联网的IP型视频电话终端机，来说明手语翻译系统的构造，而电话型视频电话终端机与IP型视频电话终端机通过设置进行协议转换的网关，可相互通信，亦可设置对应任一协议的手语翻译系统，经由网关，对应使用另一协议的视频电话终端机。

如此，本手语翻译系统只要具有可连接于公用电话线路或互联网的终端机，不论位于何处，皆可受理申请手语翻译服务的提供，或提供手语翻译服务。手语翻译者亦不需前往手语翻译中心，即可从自宅或有视频电话终端机的施设或地点，使用具有视频电话功能的便携电话或便携终端机，提供手语翻译服务。

且，当会手语的者登录在手语翻译中心的手语翻译者登录表时，只要方便时，即可提供服务。因此，从运用手语翻译中心的观点看来，由于不须将手语翻译者召集至中心，故在时间上及费用上皆可有效率地运用手语翻译中心。特别是最近自愿尝试手语翻译的人亦在增加中，而从自宅亦可提供此服务，故可容易掌握手语翻译者。

如上述，按本发明，由于聋哑者可一面将手语以外的对象的影像传送给对方，一面同时附加手语说明，故有可确实地进行对象说明及迅速进行对谈等效果。

Claims (8)

1.一种视频电话手语对谈辅助装置，在聋哑者使用视频电话进行手语对谈时所使用，其特征在于，包含有：

手势拍摄机构，其具有固定于聋哑者的腰部的腰部固定机构，该手势拍摄机构用于拍摄聋哑者的手势，以取得所述聋哑者的手语影像；

视线方向拍摄机构，其固定于所述聋哑者的头部，按照拍摄所述聋哑者的视线方向的方式设置；

影像信号合成机构，其将由所述视线方向拍摄机构所拍摄的影像信号作为母画面，由所述手势拍摄机构所取得的影像信号作为子画面，以母子画面方式合成两个动态图像；及

视频电话连接机构，其具有将由所述影像信号合成机构所合成的影像信号发送到视频电话终端机的功能，

可一边发送聋哑者所视的视线方向的影像，一边附加针对该画面的手势说明。

2.如权利要求1所述的视频电话手语对谈辅助装置，其特征在于，

所述影像信号合成机构具有变更设定所述子画面的位置的功能。

3.如权利要求1或2所述的视频电话手语对谈辅助装置，其特征在于，

还备有眼前显示机构，该眼前显示机构固定在所述聋哑者的头部，在眼前显示由所述视频电话终端机接收到的影像，同时可目视辨认包含作为手语对谈对象的对象物的外界，

所述视频电话连接机构，具有接收来自所述视频电话终端机的影像信号并供给到所述眼前显示机构的功能。

4.如权利要求3所述的视频电话手语对谈辅助装置，其特征在于，

所述视线方向拍摄机构和所述眼前显示机构，以在可固定于所述聋哑者的耳朵和鼻子的框上一体地形成。

5.如权利要求1或2所述的视频电话手语对谈辅助装置，其特征在于，

所述视频电话连接机构包含与所述视频电话终端机进行无线通信的无线通信机构。

6.一种手语通信系统，在聋哑者的视频电话终端机中连接权利要求1或2所述的视频电话手语对谈辅助装置，将所述聋哑者视频电话终端机和非聋哑者的视频电话终端机和手语翻译者的视频电话终端机互相连接，在聋哑者和非聋哑者的视频电话对谈中，提供由手语翻译者的手语翻译，其特征在于，具备：

终端机连接机构，其备有登录手语翻译者的视频电话终端机的终端机号码的手语翻译者登录表，并具有以下功能：受理来自所述聋哑者的视频电话终端机或所述非聋哑者的视频电话终端机中的任一个的传呼的功能；对受理了所述传呼的呼出源的视频电话终端机，促使传呼目标的终端机号码输入的功能；自所述手语翻译者登录表取出手语翻译者的视频电话终端机的终端机号码的功能；根据所述所取出的终端机号码，传呼手语翻译者的视频电话终端机的功能；根据所述取得的传呼目标的终端机号码，传呼传呼目标视频电话终端机的功能，及

影像声音通信机构，其具有以下功能：对所述聋哑者的视频电话终端机，发送至少合成来自所述非聋哑者的视频电话终端机的影像与来自所述手语翻译者的视频电话终端机的影像的功能；对所述非聋哑者的视频电话终端机，发送至少合成来自所述聋哑者的视频电话终端机的影像与来自所述手语翻译者的视频电话终端机的声音的功能；对所述手语翻译者的视频电话终端机，发送至少合成来自所述聋哑者的视频电话终端机的影像与来自所述非聋哑者的视频电话终端机的声音的功能。

7.如权利要求6所述的手语翻译系统，其特征在于，

在所述手语翻译者登录表中登录用以选择手语翻译者的选择信息，

所述终端机连接机构具有从所述呼出源视频电话终端机中取得手语翻译者的选择条件的功能，及取出与从所述手语翻译者登录表取出的手语翻译者的选择条件相符的手语翻译者的视频电话终端机的终端机号码的功能。

8.如权利要求6所述的手语翻译系统，其特征在于，

备有用语登录表，其登录在手语翻译中使用的用语，

所述终端机连接机构具有：根据来自视频电话终端机的操作在所述用语登录表中登录用语的功能；根据来自视频电话终端机的操作，自登录在所述用语登录表的用语中选择使用的用语的功能；生成所述选择的用语的字幕的功能；将所述生成的字幕合成在发送到通信对象方的影像中的功能。

Images