CN1574874A - 通信终端装置 - Google Patents

Abstract

一种通信终端装置，取得/管理、收发作为与其他终端装置之间的下一共有候补的共有候补图象，并且收发使应该共有的手写数据与共有图象重叠的图象。另外，把来自用户的指示、手写数据的接收和新的共有图象的接收作为触发，在共有候补图象和显示对象图象之间切换显示的图象。在象便携式终端装置那样的显示画面较小的终端装置中，与其他终端装置共有图象和手写数据，在进行实时通信时，在确认了下一共有候补图象后，能实现共有。

Description

通信终端装置

技术领域

本发明涉及在通信终端装置中共享图象和手写数据，进行通信的终端装置。

背景技术

作为能处理静止画面等图象数据和手写数据的通信系统，有在专利文献1的“电传打字装置”、专利文献2的“声音图象通信装置”中公开的电视会议系统和多功能传真机。

在电传打字装置中，在固定在电话线和以太网(注册商标)等网络上的终端装置的画面上，使用位置指示装置写入图形和文字，在终端装置间发送写入各终端装置的图象，能在终端装置间显示相同的图象。

另外，在多功能传真机中，能暂时存储用扫描仪获得的手写信息或在液晶画面上写下的信息，呼叫对方的传真机来传输所存储的图象。

另外，在专利文献3的呼写通信终端机”中，能交换教育用的文本或会议资料等共有图象数据，在会议中在各终端装置之间显示这些图象数据。

专利文献1是特开平06-284241号公报；专利文献2是特开2002-330244号公报；专利文献3是特开平05-063874号公报。

综上所述，虽然用现有技术也能实现基于图象和手写数据的通信，但是，例如在专利文献1中，对终端装置的显示画面尺寸考虑就不周到。另外，在专利文献2中，因为是传真机，所以对手写数据和图象没有实时性，无法在传输的图象中附加手写数据或无法追加或详细描述文字和图形。

另外，在专利文献3中，虽然事先能获得共有图象数据，但有时因为获得的时刻不同而导致内容不同。另外，因为不是以实时交换的，所以不能进行订正或更换。

发明内容

鉴于以上问题的存在，本发明的目的在于：提供一种能在例如便携式终端装置那样的显示画面较小的终端装置中，与其他终端装置共有图象，并在与该终端装置之间收发(发送和接受)手写数据，从而在所述共有图象上能实时地显示该收发的手写数据的、使用方便的通信终端装置。特别是在与其他终端装置之间具有共有图象、进行通信时，显示用照相机拍摄的图象等下一共有候补图象时，如果在现在共有的图象上显示该共有候补图象，就无法再观察到现在共有的图象，从而产生了与其他终端装置之间所显示的图象不一致这一问题。或者，所述现在共有的图象被消除，即使在停止了共有候补图象的显示和发送的情况下，也无法恢复到原来的共有图象，因此最终会导致妨碍通信的进行。

本发明的课题是：在不影响共有图象和手写数据的前提下，显示下一共有候补图象。

为了解决所述课题，实现本发明的目的，本发明的通信终端装置包括：取得图象数据的图象取得部件；在与其他终端装置之间收发数据的数据收发部件；显示图象的显示部件；用于用户输入手写数据的手写输入部件；通过所述图象取得部件进行与其他终端装置间共有的图象候补的共有候补图象数据的取得和管理的图象取得控制部件；通过所述数据收发部件发送与其他终端装置间共有的图象数据，并且管理共有图象的图象发送控制部件；通过所述数据收发部件从其他终端装置接收共有图象数据，并且管理共有图象的图象接收控制部件；对所述图象发送控制部件指示向所述其他终端装置发送所述共有图象数据的图象发送指示部件；控制所述共有图象和所述共有候补图象向所述显示部件的显示的显示控制部件；用于对该显示控制部件指示所述共有图象的显示、所述共有候补图象的显示的切换的显示图象切换指示部件；控制通过所述手写输入部件输入的手写数据的发送，使该发送的手写数据重叠在所述共有图象上的手写数据发送控制部件；控制从所述其他终端装置发送的手写数据的接收，使该接收的手写数据重叠在所述共有图象上的手写数据接收控制部件；所述显示控制部件根据来自所述显示图象切换指示部件的指示，切换该共有图象的显示和所述共有候补图象的显示。或者，所述显示控制部件如果通过所述图象取得部件取得了共有图象数据，则在所述显示部件上显示该共有候补图象一定时间后，切换为所述共有图象的显示。或者，所述显示控制部件以用所述手写数据接收部件接收了手写数据为触发，切换为共有图象的显示。

另外，所述图象发送控制部件以来自所述图象发送指示部件的指示为触发，把所述共有候补图象数据设定为新的共有图象数据，把该新的共有图象数据向其他终端装置发送，所述图象接收控制部件把接收的图象数据设定为新的共有图象数据。

或者，所述图象取得控制部从所述共有候补图象数据生成缩小图象，所述显示控制部件在该共有图象上显示所述缩小图象。此时，所述显示控制部件如果通过所述图象取得部件取得所述共有候补图象数据，就在进行了一定时间的所述共有候补图象的显示后，在所述共有图象上显示所述缩小图象。或者，所述显示控制部件根据来自所述图象切换指示部件的指示来切换所述共有图象的显示、所述共有候补图象的显示和所述共有图象上的所述缩小图象的显示。或者，所述显示控制部件以所述手写数据接收部件接收了手写数据为触发来切换所述共有图象的显示、所述共有候补图象的显示和所述共有图象上的所述缩小图象的显示。

附图说明

下面简要说明附图。

图1是通信系统的结构例的一个例子。

图2是表示通信终端装置硬件结构的一个例子的框图。

图3是表示通信终端装置的中央处理装置中执行的软件结构一个例子的图。

图4是说明通信终端装置的人机界面的图，是终端装置的显示装置上显示的显示画面的一个例子。

图5是表示通信终端装置中的控制部处理内容的程序框图的一个例子。

图6是表示通信终端装置中的声音发送部处理内容的程序框图的一个例子。

图7是表示通信终端装置中的声音接收部处理内容的程序框图的一个例子。

图8是表示实施例1的通信终端装置中的图象取得控制部的处理内容的程序框图的一个例子。

图9是表示实施例1的通信终端装置中的图象发送控制部处理内容的程序框图的一个例子。

图10是表示通信终端装置中的图象接收控制部处理内容的程序框图的一个例子。

图11是表示通信终端装置中的手写数据发送控制部处理内容的程序框图的一个例子。

图12是表示通信终端装置中的手写数据接收控制部处理内容的程序框图的一个例子。

图13是表示实施例1的通信终端装置中的显示切换部处理内容的程序框图的一个例子。

图14是表示实施例1的通信终端装置中的显示控制部处理内容的程序框图的一个例子。

图15是说明实施例1的进行通信的2台终端装置中的图象和手写数据的交换和管理方法的图。

图16是说明实施例1的进行通信的2台终端装置中收发了共有候补图象后的图象和手写数据的交换和管理方法的图。

图17是表示在实施例1的通信终端装置中进行显示切换时的显示切换例的图。

图18是表示实施例2的通信终端装置中的图象取得控制部处理内容的程序框图的一个例子。

图19是表示实施例2的通信终端装置中的图象发送控制部处理内容的程序框图的一个例子。

图20是表示实施例2的通信终端装置中的显示切换部处理内容的程序框图的一个例子。

图21是表示实施例2的通信终端装置中的显示控制部处理内容的程序框图的一个例子。

图22是说明实施例2的通信终端装置中，在以一定时间显示了未缩小的共有候补图象之后，在共有图象上重叠显示共有候补图象的缩小图象的图。

图23是说明实施例2的通信终端装置中，在显示了未缩小的共有候补图象后，以手写数据的接收为触发，在共有图象上重叠显示共有候补图象的缩小图象的图。

图24是说明实施例2的通信终端装置中，在一定会显示收发的手写数据的位置上显示共有候补图象的缩小图象的图。

图25是说明实施例2的通信终端装置中，在一定会显示收发的手写数据的位置上显示共有候补图象的缩小图象的图。

图26是说明实施例2的进行通信的2台终端装置中的图象和手写数据的交换和管理方法的图。

图27是说明实施例2的进行通信的2台终端装置中收发了共有候补图象后的图象和手写数据的交换和管理方法的图。

图28是表示实施例2的通信终端装置中，进行显示切换时的显示切换例的图。

图29是表示实施例3的通信终端装置中的图象取得控制部的处理内容的程序框图的一个例子。

图30是表示实施例3的通信终端装置中的图象发送控制部的处理内容的程序框图的一个例子。

图31是表示实施例3的通信终端装置中的显示切换部的处理内容的程序框图的一个例子。

图32是表示实施例3的通信终端装置中的显示控制部的处理内容的程序框图的一个例子。

图33是表示在实施例3的通信终端装置中进行显示切换时的显示切换例的图。

符号说明

0201-中央处理装置；0202-存储装置；0203-声音输入装置；0204-声音输出装置；0205-手写输入装置；0206-显示装置；0207-设定输入装置；0208-数据收发装置；0209-二次存储装置；0210-总线；0211-图象取得装置；0301-控制部；0302-声音发送部；0303-声音接收部；0304-图象发送控制部；0305-图象接收控制部；0306-手写数据发送控制部；0307-手写数据接收控制部；0308-图象取得控制部；0309-显示切换部；0310-显示控制部；0401-显示画面；0402-目的地显示区；0403-目的地输入按钮群；0404-共有区；0407-通话开始按钮；0408-通话结束按钮；0409-手写开始按钮；0410-手写结束按钮；0411-目的地清除按钮；0412-图象取得按钮；0413-显示切换按钮；0414-图象发送按钮；0415-结束按钮。

具体实施方式

本发明是用于在便携式终端装置那样的小终端装置中，与其他终端装置共有图象，并收发手写数据，在所述共有图象上以实时显示该收发的手写数据的发明，特别是在与对象终端的通信中不带来障碍的前提下，能显示和选择共有候补图象的发明。

下面，参照附图说明本发明实施例1。图1是应用了本发明实施例的终端装置的通信系统结构图的一个例子。

如图1所示，应用了本发明实施例的终端装置的通信系统至少有2个终端装置0101和终端装置0102以及网络0103构成，这些终端装置通过网络0103能彼此通信。

网络0103由以因特网等为代表的IP网络或电话网络、ISDN、PHS网络、移动电话网络、或者使用了无线LAN等的网络构成。

终端装置0101和终端装置0102是本系统的用户能收发声音数据、图象和手写数据等的终端装置，例如可以是移动电话或PDA等小型便携式装置或个人电脑系统等。

下面，参照图2说明终端装置的结构。图2是表示终端装置的硬件结构例的框图。如图2所示，终端装置有中央处理装置0201、存储装置0202和二次存储装置0209、声音输入装置0203、声音输出装置0204、手写输入装置0205、显示装置0206、设定输入装置0207、数据收发装置0208、图象取得装置0211构成，它们通过总线0210能进行数据的交换。

设定输入装置0207由操作按钮、鼠标或笔输入装置等位置指示装置实现，输入终端装置的动作设定信息、通信对象的终端装置的电话号码或IP地址等目的地。

数据收发装置0208由无线LAN的无线LAN卡和网卡、或用于连接PHS和移动电话的网络的模块构成。通过本数据收发装置0208，终端装置0101和终端装置0102能连接在网络0103上，通过网络0103终端装置0101和终端装置0102能开始和结束对话，收发数据。

声音输入装置0203由麦克风等构成，把外部声音数字化，输入终端装置内。

手写输入装置0205由鼠标、或笔输入装置等位置指示装置或液晶触摸屏实现，取得由用户输入的手写数据(点的坐标等)。

中央处理装置0201可以是通用的处理器，根据规定本终端装置的动作的程序，控制本终端装置的动作。

声音输出装置0204由扬声器等构成，把终端装置内的数字声音数据转换为模拟，向外部输出。

显示装置0206由液晶面板等构成，显示用户用于优设定输入装置0207输入信息的菜单和指导、以及从用户输入的信息。另外，显示由手写输入装置0205输入的点或线等手写数据、通过数据收发装置0208与通信对象的终端装置间收发的手写数据。另外，显示由图象取得装置0211获得的图象、通过数据收发装置0208与通信对象的终端装置间收发的图象。

存储装置0202由RAM和ROM、或闪光存储器和硬盘等构成，存储由中央处理装置0201执行的程序、由声音输入装置0203输入的声音数据、由手写输入装置0205输入的手写数据、由数据收发装置0208收发的数据、用于由声音输出装置0204输出的声音数据、用显示装置0206显示的手写数据和图象数据、由图象取得装置0211获得的图象数据、由中央处理装置0201处理的数据。

二次存储装置0209由RAM和ROM、或闪光存储器和硬盘等构成，例如存储通信对象的终端装置的电话号码或IP地址等目的地、发送的手写数据和图象数据、接收的手写数据和图象数据等即使本终端装置电源断开时也不想失去的数据。

图象取得装置0211例如由照相机等构成，取得成为与通信对象的终端装置间共有的候补的共有候补图象数据。须指出的是，图象取得装置0211可以不是照相机，例如由文件系统构成，可以从存储在二次存储装置0209或存储装置0202中的图象文件取得图象数据。

下面，说明由终端装置的中央处理装置0201执行的程序结构。图3是表示由终端装置的中央处理装置0201执行的程序结构的一个例子的图。

如图3所示，由中央处理装置0201执行的程序由控制部0301、声音发送部0302、声音接收部0303、图象发送控制部0304、图象接收控制部0305、手写数据发送控制部0306、手写数据接收控制部0307、图象取得控制部0308、显示切换部0309和显示控制部0310构成。

控制部0301与通过设定输入装置0207由用户输入的信息对应，使其他各部起动或结束。另外，控制对话，以便能通过数据收发装置0208与通信对象的终端装置进行声音数据、图象数据和手写数据的收发。

声音发送部0302把通过声音输入装置0203输入的声音数据编码和打包，通过数据收发装置0208向通信对象的终端装置发送。

声音接收部0303从通过数据收发装置0208接收的声音数据的信息包取得编码的声音数据，译码后，通过声音输出装置0204输出。

图象发送控制部0304进行通过数据收发装置0208向通信对象的终端装置发送图象数据时的发送控制。另外，本图象发送控制部0304当向通信对象的终端装置发送了图象数据时，把该图象设定为与对象终端装置共有的新共有图象。

图象接收控制部0305进行通过数据收发装置0208从通信对象的终端装置接收图象数据是的接收控制。另外，图象接收控制部0305当从通信对象的终端装置接收了图象数据时，把该图象设定为与对象终端装置共有的新共有图象。

手写数据发送控制部0306进行用户由手写输入装置0205输入的手写数据通过数据收发装置0208向通信对象的终端装置发送时的发送控制。另外，手写数据发送控制部0306生成使发送的手写数据和共有图象数据重叠的共有图象数据。

手写数据接收控制部0307进行通过数据收发装置0208从通信对象的终端装置接收手写数据时的接收控制。另外，本手写数据接收控制部0307生成把接收的手写数据和共有图象数据重叠的共有图象数据。

图象取得控制部0308进行取得由图象取得装置0211获得的与通信对象的终端装置间成为共有候补的共有候补图象数据时的控制。

显示切换部0309对显示控制部0310指示后面描述的显示装置0206  的图象和手写数据显示区0404中显示的图象的变更。

显示控制部0310控制显示装置0206上的图象和手写数据显示区0404中显示的图象。

下面，利用图4说明本通信终端装置的人机界面。

当起动了本通信终端装置时，图4可以是显示装置0206上显示的显示画面。

如图4所示，当起动了本通信终端装置时，显示装置0206上显示的画面0401由目的地显示区0402、目的地输入按钮群0403、图象和手写数据显示区0404、通话开始按钮0407、通话结束按钮0408、手写开始按钮0409、手写结束按钮0410、目的地清除按钮0411、图象取得按钮0412、显示切换按钮0413、图象发送按钮0414和结束按钮0415构成。

目的地显示区0402显示用户通过设定输入装置0207操作目的地输入按钮群0403而输入的通信对象的终端装置的地址。通信对象的终端装置的地址可以是通信对象的终端装置的电话号码或IP地址。

用户能通过设定输入装置0207操作目的地输入按钮群0403，据此，用户能输入通信对象的终端装置的地址。须指出的是，目的地输入按钮群0403并不一定是数值的按钮，也可以是能输入通信对象的名字等、通信对象的终端装置的识别名称的按钮或文字识别块。

图象和手写数据显示区0404是显示由图象取得装置0211获得的共有候补图象或与通信对象的终端装置间的共有图象以及手写数据的区域。

在通话开始按钮0407，用户通过设定输入装置0207操作，指定在终端装置上与目的地显示区0402中显示的通信对象的终端装置之间开始声音的收发。

在通话结束按钮0408，用户通过设定输入装置0207操作，指定在终端装置上结束与通信对象的终端装置之间进行的声音的收发。

在手写开始按钮0409，用户通过设定输入装置0207操作，指定在终端装置上与目的地显示区0402中显示的通信对象的终端装置之间开始手写数据的收发和显示。

在手写结束按钮0410，用户通过设定输入装置0207操作，指定在终端装置上结束与通信对象的终端装置之间进行的手写数据的收发和显示。

在目的地清除按钮0411，用户通过设定输入装置0207操作，能指定终端装置清除显示在目的地显示区0402中的地址。

在图象取得按钮0412，用户通过设定输入装置0207操作，能指示终端装置从图象取得装置0211取得成为与通信对象的终端装置之间共有的图象候补的共有候补图象。

在显示切换按钮0413，用户通过设定输入装置0207操作，能指示显示装置0206上的图象和手写数据显示区0404中显示的图象的切换。

在图象发送按钮0414，用户通过设定输入装置0207操作，能指示向通信对象的终端装置发送由图象取得装置0211的共有候补图象数据。

在结束按钮0415，用户通过设定输入装置0207操作，能指定终端装置结束画面0401的显示，结束本通信终端装置的动作。

须指出的是，所述按钮显示在终端装置的显示装置0206上，但是并不局限于此，例如也可以是终端装置上的硬件按钮。另外，通过所述按钮，用户进行本终端装置的动作指示，但是并不局限于此，也可以不设置所述的按钮，而通过声音输入，能进行与按下所述各种按钮时同样的动作指示。此时，识别输入的声音，根据识别的声音，进行与按下所述各种按钮时同样的动作。

下面，参照图5，说明本通信终端装置的动作起动时被起动，到用户通过结束按钮0415指示了本通信终端装置的动作结束，由中央处理装置0201执行的控制部0301的处理内容。图5是表示控制部0301的处理内容的程序框图的一个例子。须指出的是，本控制部0301作为与其它软件构成要素不同的任务而实现，与其它软件构成要素并行由中央处理装置0201执行。

如图5所示，本控制部0301首先判断用户是否通过目的地输入按钮群0403输入了通信对象的终端装置的地址(步骤0501)，当判断为输入了地址时，在目的地显示区0402中显示输入的地址(步骤0502)。而在步骤0501中，当判断为未输入地址时，跳过步骤0502。

接着，控制部0301判断是否有通话开始按钮0407指示了通话开始(步骤0503)，当判断为指示了通话开始时，在与通信对象的终端装置间确立声音对话(步骤0504)。而当步骤0503的判断结果是判断为未指示通话开始时，跳过步骤0504，在与通信对象的终端装置之间不进行声音对话的确立。关于确立声音对话的步骤，能使用例如由RFC2543规定的声音对话确立的方式等。

接着，控制部0301判断用户是否通过通话结束按钮0408指示了通话结束(步骤0505)，当判断为指示了通话结束时，结束与通信对象的终端装置之间的声音对话(步骤0506)。而当步骤0505的判断结果是判断为未指示通话结束时，跳过步骤0506，不结束与通信对象的终端装置之间的声音对话。须指出的是，关于结束声音对话的步骤，能使用例如由RFC2543规定的声音对话结束的方式等。

接着，控制部0301判断用户是否通过手写开始按钮0409指示了手写数据的收发和显示的开始(步骤0507)，当判断为指示了手写数据的收发和显示的开始时，在与通信对象的终端装置之间确立手写对话(步骤0508)。而当步骤0507的判断结果是判断为未指示手写数据的收发和显示的开始时，跳过步骤0508，在与通信对象的终端装置之间不确立手写对话。须指出的是，关于手写对话的确立步骤，能使用例如由RFC2543规定的数据对话开始的方式等。

接着，控制部0301判断用户是否通过手写结束按钮0410指示了手写数据的收发和显示的结束(步骤0509)，当判断为指示了手写数据的收发和显示的结束时，结束与通信对象的终端装置之间的手写对话(步骤0510)。而当步骤0509的判断结果是判断为未指示手写数据的收发和显示的结束时，跳过步骤0510，不结束与通信对象的终端装置之间的手写对话。须指出的是，关于结束手写对话的步骤，能使用例如由RFC2543规定的数据对话结束的方式等。

接着，控制部0301判断用户是否通过目的地清除按钮0411指示了地址的清除(步骤0511)，当判断为指示了地址的清除时，清除显示在目的地显示区0402中的地址(步骤0512)。而当判断为未指示地址的清除时，跳过步骤0512，不清除显示在目的地显示区0402中的地址。

接着，控制部0301判断用户是否通过图象取得按钮0412指示了图象的取得(步骤0513)，当判断为指示了图象的取得时，起动图象取得控制部0308，从图象取得装置0211取得共有候补图象数据(步骤0514)。须指出的是，后面将说明图象取得控制部0308的处理内容。而在步骤0513中，当判断为未指示图象的取得时，跳过步骤0514，不进行图象取得控制部0308的起动，不从图象取得装置0211取得共有候补图象数据。

接着，控制部0301判断用户是否通过显示切换按钮0413指示了图象和手写数据显示区0404中显示的图象的切换(步骤0515)，当判断为指示了图象的切换时，起动显示切换部0309，切换图象和手写数据显示区0404中显示的图象(步骤0516)。须指出的是，后面将说明显示切换部0309的处理内容。而在步骤0515中，当判断为未指示图象的切换时，跳过步骤0516，不进行显示切换部0309的起动。

接着，控制部0301判断用户是否通过图象发送按钮0414指示了向通信对象的终端装置发送共有候补图象(步骤0517)，当判断为指示了发送时，对通信对象的终端装置通过数据收发装置0208发出图象接收要求(步骤0518)，起动图象发送控制部0304(步骤0519)，向通信对象的终端装置发送由图象取得装置0211获得的共有候补图象数据。须指出的是，后面将说明图象发送控制部0304的处理内容。

而在步骤0517中，当判断为未指示图象的发送时，跳过步骤0518和步骤0519，不进行图象接收要求的发出和图象发送控制部0304的起动。

接着，控制部0301判断是否从通信对象的终端装置通过数据收发装置0208接收了图象接收要求(步骤0520)，当判断为接收了图象接收要求时，起动图象接收控制部0305(步骤0521)，从通信对象的终端装置接收共有候补图象数据。须指出的是，后面将说明图象接收控制部0305的处理内容。而在步骤0520中，当判断为未接收图象接收要求时，跳过步骤0521，不进行图象接收控制部0305的起动。

接着，控制部0301判断与通信对象的终端装置之间是否开始了声音对话(步骤0522)，当判断为开始了声音对话时，起动声音发送部0302和声音接收部0303(步骤0523)，与通信对象的终端装置之间开始声音数据的收发。须指出的是，后面将说明声音发送部0302和声音接收部0303的处理内容。而在步骤0522中，当判断为未开始声音对话时，跳过步骤0523，不起动声音发送部0302和声音接收部0303。

接着，控制部0301判断与通信对象的终端装置之间是否结束了声音对话(步骤0524)，当判断为结束了声音对话时，结束声音发送部0302和声音接收部0303(步骤0525)，与通信对象的终端装置之间结束声音数据的收发。而在步骤0524中，当判断为声音对话未结束时，跳过步骤0525，不进行声音发送部0302和声音接收部0303的结束。

接着，控制部0301判断与通信对象的终端装置之间是否开始了手写对话(步骤0526)，当判断为开始了手写对话时，起动手写数据发送控制部0306和手写数据接收控制部0307(步骤0527)，与通信对象的终端装置之间开始手写数据的收发。须指出的是，后面将说明手写数据发送控制部0306和手写数据接收控制部0307的处理内容。而在步骤0526中，当判断为未开始手写对话时，跳过步骤0527，不进行手写数据发送控制部0306和手写数据接收控制部0307的起动。

接着，控制部0301判断与通信对象的终端装置之间是否结束了手写对话(步骤0528)，当判断为结束了手写对话时，结束手写数据发送控制部0306和手写数据接收控制部0307(步骤0529)，与通信对象的终端装置之间结束手写数据的收发。而在步骤0528中，当判断为未结束手写对话时，跳过步骤0529，不进行手写数据发送控制部0306和手写数据接收控制部0307的结束。

接着，控制部0301判断用户是否通过结束按钮0415指示了本终端装置的动作结束(步骤0530)，当判断为未指示结束时，回到所述步骤0501，重复所述步骤0501到步骤0530，直到用户指定了结束。

而在步骤0530中，当判断为指示了本终端装置的动作结束时，结束本控制部0301的处理，结束本终端装置的动作。

下面，参照图6，说明由控制部0301起动，到同样由控制部0301结束，由中央处理装置0201执行的声音发送部0302的处理内容。图6是表示声音发送部0302的处理内容的程序框图的一个例子。须指出的是，本声音发送部0302作为与其它软件构成要素不同的任务而实现，与其它软件构成要素并行由中央处理装置0201执行。

如图6所示，声音发送部0302首先从声音输入装置0203取得声音数据(步骤0601)，把获得的声音数据编码(步骤0602)。须指出的是，编码的方法可以使用例如由ITU-T推荐的G.711等方式。

接着，声音发送部0302把编码的数据打包(步骤0603)，把打包的声音数据通过数据收发装置0208向已经开始了声音对话的通信对象的终端装置发送(步骤0604)。须指出的是，关于打包的方法，也可以使用由RFC2543规定的方法。

接着，声音发送部0302判断是否由控制部0301指示了本声音发送部0302的结束(步骤0605)，当判断为未指示声音发送部0302的结束时，回到步骤0601，重复上述的步骤0601到步骤0605，直到指示了本声音发送部0302的结束。

而在所述步骤0605中，当判断为指示了本声音发送部0302的结束时，结束本声音发送部0302的处理。

下面，参照图7，说明由控制部0301起动，到同样由控制部0301结束，由中央处理装置0201执行的声音接收部0303的处理内容。图7是声音接收部0303的处理内容的程序框图的一个例子。须指出的是，本声音接收部0303作为与其它软件构成要素不同的任务而实现，与其它软件构成要素并行由中央处理装置0201执行。

如图7所示，声音接收部0303首先通过数据收发装置0208从已经开始了声音对话的通信对象的终端装置取得打包的编码声音数据(步骤0701)，从接收的信息包取得编码的声音数据(步骤0702)。

接着，声音接收部0303把编码的声音数据译码(步骤0703)，从声音输出装置0204输出译码的声音数据(步骤0704)。

接着，声音接收部0303判断是否由控制部0301指示了本声音接收部0303的结束(步骤0705)，当判断为未指示声音接收部0303的结束时，回到步骤0701，重复上述的步骤0701到步骤0705，直到指示了本声音接收部0303的结束。

而在所述步骤0705中，当控制部301判断为指示了本声音接收部0303的结束时，结束本声音接收部0303的处理。

下面，参照图8说明由控制部0301起动的图象取得控制部0308的处理内容。图8是表示图象取得控制部0308的处理内容的程序框图的一个例子。

如图8所示，如果起动图象取得控制部0308，则首先从图象取得装置0211取得图象数据(步骤0801)，设定为共有候补的图象即共有候补图象(步骤0802)。通过从图象取得装置0211取得图象数据，通过在存储装置0202和二次存储装置0209上的共有候补图象用区域中展开，能实现它。

接着，图象取得控制部0308打开共有候补图象的显示，关掉共有显示，以便把在步骤0802中设定的共有候补图象通过后面描述的显示控制部0310显示在图象和手写数据显示区0404中(步骤0803)。

接着，图象取得控制部0308起动显示控制部0310(步骤0804)，在图象和手写数据显示区0404中显示了共有候补图象后，结束本图象取得控制部0308的处理。

下面，参照图9说明由控制部0301起动的图象发送控制部0304的处理内容。图9是表示图象发送控制部0304的处理内容的程序框图的一个例子。

如图9所示，如果图象发送控制部0304起动，则首先取得在图象取得控制部0308中设定的共有候补图象数据(步骤0901)，把该共有候补图象设定为新的共有图象(步骤0902)。通过在存储装置0202和二次存储装置0209上共有图象用区域中展开在图象取得控制部0308中设定的共有候补图象数据，能实现它。

接着，图象发送控制部0304把步骤0902中设定的新的共有图象通过数据收发装置0208向通信对象的终端装置发送(步骤0903)。此时，可以压缩发送的共有图象数据而发送。

接着，图象发送控制部0304打开共有显示，并且关掉共有候补图象的显示，以便通过后面描述的显示控制部0310在图象和手写数据显示区0404中显示步骤0902中设定的新的共有图象(步骤0904)。

接着，图象发送控制部0304起动显示控制部0310(步骤0905)。当把在步骤0902中设定，在步骤0903中发送给通信对象的终端装置的新共有图象在图象和手写数据显示区0404中显示后，结束图象发送控制部0304的处理。

下面，参照图10说明由控制部0301起动的图象接收控制部0305的处理内容。图10是表示图象接收控制部0305的处理内容的程序框图的一个例子。

如图10所示，如果图象接收控制部0305起动，则首先通过数据收发装置0208从通信对象的终端装置接收共有图象数据(步骤1001)。

接着，图象接收控制部0305把接收的共有图象设定为新的共有图象(步骤1002)。能通过在存储装置0202和二次存储装置0209上共有图象用区域中展开接收的共有图象数据，实现它。此时，当接收的共有图象数据被压缩了时，进行解压缩。

接着，图象接收控制部0305打开共有显示，关掉共有候补图象的显示，以便通过后面描述的显示控制部0310在图象和手写数据显示区0404中显示步骤1002中设定的新的共有图象(步骤1003)。

接着，图象接收控制部0305起动显示控制部0310(步骤1004)，把在步骤1001中从通信对象的终端装置接收，在步骤1002中设定的新的共有图象在图象和手写数据显示区0404中显示后，结束本图象接收控制部0305的处理。

下面，参照图11说明由控制部0301起动，直到同样由控制部0301结束，由中央处理装置0201执行的手写数据发送控制部0306的处理内容。图11是表示手写数据发送控制部0306的处理内容的程序框图的一个例子。须指出的是，本手写数据发送控制部0306作为与其它软件构成要素不同的任务而实现，与其它软件构成要素并行由中央处理装置0201执行。

如图11所示，手写数据发送控制部0306首先判断是否有通过手写输入装置0205输入的手写数据(步骤1101)，当判断为没有输入的手写数据时，跳过以下描述的步骤1102到步骤1106。

而当所述步骤1101的判断结果是判断为存在输入的手写数据时，手写数据发送控制部0306取得用户通过手写输入装置0205输入的手写数据(步骤1102)，通过数据收发装置0208向通信对象的终端装置发送输入的手写数据(步骤1103)。

接着，手写数据发送控制部0306在共有图象上追加展开发送或输入的手写数据(步骤1104)。能通过把发送或输入的手写数据重叠在存储装置0202和二次存储装置0209上的共有图象用区域中展开的共有图象数据上，实现它。

接着，手写数据发送控制部0306打开共有显示，关掉共有候补图象的显示，以便把在步骤1104中追加了手写数据的共有图象通过后面描述的显示控制部0310显示在图象和手写数据显示区0404中(步骤1105)。

接着，手写数据发送控制部0306起动显示控制部0310(步骤1106)，在图象和手写数据显示区0404中显示追加了手写数据共有图象。

接着，手写数据发送控制部0306判断是否由控制部0301指示了手写数据发送控制部0306的结束(步骤1107)，当判断为未指示本手写数据发送控制部0306的结束时，回到所述步骤1101，重复上述的步骤1101到步骤1107的处理，直到由控制部0301指示了手写数据发送控制部0306的结束。而当所述步骤1107的判断结果是判断为由控制部0301指示了手写数据发送控制部0306的结束时，结束本手写数据发送控制部0306的处理。

下面，参照图12说明由控制部0301起动，直到同样由控制部0301结束，由中央处理装置0201执行的手写数据接收控制部0307的处理内容。图12是表示手写数据接收控制部0307的处理内容的程序框图的一个例子。须指出的是，本手写数据接收控制部0307作为与其它软件构成要素不同的任务而实现，与其它软件构成要素并行由中央处理装置0201执行。

如图12所示，手写数据接收控制部0307首先判断是否通过手写输入装置0208从通信对象的终端装置接收了手写数据(步骤1201)，当判断为没有接收手写数据时，跳过以下描述的步骤1202到步骤1205。

而当所述步骤1201的判断结果是判断为接收了手写数据时，手写数据接收控制部0307取得接收的手写数据(步骤1202)，把获得的手写数据在共有图象上追加展开(步骤1203)。能通过把获得的手写数据重叠在存储装置0202和二次存储装置0209上的共有图象用区域中展开的共有图象数据上，实现它。

接着，手写数据接收控制部0307使打开共有显示，关掉共有候补图象的显示，以便把在步骤1203中追加了手写数据的共有图象通过后面描述的显示控制部0310显示在图象和手写数据显示区0404中(步骤1204)。据此，当从通信对象的终端装置接收了手写数据时，显示共有候补图象时，能自动切换为与通信对象的终端装置共有的图象和手写数据的显示。

接着，手写数据接收控制部0307起动显示控制部0310(步骤1205)，在图象和手写数据显示区0404中显示追加了手写数据的共有图象。

接着，手写数据接收控制部0307判断是否由控制部0301指示了手写数据接收控制部0307的结束(步骤1206)，当判断为未指示手写数据接收控制部0307的结束时，回到所述步骤S1201，重复上述的步骤S1201到步骤S1206，直到由控制部0301指示了手写数据接收控制部0307的结束。而当所述步骤S1206的判断结果为由控制部0301指示了手写数据接收控制部0307的结束时，结束手写数据接收控制部0307的处理。

下面，参照图13说明由控制部0301起动的显示切换部0309的处理内容。图13是表示显示切换部0309的处理内容的程序框图的一个例子。

在显示切换部中，进行2以上的图象的显示切换。例如，进行现在显示的图象和未显示的图象的显示切换。现在，作为显示的图象和未显示的图象，为共有候补图象和共有图象。在此，共有候补图象是在各终端独自输入的图象，是与其它终端未共有的图象(例如，由数字照相机输入的图象)，共有图象是本终端与其它终端共有的图象。此时，当显示着共有候补图象时，代替该共有候补图象，把显示切换到现在未显示的共有图象。

如图13所示，显示切换部0309首先判断共有候补图象的显示是否为打开(步骤1301)，当判断为共有候补图象的显示是打开时，关掉共有候补图象的显示，并且打开共有显示(步骤1302)，起动后面描述的显示控制部0310(步骤1303)，通过显示控制部0310，把现在与通信对象的终端装置间正在共有的共有图象在图象和手写数据显示区0404中显示，结束显示切换部0309的处理。在此，共有候补图象的显示打开意味着显示共有候补图象，共有显示打开意味着显示共有图象。

而在所述步骤1301中，当判断为共有候补图象为未打开时，使共有候补图象的显示为打开，使共有显示关掉(步骤1304)，起动后面描述的显示控制部0310(步骤1303)，通过显示控制部0310在图象和手写数据显示区0404中显示由图象取得装置0211获得的共有候补图象，结束显示切换部0309的处理。

下面，参照图14说明由图象发送控制部0304、图象接收控制部0305、手写数据发送控制部0306、手写数据接收控制部0307、图象取得控制部0308、显示切换部0309起动的显示控制部0310处理内容。图14是表示显示控制部0310的处理内容的程序框图的一个例子。

如图14所示，显示控制部0310首先判断共有候补图象的显示是否为打开(步骤1401)，当判断为共有候补图象的显示是打开时，在显示装置0206的图象和手写数据显示区0404中显示由图象取得装置0211获得的共有候补图象(步骤1402)，结束本显示控制部0310的处理。须指出的是，通过把在存储装置0202和二次存储装置0209上的共有候补图象用区域中展开的图象在图象和手写数据显示区0404中显示，能实现共有候补图象的显示。

而在所述步骤1401中，当判断为共有候补图象的显示为未打开时，显示控制部0310再判断共有显示是否打开(步骤1403)。

当本步骤1403的判断结果是判断为共有显示为打开时，显示控制部0310在显示装置0206的图象和手写数据显示区0404中显示现在与通信对象的终端装置间共有的共有图象(步骤1404)，结束显示控制部0310的处理。须指出的是，通过在图象和手写数据显示区0404中显示在存储装置0202和二次存储装置0209上的共有图象用区域中展开的图象，能实现共有图象的显示。

而在所述步骤1403中，判断为共有显示未打开时，显示控制部0310在显示装置0206的图象和手写数据显示区0404中什么也不显示(步骤1405)，结束显示控制部0310的处理。

下面，使用图15和图16说明通过所述的控制部0301、图象发送控制部0304、图象接收控制部0305、手写数据发送控制部0306、手写数据接收控制部0307、图象取得控制部0308、显示切换部0309、显示控制部0310，与进行通信的终端装置间如何管理图象和手写数据。

图15和图16是说明彼此进行通信的2台终端装置的图象和手写数据的交换和管理方法的图。

在图15和图16中，1501是用一方的终端装置A进行的图象和手写数据的管理，1511是用另一方的终端装置B进行的图象和手写数据的管理，1502是由终端装置A的图象取得装置0211获得的共有候补图象，1512是由终端装置B的图象取得装置0211获得的共有候补图象，1503和1603以及1513和1613分别是终端装置A和终端装置B间收发的共有图象，1504和1604以及1514和1614分别是终端装置A和终端装置B间收发的手写数据，1505和1515是在终端装置A中在与终端装置B间收发的共有图象1503和1603上重叠了与终端装置B间收发的手写数据1504和1604而获得的图象，1515和1615是在终端装置B中在与终端装置A间收发的共有图象1513和1613上重叠了与终端装置B间收发的手写数据1514和1614而获得的图象。

在图15中，在终端装置A，共有候补图象1502和图象1505是显示对象，在终端装置B，共有候补图象1512和图象1515成为显示对象。在此，例如当从终端装置A向终端装置B发送共有图象1503，并且，从终端装置B写入手写数据1514，发送到终端装置A时，终端装置A和终端装置B分别把共有图象1503以及共有图象1513与手写数据1504以及1514重叠，生成图象1505和1515，在图象和手写数据显示区0404中显示。须指出的是，手写数据能双向并且以实时收发，此时，各终端装置在收发手写数据时，更新、显示图象1505和1515。

那么，当在终端装置A和终端装置B中分别显示着图象1505和1515时，例如当终端装置A通过图象取得装置0211取得了共有候补图象1502时，在终端装置A中显示共有候补图象1502。而当终端装置B通过图象取得装置0211取得共有候补图象1512时，在终端装置B中显示共有候补图象1512。

另外，如果在终端装置A中通过按显示切换按钮0413等，指示了显示图象的切换，就把显示的图象在共有候补图象1502和图象1505间切换。同样，在终端装置B中，如果通过按显示切换按钮0413等，指示了显示图象的切换，就把显示的图象在共有候补图象1512和图象1515间切换。

而且，例如在终端装置A中，如果用户按下图象发送按钮0414，则如图16所示，终端装置A把共有候补图象1502作为新的共有图象1603，把该新的共有图象1603向终端装置B发送。此时，清除了此前收发的手写数据1504，但是并不局限于此，也可以保持此前收发的手写数据1504，作为手写数据1604而再度与新的共有图象1603重叠。而且，另一方面，在终端装置B中，接收从终端装置A发送的共有图象1603，把接收的共有图象1603作为新的共有图象1613。此时，清除了此前收发的手写数据1514，但是并不局限于此，也可以保持此前收发的手写数据1514，作为手写数据1614再度与新的共有图象1613重叠。然后，在终端装置A中，使共有图象1603和手写数据1604重叠，生成图象1605并显示。同样，在终端装置B中，使共有图象1613和手写数据1614重叠，生成图象1615并显示。

然后，如参照图15所述，如果在终端装置A中通过按显示切换按钮0413等，指示了显示图象的切换，就把显示的图象在共有候补图象1502和图象1605间切换。同样，在终端装置B中，如果通过按显示切换按钮0413等，指示了显示图象的切换，就把显示的图象在共有候补图象1512和图象1615间切换。

据此，如图17所示，在终端装置中，显示了由图象取得装置0211获得的共有候补图象时，能不失去与其他终端装置共有的图象和手写数据，进行显示。另外，用户能切换共有候补图象和与其他终端装置共有的图象以及手写数据的显示，所以能顺利进行通信，并且对由图象取得装置0211获得的图象，能在确认了是否应与对象共有的基础上发送，开始与对象的共有。

须指出的是，在图17中，1701是由图象取得装置0211获得的共有候补图象，1702表示与其它终端装置共有的图象和手写数据。

须指出的是，在上述的实施例1中，当从通信对象的终端装置接收了手写数据时，当显示了共有候补图象时，自动切换为与对象终端装置共有的图象和手写数据的显示，但是并不局限于此，也可以不进行共有候补图象的显示和与其他终端装置共有的图象以及手写数据的显示，直到用户指示切换为止。此时，消除图12中说明的步骤1204的处理，当接收了手写数据时，也不切换为共有图象的显示。

那么，在上述的实施例1中，表示了切换显示共有候补图象和与其他终端装置共有的图象以及手写数据的结构。而在以下说明的实施例2中，表示缩小共有候补图象重叠在共有图象上进行显示的结构。

在本实施例2中，对所述的实施例1可以如下那样变更图象取得控制部0308、图象发送控制部0304、显示切换部0309和显示控制部0310就可以了。但是，在本实施例2中，因为不象实施例1所示的那样参与共有候补图象的显示，所以在具有与实施例1公共的处理内容的处理部中，也可以消除使共有候补图象的显示打开或关掉的处理。

首先，参照图18说明实施例2的图象取得控制部0308的处理内容。图18是表示实施例2的图象取得控制部0308的处理内容的程序框图的一个例子。

如图18所示，在实施例2的图象取得控制部0308中，首先从图象取得装置0211取得图象数据(步骤1801)，设定为与通信对象的终端装置间的共有候补图象(步骤1802)。能通过从图象取得装置0211取得图象数据，在存储装置0202和二次存储装置0209上的共有候补图象用区域中展开，实现它。

接着，图象取得控制部0308生成由步骤1802设定的共有候补图象的缩小图象(步骤1803)。须指出的是，生成的缩小图象也可以在存储装置0202和二次存储装置0209上的缩小图象用区域中展开。

接着，图象取得控制部0308打开小画面显示，以便通过后面描述的显示控制部0310在图象和手写数据显示区0404上显示由步骤1803中生成的缩小图象(步骤1804)。

接着，图象取得控制部0308起动显示控制部0310(步骤1805)，把由步骤1803生成的共有候补图象的缩小图象重叠在共有图象上，在图象和手写数据显示区0404上显示后，结束本图象取得控制部0308的处理。

下面，参照图19说明实施例2的图象发送控制部0304的处理内容。图19是表示本实施例2的图象发送控制部0304的处理内容的程序框图的一个例子。

如图19所示，在本实施例2的图象发送控制部0304中，首先，取得由图象取得控制部0308设定的共有候补图象数据(步骤1901)，把该共有候补图象设定为新的共有图象(步骤1902)。通过把在图象取得控制部0308中设定的共有候补图象数据在存储装置0202和二次存储装置0209上的共有图象用区域展开，能实现它。

接着，图象发送控制部0304把步骤1902中设定的新的共有图象数据通过数据收发装置0208发送给通信对象的终端装置(步骤1903)。此时，可以压缩要发送的共有图象数据而发送。

接着，图象发送控制部0304打开共有显示，以便把步骤1902中设定的新的共有图象通过后面描述的显示控制部0310在图象和手写数据显示区0404中显示(步骤1904)。此时，也可以关掉小画面显示，不显示发送完的共有候补图象的缩小图象。

接着，图象发送控制部0304起动显示控制部0310(步骤1905)，在图象和手写数据显示区0404中显示在步骤1902中设定，并在步骤1903中发送到通信对象的终端装置的新共有图象后，结束本图象发送控制部0304的处理。

下面，参照图20说明实施例2的显示切换部0309的处理内容。图20是表示本实施例2的显示切换部0309的处理内容的程序框图的一个例子。

如图20所示，本实施例2的显示切换部0309首先判断小画面显示是否打开(步骤2001)，当判断为小画面显示为打开时，关掉小画面显示，通过后面描述的显示控制部0310在图象和手写数据显示区0404上只显示共有图象(步骤2002)。

接着，显示切换部0309起动显示控制部0310(步骤2003)，只在图象和手写数据显示区0404上显示了共有图象后，结束显示切换部0309的处理。

而在所述步骤2001中，当判断为未打开小画面显示时，把小画面显示打开，通过后面描述的显示控制部0310在图象和手写数据显示区0404上显示图象和手写数据(步骤2004)。

接着，显示切换部0309起动显示控制部0310(步骤2003)，在图象和手写数据显示区0404上显示了共有候补图象的缩小图象后，结束显示切换部0309的处理。

下面，参照图21说明本实施例2的显示控制部0310的处理内容。图21是表示本实施例2的显示控制部0310的处理内容的程序框图的一个例子。

如图21所示，实施例2的显示控制部0310首先判断共有显示是否为打开(步骤2101)，当判断为共有显示是打开时，在显示装置0206的图象和手写数据显示区0404中显示现在与通信对象的终端装置间共有的共有图象。须指出的是，能通过在图象和手写数据显示区0404中显示在存储装置0202和二次存储装置0209上的共有图象用区域中展开的图象，实现共有图象的显示。

而在所述步骤2101中，当判断为共有显示未打开时，不显示共有图象，进入步骤2103。

接着，显示控制部0310判断小画面显示是否为打开(步骤2103)，当判断为小画面显示是打开时，在显示装置0206的图象和手写数据显示区0404上显示共有候补图象的缩小图象(步骤2104)，结束本显示控制部0310的处理。须指出的是，此时在所述步骤2102中，当显示了共有图象时，在该共有图象上重叠显示本共有候补图象的缩小图象。须指出的是，能通过在图象和手写数据显示区0404中显示在存储装置0202和二次存储装置0209上的缩小图象用区域中展开的图象，实现共有图象的缩小图象的显示。

而在所述步骤2103中，当判断为小画面显示未打开时，就不显示共有候补图象的缩小图象，结束本显示控制部0310的处理。

须指出的是，在所述步骤2104中，当显示缩小图象时，在初次显示该缩小图象的情况下，如图22所示，也可以在显示了未缩小的共有候补图象一定时间后，把该缩小图象与共有图象重叠显示。须指出的是，在图22中，2201和2201’是显示装置0206的图象和手写数据显示区0404中显示的图象，2202是由图象取得装置0211获得的共有候补图象，是未缩小的共有候补图象。另外，2203是共有候补图象的缩小图象，2204是现在与通信对象的终端装置间共有的共有图象。

另外，在所述步骤2104中，当显示  缩小图象时，当开始显示该缩小图象时，如图23所示，也可以首先显示未缩小的共有候补图象后，把手写数据的接收作为触发，把本缩小图象与共有图象重叠显示。须指出的是，在图23中，2301和2301’是显示装置0206的图象和手写数据显示区0404中显示的图象，2302是由图象取得装置0211获得的共有候补图象，是未缩小的共有候补图象。另外，2303是共有候补图象的缩小图象，2304是现在与通信对象的终端装置间共有的共有图象，2305是从通信对象的终端装置接收的手写数据。

当在所述步骤2104中显示缩小图象时，如图24和图25所示，在一定显示与通信对象的终端装置之间收发的手写数据的位置即不隐藏正在收发的手写数据的位置显示。特别是希望在离正在收发的手写数据的显示位置远的位置显示。须指出的是，在图24和图25中，2401和2501是在显示装置0206的图象和手写数据显示区0404中显示的图象，2402和2502是现在与通信对象的终端装置间共有的共有图象，2403和2503是共有候补图象的缩小图象，2404和2504是与通信对象的终端装置之间收发的手写数据。

下面，在本实施例2中，参照图26和图27说明在进行通信的终端装置之间怎样交换图象和手写数据以及如何进行管理。

图26和图27是说明彼此进行通信的2台终端装置的图象和手写数据的交换和管理方法的图。

在图26和图27中，2601是用一方的终端装置A进行的图象和手写数据的管理，2611是用另一方的终端装置B进行的图象和手写数据的管理，2602是由终端装置A的图象取得装置0211获得的共有候补图象，2612是由终端装置B的图象取得装置0211获得的共有候补图象，2606是缩小了终端装置A的共有候补图象2602的图象，2616是缩小了终端装置B的共有候补图象2612后的图象，2603、2703和2613、2713分别是在终端装置A和终端装置B之间收发的共有图象，2604和2704  及2614和2714分别是在终端装置A和终端装置B之间进行收发的手写数据、2605和2705是在终端装置A中在与终端装置B间收发的共有图象2603和2703上重叠了与终端装置B间收发的手写数据2604和2704而获得的图象，2615和2715是在终端装置B中在与终端装置A间收发的共有图象2613和2713上重叠了与终端装置A间收发的手写数据2614和2714而获得的图象，2607和2707是在终端装置A中在与终端装置B间收发的共有图象2603和2703上重叠了与终端装置B间收发的手写数据2604和2704、再重叠了共有候补图象的缩小图象2606而获得的图象，2617和2717是在终端装置B中在与终端装置A间收发的共有图象2613和2713上重叠了与终端装置B之间收发的手写数据2614和2714、再重叠了共有候补图象的缩小图象2616而获得的图象。

在图26中，在终端装置A，图象2605和图象2607是显示对象，在终端装置B，图象2615和图象2617成为显示对象。在此，例如当从终端装置A向终端装置B发送共有图象2603，并且从终端装置B写入手写数据2614，发送到终端装置A时，终端装置A和终端装置B分别把共有图象2603以及2613与手写数据2604以及手写数据2614重叠，生成图象2605和图象2615，在图象和手写数据显示区0404中显示。须指出的是，手写数据能双向并且实时收发，此时，各终端装置在收发手写数据时，可以更新显示图象2605和图象2615。

那么，当在终端装置A和终端装置B中分别显示着图象2605和图象2615时，例如终端装置A通过图象取得装置0211取得了共有候补图象2602时，终端装置A生成该共有候补图象的缩小图象2606。而例如终端装置B通过图象取得装置0211取得了共有候补图象2612时，终端装置B生成该共有候补图象2616的缩小图象。而且，在终端装置A，在图象2605上再重叠共有候补图象2606的缩小图象，生成图象2607，在图象和手写数据显示区0404中显示。同样，在终端装置B，在图象2615上再重叠共有候补图象2616的缩小图象，生成图象2617，在图象和手写数据显示区0404中显示。

而且，在该状况下，如果在终端装置A中，通过按显示切换按钮0413指示了显示图象的切换，则在图象2605和图象2607间切换显示的图象。同样，如果在终端装置B中，通过按显示切换按钮0413指示了显示图象的切换，则在图象2605和图象2607间切换显示的图象。

在终端装置A中，如果用户按下图象发送按钮0414，则如图27所示，终端装置A把共有候补图象2602作为新的共有图象2703，把该新的共有图象2703向终端装置B发送。此时，清除了收发的手写数据2604，但是并不局限于此，也可以保持此前收发的手写数据2604，作为手写数据2704再度与新的共有图象2703重叠。而在终端装置B中，接收从终端装置A发送的共有图象2703，把接收的共有图象2703作为新的共有图象2713。此时，清除了此前收发的手写数据2614，但是并不局限于此，也可以保持此前收发的手写数据2614，作为手写数据2714再度与新的共有图象2713重叠。然后，在终端装置A中，使共有图象2703和手写数据2704重叠，生成图象2705并显示，并且把共有图象2703、手写数据2704和共有候补图象的缩小图象2606重叠，生成图象2707。而在终端装置B中，把共有图象2713和手写数据2714重叠，生成图象2715并显示，并且把共有图象2713、手写数据2714和共有候补图象的缩小图象2616重叠，生成图象2717。

然后，如参照图26所述，在终端装置A中，如果通过按显示切换按钮0413等，指示了显示图象的切换，就把显示的图象在图象2705和图象2707间切换。同样，在终端装置B中，如果通过按显示切换按钮0413等，指示了显示图象的切换，就把显示的图象在图象2715和图象2717间切换。

据此，如图28所示，在终端装置中，当显示了由图象取得装置0211获得的共有候补图象时，能不失去与其他终端装置共有的图象和手写数据进行显示。另外，能一边显示与其他终端装置共有的图象和手写数据，一边显示由图象取得装置0211获得的共有候补图象，所以能可靠地进行通信。因为与通信对象的终端装置进行共有前，能确认共有候补图象，所以可以不向对方发送不想要的图象，不会有使用的麻烦。

须指出的是，在图28中，2801是表示与其他终端装置共有的图象和手写数据的图，2802是表示重叠在与其他终端装置共有的图象和手写数据上，由图象取得控制部0308生成的共有候补图象的缩小图象的图。

那么，在上述实施例2中，表示了生成共有候补图象的缩小图象，在共有图象上显示的结构。而在以下说明的实施例3中，表示能切换只有共有图象的显示、只有共有候补图象的显示、把共有候补图象的缩小图象重叠在共有图象上的显示的结构。

在本实施例3中，对所述实施例2，可以按如下只变更图象取得控制部0308、图象发送控制部0304、显示切换部0309、显示控制部0310。但是，在本实施例3中，因为显示共有候补图象，所以是以在与实施例1具有公共的处理内容的实施例2的处理部中，不消除打开或关掉共有候补图象的显示的处理为前提，进行说明的。

首先，参照图29说明本实施例3的图象取得控制部0308的处理内容。图29是表示本实施例3的图象取得控制部0308的处理内容的程序框图的一个例子。

如图29所示，本实施例3的图象取得控制部0308的处理内容几乎与所述图18中说明的实施例2的图象取得控制部0308的处理内容相同。但是，本实施例3的图象取得控制部0308的处理内容与实施例2的图象取得控制部0308的处理内容相比，在步骤1804中使小画面显示为打开这一点上，变更为步骤2904所示，使共有候补图象的显示打开，使共有显示关掉，关掉小画面显示。据此，在取得了共有候补图象后，在图象和手写数据显示区0404上显示未缩小的共有候补图象，能以实际的图象尺寸确认图象的显示状况。

须指出的是，在图29中，关于与图18相同的处理，采用了相同的编号，其详细内容与图18中说明的同样，所以省略说明。

下面，参照图30说明本实施例3的图象发送控制部0304的处理内容。图30是表示本实施例3的图象发送控制部0304处理内容的程序框图的一个例子。

如图30所示，本实施例3的图象发送控制部0304的处理内容与所述图19中说明的实施例2的图象发送控制部0304的处理内容几乎相同。但是，本实施例3的图象发送控制部0304的处理内容与所述实施例2的图象发送控制部0304的处理内容相比，在步骤1904中打开共有显示的点上，变更为步骤3004所示，使共有显示打开，关掉小图象显示，关掉共有候补图象的显示。据此，在向通信对象的终端装置发送新的共有图象后，显示了该新的共有图象，所以能顺利进行通信。

须指出的是，在图30中，关于与图19相同的处理，采用了相同的编号，其详细内容与图19中说明的同样，所以省略说明。

下面，参照图31说明本实施例3的显示切换部0309的处理内容。图31是表示本实施例3的显示切换部0309的处理内容的程序框图的一个例子。

如图31所示，本实施例3的显示切换部0309首先判断共有候补图象的显示是否为打开(步骤3101)，当判断为共有候补图象的显示为打开时，打开小画面显示，打开共有显示，关掉共有候补图象的显示后(步骤3102)，起动后面描述的显示控制部0310(步骤3103)，通过显示控制部0310，重叠在共有图象上，在图象和手写数据显示区0404中显示共有候补图象的缩小图象，结束显示切换部0309的处理。

而在所述步骤3101中，当判断为共有候补图象的显示未打开时，再判断小画面显示是否为打开(步骤3104)，当判断为小画面显示是打开时，关掉小画面显示，关掉共有候补图象的显示，打开共有显示后(步骤3105)，起动后面描述的显示控制部0310(步骤3103)，通过显示控制部0310，在图象和手写数据显示区0404上只显示共有图象，结束本显示切换部0309的处理。

而在所述步骤3104中，当判断为小画面显示是未打开时，关掉小画面显示，关掉共有显示，打开共有候补图象的显示后(步骤3106)，起动后面描述的显示控制部0310(步骤3103)，通过显示控制部0310，在图象和手写数据显示区0404上只显示由图象取得控制部0308获得的未缩小的共有候补图象，结束显示切换部0309的处理。

下面，参照图32，说明本实施例3的显示控制部0310的处理内容。图32是表示本实施例3的显示控制部0310的处理内容的程序框图的一个例子。

如图32所示，显示控制部0310首先判断共有候补图象的显示是否为打开(步骤3201)，当判断为共有候补图象的显示是打开时，在显示装置0206的图象和手写数据显示区0404上显示由图象取得装置0211获得的共有候补图象(步骤3206)，结束本显示控制部0310的处理。须指出的是，能通过在图象和手写数据显示区0404中显示在存储装置0202和二次存储装置0209上的共有候补图象用区域中展开的图象，实现共有候补图象的显示。

而在所述步骤3201中，当判断为共有候补图象为未打开时，显示控制部0310再判断共有显示是否为打开(步骤3202)，当判断为共有显示是打开时，在显示装置0206的图象和手写数据显示区0404中显示现在与通信对象的终端装置间共有的共有图象(步骤3203)。须指出的是，能通过在图象和手写数据显示区0404中显示在存储装置0202和二次存储装置0209上的共有图象用区域中展开的图象，实现共有图象的显示。

而当在步骤3202中，判断为共有显示为未打开时，不显示共有图象，进入步骤3204。

接着，显示控制部0310判断小画面显示是否为打开(步骤3204)，当判断为小画面显示为打开时，在显示装置0206的图象和手写数据显示区0404中显示由图象取得控制部0308生成的共有候补图象的缩小图象(步骤3205)，结束本显示控制部0310的处理。须指出的是，此时，在所述步骤3203中，当显示了共有图象时，重叠在该共有图象上显示本共有候补图象的缩小图象。须指出的是，能通过在图象和手写数据显示区0404中显示在存储装置0202和二次存储装置0209上的缩小图象用区域中展开的图象，能实现共有候补图象的缩小图象的显示。

而当在步骤3204中，判断为小画面显示为未打开时，不显示共有候补图象的缩小图象，结束本显示控制部0310的处理。

根据以上说明的实施例3，如图33所示，如果通过按显示切换按钮0413等，指示了显示图象的切换，就能依次切换只有共有图象的显示、只有共有候补图象的显示、把共有候补图象的缩小图象重叠在共有图象上的显示。须指出的是，在图33中，3301是表示由图象取得装置0211获得的共有候补图象的图，3302是表示重叠在与其他终端装置共有的图象和手写数据上，显示由图象取得控制部0308生成的共有候补图象的缩小图象的图，3303是表示只显示与其他终端装置共有的图象和手写数据的图。

须指出的是，在上述的实施例3中，当从通信对象的终端装置接收了手写数据时，当显示了共有候补图象时，自动显示与对象终端装置共有的图象和手写数据，但是，并不局限于此，也可以不进行共有候补图象的显示和与其他终端装置共有的图象和手写数据的显示，直到用户指示切换为止。此时，消除图12中说明的步骤1204的处理，即使在接收了手写数据时，也不切换为共有图象的显示。另外，在步骤1204中，通过打开小画面显示，打开共有图象的显示，关掉共有候补图象的显示，能显示共有图象和共有候补图象的缩小图象。据此，当从对象终端装置写入了手写数据时，一定显示共有图象，并且也显示现在感兴趣的对象的共有候补图象的缩小图象，所以能顺利进行通信。

须指出的是，在上述的实施例1、2、3中，用通过中央处理装置0201执行的软件实现了控制部0301、声音发送部0302、声音接收部0303、图象发送控制部0304、图象接收控制部0305、手写数据发送控制部0306、手写数据接收控制部0307、图象取得控制部0308、显示切换部0309和显示控制部0310，但是也可以通过硬件实现这些的一部分或全部。

另外，在上述的实施例1、2、3中，表示了也能进行声音通话的结构例，但是声音通话不是必须的。当终端装置中不包含声音通话功能时，在各实施例中，可以不实现关于声音输入装置0203、声音输出装置0204、声音发送部0302、声音接收部0303、通话开始按钮0407、通话结束按钮0408的部分。

另外，在上述的实施例1、2、3中，说明了图象发送控制部0304和图象接收控制部0305在存储装置0202或二次存储装置0209中不保存旧的共有图象的结构，但是也可以在例如图象发送控制部0304和图象接收控制部0305中，在设定新的共有图象前，把此前的共有图象保持在二次存储装置0209中，根据来自用户的指示，能参照此前的共有图象或与对象终端装置共有。

在上述的实施例1、2、3中，说明了共有图象为1个，但是并不局限于此，可以具有多个共有图象。此时，在存储装置0202和二次存储装置0209上的各个别共有图象用区域中展开各共有图象的数据，根据来自用户的指示，切换这些共有图象，并显示。

根据本实施例，就能提供在例如便携式终端装置那样的显示画面小的终端装置中，与其他终端装置共有图象，在与该终端装置间收发手写数据，在所述共有图象上能以实时显示该收发的手写数据的使用方便的通信终端装置。特别是与其他终端装置之间具有共有图象，在进行通信中，显示用照相机图象取得装置获得的下一共有候补图象时，能不失去与其他终端装置共有的图象和手写数据而显示。另外，能一边显示与其他终端装置共有的图象和手写数据，一边显示共有候补图象，所以能顺利进行通信。而且，因为能在与通信对象的终端装置共有之前就确认共有候补图象，所以可以不向对方发送其不想要的图象，从而能消除使用上的麻烦。

根据本发明，就能提供终端装置中，与其他终端装置共有图象，并在与该终端装置之间收发手写数据，从而在所述共有图象上能实时地显示该收发的手写数据的、使用方便的通信终端装置。

Claims (18)

1.一种通信终端装置，包括：取得图象数据的图象取得部件；在与作为通信对象的其他终端装置之间收发数据的数据收发部件；和显示用该图象取得部件或数据收发部件收发的图象或数据的显示部件；其特征在于：包括：

发送与所述其他终端装置共有的共有图象数据的图象发送控制部件；

取得与所述其他终端装置共有的图象候补即共有候补图象数据的图象取得控制部件；

当所述显示部件中显示所述共有图象数据时，在取得了所述共有候补图象数据的情况下，切换为所述共有图象数据的显示，来显示所述共有候补图象数据的显示控制部件。

2.根据权利要求1所述的通信终端装置，其特征在于：还包括：接收从所述其他终端装置发送的共有图象数据的图象接收控制部件；

所述显示控制部件把该发送的图象作为与其他终端装置的共有图象而显示。

3.根据权利要求1所述的通信终端装置，其特征在于：

所述显示控制部件如果通过所述图象取得部件取得了所述共有候补图象的数据，则在所述显示部件以一定时间显示了该共有候补图象后，切换为所述共有图象的显示。

4.根据权利要求1所述的通信终端装置，其特征在于：

包括：用于对所述显示控制部件指示所述共有图象的显示和所述共有候补图象的显示的切换的显示图象切换指示部件；

所述显示控制部件按照来自该显示图象切换指示部件的指示，切换所述共有图象的显示和所述共有候补图象的显示。

5.根据权利要求1所述的通信终端装置，其特征在于：

包括：对所述图象发送控制部件指示向其他终端装置发送所述共有图象数据的图象发送指示部件；

所述图象发送控制部件根据来自该图象发送指示部件的指示，把所述共有候补图象数据设定为新的共有图象数据，并把该新的共有图象数据向所述其他终端装置发送。

6.根据权利要求2所述的通信终端装置，其特征在于：

所述图象接收控制部件把接收的图象数据设定为新的共有图象数据。

7.根据权利要求1所述的通信终端装置，其特征在于：包括：用于用户输入手写数据的手写输入部件；

控制通过该手写输入部件输入的手写数据的发送，使该发送的手写数据重叠在所述共有图象上的手写数据发送控制部件；

控制从所述其他终端装置发送的手写数据的接收，使该接收的手写数据重叠在所述共有图象上的手写数据接收控制部件；

能与所述其他终端装置之间共有图象和手写数据。

8.根据权利要求7所述的通信终端装置，其特征在于：

所述显示控制部件根据所述手写数据接收部件接收了手写数据，切换为所述共有图象的显示。

9.根据权利要求1所述的通信终端装置，其特征在于：

所述图象取得控制部从所述共有候补图象的数据生成缩小图象，所述显示控制部件在所述共有图象上显示该缩小图象。

10.根据权利要求9所述的通信终端装置，其特征在于：

所述显示控制部件如果通过所述图象取得部件取得了所述共有候补图象数据，就在进行了一定时间的所述共有候补图象的显示之后，在所述共有图象上显示所述缩小图象。

11.根据权利要求9所述的通信终端装置，其特征在于：

包括：用于指示所述共有图象的显示、所述共有候补图象的显示和所述共有图象上的所述缩小图象的显示的切换的显示图象切换指示部件；

所述显示控制部件根据来自所述显示图象切换指示部件的指示，切换所述共有图象的显示、所述共有候补图象的显示和所述共有图象上的所述缩小图象的显示。

12.根据权利要求9所述的通信终端装置，其特征在于：

包括：对所述图象发送控制部件指示向其他终端装置发送所述共有图象的数据的图象发送指示部件；

所述图象发送控制部件根据来自所述图象发送指示部件的指示，把所述共有候补图象的数据设定为新的共有图象数据，把该新的共有图象数据向所述其他终端装置发送。

13.根据权利要求12所述的通信终端装置，其特征在于：

所述图象接收控制部件把接收的图象数据设定为新的共有图象数据。

14.根据权利要求9所述的通信终端装置，其特征在于：

包括：用于用户输入手写数据的手写输入部件；

控制通过该手写输入部件输入的手写数据的发送，使该发送的手写数据重叠在所述共有图象上的手写数据发送控制部件；

控制从所述其他终端装置发送的手写数据的接收，使该接收的手写数据重叠在所述共有图象上的手写数据接收控制部件；

能与所述其他终端装置之间共有图象和手写数据。

15.根据权利要求14所述的通信终端装置，其特征在于：

所述显示控制部件根据所述手写数据接收部件接收了手写数据，切换所述共有图象的显示、所述共有候补图象的显示和所述共有图象上的所述缩小图象的显示。

16.根据权利要求14所述的通信终端装置，其特征在于：

所述显示控制部件在所述共有图象上显示所述缩小图象，使在所述共有图象上显示所述手写数据的区域以外的区域显示所述缩小图象。

17.根据权利要求1所述的通信终端装置，其特征在于：

具有存储图象数据的存储部件；

所述图象发送控制部件在把所述共有候补图象数据设定为新的共有图象数据之前，把在该新的共有图象数据之前是共有图象的共有图象数据存储到所述存储部件中。

18.根据权利要求2所述的通信终端装置，其特征在于：

具有存储图象数据的存储部件；

所述图象接收控制部件在把所述接收的图象设定为新的共有图象数据前，把在该新的共有图象数据之前是共有图象的共有图象数据存储到所述存储部件中。

Images