WO2010005073A1 - 通信端末、制御方法、および制御プログラム - Google Patents

通信端末、制御方法、および制御プログラム Download PDF

Info

Publication number
WO2010005073A1
WO2010005073A1 PCT/JP2009/062581 JP2009062581W WO2010005073A1 WO 2010005073 A1 WO2010005073 A1 WO 2010005073A1 JP 2009062581 W JP2009062581 W JP 2009062581W WO 2010005073 A1 WO2010005073 A1 WO 2010005073A1
Authority
WO
WIPO (PCT)
Prior art keywords
operation information
mobile phone
information
communication terminal
unit
Prior art date
Application number
PCT/JP2009/062581
Other languages
English (en)
French (fr)
Inventor
正之 熊谷
Original Assignee
シャープ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by シャープ株式会社 filed Critical シャープ株式会社
Priority to EP09794517A priority Critical patent/EP2306303A4/en
Priority to CN2009801270185A priority patent/CN102089740A/zh
Priority to US13/001,925 priority patent/US20110115701A1/en
Publication of WO2010005073A1 publication Critical patent/WO2010005073A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00Digital computers in general; Data processing equipment in general
    • G06F15/16Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
    • G06F15/161Computing infrastructure, e.g. computer clusters, blade chassis or hardware partitioning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/16Arrangements for providing special services to substations
    • H04L12/18Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1822Conducting the conference, e.g. admission, detection, selection or grouping of participants, correlating users to one or more conference sessions, prioritising transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/16Arrangements for providing special services to substations
    • H04L12/18Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/189Arrangements for providing special services to substations for broadcast or conference, e.g. multicast in combination with wireless systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W88/00Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/02Terminal devices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display

Definitions

  • the present invention relates to a communication terminal that can be connected to another communication terminal via a network, a control method, and a control program, and in particular, received first operation information and second operation information received from another communication terminal.
  • the present invention relates to a communication terminal, a control method, and a control program that can output useful information to a user based on the above.
  • each user can recognize that the drawing results on each other's communication terminal are different, they can recognize the necessity of synchronization processing, and consult which of the different drawing results should be prioritized and saved. You can also. However, if the user does not have such recognition, that is, if the user misrecognizes that each communication terminal outputs the same drawing result, the drawing result stored in the communication terminal of another user When reusing, there is a possibility that the drawing result expected by itself is different from the saved drawing result. Alternatively, when a user proceeds with work while saving the drawing result in each communication terminal, each user does not have the drawing result of his / her communication terminal and the drawing result of another communication terminal until drawing is completed. You may notice that they are different.
  • Patent Document 1 discloses a drawing communication terminal.
  • the drawing communication terminal responds to the operation of the delay command input means, the delay command input means that is operated when the input of the handwritten information by the drawing input means is completed.
  • the storage unit includes a storage unit for storing the delay command and the time until the input of the next handwritten information in succession to the storage of the handwritten information.
  • the drawing communication terminal displays the next handwritten information delayed by time by detecting a delay command that follows the handwritten information during reproduction.
  • each of a plurality of game units has input means for inputting first operation data for operating a character displayed on a screen; For each synchronization time, the first operation data is transmitted to other game units, and the second operation data transmitted from the other game units is received, and for each predetermined synchronization time, And a calculation unit that processes the first operation data and the second operation data, and when the communication control unit does not receive the second operation data at a predetermined synchronization time, the calculation unit Wait for processing of the data and the second operation data.
  • the present invention has been made to solve such a problem, and the object is to maintain a real-time property when the output state of the communication terminal is different from the output state of the communication terminal. It is to provide a communication terminal, a control method, and a control program capable of recognizing that they are different.
  • a communication terminal that can be connected to another communication terminal via a network.
  • the communication terminal transmits an output unit including a display, an input unit for receiving first operation information, and the first operation information to another communication terminal via the network, and the other communication terminal via the network.
  • a communication device for receiving the second operation information from the first operation information, when the first operation information is received, the first information based on the first operation information is output to the first area of the display, A first output control unit for outputting second information based on the second operation information to the first area when the operation information is received, and a predetermined time after the time when the first operation information is received And a comparison unit for comparing the time when the second operation information is received and outputting the third information based on the comparison result to the output unit.
  • the communication terminal outputs the first information to the second area of the display after a predetermined time from the time when the first operation information is received, and receives the second operation information when the second operation information is received.
  • a second output control unit for outputting information based on the information to the second area is further included.
  • a control method in a communication terminal including an output unit including a display, an input unit, a communication device, and a control unit that can be connected to another communication terminal via a network.
  • the control method includes a step in which the control unit receives the first operation information via the input unit, and a step in which the control unit outputs the first information based on the first operation information to the first area of the display.
  • the control unit transmits the first operation information to the other communication terminal via the communication device; and the control unit receives the second operation information from the other communication terminal via the communication device; A step in which the control unit outputs second information based on the second operation information to the first area; a time after a predetermined time after the time at which the control unit receives the first operation information; A step of comparing the time when the second operation information is received, and a step of causing the output unit to output third information based on a result of the comparison.
  • a control program for controlling a communication terminal including an output unit including a display, an input unit, a communication device, and a control unit, which can be connected to another communication terminal via a network. Is done.
  • the control program causes the control unit to receive the first operation information via the input unit, to output the first information based on the first operation information to the first area of the display, and the communication device. Transmitting the first operation information to another communication terminal via the communication device; receiving the second operation information from the other communication terminal via the communication device; and second information based on the second operation information.
  • a terminal, a control method, and a control program are provided.
  • the mobile phone 100 will be described as a representative example of the “communication terminal”.
  • the communication terminal may be another information communication device such as a personal computer, a car navigation device (Satellite navigation system), a PND (Personal Navigation Device), or a PDA (Personal Digital Assistance).
  • FIG. 1 is a schematic diagram showing an example of a network system 1 according to the present embodiment.
  • a network system 1 includes mobile phones 100A, 100B, and 100C, a matching server (first server device) 400, a mail server (second server device) 600, and an Internet network (first Network) 500 and a carrier network (second network) 700.
  • the network system 1 according to the present embodiment includes a car navigation device 200 mounted on a vehicle 250 and a personal computer (PC) 300.
  • PC personal computer
  • the network system 1 includes a first mobile phone 100A, a second mobile phone 100B, and a third mobile phone 100C. Will be described. Further, when the common configurations and functions of the mobile phones 100A, 100B, and 100C are described, they are also collectively referred to as the mobile phone 100. And when explaining a structure and function common to each of mobile phone 100A, 100B, 100C, the car navigation apparatus 200, and the personal computer 300, these are also named generically as a communication terminal.
  • the mobile phone 100 is configured to be connectable to the carrier network 700.
  • the car navigation device 200 is configured to be connectable to the Internet network 500.
  • the personal computer 300 is configured to be connectable to the Internet network 500 via a LAN (Local Area Network) 350 or a WAN (Wide Area Network).
  • Matching server 400 is configured to be connectable to Internet network 500.
  • the mail server 600 is configured to be connectable to the Internet network 500 and the carrier network 700.
  • the first mobile phone 100A, the second mobile phone 100B, the third mobile phone 100C, the car navigation device 200, and the personal computer 300 are a carrier network 700, a mail server 600, and the Internet. They can be connected to each other via the network 500 and can transmit and receive data to and from each other. Also, identification information (for example, an e-mail address or an IP (Internet Protocol) address) for identifying the terminal itself is assigned to the mobile phone 100, the car navigation device 200, and the personal computer 300. That is, the mobile phone 100, the car navigation device 200, and the personal computer 300 can store identification information of other communication terminals in an internal recording medium, and the carrier network 700, the Internet network 500, and the like can be stored based on the identification information. Via the other communication terminal.
  • identification information for example, an e-mail address or an IP (Internet Protocol) address
  • the mobile phone 100, the car navigation device 200, and the personal computer 300 perform data transmission / reception with other communication terminals without using the mail server 600 by using the assigned IP address. is there.
  • the matching server 400 that is, when each communication terminal accesses the Internet
  • an IP address is assigned by the matching server 400 or another server device (not shown). Details of the IP address assignment process are well known, and therefore the description will not be repeated here.
  • the mobile phone 100, the car navigation device 200, and the personal computer 300 according to the present embodiment can directly transmit and receive data to and from each other via the network by using the IP address assigned to the mobile phone 100, the car navigation device 200, and the personal computer 300.
  • the mobile phone 100, the car navigation device 200, and the personal computer 300 included in the network system 1 according to the present embodiment can constitute a so-called P2P (Pear to Pear) type network.
  • FIG. 2 is a sequence diagram showing an outline of the operation in the network system 1.
  • each communication terminal according to the present embodiment needs to exchange (acquire) each other's IP address first in order to perform P2P type data transmission / reception.
  • Each communication terminal after obtaining an IP address, transmits a message, an attached file, etc. to other communication terminals by P2P type data transmission / reception.
  • each of the communication terminals transmits and receives a message via the chat room generated in the matching server 400 and then performs P2P communication based on each other's IP address.
  • first mobile phone 100A requests IP registration (login) from matching server 400 (step S002).
  • First mobile phone 100A may obtain an IP address at the same time, or may obtain an IP address from another server device in advance. More specifically, the first mobile phone 100A sends the mail address, IP address, and second mobile phone of the first mobile phone 100A to the matching server 400 via the carrier network 700, the mail server 600, and the Internet network 500.
  • a 100B mail address and a message requesting generation of a new chat room are transmitted.
  • Matching server 400 stores the mail address of first mobile phone 100A in association with the IP address in response to the request. Then, the matching server 400 generates a room name based on the mail address of the first mobile phone 100A and the mail address of the second mobile phone 100B, or extracts the room name included in the message, and Create a chat room with a room name. At this time, the matching server 400 may notify the first mobile phone 100A that the generation of the chat room has been completed. Matching server 400 stores room names and IP addresses of participating communication terminals in association with each other.
  • the user of the first mobile phone 100A informs the user of the second mobile phone 100B that a new chat room has been generated, that is, invites the user of the second mobile phone 100B to the chat room.
  • the first mobile phone 100A transmits a P2P participation request mail to the second mobile phone 100B via the carrier network 700, the mail server 600, and the Internet network 500.
  • the second mobile phone 100B When the second mobile phone 100B receives the P2P participation request email, the second mobile phone 100B generates a room name based on the email address of the first mobile phone 100A and the email address of the second mobile phone 100B, or from the participation request email. The room name is acquired, and a message to join the chat room having the room name is transmitted to the matching server 400 (step S008). Second mobile phone 100B may acquire an IP address at the same time, or may access matching server 400 after acquiring an IP address first. At this time, the matching server 400 may delete the chat room.
  • Matching server 400 accepts the message and stores the mail address of second mobile phone 100A in association with the IP address. Then, matching server 400 transmits to first mobile phone 100A the fact that second mobile phone 100B has joined the chat room and the IP address of second mobile phone 100B (step S010). At the same time, matching server 400 transmits to second mobile phone 100B that it has accepted participation in the chat room and the IP address of first mobile phone 100A.
  • the first mobile phone 100A transmits a P2P connection request message (start message) to the second mobile phone 100B based on the IP address of the second mobile phone 100B (step S012).
  • the second mobile phone 100B receives the connection request message, and transmits a first connection acceptance message (response message) to the first mobile phone 100A based on the IP address of the first mobile phone 100A (step) S014).
  • First mobile phone 100A receives the second connection acceptance message from second mobile phone 100B and transmits the connection acceptance message to second mobile phone 100B (step S016).
  • the first mobile phone 100A measures the time U1 from the transmission of the connection request message to the reception of the first connection acceptance message, so that the second mobile phone 100B to the first mobile phone The message transmission time t up to 100A is acquired.
  • the second mobile phone 100B measures the time U2 from the transmission of the first connection acceptance message to the reception of the second connection acceptance message, thereby measuring the second mobile phone 100B from the first mobile phone 100A.
  • the time t required to send a message to the mobile phone 100B is acquired.
  • the first mobile phone 100A and the second mobile phone 100B authenticate each other.
  • the first mobile phone 100A and the second mobile phone 100B start P2P communication (step S018).
  • first mobile phone 100A transmits a message to disconnect P2P communication to second mobile phone 100B (step S030)
  • second mobile phone 100B disconnects to first mobile phone 100A.
  • a message indicating that the request has been accepted is transmitted (step S032).
  • FIG. 3 is an image diagram showing transition of the display state of the communication terminal along the operation outline according to the present embodiment.
  • t (U1 / 2) seconds.
  • first mobile phone 100A inputs a figure X into the first mobile phone 100A. Then, first mobile phone 100A displays graphic X in first display area 107A of main display 107, and transmits information X indicating that graphic X has been input to second mobile phone 100B. At this time, since the second mobile phone 100B has not yet received the information X, the second mobile phone 100B does not display the graphic X as shown in FIG.
  • the second mobile phone 100B After t seconds, that is, when t seconds have elapsed after the first mobile phone 100A transmits the information X, the second mobile phone 100B receives the information X. As shown in FIG. 3D, the second mobile phone 100B displays the graphic X in the first display area 107A and the second display area 107B of the main display 107.
  • first mobile phone 100A displays graphic Y in first display area 107A of main display 107, and transmits information Y indicating that graphic Y has been input to second mobile phone 100B.
  • the second mobile phone 100B since the second mobile phone 100B has not yet received the information Y, the second mobile phone 100B does not display the graphic Y.
  • Second mobile phone 100B displays graphic Z in first display area 107A of main display 107, and transmits information Z indicating that graphic Z has been input to first mobile phone 100A.
  • the first mobile phone 100A since the first mobile phone 100A has not yet received the information Z, the first mobile phone 100A does not display the graphic Z.
  • the predetermined time T satisfies t ⁇ T ⁇ 2t.
  • T 2t ⁇ t (T ⁇ 2t).
  • the predetermined time T preferably satisfies the condition of 1.5t ⁇ T ⁇ 1.8t.
  • the second mobile phone 100B When t seconds have elapsed after the first mobile phone 100A transmits the information Y, the second mobile phone 100B receives the information Y. As shown in FIG. 3F, the second mobile phone 100B displays the figure Y in the first display area 107A and the second display area 107B of the main display 107.
  • the first mobile phone 100A receives the information Z. As shown in FIG. 3E, the first mobile phone 100A displays the graphic Z in the first display area 107A and the second display area 107B of the main display 107.
  • network system 1 when a predetermined time T seconds elapses after first mobile phone 100A transmits information Y, as shown in FIG. 3 (E), the first mobile phone 100A displays the figure Y in the second display area 107B of the main display 107.
  • the second mobile phone 100B displays the second display area 107B of the main display 107 as shown in FIG. A figure Z is displayed on the screen.
  • the display content of the first display area 107A of the second mobile phone 100B and the second display area 107B of the first mobile phone 100A are displayed.
  • the displayed content matches.
  • the display content of the first display area 107A of the first mobile phone 100A matches the display content of the second display area 107B of the second mobile phone 100B.
  • the display information 107B or the display device is delayed by the predetermined time T determined based on the transmission required time t by rendering information (operation information) received by the own terminal.
  • the communication terminal displays the drawing information received by the terminal itself as it is on another display area 107A or another display device, so that the drawing information input by the user is displayed. It can be displayed in real time.
  • the configuration for allowing the users of the respective communication terminals to recognize that the display contents of the partner communication terminal and the display contents of the own terminal are different is based on the operation outline as described above. Not exclusively. For example, based on the time when the communication terminal receives the drawing information from the partner communication terminal, the time when the drawing information is received at the own terminal, and the predetermined time T, the display content of the partner communication terminal and the display of the own terminal are displayed. It may be determined whether or not there is a high possibility that the content is different, and a warning corresponding to the determination result may be displayed or voice output may be performed.
  • FIG. 4 is an image diagram showing an overview of mobile phone 100 according to the present embodiment.
  • FIG. 5 is a block diagram showing a hardware configuration of mobile phone 100 according to the present embodiment.
  • the mobile phone 100 includes a communication device 101 that transmits and receives data to and from an external network, a storage unit 103 that stores programs and various databases, and a control.
  • Unit 106 main display 107, sub-display 108, speaker 109 that outputs sound, and operation unit 110 that receives input of various types of information.
  • the main display 107 according to the present embodiment is a touch panel including a liquid crystal panel and a CRT. That is, in the mobile phone 100 according to the present embodiment, the pen tablet 119 is laid on the lower side (back side) of the main display 107. Accordingly, the user can input handwritten graphic information or the like into the control unit 106 via the pen tablet 119 by using the stylus pen 120 or the like.
  • the sub display 108 is composed of a liquid crystal panel and a CRT.
  • the main display 107 and the sub display 108 display (output) images and text based on data (information) output from the control unit 106, and constitute a display unit (output unit) 111.
  • the operation unit 110 receives information from the user by a key input operation or the like.
  • the operation unit 110 includes a numeric keypad, a determination key, and the like, and accepts a destination address selection command, an email text input, and the like.
  • the control unit 106 is realized by a CPU (Central Processing Unit) or the like, and controls each unit of the mobile phone 100. For example, various commands are received from the user via the operation unit 110, and data is transmitted / received to / from an external communication terminal via the communication device 101 or the network.
  • CPU Central Processing Unit
  • the communication device 101 converts communication data from the control unit 106 into a communication signal, and transmits the communication signal via an antenna (not shown).
  • Communication device 101 converts a communication signal received via an antenna into communication data, and inputs the communication data to control unit 106.
  • the storage unit 103 is realized by a RAM (Random Access Memory) that functions as a working memory, a ROM (Read Only Memory) that stores a control program, a hard disk that stores drawing information, and the like.
  • RAM Random Access Memory
  • ROM Read Only Memory
  • FIG. 6 is an overall flowchart showing a processing procedure of control unit 106 in mobile phone 100A according to the present embodiment.
  • control unit 106 uses the communication device 101 to perform matching processing (step S100) with the second mobile phone 100B via the Internet network 500, the carrier network 700, and the matching server 400.
  • the matching process (step S100) will be described later.
  • control unit 106 transmits a P2P connection request message to the second mobile phone 100B via the communication device 101.
  • the control unit 106 receives a connection acceptance message from the second mobile phone 100B via the communication device 101.
  • the control unit 106 uses the time measuring unit 105 to measure the second time U1 from when the P2P connection request message is transmitted until the connection acceptance message is received.
  • the control unit 106 calculates the required transmission time t and the predetermined time T based on the second time U1 (step S200).
  • the required transmission time t calculated here is stored in a delay time 103B1 that is a variable in the storage unit 103 so that it can be used by a delay processing unit 106C (determination unit 106E) described later.
  • control unit 106 initializes the main display 107 and the sub display 108 (step S300).
  • the storage unit 103 is set when it is determined that there is a mismatch between the display state of the own terminal A and the display state of the partner terminal B, which is used in the comparison unit 106J described later.
  • Initialization (reset) of the flag 103B2 which is a variable of
  • control unit 106 executes UI processing (step S400).
  • UI processing step S400
  • the UI process step S400 will be described later.
  • step S500 the control unit 106 executes a disconnection process (step S500).
  • the cutting process (step S500) will be described later.
  • control unit 106 initializes the main display 107 and the sub display 108 to return to the original display state (step S600).
  • FIG. 7 is an image diagram showing a processing procedure of matching processing (step S100) in network system 1 according to the present embodiment.
  • the first mobile phone 100A transmits a message requesting the opening of the waiting room A to the matching server 400 via the Internet network 500 or the carrier network 700 (step S102).
  • the matching server 400 receives the message and opens room A.
  • Matching server 400 registers first mobile phone 100A as a member in association with room A (step S104).
  • the first mobile phone 100A reports that the room A has been opened on the second mobile phone 100B.
  • Second mobile phone 100B receives the room name of the room established from matching server 400 and displays a list of room names to the user of second mobile phone 100B.
  • Second mobile phone 100B accepts a room name selection command from the user (step S106).
  • the second mobile phone 100B requests the matching server 400 to participate in room A (step S108).
  • Matching server 400 registers the second mobile phone 100B as a member in association with the room name (step S110).
  • Matching server 400 compares the number of room names with the number of participating communication terminals, and determines whether the number of participating communication terminals has reached the capacity.
  • the matching server 400 deletes the room A when the number of participating communication terminals reaches the capacity (step S112).
  • the matching server 400 notifies the first mobile phone 100A and the second mobile phone 100B via the Internet network 500 and the carrier network 700 that the member list of the room A and matching are successful (step S114).
  • First mobile phone 100A and second mobile phone 100B refer to the member list and start P2P communication with each other via Internet network 500 and carrier network 700 (step S116).
  • FIG. 8 shows an operation (pen locus) on the tablet 119 of the own terminal A and an operation (pen locus) on the tablet of the partner terminal B transmitted via the communication device in the communication terminal according to the present embodiment.
  • It is a block diagram which shows the function structure of UI processing (main function part) displayed on a main display and a sub display.
  • the UI processing software configuration block includes a tablet input processing unit 106F, a transmission processing unit 106G, a reception processing unit 106H, a delay processing unit 106C, a comparison unit 106J, a main display processing unit 106A, and a sub display processing unit. 106D.
  • the tablet input processing unit 106F, the transmission processing unit 106G, the reception processing unit 106H, the delay processing unit 106C, the comparison unit 106J, the main display processing unit 106A, and the sub display processing unit 106D are functions realized by a CPU (control unit 106) and the like. It is. More specifically, each function of the CPU is a function realized by the CPU executing a control program stored in the storage unit 103 or an external recording medium to control each hardware shown in FIG. It is.
  • the control program for realizing the tablet input processing unit 106F, the transmission processing unit 106G, the reception processing unit 106H, the delay processing unit 106C, the comparison unit 106J, the main display processing unit 106A, and the sub display processing unit 106D is a handwritten chat. It may be embedded in the application. That is, the handwritten chat application realizes the functions of the tablet input processing unit 106F, the transmission processing unit 106G, the reception processing unit 106H, the delay processing unit 106C, the comparison unit 106J, the main display processing unit 106A, and the sub display processing unit 106D. Also good.
  • the control program may be incorporated in, for example, an OS (Operating System) as a control program separate from these application programs, or may be executed in conjunction with or independently of the handwritten chat application.
  • OS Operating System
  • the tablet input processing unit 106F Upon receiving the operation information (touch coordinates indicating an arbitrary point on the tablet 119) for the tablet 119 output from the tablet 119, the tablet input processing unit 106F immediately receives the delay processing unit 106C, the transmission processing unit 106G, The data is output to the main display processing unit 106A.
  • the transmission processing unit 106G transmits the operation information for the tablet 119 output from the tablet input processing unit 106F to the counterpart terminal B through the communication device 101.
  • the delay processing unit 106C delays the output of the operation information for the tablet 119 output from the tablet input processing unit 106F by the time stored in the delay time 103B1, and the sub display processing unit 106D and It outputs to the comparison part 106J.
  • the delay processing unit 106C includes three blocks, a buffer storage unit 106K, a determination unit 106E, and a buffer extraction unit 106L.
  • the buffer storage unit 106K buffers operation information for the tablet 119 output from the tablet input processing unit 106F. (Stored in a buffer area secured in the storage unit 103 not shown) and the determination unit 106E, the current time (operation on the tablet 119 output from the tablet input processing unit 106F to the delay processing unit 106C) When the time obtained by adding the value stored in the delay time 103B1 to the time when the information is input is instructed to notify the buffer extraction unit 106L of that.
  • the determining unit 106E monitors the current time measured by the time measuring unit 105 based on the instruction from the buffer storage unit 106K, and the designated time (time when the operation information is input + time of the delay time 103B1 value) is reached. At that time, this is notified to the buffer take-out unit 106L.
  • the buffer extraction unit 106L Based on the notification from the determination unit 106E, the buffer extraction unit 106L extracts the operation information for the tablet 119 output from the tablet input processing unit 106F, and outputs the operation information to the sub-display processing unit 106D and the comparison unit 106J. .
  • the main display processing unit 106A immediately after receiving the operation information for the tablet of the partner terminal B transmitted from the partner terminal B through the communication device 101, the main display processing unit 106A, the sub display processing unit 106D, It outputs to the comparison part 106J.
  • operation information for the tablet 119 of the own terminal A is input immediately after the user operates, and operation information for the tablet of the partner terminal B is input immediately after being received through the communication device 101. Is done.
  • the operation information for the tablet of the partner terminal B is input immediately after being received through the communication device 101 as in the main display processing unit 106A.
  • the operation information for the A tablet 119 is input after the time stored in the delay time 103B1 from the time when the user operated.
  • the operation information for the tablet of the partner terminal B received through the communication device 101 is displayed on the corresponding display (main display 107 or sub display 108).
  • the input touch coordinates may be far away from the touch coordinates input immediately before (previous)
  • input from the tablet input processing unit 106F (delay processing unit 106C) is possible. Is discriminated between the input operation information and the operation information input from the reception processing unit 106H, and interpolation (line drawing) is performed between the input touch coordinates and the touch coordinates input immediately before (previous). )There is a need to.
  • the comparison unit 106J monitors the operation information for the tablet 119 of the own terminal A or the operation information for the tablet of the partner terminal B received through the communication device 101, which is output from the reception processing unit 106H and the delay processing unit 106C. Then, it is determined whether or not a mismatch occurs between the display state of the own terminal A and the display state of the counterpart terminal B.
  • FIG. 9 is a flowchart showing a UI processing procedure performed by the comparison unit in the mobile phone according to the present embodiment.
  • the control unit 106 functioning as the comparison unit 106J determines whether or not the value of the flag 103B2 has already been set (S401). If the value of the flag 103B2 has already been set, the control unit 106 ends this process. On the other hand, if it is in the reset state, the control unit 106 proceeds to the next step (S402).
  • control unit 106 determines whether the operation information is input first (S402). If it is determined that the operation information is input first (YES in step S402). Since there is no operation information immediately before being compared, the process proceeds to step S407 described later. If the control unit 106 determines that the operation information is not input first (NO in step S402), the control unit 106 proceeds to the next step (S403).
  • control unit 106 checks whether the operation information input immediately before and the input time of the operation information input this time are the same time (the time difference is very small) (S403). When the control unit 106 determines that the input is not performed at the same time (in the case of NO in step S403), the control unit 106 proceeds to step S407 described later. When control unit 106 determines that the input is the same time (YES in step S403), control unit 106 proceeds to the next step (S404).
  • control unit 106 determines whether or not the processing unit that has output the operation information input immediately before matches the processing unit that has output the operation information input this time, that is, the delay processing both immediately before and this time. It is checked whether operation information has been output from the unit 106C or the reception processing unit 106H (S404). If the operation information is output from the same processing unit (YES in step S404), the control unit 106 proceeds to step S407 described later. If operation information is output from a different processing unit (NO in step S404), the control unit 106 proceeds to the next step (S405).
  • control unit 106 determines whether or not the operation information input immediately before and the operation information input this time are the same location (same coordinates, more specifically, touch coordinates located near each other). (S405). If the operation information does not indicate the same location (NO in step S405), the control unit 106 proceeds to step S407 described later. When the operation information indicates the same location (YES in step S405), the control unit 106 sets the value of the flag 103B2, and between the display state of the own terminal A and the display state of the partner terminal B. The user is notified that there is a possibility of inconsistency (step S406).
  • control unit 106 does not perform the notification when determining that the display screen may be inconsistent, for example, by checking the value of the flag 103B2 when storing the display screen.
  • the notification may be performed in the set state.
  • control unit 106 determines in the determination steps S402 to S405 that no inconsistency has occurred, the control unit 106 outputs the operation information input this time, and the operation information input this time is input.
  • the time and the operation information input this time are stored in the storage unit 103 in order to determine whether or not inconsistency occurs when the next operation information is input (S407, S408).
  • the main display processing unit 106A, the sub display processing unit 106D, and the comparison unit 106J described above receive input of operation information from two processing units (for example, the comparison unit 106J has a delay processing unit 106C and a reception processing unit 106H). Since it is received, it is necessary to determine which processing unit is used for input.
  • the input of two pieces of operation information may occur at the same time (correctly, if the comparison unit 106J, the next operation information is input during the processing of S401 to S406 shown in FIG. 9).
  • the operation information is buffered in each processing unit on the output side before being output to each processing unit, and discarded when the processing on the operation information is completed in each processing unit on the input side.
  • FIG. 10 is an image diagram showing a data structure of buffered operation information input to the comparison unit.
  • the operation information ID indicates information indicating the order in which the operation information is processed.
  • the operation content is pen type information indicating the color and thickness of the drawing (pen), and the operation coordinates are information indicating the operation coordinates (touch coordinates).
  • the delay processing unit 106C "Other terminal” means that the output is from the reception processing unit 106H.
  • FIG. 11 is an image diagram showing a processing procedure of disconnection processing in mobile phone 100 according to the present embodiment.
  • control unit 106 determines whether or not the end button of the input unit 110A has been operated (step S502). If the end button is not operated (NO in step S502), control unit 106 determines whether or not a disconnection notification is received from second mobile phone 100B via communication device 101 (step S504). . When control unit 106 receives a disconnection notification (YES in step S504), control unit 106 transmits a message indicating that disconnection has been accepted to second mobile phone 100B (step S506), and ends the disconnection process. . If control unit 106 does not receive a disconnection notification (NO in step S504), control unit 106 repeats the processing from step S502.
  • control unit 106 notifies second mobile phone 100B that P2P communication is to be disconnected via communication device 101 (step S508). ).
  • the control unit 106 determines whether or not a message indicating that the disconnection is accepted is received via the communication device 101 (step S510). When control unit 106 receives the message (YES in step S510), it terminates the disconnection process. If control unit 106 does not receive the message (NO in step S510), control unit 106 repeats the processing from step S510.
  • the present invention can also be applied to a case where it is achieved by supplying a program to a system or apparatus. Then, a storage medium storing a program represented by software for achieving the present invention is supplied to the system or apparatus, and the computer (or CPU or MPU) of the system or apparatus stores the program code stored in the storage medium It is possible to enjoy the effects of the present invention also by reading and executing.
  • the program code itself read from the storage medium realizes the functions of the above-described embodiment, and the storage medium storing the program code constitutes the present invention.
  • a storage medium for supplying the program code for example, hard disk, optical disk, magneto-optical disk, CD-ROM, CD-R, magnetic tape, nonvolatile memory card (IC memory card), ROM (mask ROM, flash) EEPROM, etc.) can be used.
  • the function expansion is performed based on the instruction of the program code. It goes without saying that the CPU or the like provided in the board or the function expansion unit performs part or all of the actual processing and the functions of the above-described embodiments are realized by the processing.
  • 1 network system 100, 100A, 100B, 100C mobile phone, 101 communication device, 103 storage unit, 106 control unit (CPU), 106A main display processing unit, 106C delay processing unit, 106D sub-display processing unit, 106E determination unit, 106F tablet input processing unit, 106G transmission processing unit, 106H reception processing unit, 106J comparison unit, 106K buffer storage unit, 106L buffer extraction unit, 107 main display, 107A first display area, 107B second display area, 108 sub Display, 109 speaker, 110 operation unit, 110A input unit, 119 pen tablet, 120 stylus pen, 200 car navigation device, 300 personal computer, 00 matching server, 500 Internet network, 600 mail server, 700 carrier network.
  • 106 control unit CPU
  • 106A main display processing unit 106C delay processing unit
  • 106D sub-display processing unit 106E determination unit
  • 106F tablet input processing unit 106G transmission processing unit
  • 106H reception processing unit 106J comparison unit
  • 106K buffer storage unit

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Computer Hardware Design (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Information Transfer Between Computers (AREA)
  • Processing Or Creating Images (AREA)
  • Digital Computer Display Output (AREA)
  • Facsimiles In General (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Telephone Function (AREA)

Abstract

 通信端末(100)は、ディスプレイを含む出力部(111)と、第1の操作情報を受け付けるための入力部(110A)と、ネットワークを介して他の通信端末へ第1の操作情報を送信し、ネットワークを介して他の通信端末から第2の操作情報を受信するための通信デバイス(101)と、第1の操作情報を受け付けた時に当該第1の操作情報に基づく第1の情報をディスプレイの第1のエリア(107A)に出力させ、第2の操作情報を受信した時に当該第2の操作情報に基づく第2の情報を第1のエリアに出力させるための第1の出力制御部(106A)と、第1の操作情報を受け付けた時刻の所定の時間後の時刻と、第2の操作情報を受信した時刻との比較を行い、比較結果に基づく第3の情報を出力部に出力させるための比較部(106J)とを含む。

Description

通信端末、制御方法、および制御プログラム
 本発明は、ネットワークを介して他の通信端末と接続可能な通信端末、制御方法、および制御プログラムに関し、特に、受け付けた第1の操作情報と他の通信端末から受信した第2の操作情報とに基づいてユーザに有益な情報を出力することができる通信端末、制御方法、および制御プログラムに関する。
 従来から、各々の端末においてユーザが同時に描画することができる手書き通信アプリケーションが知られている。このような手書き通信アプリケーションにおいては、異なるユーザが同じ時刻に同じ場所に描画した場合に、それぞれの通信端末が表示する描画結果が互いに異なるものとなる。各々の通信端末において、ユーザから入力された描画情報よりも相手から送信されてくる描画情報の方が送信時間分遅れて表示されてしまい、図形などの重なり方が異なってしまうからである。
 手書き通信アプリケーションにおいて、互いの通信端末の描画結果が異なることが問題となるか否かはその利用シーンによって異なる。例えば、手書きでメッセージを単に伝えたいという利用シーンでは、その手書きメッセージが解読可能であれば良く、ユーザが自らの書いた手書き軌跡の上に、それ以前に相手が書いた手書き軌跡が上になって表示されても何ら問題はない。しかしながら、例えば、「寄せ書き」のごとく、ユーザが互いにフォト画像の上にサインやメッセージ等の手書き軌跡を書き合いし、その出来上がった描画結果を互いに共有するという利用シーンでは、互いの通信端末における描画結果が異なっているという認識がないことが問題に成り得る。
 それぞれのユーザが、互いの通信端末における描画結果が異なるものであると認識できれば、同期処理の必要性を認識することができるし、異なる描画結果のうちどちらを優先させて保存するかを相談することもできる。しかしながら、ユーザにこのような認識がなければ、すなわちユーザがそれぞれの通信端末が同じ描画結果を出力していると誤認識している場合は、他のユーザの通信端末にて保存された描画結果を再利用する際に、自らが予想している描画結果が保存された描画結果と異なる可能性がある。あるいは、ユーザがそれぞれの通信端末に描画結果を保存しながら作業を進める場合には、各々のユーザは、描画が完成した後に初めて、自分の通信端末の描画結果と他の通信端末の描画結果とが異なることに気付く可能性がある。
 このような不具合を解消する技術として、たとえば、特開平3-284053号公報(特許文献1)には、描画通信端末機が開示されている。特開平3-284053号公報(特許文献1)によると、描画通信端末機は、描画入力手段による手書き情報の入力が終了すると操作される遅延コマンド入力手段と、この遅延コマンド入力手段の操作に応答して手書き情報の記憶に連続して遅延コマンドと次の手書き情報の入力までの時間を蓄積記憶手段に記憶手段とを含む。描画通信端末は、再生時に手書き情報に後続する遅延コマンドの検出することによって、次の手書き情報を時間だけ遅らせて表示する。
 また、特開平11-347254号公報(特許文献2)には、通信ゲームシステムが開示されている。特開平11-347254号公報(特許文献2)によると、通信ゲームシステムにおいて、複数のゲームユニットの各々が、画面に表示されるキャラクタを操作する第一の操作データを入力する入力手段と、所定の同期時間毎に、第一の操作データを他のゲームユニットに送信し、且つ、他のゲームユニットから送信される第二の操作データを受信する通信制御部と、所定の同期時間毎に、第一の操作データ及び第二の操作データを処理する演算部とを有し、通信制御部が、所定の同期時間に、第二の操作データを受信しない場合、演算部は、第一の操作データ及び該第二の操作データの処理を待機する。
特開平3-284053号公報 特開平11-347254号公報
 しかしながら、従来の通信端末においては、通信端末に入力された操作情報の処理を遅延させるため、ユーザが通信端末に操作情報を入力してから通信端末が操作情報を反映した出力情報を出力するまでに時間がかかってしまう。すなわち、ユーザは、操作情報を入力してから通信端末が当該操作情報を反映した出力情報を出力するまで待たなければならない。このように、従来の通信端末においてはリアルタイム性が失われてしまうため、ユーザは表示が遅延されることに違和感を抱く虞がある。
 本発明は、かかる問題を解決するためになされたものであり、その目的は、リアルタイム性を保持しつつ、通信端末のユーザが当該通信端末における出力状態と相手通信端末における出力状態とが異なる場合にそれらが異なることを認識することができる通信端末、制御方法、および制御プログラムを提供することである。
 この発明のある局面に従うと、ネットワークを介して他の通信端末と接続可能な通信端末が提供される。通信端末は、ディスプレイを含む出力部と、第1の操作情報を受け付けるための入力部と、ネットワークを介して他の通信端末へ第1の操作情報を送信し、ネットワークを介して他の通信端末から第2の操作情報を受信するための通信デバイスと、第1の操作情報を受け付けた時に当該第1の操作情報に基づく第1の情報をディスプレイの第1のエリアに出力させ、第2の操作情報を受信した時に当該第2の操作情報に基づく第2の情報を第1のエリアに出力させるための第1の出力制御部と、第1の操作情報を受け付けた時刻の所定の時間後の時刻と、第2の操作情報を受信した時刻との比較を行い、比較結果に基づく第3の情報を出力部に出力させるための比較部とを含む。
 好ましくは、通信端末は、第1の操作情報を受け付けた時刻の所定の時間後に第1の情報をディスプレイの第2のエリアに出力させ、第2の操作情報を受信した時に当該第2の操作情報に基づく情報を第2のエリアに出力させるための第2の出力制御部をさらに含む。
 この発明の別の局面に従うと、ネットワークを介して他の通信端末と接続可能な、ディスプレイを含む出力部と入力部と通信デバイスと制御部とを含む通信端末における制御方法が提供される。制御方法は、制御部が、入力部を介して第1の操作情報を受け付けるステップと、制御部が、第1の操作情報に基づく第1の情報をディスプレイの第1のエリアに出力させるステップと、制御部が、通信デバイスを介して他の通信端末へ第1の操作情報を送信するステップと、制御部が、通信デバイスを介して他の通信端末から第2の操作情報を受信するステップと、制御部が、第2の操作情報に基づく第2の情報を第1のエリアに出力させるステップと、制御部が、第1の操作情報を受け付けた時刻の所定の時間後の時刻と、第2の操作情報を受信した時刻との比較を行うステップと、制御部が、比較の結果に基づく第3の情報を出力部に出力させるステップとを含む。
 この発明の別の局面に従うと、ネットワークを介して他の通信端末と接続可能な、ディスプレイを含む出力部と入力部と通信デバイスと制御部とを含む通信端末を制御するための制御プログラムが提供される。制御プログラムは、制御部に、入力部を介して第1の操作情報を受け付けるステップと、第1の操作情報に基づく第1の情報をディスプレイの第1のエリアに出力させるステップと、通信デバイスを介して他の通信端末へ第1の操作情報を送信するステップと、通信デバイスを介して他の通信端末から第2の操作情報を受信するステップと、第2の操作情報に基づく第2の情報を第1のエリアに出力させるステップと、第1の操作情報を受け付けた時刻の所定の時間後の時刻と、第2の操作情報を受信した時刻との比較を行うステップと、比較の結果に基づく第3の情報を出力部に出力させるステップとを実行させる。
 以上のように、本発明によって、リアルタイム性を保持しつつ、通信端末のユーザが当該通信端末における出力状態と相手通信端末における出力状態とが異なる場合にそれらが異なることを認識することができる通信端末、制御方法、および制御プログラムが提供される。
本実施の形態に係るネットワークシステムの一例を示す概略図である。 ネットワークシステムにおける動作概要を示すシーケンス図である。 本実施の形態に係る動作概要に沿った通信端末の表示状態の推移を示したイメージ図である。 本施の形態に係る携帯電話の概観を示すイメージ図である。 本施の形態に係る携帯電話のハードウェア構成を示すブロック図である。 本実施の形態に係る携帯電話における通信処理の処理手順を示すフローチャートである。 本実施の形態に係るネットワークシステムにおけるマッチング処理の処理手順を示すイメージ図である。 本実施の形態に係る通信端末の主機能部分の機能構成を示すブロック図である。 本実施の形態に係る携帯電話における比較部によるUI処理の処理手順を示すフローチャートである。 比較部に入力されるバッファリングされた操作情報のデータ構造を示すイメージ図である。 本実施の形態に係る携帯電話における切断処理の処理手順を示すフローチャートである。
 以下、図面を参照しつつ、本発明の実施の形態について説明する。以下の説明では、同一の部品には同一の符号を付してある。それらの名称および機能も同じである。したがって、それらについての詳細な説明は繰り返さない。
 また、以下では、携帯電話100を「通信端末」の代表例として説明を行う。ただし、通信端末は、パーソナルコンピュータや、カーナビゲーション装置(Satellite navigation system)や、PND(Personal Navigation Device)や、PDA(Personal Digital Assistance)などのような、他の情報通信機器であってもよい。
 <ネットワークシステム1の全体構成>
 まず、ネットワークシステム1の実施の形態1について説明する。図1は、本実施の形態に係るネットワークシステム1の一例を示す概略図である。図1に示すように、ネットワークシステム1は、携帯電話100A,100B,100Cと、マッチングサーバ(第1のサーバ装置)400と、メールサーバ(第2のサーバ装置)600と、インターネット網(第1のネットワーク)500と、キャリア網(第2のネットワーク)700とを含む。また、本実施の形態に係るネットワークシステム1は、車両250に搭載されるカーナビゲーション装置200と、パーソナルコンピュータ(PC;Personal Computer)300とを含む。
 なお、説明の容易化のために、以下では、本実施の形態に係るネットワークシステム1が、第1の携帯電話100Aと、第2の携帯電話100Bと、第3の携帯電話100Cとを含む場合について説明する。また、携帯電話100A,100B,100Cの各々に共通の構成や機能を説明する際には、それらを携帯電話100とも総称する。そして、携帯電話100A,100B,100C、カーナビゲーション装置200、パーソナルコンピュータ300の各々に共通の構成や機能を説明する際には、それらを通信端末とも総称する。
 携帯電話100は、キャリア網700に接続可能に構成されている。カーナビゲーション装置200は、インターネット網500に接続可能に構成されている。パーソナルコンピュータ300は、LAN(Local Area Network)350やWAN(Wide Area Network)を介してインターネット網500に接続可能に構成されている。マッチングサーバ400は、インターネット網500に接続可能に構成されている。メールサーバ600は、インターネット網500およびキャリア網700に接続可能に構成されている。
 より詳細には、第1の携帯電話100Aと、第2の携帯電話100Bと、第3の携帯電話100Cと、カーナビゲーション装置200と、パーソナルコンピュータ300とは、キャリア網700やメールサーバ600やインターネット網500を介して互いに接続可能であって、互いにデータの送受信が可能である。また、携帯電話100とカーナビゲーション装置200とパーソナルコンピュータ300には、自端末を特定するための識別情報(たとえば、メールアドレスやIP(Internet Protocol)アドレスなど)が割り当てられる。すなわち、携帯電話100とカーナビゲーション装置200とパーソナルコンピュータ300は、内部の記録媒体に他の通信端末の識別情報を記憶することができ、当該識別情報に基づいてキャリア網700やインターネット網500などを介して当該他の通信端末とデータ送受信を行うことができる。
 なお、本実施の形態に係る携帯電話100とカーナビゲーション装置200とパーソナルコンピュータ300とは、割り当てられるIPアドレスを利用して、メールサーバ600を介さずに他の通信端末とデータ送受信を行うものである。ここでは、各通信端末がマッチングサーバ400にアクセスする際には、すなわち各通信端末がインターネットにアクセスした際に、マッチングサーバ400あるいは他の図示しないサーバ装置などによってIPアドレスが割り当てられるものとする。IPアドレスの割り当て処理の詳細は公知であるので、ここでは説明を繰り返さない。
 また、本実施の形態に係る携帯電話100、カーナビゲーション装置200、パーソナルコンピュータ300は、自身に割り当てられたIPアドレスを利用することにより、直接的に相互にネットワークを介してデータ送受信を行うことが可能である。すなわち、本実施の形態に係るネットワークシステム1に含まれる携帯電話100、カーナビゲーション装置200、パーソナルコンピュータ300は、いわゆるP2P(Pear to Pear)型のネットワークを構成することが可能である。
 <ネットワークシステム1の動作概要>
 次に、本実施の形態に係るネットワークシステム1の動作概要について説明する。図2は、ネットワークシステム1における動作概要を示すシーケンス図である。図1および図2に示すように、本実施の形態に係る各通信端末は、P2P型のデータ送受信を行うために、はじめに互いのIPアドレスを交換(取得)する必要がある。そして、各通信端末は、IPアドレスを取得したのちに、P2P型のデータ送受信によってメッセージや添付ファイルなどを他の通信端末に送信する。
 ただし、以下では、通信端末のそれぞれが、マッチングサーバ400に生成されたチャットルームを介してメッセージを送受信し、その後互いのIPアドレスに基づいてP2P通信を行う場合について説明する。
 まず、第1の携帯電話100A(図2において端末A)が、マッチングサーバ400にIP登録(ログイン)を要求する(ステップS002)。第1の携帯電話100Aは、同時にIPアドレスを取得してもよいし、予め他のサーバ装置などからIPアドレスを取得してもよい。より詳細には、第1の携帯電話100Aは、キャリア網700、メールサーバ600、インターネット網500を介して、マッチングサーバ400に第1の携帯電話100AのメールアドレスとIPアドレスと第2の携帯電話100Bのメールアドレスと新たなチャットルームの生成を要求するメッセージとを送信する。
 マッチングサーバ400は、その要求に応じて、第1の携帯電話100AのメールアドレスをそのIPアドレスに対応付けて格納する。そして、マッチングサーバ400は、第1の携帯電話100Aのメールアドレスと第2の携帯電話100Bのメールアドレスとに基づいてルーム名を生成し、あるいは、メッセージに含まれるルーム名を抽出して、当該ルーム名のチャットルームを生成する。このとき、マッチングサーバ400は、チャットルームの生成が完了した旨を第1の携帯電話100Aに通知してもよい。マッチングサーバ400は、ルーム名と参加中の通信端末のIPアドレスとを対応付けて格納する。
 第1の携帯電話100Aのユーザは、第2の携帯電話100Bのユーザに、新たなチャットルームを生成したことを知らせる、すなわち第2の携帯電話100Bのユーザをチャットルームに招待する。たとえば、第1の携帯電話100Aは、キャリア網700、メールサーバ600、インターネット網500を介して、P2P参加要請メールを第2の携帯電話100Bに送信する。
 第2の携帯電話100Bは、P2P参加要請メールを受信すると、第1の携帯電話100Aのメールアドレスと第2の携帯電話100Bのメールアドレスとに基づいてルーム名を生成し、あるいは参加要請メールからルーム名を取得し、マッチングサーバ400に第2の携帯電話100BのメールアドレスとIPアドレスとそのルーム名を有するチャットルームへ参加する旨のメッセージとを送信する(ステップS008)。第2の携帯電話100Bは、同時にIPアドレスを取得してもよいし、先にIPアドレスを取得してからマッチングサーバ400にアクセスしてもよい。このとき、マッチングサーバ400はチャットルームを削除してもよい。
 マッチングサーバ400は、そのメッセージを受け付けて、第2の携帯電話100AのメールアドレスをIPアドレスに対応付けて格納する。そして、マッチングサーバ400は、第1の携帯電話100Aに、第2の携帯電話100Bがチャットルームに参加した旨と第2の携帯電話100BのIPアドレスとを送信する(ステップS010)。同時に、マッチングサーバ400は、第2の携帯電話100Bに、チャットルームへの参加を受け付けた旨と第1の携帯電話100AのIPアドレスとを送信する。
 第1の携帯電話100Aは、第2の携帯電話100BのIPアドレスに基づいて第2の携帯電話100BにP2P接続要求メッセージ(開始メッセージ)を送信する(ステップS012)。第2の携帯電話100Bは、接続要求メッセージを受信して、第1の携帯電話100AのIPアドレスに基づいて第1の携帯電話100Aに第1の接続承諾メッセージ(返答メッセージ)を送信する(ステップS014)。第1の携帯電話100Aは、第2の携帯電話100Bから第2の接続承諾メッセージを受信して、第2の携帯電話100Bに接続承諾メッセージを送信する(ステップS016)。
 このとき、第1の携帯電話100Aは、接続要求メッセージを送信してから第1の接続承諾メッセージを受信するまでの時間U1を計測することによって、第2の携帯電話100Bから第1の携帯電話100Aまでのメッセージの送信所要時間tを取得する。同様に、第2の携帯電話100Bは、第1の接続承諾メッセージを送信してから第2の接続承諾メッセージを受信するまでの時間U2を計測することによって、第1の携帯電話100Aから第2の携帯電話100Bまでのメッセージの送信所要時間tを取得する。
 このようにして、第1の携帯電話100Aと第2の携帯電話100Bとは、互いに相手を認証する。認証が完了すると、第1の携帯電話100Aと第2の携帯電話100Bとは、P2P通信を開始する(ステップS018)。
 そして、第1の携帯電話100Aが、第2の携帯電話100BにP2P通信を切断する旨のメッセージを送信すると(ステップS030)、第2の携帯電話100Bは、第1の携帯電話100Aに切断する要求を受け付けた旨のメッセージを送信する(ステップS032)。
 <P2P通信の動作概要>
 以下、本実施の形態に係るネットワークシステム1におけるP2P通信の概要について説明する。図3は、本実施の形態に係る動作概要に沿った通信端末の表示状態の推移を示したイメージ図である。以下では、第1の携帯電話100Aから第2の携帯電話100Bまで図形情報を送信するのに要する送信所要時間をt=(U1/2)秒とする。
 まず、図3(A)に示すように、第1の携帯電話100Aのユーザが第1の携帯電話100Aに図形Xを入力する。すると、第1の携帯電話100Aは、メインディスプレイ107の第1の表示領域107Aに図形Xを表示させるとともに、図形Xが入力された旨の情報Xを第2の携帯電話100Bに送信する。このとき、第2の携帯電話100Bは未だ情報Xを受信していないため、図3(B)に示すように第2の携帯電話100Bは図形Xを表示していない。
 そのt秒後、すなわち第1の携帯電話100Aが情報Xを送信してからt秒経過すると、第2の携帯電話100Bは、情報Xを受信する。図3(D)に示すように、第2の携帯電話100Bは、メインディスプレイ107の第1の表示領域107Aおよび第2の表示領域107Bに図形Xを表示する。
 このとき、すなわち、第1の携帯電話100Aが情報Xを送信してからt秒経ったとき、図3(C)に示すように、第1の携帯電話100Aのユーザが第1の携帯電話100Aに図形Yを入力する。すると、第1の携帯電話100Aは、メインディスプレイ107の第1の表示領域107Aに図形Yを表示させるとともに、図形Yが入力された旨の情報Yを第2の携帯電話100Bに送信する。このとき、第2の携帯電話100Bは未だ情報Yを受信していないため、第2の携帯電話100Bは図形Yを表示していない。
 その直後、すなわち第1の携帯電話100Aが情報Xを送信してからt+Δt秒経ったとき、図3(D)に示すように、第2の携帯電話100Bのユーザが図形Zを入力する。第2の携帯電話100Bは、メインディスプレイ107の第1の表示領域107Aに図形Zを表示するとともに、図形Zが入力された旨の情報Zを第1の携帯電話100Aに送信する。このとき、第1の携帯電話100Aは未だ情報Zを受信していないため、第1の携帯電話100Aは図形Zを表示していない。
 そして、本実施の形態に係るネットワークシステム1においては、第1の携帯電話100Aが情報Xを送信してから所定時間T秒経過すると、図3(C)に示すように、第1の携帯電話100Aはメインディスプレイ107の第2の表示領域に図形Xを表示する。ここで、所定時間Tは、t<T<2tを満たす。送信所要時間tが一定である場合には、T=2t-Δt(T≒2t)であることが好ましい。ただし、送信所要時間tはネットワーク状況や送信データ量などによって異なるため、たとえば、所定時間Tは1.5t<T<1.8tなどの条件を満たすことが好ましい。
 第1の携帯電話100Aが情報Yを送信してからt秒経ったとき、第2の携帯電話100Bは、情報Yを受信する。図3(F)に示すように、第2の携帯電話100Bは、メインディスプレイ107の第1の表示領域107Aおよび第2の表示領域107Bに図形Yを表示する。
 その直後、すなわち第2の携帯電話100Bが情報Zを送信してからt秒経ったとき、第1の携帯電話100Aは、情報Zを受信する。図3(E)に示すように、第1の携帯電話100Aは、メインディスプレイ107の第1の表示領域107Aおよび第2の表示領域107Bに図形Zを表示する。
 そして、本実施の形態に係るネットワークシステム1においては、第1の携帯電話100Aが情報Yを送信してから所定時間T秒経過すると、図3(E)に示すように、第1の携帯電話100Aはメインディスプレイ107の第2の表示領域107Bに図形Yを表示する。また、第2の携帯電話100Bが情報Zを送信してから所定時間T秒経過すると、図3(F)に示すように、第2の携帯電話100Bはメインディスプレイ107の第2の表示領域107Bに図形Zを表示する。
 これによって、図3(E)および図3(F)に示すように、第2の携帯電話100Bの第1の表示領域107Aの表示内容と、第1の携帯電話100Aの第2の表示領域107Bの表示内容とが一致している。また、第1の携帯電話100Aの第1の表示領域107Aの表示内容と、第2の携帯電話100Bの第2の表示領域107Bの表示内容とが一致している。
 つまり、本実施の形態に係るネットワークシステム1においては、自端末にて受け付けられた描画情報(操作情報)を送信所要時間tに基づいて決定された所定時間Tだけ遅らせて表示領域107Bあるいは表示装置に表示させることによって、それぞれの通信端末のユーザが相手通信端末の表示内容と自端末の表示内容とが異なることを認識することができる。そして、本実施の形態に係るネットワークシステム1においては、通信端末が自端末に受け付けられた描画情報を別の表示領域107Aあるいは別の表示装置にそのまま表示することによって、ユーザが入力した描画情報をリアルタイムで表示することができる。
 後述するように、それぞれの通信端末のユーザに、相手通信端末の表示内容と自端末の表示内容とが異なる場合に、両者が異なることを認識させるための構成は、上記のような動作概要に限らない。たとえば、通信端末が、相手通信端末から描画情報を受信した時刻と、自端末にて描画情報が受け付けられた時刻と、所定時間Tとに基づいて、相手通信端末の表示内容と自端末の表示内容とが異なる可能性が高いか否かを判断して、判断結果に対応する警告を表示したり、音声出力したりしてもよい。
 以下、このような機能を実現するための構成について詳述する。
 <携帯電話100のハードウェア構成>
 本実施の形態に係る携帯電話100のハードウェア構成について説明する。図4は、本施の形態に係る携帯電話100の概観を示すイメージ図である。図5は、本施の形態に係る携帯電話100のハードウェア構成を示すブロック図である。
 図4および図5に示すように、本実施の形態に係る携帯電話100は、外部のネットワークとの間でデータを送受信する通信デバイス101と、プログラムや各種データベースを記憶する記憶部103と、制御部106と、メインディスプレイ107と、サブディスプレイ108と、音声を出力するスピーカ109と、各種情報の入力を受け付ける操作部110とを含む。
 本実施の形態に係るメインディスプレイ107は、液晶パネルやCRTから構成されるタッチパネルである。すなわち、本実施の形態に係る携帯電話100は、メインディスプレイ107の下側(裏側)にペンタブレット119が敷設されている。これによって、ユーザはスタイラスペン120などを用いることによって、ペンタブレット119を介して、図形情報などを制御部106に手書き入力することができる。
 また、サブディスプレイ108は、液晶パネルやCRTから構成される。メインディスプレイ107およびサブディスプレイ108は、制御部106が出力したデータ(情報)に基づいて、画像やテキストを表示(出力)するものであって、表示部(出力部)111を構成する。
 操作部110は、キー入力操作などによってユーザから情報を受け付ける。たとえば、操作部110は、テンキーや決定キーなどを含み、相手先アドレスの選択命令やメール本文の入力などを受け付ける。
 制御部106は、CPU(Central Processing Unit)などによって実現され、携帯電話100の各部を制御する。たとえば、操作部110を介してユーザから各種の命令を受け付けて、通信デバイス101やネットワークを介して外部の通信端末とデータの送受信を行う。
 通信デバイス101は、制御部106からの通信データを通信信号に変換し、その通信信号を図示しないアンテナを介して発信する。通信デバイス101は、アンテナを介して受信した通信信号を通信データに変換し、その通信データを制御部106に入力する。
 記憶部103は、作業用メモリとして機能するRAM(Random Access Memory)や、制御プログラムなどを格納するROM(Read Only Memory)や、描画情報などを記憶するハードディスクなどによって実現される。
 <携帯電話の制御部106の処理概要>
 図6は、本実施の形態に係る携帯電話100Aにおける制御部106の処理手順を示す全体のフローチャートである。
 まず、制御部106は、通信デバイス101を用いて、インターネット網500やキャリア網700やマッチングサーバ400を介して、第2の携帯電話100Bとマッチング処理(ステップS100)を行う。マッチング処理(ステップS100)については後述する。
 次に、制御部106は、通信デバイス101を介して、第2の携帯電話100BにP2P接続要求メッセージを送信する。制御部106は、通信デバイス101を介して、第2の携帯電話100Bから接続承諾メッセージを受信する。制御部106は、計時部105を用いて、P2P接続要求メッセージを送信してから接続承諾メッセージを受信するまでの第2の時間U1を計測する。制御部106は、第2の時間U1に基づいて、送信所要時間tおよび所定時間Tを算出する(ステップS200)。
 なお、ここで算出した送信所要時間tは、後述する遅延処理部106C(決定部106E)で利用可能とするため、記憶部103内の変数である遅延時間103B1に記憶される。
 次に、制御部106は、メインディスプレイ107およびサブディスプレイ108を初期化する(ステップS300)。
 なお、ここで、後述する比較部106Jで利用する、自端末Aの表示状態と相手端末Bの表示状態との間で、不整合が生じていると判断された時にセットされる、記憶部103の変数であるフラグ103B2の初期化(リセット)を行なう。
 次に、制御部106は、UI処理(ステップS400)を実行する。UI処理(ステップS400)については後述する。
 次に、UI処理(ステップS400)が終了すると、制御部106は、切断処理(ステップS500)を実行する。切断処理(ステップS500)については後述する。
 最後に、切断処理(ステップS500)が終了すると、制御部106は、メインディスプレイ107とサブディスプレイ108とを初期化して、元の表示状態に戻す(ステップS600)。
 <ネットワークシステム1におけるマッチング処理>
 次に、本実施の形態に係るネットワークシステム1におけるマッチング処理(ステップS100)について説明する。図7は、本実施の形態に係るネットワークシステム1におけるマッチング処理(ステップS100)の処理手順を示すイメージ図である。
 図7に示すように、まず、第1の携帯電話100Aは、インターネット網500やキャリア網700を介して、マッチングサーバ400に待ち合わせルームAの開設を要求するメッセージを送信する(ステップS102)。マッチングサーバ400は、メッセージを受信して、ルームAを開設する。マッチングサーバ400は、ルームAに対応付けて第1の携帯電話100Aをメンバー登録する(ステップS104)。
 第1の携帯電話100Aは、第2の携帯電話100BにルームAを開設した旨を報告する。第2の携帯電話100Bは、マッチングサーバ400から開設されているルームのルーム名を受信して、第2の携帯電話100Bのユーザにルーム名の一覧を表示する。第2の携帯電話100Bは、ユーザからルーム名の選択命令を受け付ける(ステップS106)。
 第2の携帯電話100Bは、マッチングサーバ400にルームAへの参加要求を行う(ステップS108)。マッチングサーバ400は、ルーム名に対応付けて第2の携帯電話100Bをメンバー登録する(ステップS110)。マッチングサーバ400は、ルーム名の定員と、参加している通信端末の数とを比較して、参加通信端末の数が定員に達したか否かを判断する。マッチングサーバ400は、参加通信端末の数が定員に達した場合、ルームAを削除する(ステップS112)。
 マッチングサーバ400は、インターネット網500やキャリア網700を介して、第1の携帯電話100Aと第2の携帯電話100BとにルームAのメンバーリストとマッチングが成功した旨とを通知する(ステップS114)。第1の携帯電話100Aと第2の携帯電話100Bは、メンバーリストを参照して、インターネット網500とキャリア網700とを介して、互いにP2P通信を開始する(ステップS116)。
 <UI処理の制御内容>
 図8は、本実施の形態に係る通信端末における、自端末Aのタブレット119に対する操作(ペン軌跡)、ならびに、通信デバイスを介して送信される相手端末Bのタブレットに対する操作(ペン軌跡)を、メインディスプレイ、ならびに、サブディスプレイに表示するUI処理(主機能部分)の機能構成を示すブロック図である。図8に示すように、UI処理のソフト構成ブロックは、タブレット入力処理部106F、送信処理部106G、受信処理部106H、遅延処理部106C、比較部106J、メインディスプレイ処理部106A、サブディスプレイ処理部106Dより構成される。
 タブレット入力処理部106F、送信処理部106G、受信処理部106H、遅延処理部106C、比較部106J、メインディスプレイ処理部106A、サブディスプレイ処理部106Dは、CPU(制御部106)などによって実現される機能である。より詳細には、CPUが有する各機能は、CPUが記憶部103や外部の記録媒体に記憶される制御プログラムを実行して、図2に示される各ハードウェアを制御することによって実現される機能である。
 たとえば、タブレット入力処理部106F、送信処理部106G、受信処理部106H、遅延処理部106C、比較部106J、メインディスプレイ処理部106A、サブディスプレイ処理部106Dを実現するための制御プログラムは、手書きチャットのアプリケーションに組み込まれていてもよい。すなわち、手書きチャットのアプリケーションが、タブレット入力処理部106F、送信処理部106G、受信処理部106H、遅延処理部106C、比較部106J、メインディスプレイ処理部106A、サブディスプレイ処理部106Dの機能を実現してもよい。あるいは、制御プログラムが、これらのアプリケーションプログラムとは別個の制御プログラムとして、たとえばOS(Operating System)に組み込まれていてもよく、手書きチャットのアプリケーションと連動してあるいは独立して実行されてもよい。
 タブレット入力処理部106Fは、タブレット119から出力されたタブレット119に対する操作情報(タブレット119上の任意の1点を示すタッチ座標)の入力を受けると即座に、遅延処理部106C、送信処理部106G、メインディスプレイ処理部106Aに出力する。
 次に、送信処理部106Gは、タブレット入力処理部106Fより出力されたタブレット119に対する操作情報を、通信デバイス101を通じて、相手端末Bに送信する。
 次に、遅延処理部106Cは、タブレット入力処理部106Fより出力されたタブレット119に対する操作情報の出力を、遅延時間103B1に記憶されている時間分を遅延させて、サブディスプレイ処理部106D、ならびに、比較部106Jに出力する。
 なお、この遅延処理方法としてはさまざまな方法が考えられるが、本実施の形態においては、計時部105が現在時刻を計時(出力)する例について説明する。
 遅延処理部106Cは、バッファ格納部106K、決定部106E、バッファ取出部106Lの3つのブロックから構成され、バッファ格納部106Kでは、タブレット入力処理部106Fより出力されたタブレット119に対する操作情報をバッファリング(図示していない記憶部103内に確保されたバッファエリアに格納)するとともに、決定部106Eに対して、現在時刻(本遅延処理部106Cにタブレット入力処理部106Fより出力されたタブレット119に対する操作情報が入力された時刻)に遅延時間103B1に記憶されている値を加算した時刻になった時、その旨をバッファ取出部106Lに通知するように指示する。
 決定部106Eでは、バッファ格納部106Kの指示に基づき、計時部105で計時される現在時刻をモニターし、指示された時刻(操作情報が入力された時刻+遅延時間103B1値の時刻)になった時、その旨をバッファ取出部106Lに通知する。
 バッファ取出部106Lでは、決定部106Eよりの通知に基づき、バッファリングされたタブレット入力処理部106Fより出力されたタブレット119に対する操作情報を取り出し、サブディスプレイ処理部106D、ならびに、比較部106Jに出力する。
 次に、受信処理部106Hでは、通信デバイス101を通じて、相手端末Bより送信された、相手端末Bのタブレットに対する操作情報を受信すると即座に、メインディスプレイ処理部106A、ならびに、サブディスプレイ処理部106D、比較部106Jに出力する。
 すなわち、メインディスプレイ処理部106Aでは、自端末Aのタブレット119に対する操作情報は、利用者が操作した後即座に入力され、相手端末Bのタブレットに対する操作情報は、通信デバイス101を通じて受信後即座に入力される。
 一方で、サブディスプレイ処理部106D、および、比較部106Jでは、相手端末Bのタブレットに対する操作情報については、メインディスプレイ処理部106Aと同様、通信デバイス101を通じて受信後即座に入力されるが、自端末Aのタブレット119に対する操作情報は、利用者が操作した時点から遅延時間103B1に記憶されている時間後に入力される。
 次に、メインディスプレイ処理部106A、ならびに、サブディスプレイ処理部106Dでは、受信処理部106H、タブレット入力処理部106F、遅延処理部106Cより出力された、自端末Aのタブレット119に対する操作情報、もしくは、通信デバイス101を通じて受信した相手端末Bのタブレットに対する操作情報(操作情報は、入力座標系でタッチ座標が入力されるものとする)を、それぞれの対応するディスプレイ(メインディスプレイ107、もしくは、サブディスプレイ108)の表示座標系に変換し、その操作情報(タッチ座標)をプロット(点を描画)処理する。
 なお、正確には、入力されたタッチ座標が直前に(一つ前の)入力されたタッチ座標に対して大きく離れている場合があるため、タブレット入力処理部106F(遅延処理部106C)から入力された操作情報か、それとも、受信処理部106Hから入力された操作情報かを区別して、入力されたタッチ座標と直前に(一つ前の)入力されたタッチ座標との間を補間(ライン描画)する必要がある。
 次に、比較部106Jは、受信処理部106H、遅延処理部106Cから出力された、自端末Aのタブレット119に対する操作情報、もしくは、通信デバイス101を通じて受信した相手端末Bのタブレットに対する操作情報をモニターし、自端末Aの表示状態と相手端末Bの表示状態との間で、不整合が生じているかどうかを判断する。
 図9は、本実施の形態に係る携帯電話における比較部によるUI処理の処理手順を示すフローチャートである。まず、比較部106Jとして機能する制御部106は、フラグ103B2の値が既にセットされているかどうかを判断する(S401)。ここで、フラグ103B2の値が既にセットされている場合には、制御部106はこの処理を終了する。一方、リセット状態であれば、制御部106は次のステップ(S402)に進む。
 次に、制御部106は、最初に入力された操作情報かどうかを判断し(S402)、もし、最初に入力された操作情報であると判断した場合には(ステップS402においてYESである場合)、比較対象とする直前の操作情報がないことから、後述するステップS407に移行する。制御部106は、最初に入力された操作情報でないと判断した場合には(ステップS402においてNOである場合)、次のステップ(S403)に進む。
 次に、制御部106は、直前に入力された操作情報と今回入力された操作情報の入力した時刻が同時刻(時間差がほんのわずかである)か否かをチェックする(S403)。制御部106は、同時刻での入力でないと判断した時(ステップS403においてNOである場合)、後述するステップS407に移行する。制御部106は、同時刻での入力であると判断した時(ステップS403においてYESである場合)、次のステップ(S404)に進む。
 次に、制御部106は、直前に入力された操作情報を出力した処理部と今回入力された操作情報を出力した処理部とが一致するかどうかの判断、すなわち、直前および今回とも、遅延処理部106C、もしくは、受信処理部106Hから操作情報が出力されたか否かをチェックする(S404)。同一の処理部から操作情報が出力された場合には(ステップS404においてYESである場合)、制御部106は、後述するステップS407に移行する。異なる処理部から操作情報が出力された場合には(ステップS404においてNOである場合)、制御部106は、次のステップ(S405)に進む。
 次に、制御部106は、直前に入力された操作情報と今回入力された操作情報とが同一箇所(同じ座標、より詳細には、互いに近傍に位置するタッチ座標)であるか否かを判断する(S405)。操作情報が同じ箇所を示さない場合には(ステップS405においてNOである場合)、制御部106は、後述するステップS407に移行する。操作情報が同じ箇所を示す場合には(ステップS405においてYESである場合)、制御部106は、フラグ103B2の値をセットするとともに、自端末Aの表示状態と相手端末Bの表示状態との間で不整合が生じている可能性がある旨をユーザに通知する(ステップS406)。
 なお、制御部106は、表示画面の不整合が生じている可能性があると判断した時に当該通知を行うのではなく、例えば、表示画面を記憶する際にフラグ103B2の値をチェックすることによって、セット状態である場合に当該通知を行ってもよい。
 最後に、制御部106は、上記判断ステップS402~S405で、不整合が生じていないと判断した場合は、今回入力された操作情報を出力した処理部、今回入力された操作情報が入力された時刻、今回入力された操作情報を、次の操作情報が入力された時に不整合が生じていないかどうかを判断するために、記憶部103に記憶する(S407、S408)。
 上述したメインディスプレイ処理部106A、サブディスプレイ処理部106D、ならびに、比較部106Jは、2つの処理部(たとえば、比較部106Jは、遅延処理部106Cと受信処理部106H)からの操作情報の入力を受け付けることから、いずれの処理部からの入力かの判断が必要となる。
 また、2つの操作情報の入力が同じ時刻に発生(正しくは、比較部106Jであれば、図9で示すS401~S406の処理中に次の操作情報の入力が発生)する場合がある。
 このことから、操作情報は各処理部に出力される前に、出力側の各処理部でバッファリングされ、入力側の各処理部でその操作情報に対する処理が完了したら破棄される。
 図10には、比較部に入力されるバッファリングされた操作情報のデータ構造を示すイメージ図である。
 ここで、操作情報IDは、操作情報の処理する順番を示す情報を示し、上述したステップS407、S408の処理後、その操作情報は削除され、他の操作情報の操作情報IDはデクリメントされる。
 また、操作内容は、描画(ペン)の色や太さ等を示すペン種情報で、操作座標は、操作座標(タッチ座標)を示す情報である。
 さらに、受付端末は、自端末のタブレット119に対する操作であるか、相手端末のタブレットに対する操作であるかを示す情報、すなわち、比較部106Jでは、「自端末」であれば、遅延処理部106Cからの出力を意味し、「他端末」であれば、受信処理部106Hからの出力であることを意味する。
 <第1の携帯電話100Aにおける切断処理>
 次に、本実施の形態に係る第1の携帯電話100Aにおける切断処理について説明する。図11は、本実施の形態に係る携帯電話100における切断処理の処理手順を示すイメージ図である。
 図11に示すように、制御部106は、入力部110Aの終了ボタンが操作されたか否かを判断する(ステップS502)。制御部106は、終了ボタンが操作されない場合(ステップS502にてNOである場合)、通信デバイス101を介して第2の携帯電話100Bから切断通知を受信したか否かを判断する(ステップS504)。制御部106は、切断通知を受信した場合(ステップS504にてYESである場合)、切断を了解した旨のメッセージを第2の携帯電話100Bに送信して(ステップS506)、切断処理を終了する。制御部106は、切断通知を受信しない場合(ステップS504にてNOである場合)、ステップS502からの処理を繰り返す。
 一方、制御部106は、終了ボタンが操作された場合(ステップS502にてNOである場合)、通信デバイス101を介して第2の携帯電話100BにP2P通信を切断する旨を通知する(ステップS508)。制御部106は、通信デバイス101を介して切断を了解した旨のメッセージを受信したか否かを判断する(ステップS510)。制御部106は、メッセージを受信すると(ステップS510にてYESである場合)、切断処理を終了する。制御部106は、メッセージを受信しないと(ステップS510にてNOである場合)、ステップS510からの処理を繰り返す。
 <その他の実施の形態>
 本発明は、システム或いは装置にプログラムを供給することによって達成される場合にも適用できることはいうまでもない。そして、本発明を達成するためのソフトウェアによって表されるプログラムを格納した記憶媒体を、システム或いは装置に供給し、そのシステム或いは装置のコンピュータ(又はCPUやMPU)が記憶媒体に格納されたプログラムコードを読出し実行することによっても、本発明の効果を享受することが可能となる。
 この場合、記憶媒体から読出されたプログラムコード自体が前述した実施の形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。
 プログラムコードを供給するための記憶媒体としては、例えば、ハードディスク、光ディスク、光磁気ディスク、CD-ROM、CD-R、磁気テープ、不揮発性のメモリカード(ICメモリカード)、ROM(マスクROM、フラッシュEEPROMなど)などを用いることができる。
 また、コンピュータが読出したプログラムコードを実行することにより、前述した実施の形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼動しているOS(オペレーティングシステム)などが実際の処理の一部または全部を行い、その処理によって前述した実施の形態の機能が実現される場合も含まれることは言うまでもない。
 さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるCPUなどが実際の処理の一部または全部を行い、その処理によって前述した実施の形態の機能が実現される場合も含まれることは言うまでもない。
 今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は、上記した説明ではなく、請求の範囲によって示され、請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。
 1 ネットワークシステム、100,100A,100B,100C 携帯電話、101 通信デバイス、103 記憶部、106 制御部(CPU)、106A メインディスプレイ処理部、106C 遅延処理部、106D サブディスプレイ処理部、106E 決定部、106F タブレット入力処理部、106G 送信処理部、106H 受信処理部、106J 比較部、106K バッファ格納部、106L バッファ取出部、107 メインディスプレイ、107A 第1の表示領域、107B 第2の表示領域、108 サブディスプレイ、109 スピーカ、110 操作部、110A 入力部、119 ペンタブレット、120 スタイラスペン、200 カーナビゲーション装置、300 パーソナルコンピュータ、400 マッチングサーバ、500 インターネット網、600 メールサーバ、700 キャリア網。

Claims (4)

  1.  ネットワークを介して他の通信端末と接続可能な通信端末(100)であって、
     ディスプレイを含む出力部(111)と、
     第1の操作情報を受け付けるための入力部(110A)と、
     前記ネットワークを介して前記他の通信端末へ前記第1の操作情報を送信し、前記ネットワークを介して前記他の通信端末から第2の操作情報を受信するための通信デバイス(101)と、
     前記第1の操作情報を受け付けた時に当該第1の操作情報に基づく第1の情報を前記ディスプレイの第1のエリア(107A)に出力させ、前記第2の操作情報を受信した時に当該第2の操作情報に基づく第2の情報を前記第1のエリアに出力させるための第1の出力制御部(106A)と、
     前記第1の操作情報を受け付けた時刻の所定の時間後の時刻と、前記第2の操作情報を受信した時刻との比較を行い、比較結果に基づく第3の情報を前記出力部に出力させるための比較部(106J)とを備える、通信端末。
  2.  前記第1の操作情報を受け付けた時刻の所定の時間後に前記第1の情報を前記ディスプレイの第2のエリア(107B)に出力させ、前記第2の操作情報を受信した時に当該第2の操作情報に基づく情報を前記第2のエリアに出力させるための第2の出力制御部(106D)をさらに備える、請求の範囲第1項に記載の通信端末。
  3.  ネットワークを介して他の通信端末と接続可能な、ディスプレイを含む出力部と入力部と通信デバイスと制御部とを含む通信端末における制御方法であって、
     前記制御部が、前記入力部を介して第1の操作情報を受け付けるステップと、
     前記制御部が、前記第1の操作情報に基づく第1の情報を前記ディスプレイの第1のエリアに出力させるステップと、
     前記制御部が、前記通信デバイスを介して前記他の通信端末へ前記第1の操作情報を送信するステップと、
     前記制御部が、前記通信デバイスを介して前記他の通信端末から第2の操作情報を受信するステップと、
     前記制御部が、前記第2の操作情報に基づく第2の情報を前記第1のエリアに出力させるステップと、
     前記制御部が、前記第1の操作情報を受け付けた時刻の所定の時間後の時刻と、前記第2の操作情報を受信した時刻との比較を行うステップと、
     前記制御部が、前記比較の結果に基づく第3の情報を前記出力部に出力させるステップとを備える、制御方法。
  4.  ネットワークを介して他の通信端末と接続可能な、ディスプレイを含む出力部と入力部と通信デバイスと制御部とを含む通信端末を制御するための制御プログラムであって、
     前記制御プログラムは、前記制御部に、
     前記入力部を介して第1の操作情報を受け付けるステップと、
     前記第1の操作情報に基づく第1の情報を前記ディスプレイの第1のエリアに出力させるステップと、
     前記通信デバイスを介して前記他の通信端末へ前記第1の操作情報を送信するステップと、
     前記通信デバイスを介して前記他の通信端末から第2の操作情報を受信するステップと、
     前記第2の操作情報に基づく第2の情報を前記第1のエリアに出力させるステップと、
     前記第1の操作情報を受け付けた時刻の所定の時間後の時刻と、前記第2の操作情報を受信した時刻との比較を行うステップと、
     前記比較の結果に基づく第3の情報を前記出力部に出力させるステップとを実行させる、制御プログラム。
PCT/JP2009/062581 2008-07-11 2009-07-10 通信端末、制御方法、および制御プログラム WO2010005073A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP09794517A EP2306303A4 (en) 2008-07-11 2009-07-10 COMMUNICATION TERMINAL, CONTROL PROCEDURE AND CONTROL PROGRAM
CN2009801270185A CN102089740A (zh) 2008-07-11 2009-07-10 通信终端、控制方法以及控制程序
US13/001,925 US20110115701A1 (en) 2008-07-11 2009-07-10 Communication terminal, control method, and control program

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2008181452A JP5035852B2 (ja) 2008-07-11 2008-07-11 通信端末、制御方法、および制御プログラム
JP2008-181452 2008-07-11

Publications (1)

Publication Number Publication Date
WO2010005073A1 true WO2010005073A1 (ja) 2010-01-14

Family

ID=41507183

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2009/062581 WO2010005073A1 (ja) 2008-07-11 2009-07-10 通信端末、制御方法、および制御プログラム

Country Status (6)

Country Link
US (1) US20110115701A1 (ja)
EP (1) EP2306303A4 (ja)
JP (1) JP5035852B2 (ja)
KR (1) KR20110040904A (ja)
CN (1) CN102089740A (ja)
WO (1) WO2010005073A1 (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2623038B1 (en) 2010-09-29 2018-03-21 Terumo Kabushiki Kaisha Medical device
WO2013018148A1 (ja) 2011-08-04 2013-02-07 三菱電機株式会社 冷凍装置
KR101909031B1 (ko) * 2012-07-26 2018-10-17 엘지전자 주식회사 이동 단말기 및 이의 제어 방법
CN107765592B (zh) * 2015-06-12 2020-05-26 Oppo广东移动通信有限公司 设备控制方法及其装置以及终端设备
CN105898508A (zh) * 2016-06-01 2016-08-24 北京奇艺世纪科技有限公司 一种视频同步共享播放方法及装置
US10976983B2 (en) * 2019-03-26 2021-04-13 International Business Machines Corporation Smart collaboration across multiple locations

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03284053A (ja) 1990-03-30 1991-12-13 Shimadzu Corp 描画通信端末機
JPH08265473A (ja) * 1995-03-20 1996-10-11 Fuji Xerox Co Ltd テレライティング装置
JPH08292919A (ja) * 1995-04-21 1996-11-05 Fuji Xerox Co Ltd テレライティング装置
JPH11347254A (ja) 1998-06-12 1999-12-21 Sega Enterp Ltd 通信ゲームシステム及びそれにおけるゲーム実行方法
JP2004265063A (ja) * 2003-02-28 2004-09-24 Canon Inc 情報処理方法および装置
JP2006238251A (ja) * 2005-02-28 2006-09-07 Try Group:Kk 会議システム

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3439804B2 (ja) * 1993-01-28 2003-08-25 株式会社リコー テレライティング端末装置
JPH08298656A (ja) * 1995-02-28 1996-11-12 Ricoh Co Ltd テレライティングシステム
US5940082A (en) * 1997-02-14 1999-08-17 Brinegar; David System and method for distributed collaborative drawing
FR2770952B1 (fr) * 1997-11-12 2000-01-21 Adl Systeme Sa Dispositif de tele-ecriture
US6889062B2 (en) * 2001-10-04 2005-05-03 Nokia Corporation System and protocol for providing pictures in wireless communication messages
JP3726892B2 (ja) * 2001-10-15 2005-12-14 ソニー株式会社 携帯端末装置およびその表示制御プログラム
ES2858730T3 (es) * 2003-09-19 2021-09-30 Blackberry Ltd Dispositivo electrónico de mano y método asociado que proporciona datos de tiempo en un entorno de mensajería
US20060010125A1 (en) * 2004-05-21 2006-01-12 Bea Systems, Inc. Systems and methods for collaborative shared workspaces
US7747953B2 (en) * 2006-06-15 2010-06-29 Citrix Online, Llc Methods and systems for receiving feedback from a scalable number of participants of an on-line presentation
US8125510B2 (en) * 2007-01-30 2012-02-28 Ankur Agarwal Remote workspace sharing
US20090249226A1 (en) * 2008-03-28 2009-10-01 Microsoft Corporation Collaborative tool use in virtual environment

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03284053A (ja) 1990-03-30 1991-12-13 Shimadzu Corp 描画通信端末機
JPH08265473A (ja) * 1995-03-20 1996-10-11 Fuji Xerox Co Ltd テレライティング装置
JPH08292919A (ja) * 1995-04-21 1996-11-05 Fuji Xerox Co Ltd テレライティング装置
JPH11347254A (ja) 1998-06-12 1999-12-21 Sega Enterp Ltd 通信ゲームシステム及びそれにおけるゲーム実行方法
JP2004265063A (ja) * 2003-02-28 2004-09-24 Canon Inc 情報処理方法および装置
JP2006238251A (ja) * 2005-02-28 2006-09-07 Try Group:Kk 会議システム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2306303A4

Also Published As

Publication number Publication date
US20110115701A1 (en) 2011-05-19
KR20110040904A (ko) 2011-04-20
JP2010021851A (ja) 2010-01-28
EP2306303A4 (en) 2011-07-06
CN102089740A (zh) 2011-06-08
JP5035852B2 (ja) 2012-09-26
EP2306303A1 (en) 2011-04-06

Similar Documents

Publication Publication Date Title
US7774505B2 (en) Method for transmitting image data in real-time
KR101203248B1 (ko) 네트워크 시스템, 통신 단말기, 통신 방법 및 통신 프로그램을 기록한 컴퓨터 판독가능 기록매체
KR102285107B1 (ko) 컨텐츠 공유
CN114616812A (zh) 用于配对的用户计算设备的统一接口
JP5035852B2 (ja) 通信端末、制御方法、および制御プログラム
US20110134028A1 (en) Communication terminal device, communication method, and communication program
JP5658547B2 (ja) ネットワークシステム、通信方法、および通信端末
JP5380731B2 (ja) ネットワークシステム、通信端末、通信方法、通信プログラム、およびサーバ装置
US20140189058A1 (en) Communication apparatus, communication system, communication method, and recording medium storing communication control program
US20150319100A1 (en) Communication management system, communication management method, and recording medium storing communication management program
CN114616813A (zh) 用于配对的用户计算设备的电话会议接口和控件
CN110597924A (zh) 基于区块链的用户标识处理方法、装置、设备及存储介质
CN113518198B (zh) 会话界面显示方法、会议界面显示方法、装置及电子设备
US8050667B2 (en) Virtual terminal server, mobile communication terminal, communication control system, and communication control method
KR100770892B1 (ko) 실시간으로 이미지 데이터를 전송하는 방법
EP2299672A1 (en) Network system, communication device, communication method, and communication program
WO2011122267A1 (ja) ネットワークシステム、通信方法、および通信端末
CN111130985B (zh) 关联关系建立方法、装置、终端、服务器及存储介质
CN113727124A (zh) 直播处理方法、装置、电子设备及存储介质
JP5523973B2 (ja) ネットワークシステムおよび通信方法
EP1843538A1 (en) Method for conference setup between mobile terminals for a shared whiteboard session
JP6509917B2 (ja) 端末間通信システム、端末間通信方法、端末間通信プログラム、及び通信サーバ
JP2011154606A (ja) ネットワークシステム、通信方法、サーバ、および通信端末
JP2010074525A (ja) ネットワークシステム、移動通信端末、情報送受信方法、および情報送受信プログラム

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 200980127018.5

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 09794517

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 13001925

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2009794517

Country of ref document: EP

ENP Entry into the national phase

Ref document number: 20117003162

Country of ref document: KR

Kind code of ref document: A