WO2021166159A1 - 受信装置、通信システム、および記録媒体 - Google Patents

受信装置、通信システム、および記録媒体 Download PDF

Info

Publication number
WO2021166159A1
WO2021166159A1 PCT/JP2020/006781 JP2020006781W WO2021166159A1 WO 2021166159 A1 WO2021166159 A1 WO 2021166159A1 JP 2020006781 W JP2020006781 W JP 2020006781W WO 2021166159 A1 WO2021166159 A1 WO 2021166159A1
Authority
WO
WIPO (PCT)
Prior art keywords
retransmission
image data
retransmissions
wireless communication
memory
Prior art date
Application number
PCT/JP2020/006781
Other languages
English (en)
French (fr)
Inventor
康宏 長谷川
和行 澁谷
潔 豊田
Original Assignee
オリンパス株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by オリンパス株式会社 filed Critical オリンパス株式会社
Priority to JP2022501508A priority Critical patent/JP7286868B2/ja
Priority to PCT/JP2020/006781 priority patent/WO2021166159A1/ja
Publication of WO2021166159A1 publication Critical patent/WO2021166159A1/ja
Priority to US17/851,419 priority patent/US11689320B2/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/08Arrangements for detecting or preventing errors in the information received by repeating transmission, e.g. Verdan system
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/12Arrangements for detecting or preventing errors in the information received by using return channel
    • H04L1/16Arrangements for detecting or preventing errors in the information received by using return channel in which the return channel carries supervisory signals, e.g. repetition request signals
    • H04L1/18Automatic repetition systems, e.g. Van Duuren systems
    • H04L1/1829Arrangements specially adapted for the receiver end
    • H04L1/1854Scheduling and prioritising arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/12Arrangements for detecting or preventing errors in the information received by using return channel
    • H04L1/16Arrangements for detecting or preventing errors in the information received by using return channel in which the return channel carries supervisory signals, e.g. repetition request signals
    • H04L1/1607Details of the supervisory signal
    • H04L1/1628List acknowledgements, i.e. the acknowledgement message consisting of a list of identifiers, e.g. of sequence numbers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/12Arrangements for detecting or preventing errors in the information received by using return channel
    • H04L1/16Arrangements for detecting or preventing errors in the information received by using return channel in which the return channel carries supervisory signals, e.g. repetition request signals
    • H04L1/1607Details of the supervisory signal
    • H04L1/1642Formats specially adapted for sequence numbers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/12Arrangements for detecting or preventing errors in the information received by using return channel
    • H04L1/16Arrangements for detecting or preventing errors in the information received by using return channel in which the return channel carries supervisory signals, e.g. repetition request signals
    • H04L1/18Automatic repetition systems, e.g. Van Duuren systems
    • H04L1/1825Adaptation of specific ARQ protocol parameters according to transmission conditions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637Control signals issued by the client directed to the server or network components
    • H04N21/6375Control signals issued by the client directed to the server or network components for requesting retransmission, e.g. of data packets lost or corrupted during transmission from server
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W28/00Network traffic management; Network resource management
    • H04W28/02Traffic management, e.g. flow control or congestion control
    • H04W28/04Error control

Definitions

  • the present invention relates to a receiving device, a communication system, and a recording medium.
  • the endoscopic system includes a scope and processor device.
  • An image sensor is built in the tip of the insertion portion of the scope.
  • the processor device performs signal processing on the image pickup signal acquired by the image pickup device. The user can observe the image (endoscopic image) displayed on the monitor and can save the image. Scopes and processors are typically connected to each other with signal cables.
  • a wireless endoscopy system that wirelessly connects the scope and processor has been devised.
  • restrictions on operations caused by cables are reduced, and operability is improved.
  • the wireless endoscopy system is affected by interference and the like, and wireless communication cannot be performed. Therefore, blackout of the displayed image, distortion of the image, or the like may occur, or data may be lost in the saved image. This effect needs to be reduced.
  • the transmitting device of the wireless endoscopy system transmits a wireless packet having a header area including a sequence number.
  • the receiving device of the wireless endoscopy system determines whether or not data (frame) has been lost by checking the sequence number of the received wireless packet.
  • a technique for stopping image updates in the event of data loss has been disclosed. In that technique, frames that were successfully received before data loss was detected are substituted for display.
  • a system has been proposed in which compressed video data generated by compressing video information is distributed in real time. For example, in the system disclosed in Patent Document 1, the compressed video data recorded in the backup memory is retransmitted as recording data in response to a retransmission request received from the receiving device at a predetermined cycle.
  • the communication band of the communication required for the real-time display in which the receiving device displays the compressed video data in real time after receiving the compressed video data may be compressed by the communication related to the retransmission of the compressed video data.
  • the present invention is a receiving device, a communication system, and a recording medium capable of preferentially performing communication necessary for real-time display of displaying wirelessly communicated data in real time after receiving the data and efficiently retransmitting the data.
  • the purpose is to provide.
  • the receiving device includes a wireless communication device, a memory, and one or more processors.
  • the wireless communication device receives image data transmitted by a transmitting device and including a sequence number.
  • the physical rate of the wireless communication device and the communication rate of the image data are recorded in the memory.
  • the one or more processors execute a recording process of recording the sequence number of the image data received by the wireless communication device in the memory.
  • the one or more processors execute an image output process that outputs the image data received by the wireless communication device to the monitor.
  • the one or more processors execute a specific process for identifying a retransmission candidate based on the sequence number recorded in the memory.
  • the retransmission candidate is the image data transmitted by the transmitting device and not received by the wireless communication device.
  • the one or more processors executes a calculation process for calculating the maximum number of retransmissions based on the physical rate and the communication rate recorded in the memory.
  • the upper limit of retransmission is the upper limit of the number of image data for which retransmission is required.
  • the one or more processors executes a setting process for setting a retransmission allowable number that is equal to or less than the retransmission upper limit number.
  • the one or more processors use the wireless communication device to obtain the same number as the retransmission allowable number.
  • a retransmission request process for transmitting a retransmission request for requesting retransmission of the retransmission candidate to the transmission device is executed.
  • the one or more processors may execute the retransmission request process during the blanking period.
  • the blanking period is a period from the first timing to the second timing.
  • the first timing is after the first transmission of the Nth frame data including the one or more image data is completed.
  • the second timing is after the first timing and before the first transmission of the N + 1th frame data including one or more of the image data is started.
  • N is an integer greater than or equal to 1.
  • the one or more processors may perform one or more of the retransmission request processes during the blanking period after the first transmission of the Kth frame data including the one or more image data is completed.
  • the retransmission request of the Mth frame data including the image data of the above may be transmitted to the transmission device.
  • M is an integer of 1 or more
  • K is an integer of M + 1 or more.
  • the one or more processors may further execute a confirmation process for confirming the number of successful retransmissions.
  • the number of successful retransmissions is the number of successful retransmission candidates after the retransmission request has been transmitted.
  • the one or more processors may set the number of successful retransmissions as the allowable number of retransmissions in the setting process.
  • the plurality of processors may increase the allowable number of retransmissions by executing the setting process again.
  • the one or more processors may further execute a confirmation process for confirming the number of successful retransmissions.
  • the number of successful retransmissions is the number of successful retransmission candidates after the retransmission request has been transmitted.
  • the one or more processors may perform the setting process again to perform the above. The allowable number of retransmissions may be increased.
  • the communication system includes a transmitting device and a receiving device.
  • the transmitting device includes an image acquisition unit, a first memory, a first wireless communication device, and one or more first processors.
  • the image acquisition unit acquires image data.
  • the image data acquired by the image acquisition unit is temporarily recorded in the first memory.
  • the first wireless communication device transmits the image data including the sequence number to the receiving device, and receives a retransmission request from the receiving device for requesting retransmission of the image data.
  • the one or more first processors transmit the image data requested by the retransmission request to the first wireless communication.
  • the retransmission process of transmitting to the receiving device is executed.
  • the receiver comprises a second radio communicator, a second memory, and one or more second processors.
  • the second wireless communication device receives the image data from the transmission device.
  • the physical rate of the second wireless communication device and the communication rate of the image data are recorded in the second memory.
  • the one or more second processors execute a recording process of recording the sequence number of the image data received by the second wireless communication device in the second memory.
  • the one or more second processors execute an image output process for outputting the image data received by the second wireless communication device to a monitor.
  • the one or more second processors execute a specific process for identifying a retransmission candidate based on the sequence number recorded in the second memory.
  • the retransmission candidate is the image data transmitted by the transmitting device and not received by the second wireless communication device.
  • the one or more second processors execute a calculation process for calculating the maximum number of retransmissions based on the physical rate and the communication rate recorded in the second memory.
  • the upper limit of retransmission is the upper limit of the number of image data for which retransmission is required.
  • the one or more second processors execute a setting process for setting a retransmission allowable number which is equal to or less than the retransmission upper limit number.
  • the one or more second processors use the second wireless communication device to perform the retransmission.
  • a retransmission request process for transmitting a retransmission request for requesting retransmission of the same number of retransmission candidates as the allowable number to the transmission device is executed.
  • a program for causing one or more processors of the receiving device to execute recording processing, image output processing, specific processing, calculation processing, setting processing, and retransmission request processing is recorded.
  • a computer-readable non-temporary recording medium is provided.
  • the receiver comprises a wireless communicator, memory, and one or more processors.
  • the wireless communication device receives image data transmitted by a transmitting device and including a sequence number.
  • the physical rate of the wireless communication device and the communication rate of the image data are recorded in the memory.
  • the one or more processors executes the recording process of recording the sequence number of the image data received by the wireless communication device in the memory.
  • the one or more processors execute the image output process of outputting the image data received by the wireless communication device to the monitor.
  • the one or more processors execute the specific process of identifying a retransmission candidate based on the sequence number recorded in the memory.
  • the retransmission candidate is the image data transmitted by the transmitting device and not received by the wireless communication device.
  • the one or more processors executes the calculation process of calculating the maximum number of retransmissions based on the physical rate and the communication rate recorded in the memory.
  • the upper limit of retransmission is the upper limit of the number of image data for which retransmission is required.
  • the one or more processors executes the setting process for setting the allowable number of retransmissions which is equal to or less than the upper limit of retransmissions.
  • the one or more processors use the wireless communication device to obtain the same number as the retransmission allowable number.
  • the retransmission request process for transmitting a retransmission request for requesting retransmission of the retransmission candidate to the transmission device is executed.
  • the receiving device, the communication system, and the recording medium can preferentially perform the communication necessary for the real-time display and efficiently retransmit the data.
  • FIG. 1 shows the configuration of the communication system 1 according to the first embodiment of the present invention.
  • the communication system 1 shown in FIG. 1 has a transmitting device 10 and a receiving device 20.
  • the transmitting device 10 and the receiving device 20 carry out wireless communication with each other.
  • the transmitting device 10 continuously transmits image data to the receiving device 20.
  • the receiving device 20 receives and records the image data from the transmitting device 10. Further, the receiving device 20 transmits a retransmission request for requesting the retransmission of the image data that could not be received to the transmitting device 10.
  • the receiving device 20 outputs the received image data to the monitor 30 for real-time display in which the image data is displayed in real time after being received.
  • displaying the image data in real time means displaying the newly received image data of one frame in the order of the received frames at each timing of the change of the synchronization signal indicating the display start timing.
  • FIG. 2 shows the configuration of the transmission device 10.
  • the transmission device 10 shown in FIG. 2 includes an image acquisition unit 100, an image data generation unit 101, a memory 102 (first memory), a communication unit 103 (first wireless communication device), and a retransmission processing unit 104.
  • the image acquisition unit 100 acquires image data.
  • the image data acquired by the image acquisition unit 100 is temporarily recorded in the memory 102.
  • the communication unit 103 transmits the image data including the sequence number to the receiving device 20, and receives the retransmission request from the receiving device 20 for requesting the retransmission of the image data.
  • the retransmission processing unit 104 executes a retransmission process of transmitting the image data requested by the retransmission request to the receiving device 20 by using the communication unit 103. ..
  • the image acquisition unit 100 is a device such as an image sensor.
  • the image acquisition unit 100 acquires image data in frame units and outputs the image data to the image data generation unit 101.
  • the image acquisition unit 100 may be a communication interface into which image data output from an image sensor of an external device is input.
  • the image data generation unit 101 compresses one frame of image data acquired from the image acquisition unit 100 as necessary. Further, the image data generation unit 101 generates image data (divided data) for communication by dividing the compressed image data into communication units and encoding them. The image data generation unit 101 adds header information including at least a sequence number to the image data. For example, the sequence number is an integer of 1 or more. The sequence numbers of the two image data transmitted continuously are consecutive. The sequence number is used to confirm the continuity of the image data. After that, the image data generation unit 101 outputs the image data to the memory 102 and the communication unit 103. Compression, division, and coding of image data is not mandatory.
  • the memory 102 is a volatile or non-volatile recording medium for backing up image data.
  • the memory 102 RAM (Random Access Memory), DRAM (DynamicRandom Access Memory), SRAM (Static Random Access Memory), EEPROM (Electrically Erasable Programmable Read-Only Memory), FRAM (registered trademark) (Ferroelectric Random Access Memory) , And at least one of the flash memories.
  • the memory 102 stores the image data output from the image data generation unit 101.
  • the memory 102 outputs the image data having the sequence number to the communication unit 103.
  • the memory 102 deletes the image data having the sequence number.
  • the communication unit 103 is a wireless communication device.
  • the communication unit 103 is connected to the antenna element 105.
  • the communication unit 103 transmits the image data output from the image data generation unit 101 to the receiving device 20 in real time.
  • transmitting the image data in real time means that the newly generated one-frame image data is processed immediately after being generated and transmitted in the order of generation.
  • the circuit of the transmission device 10 may generate a synchronization signal indicating the transmission start timing, and the newly generated one-frame image data is generated in the order of the frames generated by the communication unit 103 for each timing of the change of the synchronization signal. You may send it. Further, the timing of this synchronization signal may be matched with the synchronization signal indicating the display start timing generated by the receiving device 20.
  • the communication unit 103 outputs a data deletion request to the memory 102.
  • the communication unit 103 When the retransmission request is received from the receiving device 20, the communication unit 103 outputs the retransmission request to the retransmission processing unit 104.
  • the retransmission processing unit 104 outputs a data request including the sequence number included in the retransmission request to the memory 102, and outputs the image data having the sequence number from the memory 102 to the communication unit 103.
  • the retransmission processing unit 104 retransmits the image data to the receiving device 20 by controlling the communication unit 103.
  • the priority of resending image data is lower than the priority of real-time transmission of image data.
  • a method may be used in which the priority of retransmission and the priority of real-time transmission are different by changing the QoS (Quality of Service) of real-time transmission.
  • the communication end button (not shown in FIG. 2) is pressed, the communication unit 103 transmits a end notification for terminating the real-time transmission to the receiving device 20.
  • the transmitting device 10 may have an antenna element 105.
  • the image data generation unit 101 and the retransmission processing unit 104 may be composed of at least one of a processor and a logic circuit.
  • the processor is at least one of a CPU (Central Processing Unit), a DSP (Digital Signal Processor), and a GPU (Graphics Processing Unit).
  • the logic circuit is at least one of an ASIC (Application Specific Integrated Circuit) and an FPGA (Field-Programmable Gate Array).
  • the image data generation unit 101 and the retransmission processing unit 104 may include one or more processors.
  • the image data generation unit 101 and the retransmission processing unit 104 can include one or more logic circuits.
  • the image data generation unit 101 and the retransmission processing unit 104 may read the program and execute the read program.
  • the program includes instructions that define the operations of the image data generation unit 101 and the retransmission processing unit 104. That is, the functions of the image data generation unit 101 and the retransmission processing unit 104 may be realized by software.
  • the program may be provided by a "computer-readable recording medium” such as flash memory.
  • the program may be transmitted from the computer holding the program to the transmission device 10 via the transmission medium or by the transmission wave in the transmission medium.
  • a "transmission medium” for transmitting a program is a medium having a function of transmitting information.
  • the medium having a function of transmitting information includes a network (communication network) such as the Internet and a communication line (communication line) such as a telephone line.
  • the above-mentioned program may realize a part of the above-mentioned function. Further, the above-mentioned program may be a difference file (difference program). The combination of the program already recorded in the computer and the difference program may realize the above-mentioned function.
  • FIG. 3 shows the configuration of the receiving device 20.
  • the receiving device 20 shown in FIG. 3 includes a communication unit 200 (second wireless communication device), a display data generation unit 201, an image output unit 202, a recording unit 203, a memory 204 (second memory), and a retransmission candidate extraction unit 205. , A retransmission control unit 206, and a retransmission request unit 207.
  • the communication unit 200 receives the image data transmitted by the transmission device 10 and including the sequence number.
  • the physical rate of the communication unit 200 and the communication rate of the image data are recorded in the memory 204.
  • the recording unit 203 executes a recording process of recording the sequence number of the image data received by the communication unit 200 in the memory 204.
  • the image output unit 202 executes an image output process for outputting the image data received by the communication unit 200 to the monitor 30.
  • the retransmission candidate extraction unit 205 executes a specific process for specifying the retransmission candidate based on the sequence number recorded in the memory 204.
  • the retransmission candidate is image data transmitted by the transmitting device 10 and not received by the communication unit 200.
  • the retransmission control unit 206 executes a calculation process for calculating the maximum number of retransmissions based on the physical rate and the communication rate recorded in the memory 204.
  • the upper limit of retransmission is the upper limit of the number of image data that is required to be resent.
  • the retransmission control unit 206 executes, for example, a setting process for setting the allowable number of retransmissions which is 1 or more and the upper limit of retransmissions or less.
  • the retransmission requesting unit 207 requests the same number of retransmission candidates as the allowable number of retransmissions by using the communication unit 200.
  • the retransmission request process for transmitting the retransmission request of the above to the transmission device 10 is executed.
  • the communication unit 200 is a wireless communication device.
  • the communication unit 200 is connected to the antenna element 208.
  • the communication unit 200 performs wireless communication with the communication unit 103 of the transmission device 10.
  • the communication unit 200 receives the image data (real-time image data) transmitted in real time from the transmission device 10. Further, the communication unit 200 receives the image data (retransmitted image data) retransmitted from the transmission device 10.
  • the communication unit 200 outputs the received real-time image data to the display data generation unit 201 and the recording unit 203. Further, the communication unit 200 outputs the received retransmission image data to the recording unit 203.
  • the communication unit 200 When the reception completion instruction is output from the recording unit 203, the communication unit 200 generates a reception completion notification and transmits the reception completion notification to the transmission device 10.
  • the reception completion instruction indicates that the time allocated for receiving one frame of image data has elapsed.
  • the image data of one frame is composed of a plurality of divided image data.
  • the reception completion notification includes the sequence number of the real-time image data or the resent image data that was correctly received.
  • the communication unit 200 When a retransmission request instruction for requesting the retransmission of image data to the transmission device 10 is output from the retransmission request unit 207, the communication unit 200 generates a retransmission request and transmits the retransmission request to the transmission device 10.
  • the retransmission request includes the sequence number of the real-time image data or the retransmission image data that could not be received correctly.
  • the communication unit 200 outputs the current physical rate and communication rate (required rate) to the recording unit 203.
  • the physical rate indicates the maximum data rate that the current communication unit 200 can communicate with per unit time.
  • the physical rate is determined by the communication unit 200 based on the modulation method, the coding rate, the communication channel width, the number of streams, and the like.
  • the communication rate indicates the data rate required for real-time communication of image data.
  • the communication rate is determined by the communication unit 200 based on the compression rate of the image data, the size of the header and footer given to the image data, the communication overhead, the margin required for the retransmission time, and the like. After the end notification is received from the transmitting device 10, real-time transmission is not performed. Therefore, the communication rate becomes 0.
  • the physical rate may be recorded in the memory 204 in advance.
  • the display data generation unit 201 decodes the real-time image data output from the communication unit 200. Further, the display data generation unit 201 generates one frame of image data by combining two or more real-time image data. The display data generation unit 201 outputs the generated image data to the image output unit 202.
  • the image output unit 202 outputs image data to the monitor 30 via a video communication interface (not shown in FIG. 3).
  • the monitor 30 displays the image indicated by the image data.
  • the receiving device 20 may have a monitor.
  • a communication error may occur and the divided real-time image data in one frame of image data may not be acquired by the specified time.
  • the receiving device 20 detects the omission of the image data by using the sequence number of the image data, and performs an error display indicating that the omission of the image data has occurred.
  • the receiving device 20 does not update the display, and displays the image that was correctly displayed in the past on the monitor 30 again.
  • the recording unit 203 records the real-time image data and the retransmission image data output from the communication unit 200 in the memory 204. As a result, the sequence number included in each image data is recorded in the memory 204.
  • the recording unit 203 records the physical rate and the communication rate acquired from the communication unit 200 in the memory 204. When the time allotted for receiving the image data of one frame has elapsed, the recording unit 203 outputs the reception completion instruction to the communication unit 200.
  • the memory 102 is a non-volatile recording medium for storing image data.
  • the memory 102 is at least one of EEPROM, FRAM, and flash memory. Physical and communication rates may be recorded in volatile memory such as RAM or DRAM.
  • the retransmission candidate extraction unit 205 confirms the continuity of the sequence numbers based on the sequence numbers recorded in the memory 204. Missing sequence numbers occur in places where the sequence numbers are not consecutive. The image data having the missing sequence number was transmitted from the transmission device 10, but was not correctly recorded in the memory 204. The retransmission candidate extraction unit 205 extracts the sequence number of the image data that could not be recorded correctly. As a result, the retransmission candidate extraction unit 205 identifies the retransmission candidate. The retransmission candidate extraction unit 205 outputs the retransmission candidate information including the extracted sequence number to the retransmission control unit 206.
  • the retransmission control unit 206 selects the same number of sequence numbers as the allowable retransmission number from the sequence numbers included in the retransmission candidate information output from the retransmission candidate extraction unit 205.
  • the retransmission control unit 206 may preferentially select the sequence number of the image data transmitted before the other image data. Alternatively, the retransmission control unit 206 may randomly select a sequence number.
  • the retransmission control unit 206 outputs a sequence number list including the selected sequence number to the retransmission request unit 207.
  • the retransmission request unit 207 outputs a retransmission request instruction including a sequence number list output from the retransmission control unit 206 to the communication unit 200.
  • the retransmission request unit 207 transmits the retransmission request to the transmission device 10 by controlling the communication unit 200.
  • the display data generation unit 201, the image output unit 202, the recording unit 203, the retransmission candidate extraction unit 205, the retransmission control unit 206, and the retransmission request unit 207 may be composed of at least one of a processor and a logic circuit.
  • the display data generation unit 201, the image output unit 202, the recording unit 203, the retransmission candidate extraction unit 205, the retransmission control unit 206, and the retransmission request unit 207 may include one or more processors.
  • the display data generation unit 201, the image output unit 202, the recording unit 203, the retransmission candidate extraction unit 205, the retransmission control unit 206, and the retransmission request unit 207 may include one or more logic circuits.
  • the display data generation unit 201, the image output unit 202, the recording unit 203, the retransmission candidate extraction unit 205, the retransmission control unit 206, and the retransmission request unit 207 may read the program and execute the read program.
  • the program is realized in the same manner as the program that realizes the functions of the image data generation unit 101 and the retransmission processing unit 104 of the transmission device 10.
  • FIG. 4 shows a process relating to the entire recording of image data and retransmission of image data.
  • Step S100 The recording unit 203 records the real-time image data and the retransmission image data acquired from the communication unit 200 in the memory 204. As a result, the sequence number included in each image data is recorded in the memory 204. Step S100 corresponds to the recording process.
  • Step S105 After step S100, the retransmission candidate extraction unit 205 waits until a predetermined time in one frame period elapses by using a timer or the like not shown in FIG.
  • the predetermined time is the time allotted for receiving one frame of image data.
  • Steps S100 and S105 are repeatedly executed until a predetermined time elapses. When the predetermined time has elapsed, step S110 is executed.
  • Step S110 The retransmission candidate extraction unit 205 confirms the continuity of the sequence numbers based on the sequence numbers recorded in the memory 204.
  • the retransmission candidate extraction unit 205 extracts the sequence number of the image data that could not be recorded correctly.
  • the extracted sequence number indicates image data that is a candidate for retransmission.
  • the retransmission candidate extraction unit 205 outputs the retransmission candidate information including the extracted sequence number to the retransmission control unit 206.
  • Step S110 corresponds to the specific process.
  • Step S115 After step S110, the retransmission control unit 206 calculates the retransmission upper limit number based on the physical rate and the required rate recorded in the memory 204, and sets the retransmission allowable number.
  • the retransmission control unit 206 is a retransmission candidate extraction unit. Select all the sequence numbers included in the retransmission candidate information output from 205.
  • the retransmission control unit 206 sets the retransmission candidate information. From the included sequence numbers, select the same number of sequence numbers as the allowable number of retransmissions. The retransmission control unit 206 outputs a sequence number list including the selected sequence number to the retransmission request unit 207. Step S115 corresponds to the calculation process and the setting process.
  • Step S116 After step S115, the retransmission request unit 207 determines whether or not the number of retransmission requests calculated in step 115 is 0. If the retransmission request unit 207 determines that the number of retransmission requests is 0, step S125 is executed. If the retransmission request unit 207 determines that the number of retransmission requests is 1 or more, step S120 is executed.
  • Step S120 The retransmission request unit 207 outputs a retransmission request instruction including a sequence number list output from the retransmission control unit 206 to the communication unit 200.
  • the retransmission request unit 207 transmits a retransmission request instruction to the transmission device 10 by controlling the communication unit 200.
  • Step S120 corresponds to the retransmission request processing.
  • Step S125 After step S120, the image output unit 202 outputs one frame of image data generated by the display data generation unit 201 to the monitor 30. Step S125 corresponds to the image output process. Step S125 may be executed before step S110, step S115, or step S120 is executed.
  • Step S130 After step S125, a condition for terminating the process is determined.
  • the communication unit 200 receives the end notification from the transmission device 10, the process shown in FIG. 4 ends. If the communication unit 200 has not received the end notification from the transmitting device 10, step S100 is executed in the frame period next to the current frame period.
  • FIG. 5 shows the details of the process in step S115. Hereinafter, the details of the process in step S115 will be described.
  • Step S200 The retransmission control unit 206 acquires the retransmission candidate information from the retransmission candidate extraction unit 205.
  • Step S205 After step S200, the retransmission control unit 206 calculates the allowable retransmission number.
  • FIG. 6 shows the details of the process in step S205.
  • Step S300 The retransmission control unit 206 acquires the physical rate and the communication rate from the memory 204.
  • Step S305 After step S300, the retransmission control unit 206 calculates the maximum number of retransmissions based on the physical rate and the communication rate. For example, the maximum number of retransmissions is expressed by the following equation (1).
  • ULN (PR-CR) / DL (1)
  • ULN indicates the maximum number of retransmissions
  • PR indicates the physical rate
  • CR indicates the communication rate.
  • DL indicates the data length of one divided image data. The maximum number of retransmissions is calculated based on the difference between the physical rate and the communication rate.
  • the retransmission control unit 206 may extract only the integer part of the calculated number and use the integer part as the retransmission upper limit number. Step S305 corresponds to the calculation step.
  • the data length DL in the equation (1) depends on the compression process executed by the image data generation unit 101 of the transmission device 10.
  • the data length DL is a preset fixed length.
  • the memory 102 stores the data length DL in advance.
  • the retransmission control unit 206 acquires the data length DL from the memory 102.
  • the data length DL changes for each frame period.
  • the communication unit 103 of the transmission device 10 transmits the data length notification including the data length DL to the reception device 20 at the beginning of the frame period.
  • the communication unit 200 of the receiving device 20 receives the data length notification and outputs it to the recording unit 203.
  • the recording unit 203 records the data length DL included in the data length notification output from the communication unit 200 in the memory 204.
  • the retransmission control unit 206 acquires the data length DL from the memory 102.
  • Step S310 After step S305, the retransmission control unit 206 sets the retransmission upper limit number calculated in step S305 as the retransmission allowable number.
  • the retransmission control unit 206 may set an integer that is 1 or more and smaller than the upper limit of retransmission as the allowable retransmission number.
  • Step S310 corresponds to the setting step. After step S310, step S210 shown in FIG. 5 is executed.
  • Step S210 After step S310, the retransmission control unit 206 compares the number of retransmission candidates with the number of allowable retransmissions.
  • the number of retransmission candidates is the same as the number of sequence numbers included in the retransmission candidate information acquired from the retransmission candidate extraction unit 205.
  • the number of retransmission candidates is an integer of 0 or more. If the number of retransmission candidates exceeds the allowable number of retransmissions, step S215 is executed. If the number of retransmission candidates is equal to or less than the allowable number of retransmissions, step S220 is executed.
  • Step S215) If the number of retransmission candidates exceeds the allowable number of retransmissions, it is highly possible that the communication band required for all retransmissions of the image data that could not be received cannot be secured. Therefore, the retransmission control unit 206 sets the retransmission allowable number as the number of retransmission requests. When the number of retransmission candidates exceeds the maximum number of retransmissions, the number of retransmission requests is set to the same number as the allowable number of retransmissions. The allowable number of retransmissions is the same as the maximum number of retransmissions calculated in step S305. Therefore, when the number of retransmission candidates exceeds the maximum number of retransmissions, the number of retransmission requests is set to the same number as the maximum number of retransmission requests.
  • Step S220 When the number of retransmission candidates is equal to or less than the allowable retransmission number, it is possible to secure the communication band required for all retransmissions of the image data that could not be received. Therefore, the retransmission control unit 206 sets the number of retransmission candidates as the number of retransmission requests. If the number of retransmission candidates does not exceed the maximum number of retransmission candidates, the number of retransmission requests is set to the same number as the number of retransmission candidates.
  • Step S230 After step S215 or step S220, the retransmission control unit 206 selects the same number of sequence numbers as the number of retransmission requests from the sequence numbers included in the retransmission candidate information. The retransmission control unit 206 outputs a sequence number list including the selected sequence number to the retransmission request unit 207.
  • the receiving device 20 when the number of image data that could not be received exceeds the allowable number of retransmissions, the receiving device 20 requests the transmitting device 10 to retransmit the same number of image data as the allowable number of retransmissions. Therefore, the communication system 1 can preferentially perform the communication required for the real-time display and efficiently retransmit the data.
  • the receiving device 20 shown in FIG. 3 is changed to the receiving device 20a shown in FIG.
  • FIG. 7 shows the configuration of the receiving device 20a.
  • the receiving device 20a shown in FIG. 7 includes a communication unit 200, a display data generation unit 201, an image output unit 202, a recording unit 203, a memory 204, a retransmission candidate extraction unit 205, a retransmission control unit 206, a retransmission request unit 207, and a blanking. It has a period detection unit 209. The description of the same configuration as that shown in FIG. 3 will be omitted.
  • the blanking period detection unit 209 may be composed of at least one of a processor and a logic circuit.
  • the blanking period detection unit 209 can include one or more processors.
  • the blanking period detection unit 209 may include one or more logic circuits.
  • the blanking period detection unit 209 may read the program and execute the read program.
  • the display data generation unit 201 generates a synchronization signal and outputs the display vertical blanking signal included in the synchronization signal to the blanking period detection unit 209.
  • the blanking period detection unit 209 detects the start timing of the blanking period based on the vertical blanking signal output from the display data generation unit 201. When the timing is detected, the blanking period detection unit 209 outputs timing information indicating the start of the blanking period to the retransmission candidate extraction unit 205.
  • the blanking period occurs between the display period of one frame of image data and the display period of the next one frame of image data.
  • the retransmission candidate extraction unit 205, the retransmission control unit 206, and the retransmission request unit 207 stop the processing related to the retransmission control until the blanking period is started.
  • the timing information is output from the blanking period detection unit 209 to the retransmission candidate extraction unit 205.
  • the retransmission candidate extraction unit 205 starts processing.
  • the process shown in FIG. 4 is changed to the process shown in FIG.
  • the flow of processing executed by the receiving device 20a will be described with reference to FIG.
  • the description of the same process as that shown in FIG. 4 will be omitted.
  • Step S105a Step S105 shown in FIG. 4 is changed to step S105a.
  • the blanking period detection unit 209 determines whether or not the blanking period has started based on the vertical blanking signal output from the display data generation unit 201. Steps S100 and S105a are repeated until the blanking period begins.
  • the blanking period detection unit 209 determines that the blanking period has started, the blanking period detection unit 209 outputs the timing information to the retransmission candidate extraction unit 205.
  • Step S110 When the timing information is output from the blanking period detection unit 209, the retransmission candidate extraction unit 205 executes step S110. Step S110, step S115, step S120, and step S125 are performed during the blanking period.
  • the receiving device 20a When the receiving device 20a cannot receive the image data in the frame period, the receiving device 20a transmits the retransmission request of the image data to the transmitting device 10 in the blanking period included in the frame period in which the image data is received. do.
  • the receiving device 20a may transmit the retransmission request of the image data to the transmitting device 10 during the blanking period included in the frame period after the frame period in which the image data is received.
  • the retransmission candidate extraction unit 205 executes the specific process during the blanking period.
  • the retransmission control unit 206 executes the calculation process and the setting process during the blanking period.
  • the retransmission request unit 207 executes the retransmission request processing during the blanking period.
  • the blanking period is a period from the first timing to the second timing.
  • the first timing is after the first transmission (real-time transmission) of the Nth frame data including one or more image data is completed. This first transmission does not include the retransmission of image data according to the retransmission request.
  • the second timing is after the first timing and before the first transmission of the N + 1th frame data including one or more image data is started.
  • N is an integer greater than or equal to 1.
  • the Nth frame data is the image data of one frame transmitted in the Nth frame period
  • the N + 1th frame data is the image data of one frame transmitted in the N + 1th frame period.
  • the retransmission request unit 207 executes the retransmission request process during the blanking period after the first transmission of the Kth frame data including the one or more image data is completed, so that the retransmission request unit 207 contains the one or more image data.
  • the second frame data retransmission request may be transmitted to the transmission device 10.
  • M is an integer greater than or equal to 1.
  • K is an integer greater than or equal to M + 1.
  • the M-th frame data is one frame of image data transmitted in the M-th frame period
  • the K-th frame data is one-frame image data transmitted in the K-th frame period.
  • the K-th frame period is a frame period after the M-th frame period.
  • the receiving device 20a requests the transmitting device 10 to retransmit the image data during the blanking period. Therefore, the communication system 1 can preferentially perform the communication required for the real-time display and efficiently retransmit the data.
  • the communication system 1 of the second embodiment has a transmitting device 10 shown in FIG. 2 and a receiving device 20 shown in FIG.
  • the retransmission control unit 206 further executes a confirmation process for confirming the number of successful retransmissions, in addition to the calculation process and the setting process in the first embodiment.
  • the number of successful retransmissions is the number of retransmission candidates that have been successfully received after the retransmission request has been transmitted.
  • the retransmission control unit 206 sets the number of successful retransmissions as the allowable retransmission number in the setting process.
  • the flow of processing executed by the receiving device 20 will be described.
  • the receiving device 20 executes the processes shown in FIGS. 4, 5, and 9.
  • the process shown in FIG. 6 is changed to the process shown in FIG.
  • the description of the processing shown in FIGS. 4 and 5 will be omitted.
  • the details of the processing shown in FIG. 9 will be described.
  • the description of the same process as that shown in FIG. 6 will be omitted.
  • Step S320 After step S305, the retransmission control unit 206 acquires the number of successful retransmissions based on the previously generated sequence number list and the sequence number recorded in the memory 204.
  • the sequence number list contains the sequence number of the image data requested to be resent.
  • the previously generated sequence number list is a sequence number list generated in the frame period immediately before the current frame period.
  • the retransmission control unit 206 compares the sequence number (first sequence number) included in the sequence number list with the sequence number (second sequence number) recorded in the memory 204.
  • the retransmission control unit 206 acquires the number of the second sequence number that matches the first sequence number as the number of successful retransmissions.
  • the number of successful retransmissions is an integer of 0 or more. Step S320 corresponds to the confirmation process.
  • Step S321 After step S320, the retransmission control unit 206 determines whether or not the number of successful retransmissions calculated in step S320 is 0. If the retransmission control unit 206 determines that the number of successful retransmissions is 0, step S322 is executed. If the retransmission control unit 206 determines that the number of successful retransmissions is 1 or more, step S325 is executed.
  • Step S322 The retransmission control unit 206 sets the minimum retransmission allowable number (for example, 1) as the retransmission allowable number.
  • the minimum allowable number of retransmissions may be a predetermined value other than 1.
  • Step S325) the retransmission control unit 206 calculates the retransmission success probability based on the number of successful retransmissions calculated in step S320 and the number of previous retransmission requests.
  • the number of previous retransmission requests is the number of sequence numbers included in the previously generated sequence number list.
  • PS indicates the probability of successful retransmission
  • SN indicates the number of successful retransmissions
  • RN indicates the number of retransmission requests.
  • Step S330 the retransmission control unit 206 determines whether or not the retransmission success probability calculated in step S325 is 100%. If the retransmission control unit 206 determines that the retransmission success probability is 100%, step S310 is executed. If the retransmission control unit 206 determines that the retransmission success probability is not 100%, step S335 is executed.
  • Step S335 The retransmission control unit 206 sets the number of successful retransmissions acquired in step S320 as the allowable retransmission number.
  • Step S335 corresponds to the setting step. After step S335, step S210 shown in FIG. 5 is executed.
  • the previous retransmission success probability is not 100%, the number of previous retransmission successes is smaller than the number of previous retransmission requests.
  • the number of retransmission requests is equal to or less than the allowable number of retransmissions. If the probability of successful retransmission is not 100%, the number of successful retransmissions in the previous time is smaller than the allowable number of retransmissions in the previous time. Since the number of successful retransmissions is set as the allowable number of retransmissions in step S335, the new allowable number of retransmissions is smaller than the number of allowable retransmissions of the previous time. However, even when the probability of successful retransmission is 0%, the lower limit of the allowable number of retransmissions is set to 1. As a result, it is possible to monitor whether or not the situation is such that retransmission can be executed.
  • the source of the interference signal or the like may approach the vicinity of the transmitting device 10 or the receiving device 20, and the communication state may deteriorate momentarily.
  • the receiving device 20 reduces the new allowable retransmission number from the previous allowable retransmission number by setting the previous successful retransmission number as the allowable retransmission number.
  • the communication system 1 can efficiently retransmit the data.
  • the flow of processing executed by the receiving device 20 will be described.
  • the receiving device 20 executes the processes shown in FIGS. 4, 5, and 10.
  • the process shown in FIG. 9 is changed to the process shown in FIG.
  • the description of the processing shown in FIGS. 4 and 5 will be omitted.
  • the details of the processing shown in FIG. 10 will be described.
  • the description of the same process as that shown in FIG. 9 will be omitted.
  • Step S340 When the retransmission control unit 206 determines in step S330 that the retransmission success probability is 100%, the retransmission control unit 206 has a larger number of successful retransmissions acquired in step S320 than the upper limit of retransmissions calculated in step S305. Judge whether or not. For example, when the physical rate is changed from the previous time and the retransmission control unit 206 determines that the number of successful retransmissions is larger than the maximum number of retransmissions, step S310 is executed. If the retransmission control unit 206 determines that the number of successful retransmissions is equal to or less than the maximum number of retransmissions, step S345 is executed.
  • Step S345 The retransmission control unit 206 sets the number obtained by adding the predetermined number A to the number of successful retransmissions acquired in step S320 as the allowable retransmission number.
  • the predetermined number A is an integer of 1 or more.
  • the predetermined number A is adjusted so that the allowable number of retransmissions does not exceed the maximum number of retransmissions.
  • Step S345 corresponds to the setting step. After step S345, step S210 shown in FIG. 5 is executed.
  • step S345 is executed.
  • step S345 the number obtained by adding the predetermined number A to the previous number of successful retransmissions is set as the new allowable number of retransmissions.
  • the previous retransmission success probability is 100%, the number of previous retransmission successes is the same as the number of previous retransmission requests. Therefore, the new allowable number of retransmissions is larger than the number of previous retransmission requests.
  • step S345 is executed, the retransmission allowance increases.
  • the receiving device 20 can restore the allowable number of retransmissions while confirming the influence of the image data on the real-time transmission. Therefore, the receiving device 20 can reduce the influence on the real-time transmission of the image data.
  • the receiving device, the communication system, and the recording medium can preferentially perform communication necessary for real-time display and efficiently retransmit data.
  • Communication system 10 Transmission device 20, 20a Receiver device 30 Monitor 100 Image acquisition unit 101 Image data generation unit 102, 204 Memory 103, 200 Communication unit 104 Retransmission processing unit 105, 208 Antenna element 201 Display data generation unit 202 Image output unit 203 Recording unit 205 Retransmission candidate extraction unit 206 Retransmission control unit 207 Retransmission request unit 209 Blanking period detection unit

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Detection And Prevention Of Errors In Transmission (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

受信装置は、無線通信機、メモリ、および1つまたは複数のプロセッサを備える。前記プロセッサは、前記メモリに記録されている前記シーケンス番号に基づいて画像データの再送候補を特定する。前記プロセッサは、前記メモリに記録されている物理レートおよび通信レートに基づいて再送上限数を算出する。前記プロセッサは、前記再送上限数以下である再送許容数を設定する。前記再送候補の数が前記再送許容数を超えている場合、前記プロセッサは、前記無線通信機を使用することにより、前記再送許容数と同じ数の前記再送候補の再送を要求するための再送要求を送信装置に送信する。

Description

受信装置、通信システム、および記録媒体
 本発明は、受信装置、通信システム、および記録媒体に関する。
 医療分野や工業分野において内視鏡を使用する診断・検査が実施されている。内視鏡システムは、スコープおよびプロセッサ装置を有する。スコープが有する挿入部の先端には撮像素子が内蔵されている。プロセッサ装置は、撮像素子により取得された撮像信号に信号処理を施す。ユーザーは、モニタに表示された画像(内視鏡画像)を観察することができ、かつその画像を保存することができる。スコープおよびプロセッサは通常、信号ケーブルで互いに接続される。
 一方、スコープおよびプロセッサを無線で接続する無線内視鏡システムが考案されている。無線内視鏡システムでは、ケーブルを原因とする操作の制約が軽減され、かつ操作性が向上する。しかし、無線内視鏡システムが混信等の影響を受け、かつ無線通信を実施できない場合がある。そのため、表示される画像のブラックアウトまたは画像の乱れ等が発生し、あるいは保存される画像においてデータが欠落する可能性がある。この影響を低減する必要がある。
 無線内視鏡システムの送信装置は、シーケンス番号を含むヘッダ領域を持つ無線パケットを送信する。無線内視鏡システムの受信装置は、受信された無線パケットのシーケンス番号をチェックすることにより、データ(フレーム)の欠落が発生したか否かを判断する。データの欠落が発生した場合に、画像の更新を停止する技術が開示されている。その技術では、データの欠落が検出される前に正常に受信できたフレームが表示に代用される。また、映像情報を圧縮することにより生成された圧縮映像データをリアルタイムで配信するシステムが提案されている。例えば、特許文献1に開示されたシステムにおいて、受信装置から所定周期で受信される再送要求に応じて、バックアップメモリに記録された圧縮映像データが記録用のデータとして再送信される。
日本国特開2015-95705号公報
 特許文献1に開示された発明では、受信および記録に関する判断と再送要求の送信とが所定周期で実施される。そのため、受信装置が圧縮映像データを受信後にリアルタイムに表示するリアルタイム表示に必要な通信の通信帯域が圧縮映像データの再送に関わる通信により圧迫される可能性がある。
 本発明は、無線通信されるデータを受信後にリアルタイムに表示するリアルタイム表示に必要な通信を優先的に実施し、かつデータの再送を効率良く実施することができる受信装置、通信システム、および記録媒体を提供することを目的とする。
 本発明の第1の態様によれば、受信装置は、無線通信機、メモリ、および1つまたは複数のプロセッサを備える。前記無線通信機は、送信装置によって送信され、かつシーケンス番号を含む画像データを受信する。前記無線通信機の物理レートおよび前記画像データの通信レートが前記メモリに記録される。前記1つまたは複数のプロセッサは、前記無線通信機によって受信された前記画像データの前記シーケンス番号を前記メモリに記録する記録処理を実行する。前記1つまたは複数のプロセッサは、前記無線通信機によって受信された前記画像データをモニタに出力する画像出力処理を実行する。前記1つまたは複数のプロセッサは、前記メモリに記録されている前記シーケンス番号に基づいて再送候補を特定する特定処理を実行する。前記再送候補は、前記送信装置によって送信され、かつ前記無線通信機によって受信されていない前記画像データである。前記1つまたは複数のプロセッサは、前記メモリに記録されている前記物理レートおよび前記通信レートに基づいて再送上限数を算出する算出処理を実行する。前記再送上限数は、再送が要求される前記画像データの数の上限である。前記1つまたは複数のプロセッサは、前記再送上限数以下である再送許容数を設定する設定処理を実行する。前記特定処理を通して特定された前記再送候補の数が前記再送許容数を超えている場合、前記1つまたは複数のプロセッサは、前記無線通信機を使用することにより、前記再送許容数と同じ数の前記再送候補の再送を要求するための再送要求を前記送信装置に送信する再送要求処理を実行する。
 本発明の第2の態様によれば、第1の態様において、前記1つまたは複数のプロセッサは、前記再送要求処理をブランキング期間に実行してもよい。前記ブランキング期間は、第1のタイミングから第2のタイミングまでの期間である。前記第1のタイミングは、1つ以上の前記画像データを含むN番目のフレームデータの最初の送信が終了した後である。前記第2のタイミングは、前記第1のタイミングよりも後、かつ1つ以上の前記画像データを含むN+1番目のフレームデータの最初の送信が始まる前である。Nは1以上の整数である。前記1つまたは複数のプロセッサは、1つ以上の前記画像データを含むK番目のフレームデータの最初の送信が終了した後の前記ブランキング期間に前記再送要求処理を実行することにより、1つ以上の前記画像データを含むM番目のフレームデータの前記再送要求を前記送信装置に送信してもよい。Mは1以上の整数であり、かつKはM+1以上の整数である。
 本発明の第3の態様によれば、第2の態様において、前記1つまたは複数のプロセッサは、再送成功数を確認する確認処理をさらに実行してもよい。前記再送成功数は、前記再送要求が送信された後、受信に成功した前記再送候補の数である。前記1つまたは複数のプロセッサは、前記設定処理において、前記再送成功数を前記再送許容数として設定してもよい。
 本発明の第4の態様によれば、第3の態様において、前記設定処理を通して設定された前記再送許容数と、前記確認処理を通して確認された前記再送成功数とが一致する場合、前記1つまたは複数のプロセッサは、前記設定処理を再度実行することにより、前記再送許容数を増加させてもよい。
 本発明の第5の態様によれば、第2の態様において、前記1つまたは複数のプロセッサは、再送成功数を確認する確認処理をさらに実行してもよい。前記再送成功数は、前記再送要求が送信された後、受信に成功した前記再送候補の数である。前記設定処理を通して設定された前記再送許容数と、前記確認処理を通して確認された前記再送成功数とが一致する場合、前記1つまたは複数のプロセッサは、前記設定処理を再度実行することにより、前記再送許容数を増加させてもよい。
 本発明の第6の態様によれば、通信システムは、送信装置および受信装置を備える。前記送信装置は、画像取得部、第1のメモリ、第1の無線通信機、および1つまたは複数の第1のプロセッサを備える。前記画像取得部は、画像データを取得する。前記画像取得部によって取得された前記画像データが前記第1のメモリに一時的に記録される。前記第1の無線通信機は、シーケンス番号を含む前記画像データを前記受信装置に送信し、かつ前記画像データの再送を要求するための再送要求を前記受信装置から受信する。前記第1の無線通信機が前記再送要求を前記受信装置から受信した場合、前記1つまたは複数の第1のプロセッサは、前記再送要求によって要求された前記画像データを、前記第1の無線通信機を使用することにより前記受信装置に送信する再送処理を実行する。前記受信装置は、第2の無線通信機、第2のメモリ、および1つまたは複数の第2のプロセッサを備える。前記第2の無線通信機は、前記画像データを前記送信装置から受信する。前記第2の無線通信機の物理レートおよび前記画像データの通信レートが前記第2のメモリに記録される。前記1つまたは複数の第2のプロセッサは、前記第2の無線通信機によって受信された前記画像データの前記シーケンス番号を前記第2のメモリに記録する記録処理を実行する。前記1つまたは複数の第2のプロセッサは、前記第2の無線通信機によって受信された前記画像データをモニタに出力する画像出力処理を実行する。前記1つまたは複数の第2のプロセッサは、前記第2のメモリに記録されている前記シーケンス番号に基づいて再送候補を特定する特定処理を実行する。前記再送候補は、前記送信装置によって送信され、かつ前記第2の無線通信機によって受信されていない前記画像データである。前記1つまたは複数の第2のプロセッサは、前記第2のメモリに記録されている前記物理レートおよび前記通信レートに基づいて再送上限数を算出する算出処理を実行する。前記再送上限数は、再送が要求される前記画像データの数の上限である。前記1つまたは複数の第2のプロセッサは、前記再送上限数以下である再送許容数を設定する設定処理を実行する。前記特定処理を通して特定された前記再送候補の数が前記再送許容数を超えている場合、前記1つまたは複数の第2のプロセッサは、前記第2の無線通信機を使用することにより、前記再送許容数と同じ数の前記再送候補の再送を要求するための再送要求を前記送信装置に送信する再送要求処理を実行する。
 本発明の第7の態様によれば、受信装置の1つまたは複数のプロセッサに記録処理、画像出力処理、特定処理、算出処理、設定処理、および再送要求処理を実行させるためのプログラムを記録したコンピュータ読み取り可能な非一時的記録媒体が提供される。前記受信装置は、無線通信機、メモリ、および1つまたは複数のプロセッサを備える。前記無線通信機は、送信装置によって送信され、かつシーケンス番号を含む画像データを受信する。前記無線通信機の物理レートおよび前記画像データの通信レートが前記メモリに記録される。前記1つまたは複数のプロセッサは、前記無線通信機によって受信された前記画像データの前記シーケンス番号を前記メモリに記録する前記記録処理を実行する。前記1つまたは複数のプロセッサは、前記無線通信機によって受信された前記画像データをモニタに出力する前記画像出力処理を実行する。前記1つまたは複数のプロセッサは、前記メモリに記録されている前記シーケンス番号に基づいて再送候補を特定する前記特定処理を実行する。前記再送候補は、前記送信装置によって送信され、かつ前記無線通信機によって受信されていない前記画像データである。前記1つまたは複数のプロセッサは、前記メモリに記録されている前記物理レートおよび前記通信レートに基づいて再送上限数を算出する前記算出処理を実行する。前記再送上限数は、再送が要求される前記画像データの数の上限である。前記1つまたは複数のプロセッサは、前記再送上限数以下である再送許容数を設定する前記設定処理を実行する。前記特定処理を通して特定された前記再送候補の数が前記再送許容数を超えている場合、前記1つまたは複数のプロセッサは、前記無線通信機を使用することにより、前記再送許容数と同じ数の前記再送候補の再送を要求するための再送要求を前記送信装置に送信する前記再送要求処理を実行する。
 上記の各態様によれば、受信装置、通信システム、および記録媒体は、リアルタイム表示に必要な通信を優先的に実施し、かつデータの再送を効率良く実施することができる。
本発明の第1の実施形態の通信システムの構成を示すブロック図である。 本発明の第1の実施形態の通信システムが有する送信装置の構成を示すブロック図である。 本発明の第1の実施形態の通信システムが有する受信装置の構成を示すブロック図である。 本発明の第1の実施形態の通信システムが有する受信装置の動作の手順を示すフローチャートである。 本発明の第1の実施形態の通信システムが有する受信装置の動作の手順を示すフローチャートである。 本発明の第1の実施形態の通信システムが有する受信装置の動作の手順を示すフローチャートである。 本発明の第1の実施形態の変形例の通信システムが有する受信装置の構成を示すブロック図である。 本発明の第1の実施形態の変形例の通信システムが有する受信装置の動作の手順を示すフローチャートである。 本発明の第2の実施形態の通信システムが有する受信装置の動作の手順を示すフローチャートである。 本発明の第2の実施形態の変形例の通信システムが有する受信装置の動作の手順を示すフローチャートである。
 図面を参照し、本発明の実施形態を説明する。
 (第1の実施形態)
 図1は、本発明の第1の実施形態の通信システム1の構成を示す。図1に示す通信システム1は、送信装置10および受信装置20を有する。送信装置10および受信装置20は、互いに無線通信を実施する。送信装置10は、画像データを連続的に受信装置20に送信する。受信装置20は、画像データを送信装置10から受信し、かつ記録する。また、受信装置20は、受信できなかった画像データの再送を要求するための再送要求を送信装置10に送信する。受信装置20は、画像データを受信後にリアルタイムに表示するリアルタイム表示のために、受信された画像データをモニタ30に出力する。ここで、画像データをリアルタイムに表示するとは、新たに受信した1フレームの画像データを、表示開始タイミングを示す同期信号の変化のタイミング毎に、受信したフレーム順に、表示することである。
 図2は、送信装置10の構成を示す。図2に示す送信装置10は、画像取得部100、画像データ生成部101、メモリ102(第1のメモリ)、通信部103(第1の無線通信機)、および再送処理部104を有する。
 送信装置10の概略構成について説明する。画像取得部100は、画像データを取得する。画像取得部100によって取得された画像データはメモリ102に一時的に記録される。通信部103は、シーケンス番号を含む画像データを受信装置20に送信し、かつ画像データの再送を要求するための再送要求を受信装置20から受信する。通信部103が再送要求を受信装置20から受信した場合、再送処理部104は、再送要求によって要求された画像データを、通信部103を使用することにより受信装置20に送信する再送処理を実行する。
 送信装置10の詳細な構成について説明する。画像取得部100は、イメージセンサ等の機器である。画像取得部100は、画像データをフレーム単位で取得し、かつその画像データを画像データ生成部101に出力する。画像取得部100は、外部装置のイメージセンサから出力された画像データが入力される通信インターフェースであってもよい。
 画像データ生成部101は、画像取得部100から取得された1フレームの画像データを、必要に応じて圧縮する。また、画像データ生成部101は、圧縮された画像データを通信単位に分割し、かつ符号化することにより、通信用の画像データ(分割データ)を生成する。画像データ生成部101は、少なくともシーケンス番号を含むヘッダ情報をその画像データに付加する。例えば、シーケンス番号は、1以上の整数である。連続的に送信される2つの画像データのシーケンス番号は連続している。シーケンス番号は、画像データの連続性を確認するために使用される。その後、画像データ生成部101は、その画像データをメモリ102および通信部103に出力する。画像データの圧縮、分割、および符号化は必須ではない。
 メモリ102は、画像データをバックアップするための揮発性または不揮発性の記録媒体である。例えば、メモリ102は、RAM(Random Access Memory)、DRAM(DynamicRandom Access Memory)、SRAM(Static Random Access Memory)、EEPROM(Electrically Erasable Programmable Read-Only Memory)、FRAM(登録商標)(Ferroelectric Random Access Memory)、およびフラッシュメモリの少なくとも1つである。
 メモリ102は、画像データ生成部101から出力された画像データを記憶する。シーケンス番号を含むデータ要求が通信部103から出力された場合、メモリ102は、そのシーケンス番号を持つ画像データを通信部103に出力する。シーケンス番号を含むデータ削除要求が通信部103から出力された場合、メモリ102は、そのシーケンス番号を持つ画像データを削除する。
 通信部103は、無線通信機である。通信部103は、アンテナ素子105と接続されている。通信部103は、画像データ生成部101から出力された画像データを受信装置20にリアルタイムに送信する。ここで、画像データをリアルタイムに送信するとは、新たに生成した1フレームの画像データを、生成したあとすぐに処理し、生成した順に送信することである。また、送信装置10の回路が送信開始タイミングを示す同期信号を生成してもよく、新たに生成した1フレームの画像データを、通信部103が同期信号の変化のタイミング毎に、生成したフレーム順に送信してもよい。さらに、この同期信号のタイミングは、受信装置20で生成される表示開始タイミングを示す同期信号と合わせてもよい。受信完了通知が受信装置20から受信された場合、通信部103はデータ削除要求をメモリ102に出力する。
 再送要求が受信装置20から受信された場合、通信部103はその再送要求を再送処理部104に出力する。再送処理部104は、再送要求に含まれるシーケンス番号を含むデータ要求をメモリ102に出力し、そのシーケンス番号を持つ画像データをメモリ102から通信部103へ出力させる。再送処理部104は、通信部103を制御することにより、画像データを受信装置20に再送する。
 画像データの再送の優先度は、画像データのリアルタイム送信の優先度よりも低い。例えば、リアルタイム送信のQoS(Quality of Service)を変更することにより、再送の優先度とリアルタイム送信の優先度とを異ならせる方法が使用されてもよい。図2に示されていない通信終了ボタンが押された場合、通信部103は、リアルタイム送信を終了するための終了通知を受信装置20に送信する。送信装置10は、アンテナ素子105を有してもよい。
 画像データ生成部101および再送処理部104は、プロセッサおよび論理回路の少なくとも1つで構成されてもよい。例えば、プロセッサは、CPU(Central Processing Unit)、DSP(Digital Signal Processor)、およびGPU(Graphics Processing Unit)の少なくとも1つである。例えば、論理回路は、ASIC(Application Specific Integrated Circuit)およびFPGA(Field-Programmable Gate Array)の少なくとも1つである。画像データ生成部101および再送処理部104は、1つまたは複数のプロセッサを含むことができる。画像データ生成部101および再送処理部104は、1つまたは複数の論理回路を含むことができる。
 画像データ生成部101および再送処理部104は、プログラムを読み込み、かつ読み込まれたプログラムを実行してもよい。そのプログラムは、画像データ生成部101および再送処理部104の動作を規定する命令を含む。つまり、画像データ生成部101および再送処理部104の機能はソフトウェアにより実現されてもよい。そのプログラムは、例えばフラッシュメモリのような「コンピュータ読み取り可能な記録媒体」により提供されてもよい。そのプログラムは、そのプログラムを保持するコンピュータから、伝送媒体を経由して、あるいは伝送媒体中の伝送波により送信装置10に伝送されてもよい。プログラムを伝送する「伝送媒体」は、情報を伝送する機能を有する媒体である。情報を伝送する機能を有する媒体は、インターネット等のネットワーク(通信網)および電話回線等の通信回線(通信線)を含む。上述したプログラムは、前述した機能の一部を実現してもよい。さらに、上述したプログラムは、差分ファイル(差分プログラム)であってもよい。コンピュータに既に記録されているプログラムと差分プログラムとの組合せが、前述した機能を実現してもよい。
 図3は、受信装置20の構成を示す。図3に示す受信装置20は、通信部200(第2の無線通信機)、表示データ生成部201、画像出力部202、記録部203、メモリ204(第2のメモリ)、再送候補抽出部205、再送制御部206、および再送要求部207を有する。
 受信装置20の概略構成について説明する。通信部200は、送信装置10によって送信され、かつシーケンス番号を含む画像データを受信する。通信部200の物理レートおよび画像データの通信レートがメモリ204に記録される。記録部203は、通信部200によって受信された画像データのシーケンス番号をメモリ204に記録する記録処理を実行する。画像出力部202は、通信部200によって受信された画像データをモニタ30に出力する画像出力処理を実行する。
 再送候補抽出部205は、メモリ204に記録されているシーケンス番号に基づいて再送候補を特定する特定処理を実行する。再送候補は、送信装置10によって送信され、かつ通信部200によって受信されていない画像データである。再送制御部206は、メモリ204に記録されている物理レートおよび通信レートに基づいて再送上限数を算出する算出処理を実行する。再送上限数は、再送が要求される画像データの数の上限である。再送制御部206は、例えば、1以上かつ再送上限数以下である再送許容数を設定する設定処理を実行する。特定処理を通して特定された再送候補の数が再送許容数を超えている場合、再送要求部207は、通信部200を使用することにより、再送許容数と同じ数の再送候補の再送を要求するための再送要求を送信装置10に送信する再送要求処理を実行する。
 受信装置20の詳細な構成について説明する。通信部200は、無線通信機である。通信部200は、アンテナ素子208と接続されている。通信部200は、送信装置10の通信部103と無線通信を実施する。通信部200は、送信装置10からリアルタイムに送信された画像データ(リアルタイム画像データ)を受信する。また、通信部200は、送信装置10から再送された画像データ(再送画像データ)を受信する。通信部200は、受信されたリアルタイム画像データを表示データ生成部201および記録部203に出力する。また、通信部200は、受信された再送画像データを記録部203に出力する。
 受信完了指示が記録部203から出力された場合、通信部200は、受信完了通知を生成し、かつその受信完了通知を送信装置10に送信する。受信完了指示は、1フレームの画像データの受信に割り当てられた時間が経過したことを示す。1フレームの画像データは、分割された複数の画像データで構成される。受信完了通知は、正しく受信できたリアルタイム画像データまたは再送画像データのシーケンス番号を含む。
 画像データの再送を送信装置10に要求するための再送要求指示が再送要求部207から出力された場合、通信部200は、再送要求を生成し、かつその再送要求を送信装置10に送信する。再送要求は、正しく受信できなかったリアルタイム画像データまたは再送画像データのシーケンス番号を含む。
 通信部200は、現在の物理レートおよび通信レート(所要レート)を記録部203に出力する。物理レートは、現在の通信部200が単位時間あたりに通信可能な最大データレートを示す。物理レートは、変調方式、符号化率、通信チャネル幅、およびストリーム数等に基づいて通信部200が決定する。通信レートは、画像データのリアルタイムな通信に必要なデータレートを示す。通信レートは、画像データの圧縮率、画像データに付与されるヘッダおよびフッタのサイズ、通信のオーバーヘッド、再送時間に必要となるマージン等に基づいて通信部200が決定する。終了通知が送信装置10から受信された後、リアルタイム送信は実施されない。そのため、通信レートは0となる。なお、物理レートはあらかじめメモリ204に記録されていてもよい。
 表示データ生成部201は、通信部200から出力されたリアルタイム画像データを復号化する。また、表示データ生成部201は、2つ以上のリアルタイム画像データを結合することにより、1フレームの画像データを生成する。表示データ生成部201は、生成された画像データを画像出力部202に出力する。
 画像出力部202は、図3に示されていない映像通信インターフェースを経由して画像データをモニタ30に出力する。モニタ30は、その画像データが示す画像を表示する。受信装置20がモニタを有してもよい。
 通信エラーが発生し、1フレームの画像データ内の分割されたリアルタイム画像データが所定時刻までに取得されない場合がある。その場合、受信装置20は、画像データが持つシーケンス番号を使用することによりその画像データの欠落を検出し、かつ画像データの欠落が発生したことを示すエラー表示を実施する。あるいは、受信装置20は、表示の更新を実施せず、過去に正しく表示できた画像をモニタ30に再度表示する。
 記録部203は、通信部200から出力されたリアルタイム画像データおよび再送画像データをメモリ204に記録する。これにより、各画像データに含まれるシーケンス番号がメモリ204に記録される。記録部203は、通信部200から取得された物理レートおよび通信レートをメモリ204に記録する。1フレームの画像データの受信に割り当てられた時間が経過したとき、記録部203は、受信完了指示を通信部200に出力する。
 メモリ102は、画像データを保存するための不揮発性の記録媒体である。例えば、メモリ102は、EEPROM、FRAM、およびフラッシュメモリの少なくとも1つである。物理レートおよび通信レートは、RAMまたはDRAMのような揮発性のメモリに記録されてもよい。
 再送候補抽出部205は、メモリ204に記録されているシーケンス番号に基づいて、シーケンス番号の連続性を確認する。シーケンス番号が連続していない箇所において、シーケンス番号の欠落が発生している。欠落しているシーケンス番号を持つ画像データは、送信装置10から送信されたが、正しくメモリ204に記録されていない。再送候補抽出部205は、正しく記録できなかった画像データのシーケンス番号を抽出する。これにより、再送候補抽出部205は再送候補を特定する。再送候補抽出部205は、抽出されたシーケンス番号を含む再送候補情報を再送制御部206に出力する。
 再送制御部206は、メモリ204に記録されている物理レートおよび所要レートに基づいて再送上限数を算出する。例えば、物理レートが1Mbit/フレーム、所要レートが0.6Mbit/フレーム、再送パケットのサイズが12Kbitとした場合、再送上限数は、(1Mbit-0.6Mbit)/12Kbit=33という式で示されるように33パケットとなる。再送制御部206は、再送上限数を超えない再送許容数を設定する(例えば、初期値として1パケット)。再送制御部206は、再送候補抽出部205から出力された再送候補情報に含まれるシーケンス番号から、再送許容数と同じ数のシーケンス番号を選択する。再送制御部206は、他の画像データよりも先に送信された画像データのシーケンス番号を優先的に選択してもよい。あるいは、再送制御部206は、ランダムにシーケンス番号を選択してもよい。再送制御部206は、選択されたシーケンス番号を含むシーケンス番号リストを再送要求部207に出力する。
 再送要求部207は、再送制御部206から出力されたシーケンス番号リストを含む再送要求指示を通信部200に出力する。再送要求部207は、通信部200を制御することにより再送要求を送信装置10に送信する。
 表示データ生成部201、画像出力部202、記録部203、再送候補抽出部205、再送制御部206、および再送要求部207は、プロセッサおよび論理回路の少なくとも1つで構成されてもよい。表示データ生成部201、画像出力部202、記録部203、再送候補抽出部205、再送制御部206、および再送要求部207は、1つまたは複数のプロセッサを含むことができる。表示データ生成部201、画像出力部202、記録部203、再送候補抽出部205、再送制御部206、および再送要求部207は、1つまたは複数の論理回路を含むことができる。
 表示データ生成部201、画像出力部202、記録部203、再送候補抽出部205、再送制御部206、および再送要求部207は、プログラムを読み込み、かつ読み込まれたプログラムを実行してもよい。そのプログラムは、送信装置10の画像データ生成部101および再送処理部104の機能を実現するプログラムと同様に実現される。
 図4、図5、および図6を参照し、受信装置20が実行する処理の流れを説明する。図4は、画像データの記録および画像データの再送の全体に関する処理を示す。
 (ステップS100)
 記録部203は、通信部200から取得されたリアルタイム画像データおよび再送画像データをメモリ204に記録する。これにより、各画像データに含まれるシーケンス番号がメモリ204に記録される。ステップS100は、記録処理に対応する。
 (ステップS105)
 ステップS100の後、再送候補抽出部205は、図3に示されていないタイマ等を使用することにより、1フレーム期間中の所定時間が経過するまで待機する。所定時間は、1フレームの画像データの受信に割り当てられた時間である。所定時間が経過するまで、ステップS100およびステップS105が繰り返し実行される。所定時間が経過した場合、ステップS110が実行される。
 (ステップS110)
 再送候補抽出部205は、メモリ204に記録されているシーケンス番号に基づいて、シーケンス番号の連続性を確認する。再送候補抽出部205は、正しく記録できなかった画像データのシーケンス番号を抽出する。抽出されたシーケンス番号は、再送候補である画像データを示す。再送候補抽出部205は、抽出されたシーケンス番号を含む再送候補情報を再送制御部206に出力する。ステップS110は、特定処理に対応する。
 (ステップS115)
 ステップS110の後、再送制御部206は、メモリ204に記録されている物理レートおよび所要レートに基づいて再送上限数を算出し、かつ再送許容数を設定する。画像データのリアルタイム送信を圧迫しない通信帯域を確保できる可能性が高い場合、すなわち、再送許容数よりも再送候補情報に含まれるシーケンス番号の数が少ない場合、再送制御部206は、再送候補抽出部205から出力された再送候補情報に含まれるシーケンス番号の全てを選択する。その通信帯域を確保できる可能性が低い(確保できない恐れがある)場合、すなわち、再送許容数よりも再送候補情報に含まれるシーケンス番号の数が多い場合、再送制御部206は、再送候補情報に含まれるシーケンス番号から、再送許容数と同じ数のシーケンス番号を選択する。再送制御部206は、選択されたシーケンス番号を含むシーケンス番号リストを再送要求部207に出力する。ステップS115は、算出処理および設定処理に対応する。
 (ステップS116)
 ステップS115の後、再送要求部207は、ステップ115で算出された再送要求数が0であるか否かを判断する。再送要求数が0であると再送要求部207が判断した場合、ステップS125が実行される。再送要求数が1以上であると再送要求部207が判断した場合、ステップS120が実行される。
 (ステップS120)
 再送要求部207は、再送制御部206から出力されたシーケンス番号リストを含む再送要求指示を通信部200に出力する。再送要求部207は、通信部200を制御することにより再送要求指示を送信装置10に送信する。ステップS120は、再送要求処理に対応する。
 (ステップS125)
 ステップS120の後、画像出力部202は、表示データ生成部201によって生成された1フレームの画像データをモニタ30に出力する。ステップS125は、画像出力処理に対応する。ステップS125は、ステップS110、ステップS115、またはステップS120が実行される前に実行されてもよい。
 (ステップS130)
 ステップS125の後、処理を終了するための条件が判断される。通信部200が終了通知を送信装置10から受信した場合、図4に示す処理が終了する。通信部200が終了通知を送信装置10から受信していない場合、現在のフレーム期間の次のフレーム期間においてステップS100が実行される。
 図5は、ステップS115における処理の詳細を示す。以下では、ステップS115における処理の詳細を説明する。
 (ステップS200)
 再送制御部206は、再送候補情報を再送候補抽出部205から取得する。
 (ステップS205)
 ステップS200の後、再送制御部206は、再送許容数を算出する。図6は、ステップS205における処理の詳細を示す。
 (ステップS300)
 再送制御部206は、物理レートおよび通信レートをメモリ204から取得する。
 (ステップS305)
 ステップS300の後、再送制御部206は、物理レートおよび通信レートに基づいて再送上限数を算出する。例えば、再送上限数は、以下の式(1)で表わされる。
  ULN=(PR-CR)/DL  (1)
 式(1)において、ULNは再送上限数を示し、PRは物理レートを示し、CRは通信レートを示す。式(1)において、DLは分割された1つの画像データのデータ長を示す。再送上限数は、物理レートおよび通信レートの差に基づいて算出される。式(1)を通して算出された数が整数ではない場合、再送制御部206は、算出された数の整数部のみを抽出し、かつその整数部を再送上限数として使用してもよい。ステップS305は、算出ステップに対応する。
 式(1)におけるデータ長DLは、送信装置10の画像データ生成部101が実行する圧縮処理に依存する。画像データ生成部101が固定長圧縮を使用する場合、データ長DLは予め設定された固定長である。その場合、メモリ102はデータ長DLを予め記憶している。再送制御部206は、データ長DLをメモリ102から取得する。
 画像データ生成部101が可変長圧縮を使用する場合、データ長DLはフレーム期間毎に変化する。その場合、送信装置10の通信部103は、データ長DLを含むデータ長通知をフレーム期間の最初に受信装置20に送信する。受信装置20の通信部200はデータ長通知を受信し、かつ記録部203に出力する。記録部203は、通信部200から出力されたデータ長通知に含まれるデータ長DLをメモリ204に記録する。再送制御部206は、データ長DLをメモリ102から取得する。
 (ステップS310)
 ステップS305の後、再送制御部206は、ステップS305において算出された再送上限数を再送許容数として設定する。再送制御部206は、1以上かつ再送上限数よりも小さい整数を再送許容数として設定してもよい。ステップS310は、設定ステップに対応する。ステップS310の後、図5に示すステップS210が実行される。
 (ステップS210)
 ステップS310の後、再送制御部206は、再送候補数と再送許容数とを比較する。再送候補数は、再送候補抽出部205から取得された再送候補情報に含まれるシーケンス番号の数と同じである。再送候補数は0以上の整数である。再送候補数が再送許容数を超える場合、ステップS215が実行される。再送候補数が再送許容数以下である場合、ステップS220が実行される。
 (ステップS215)
 再送候補数が再送許容数を超える場合、受信できなかった画像データの全ての再送に必要な通信帯域を確保することはできない可能性が高い。そのため、再送制御部206は、再送許容数を再送要求数として設定する。再送候補数が再送上限数を超える場合、再送要求数は再送許容数と同じ数に設定される。再送許容数は、ステップS305において算出された再送上限数と同じである。よって、再送候補数が再送上限数を超える場合、再送要求数は再送上限数と同じ数に設定される。
 (ステップS220)
 再送候補数が再送許容数以下である場合、受信できなかった画像データの全ての再送に必要な通信帯域を確保することができる。そのため、再送制御部206は、再送候補数を再送要求数として設定する。再送候補数が再送上限数を超えない場合、再送要求数は再送候補数と同じ数に設定される。
 (ステップS230)
 ステップS215またはステップS220の後、再送制御部206は、再送候補情報に含まれるシーケンス番号から、再送要求数と同じ数のシーケンス番号を選択する。再送制御部206は、選択されたシーケンス番号を含むシーケンス番号リストを再送要求部207に出力する。
 第1の実施形態において、受信できなかった画像データの数が再送許容数を超えている場合、受信装置20は、再送許容数と同じ数の画像データの再送を送信装置10に要求する。そのため、通信システム1は、リアルタイム表示に必要な通信を優先的に実施し、かつデータの再送を効率良く実施することができる。
 (第1の実施形態の変形例)
 本発明の第1の実施形態の変形例を説明する。図3に示す受信装置20は、図7に示す受信装置20aに変更される。図7は、受信装置20aの構成を示す。図7に示す受信装置20aは、通信部200、表示データ生成部201、画像出力部202、記録部203、メモリ204、再送候補抽出部205、再送制御部206、再送要求部207、およびブランキング期間検出部209を有する。図3に示す構成と同じ構成の説明を省略する。
 ブランキング期間検出部209は、プロセッサおよび論理回路の少なくとも1つで構成されてもよい。ブランキング期間検出部209は、1つまたは複数のプロセッサを含むことができる。ブランキング期間検出部209は、1つまたは複数の論理回路を含むことができる。ブランキング期間検出部209は、プログラムを読み込み、かつ読み込まれたプログラムを実行してもよい。
 表示データ生成部201は、同期信号を生成し、その同期信号に含まれる表示の垂直ブランキング信号をブランキング期間検出部209に出力する。ブランキング期間検出部209は、表示データ生成部201から出力された垂直ブランキング信号に基づいてブランキング期間の開始タイミングを検出する。そのタイミングが検出されたとき、ブランキング期間検出部209は、ブランキング期間の開始を示すタイミング情報を再送候補抽出部205に出力する。ブランキング期間は、1フレームの画像データの表示期間と次の1フレームの画像データの表示期間との間に発生する。
 再送候補抽出部205、再送制御部206、および再送要求部207は、ブランキング期間が開始されるまで、再送制御に関する処理を停止する。ブランキング期間が開始されたとき、タイミング情報がブランキング期間検出部209から再送候補抽出部205に出力される。このとき、再送候補抽出部205は処理を開始する。
 図4に示す処理は、図8に示す処理に変更される。図8を参照し、受信装置20aが実行する処理の流れを説明する。図4に示す処理と同じ処理の説明を省略する。
 (ステップS105a)
 図4に示すステップS105は、ステップS105aに変更される。ブランキング期間検出部209は、表示データ生成部201から出力された垂直ブランキング信号に基づいて、ブランキング期間が開始されたか否かを判断する。ブランキング期間が開始されるまで、ステップS100およびステップS105aが繰り返し実行される。ブランキング期間が開始されたとブランキング期間検出部209が判断したとき、ブランキング期間検出部209はタイミング情報を再送候補抽出部205に出力する。
 タイミング情報がブランキング期間検出部209から出力されたとき、再送候補抽出部205はステップS110を実行する。ステップS110、ステップS115、ステップS120、およびステップS125はブランキング期間に実行される。
 受信装置20aが画像データをフレーム期間に受信できなかった場合、受信装置20aは、その画像データの再送要求を、その画像データが受信されたフレーム期間に含まれるブランキング期間に送信装置10に送信する。受信装置20aは、その画像データの再送要求を、その画像データが受信されたフレーム期間よりも後のフレーム期間に含まれるブランキング期間に送信装置10に送信してもよい。
 図8に示す例では、再送候補抽出部205は、特定処理をブランキング期間に実行する。再送制御部206は、算出処理および設定処理をブランキング期間に実行する。再送要求部207は、再送要求処理をブランキング期間に実行する。ブランキング期間は、第1のタイミングから第2のタイミングまでの期間である。第1のタイミングは、1つ以上の画像データを含むN番目のフレームデータの最初の送信(リアルタイム送信)が終了した後である。この最初の送信は、再送要求に従う画像データの再送を含まない。第2のタイミングは、第1のタイミングよりも後、かつ1つ以上の画像データを含むN+1番目のフレームデータの最初の送信が始まる前である。Nは1以上の整数である。例えば、N番目のフレームデータは、N番目のフレーム期間に送信される1フレームの画像データであり、N+1番目のフレームデータは、N+1番目のフレーム期間に送信される1フレームの画像データである。
 再送要求部207は、1つ以上の画像データを含むK番目のフレームデータの最初の送信が終了した後のブランキング期間に再送要求処理を実行することにより、1つ以上の画像データを含むM番目のフレームデータの再送要求を送信装置10に送信してもよい。Mは1以上の整数である。KはM+1以上の整数である。例えば、M番目のフレームデータは、M番目のフレーム期間に送信される1フレームの画像データであり、K番目のフレームデータは、K番目のフレーム期間に送信される1フレームの画像データである。K番目のフレーム期間は、M番目のフレーム期間よりも後のフレーム期間である。
 第1の実施形態の変形例において、受信装置20aは、画像データの再送をブランキング期間に送信装置10に要求する。そのため、通信システム1は、リアルタイム表示に必要な通信を優先的に実施し、かつデータの再送を効率良く実施することができる。
 (第2の実施形態)
 本発明の第2の実施形態を説明する。第2の実施形態の通信システム1は、図2に示す送信装置10および図3に示す受信装置20を有する。
 再送制御部206は、第1の実施形態における算出処理および設定処理に加えて、再送成功数を確認する確認処理をさらに実行する。再送成功数は、再送要求が送信された後、受信に成功した再送候補の数である。再送制御部206は、設定処理において、再送成功数を再送許容数として設定する。
 受信装置20が実行する処理の流れを説明する。受信装置20は、図4、図5、および図9に示す処理を実行する。図6に示す処理は、図9に示す処理に変更される。図4および図5に示す処理の説明を省略する。以下では、図9に示す処理の詳細を説明する。図6に示す処理と同じ処理の説明を省略する。
 (ステップS320)
 ステップS305の後、再送制御部206は、前回生成されたシーケンス番号リストと、メモリ204に記録されているシーケンス番号とに基づいて、再送成功数を取得する。シーケンス番号リストは、再送が要求された画像データのシーケンス番号を含む。前回生成されたシーケンス番号リストは、現在のフレーム期間の1つ前のフレーム期間に生成されたシーケンス番号リストである。送信装置10が画像データを再送し、かつ通信部200がその画像データを受信した場合、その画像データのシーケンス番号がメモリ204に記録されている。再送制御部206は、シーケンス番号リストに含まれるシーケンス番号(第1のシーケンス番号)と、メモリ204に記録されているシーケンス番号(第2のシーケンス番号)とを比較する。再送制御部206は、第1のシーケンス番号と一致する第2のシーケンス番号の数を再送成功数として取得する。再送成功数は、0以上の整数である。ステップS320は、確認処理に対応する。
 (ステップS321)
 ステップS320の後、再送制御部206は、ステップS320において算出された再送成功数が0であるか否かを判断する。再送成功数が0であると再送制御部206が判断した場合、ステップS322が実行される。再送成功数が1以上であると再送制御部206が判断した場合、ステップS325が実行される。
 (ステップS322)
 再送制御部206は、最低再送許容数(例えば、1)を再送許容数として設定する。なお、最低再送許容数は1以外の所定の値としてもよい。ステップS322の後、図5に示すステップS210が実行される。
 (ステップS325)
 ステップS320の後、再送制御部206は、ステップS320において算出された再送成功数と前回の再送要求数とに基づいて再送成功確率を算出する。前回の再送要求数は、前回生成されたシーケンス番号リストに含まれるシーケンス番号の数である。再送成功確率は、以下の式(2)で表される。
  PS=SN/RN  (2)
 式(2)において、PSは再送成功確率を示し、SNは再送成功数を示し、RNは再送要求数を示す。
 (ステップS330)
 ステップS325の後、再送制御部206は、ステップS325において算出された再送成功確率が100%であるか否かを判断する。再送成功確率が100%であると再送制御部206が判断した場合、ステップS310が実行される。再送成功確率が100%ではないと再送制御部206が判断した場合、ステップS335が実行される。
 (ステップS335)
 再送制御部206は、ステップS320において取得された再送成功数を再送許容数として設定する。ステップS335は、設定ステップに対応する。ステップS335の後、図5に示すステップS210が実行される。
 前回の再送成功確率が100%ではない場合、前回の再送成功数は前回の再送要求数よりも小さい。再送要求数は、再送許容数以下である。再送成功確率が100%ではない場合、前回の再送成功数は前回の再送許容数よりも小さい。その再送成功数がステップS335において再送許容数として設定されるため、新しい再送許容数は前回の再送許容数よりも小さい。ただし、再送成功確率が0%である場合においても、再送許容数の下限値は1に設定される。これにより、再送が実行できる状況であるか否かを監視することができる。
 送信装置10または受信装置20の周囲に干渉信号の発生源等が近づき、通信状態が瞬間的に悪化する場合がある。その場合、受信装置20は、前回の再送成功数を再送許容数として設定することにより、新しい再送許容数を前回の再送許容数よりも減らす。送信装置10が再送できる画像データの数は減るけれども、通信システム1は、データの再送を効率良く実施することができる。
 (第2の実施形態の変形例)
 本発明の第2の実施形態の変形例を説明する。設定処理を通して設定された再送許容数と、確認処理を通して確認された再送成功数とが一致する場合、再送制御部206は、設定処理を再度実行することにより、再送許容数を増加させる。
 受信装置20が実行する処理の流れを説明する。受信装置20は、図4、図5、および図10に示す処理を実行する。図9に示す処理は、図10に示す処理に変更される。図4および図5に示す処理の説明を省略する。以下では、図10に示す処理の詳細を説明する。図9に示す処理と同じ処理の説明を省略する。
 (ステップS340)
 再送成功確率が100%であると再送制御部206がステップS330において判断した場合、再送制御部206は、ステップS320において取得された再送成功数が、ステップS305において算出された再送上限数よりも大きいか否かを判断する。例えば、物理レートが前回から変更され、再送成功数が再送上限数よりも大きいと再送制御部206が判断した場合、ステップS310が実行される。再送成功数が再送上限数以下であると再送制御部206が判断した場合、ステップS345が実行される。
 (ステップS345)
 再送制御部206は、ステップS320において取得された再送成功数に所定数Aを加えた数を再送許容数として設定する。所定数Aは、1以上の整数である。再送許容数が再送上限数を超えないように所定数Aが調整される。ステップS345は、設定ステップに対応する。ステップS345の後、図5に示すステップS210が実行される。
 前回の再送成功確率が100%であり、かつ前回の再送成功数が現在の再送上限数以下である場合、ステップS345が実行される。ステップS345において前回の再送成功数に所定数Aを加えた数が新たな再送許容数として設定される。前回の再送成功確率が100%である場合、前回の再送成功数は前回の再送要求数と同じである。そのため、新たな再送許容数は前回の再送要求数よりも大きい。ステップS345が実行されたとき、再送許容数は増加する。
 送信装置10または受信装置20の周囲にある干渉信号の発生源等が遠ざかるにしたがい、再送許容数は少しずつ増加する。そのため、受信装置20は、画像データのリアルタイム送信への影響を確認しながら再送許容数を復帰させることができる。したがって、受信装置20は、画像データのリアルタイム送信への影響を少なくすることができる。
 以上、本発明の好ましい実施形態を説明したが、本発明はこれら実施形態およびその変形例に限定されることはない。本発明の趣旨を逸脱しない範囲で、構成の付加、省略、置換、およびその他の変更が可能である。また、本発明は前述した説明によって限定されることはなく、添付のクレームの範囲によってのみ限定される。
 本発明の各実施形態によれば、受信装置、通信システム、および記録媒体は、リアルタイム表示に必要な通信を優先的に実施し、かつデータの再送を効率良く実施することができる。
 1 通信システム
 10 送信装置
 20,20a 受信装置
 30 モニタ
 100 画像取得部
 101 画像データ生成部
 102,204 メモリ
 103,200 通信部
 104 再送処理部
 105,208 アンテナ素子
 201 表示データ生成部
 202 画像出力部
 203 記録部
 205 再送候補抽出部
 206 再送制御部
 207 再送要求部
 209 ブランキング期間検出部

Claims (7)

  1.  送信装置によって送信され、かつシーケンス番号を含む画像データを受信する無線通信機と、
     前記無線通信機の物理レートおよび前記画像データの通信レートが記録されるメモリと、
     1つまたは複数のプロセッサと、
     を備え、
     前記1つまたは複数のプロセッサは、
      前記無線通信機によって受信された前記画像データの前記シーケンス番号を前記メモリに記録する記録処理と、
      前記無線通信機によって受信された前記画像データをモニタに出力する画像出力処理と、
      前記メモリに記録されている前記シーケンス番号に基づいて再送候補を特定し、前記再送候補は、前記送信装置によって送信され、かつ前記無線通信機によって受信されていない前記画像データである特定処理と、
      前記メモリに記録されている前記物理レートおよび前記通信レートに基づいて再送上限数を算出し、前記再送上限数は、再送が要求される前記画像データの数の上限である算出処理と、
      前記再送上限数以下である再送許容数を設定する設定処理と、
      前記特定処理を通して特定された前記再送候補の数が前記再送許容数を超えている場合、前記無線通信機を使用することにより、前記再送許容数と同じ数の前記再送候補の再送を要求するための再送要求を前記送信装置に送信する再送要求処理と、
     を実行する受信装置。
  2.  前記1つまたは複数のプロセッサは、前記再送要求処理をブランキング期間に実行し、
      前記ブランキング期間は、第1のタイミングから第2のタイミングまでの期間であり、前記第1のタイミングは、1つ以上の前記画像データを含むN番目のフレームデータの最初の送信が終了した後であり、前記第2のタイミングは、前記第1のタイミングよりも後、かつ1つ以上の前記画像データを含むN+1番目のフレームデータの最初の送信が始まる前であり、Nは1以上の整数であり、
     前記1つまたは複数のプロセッサは、1つ以上の前記画像データを含むK番目のフレームデータの最初の送信が終了した後の前記ブランキング期間に前記再送要求処理を実行することにより、1つ以上の前記画像データを含むM番目のフレームデータの前記再送要求を前記送信装置に送信し、Mは1以上の整数であり、かつKはM+1以上の整数である
     請求項1に記載の受信装置。
  3.  前記1つまたは複数のプロセッサは、再送成功数を確認する確認処理をさらに実行し、
     前記再送成功数は、前記再送要求が送信された後、受信に成功した前記再送候補の数であり、
     前記1つまたは複数のプロセッサは、前記設定処理において、前記再送成功数を前記再送許容数として設定する
     請求項2に記載の受信装置。
  4.  前記設定処理を通して設定された前記再送許容数と、前記確認処理を通して確認された前記再送成功数とが一致する場合、前記1つまたは複数のプロセッサは、前記設定処理を再度実行することにより、前記再送許容数を増加させる
     請求項3に記載の受信装置。
  5.  前記1つまたは複数のプロセッサは、再送成功数を確認する確認処理をさらに実行し、
     前記再送成功数は、前記再送要求が送信された後、受信に成功した前記再送候補の数であり、
     前記設定処理を通して設定された前記再送許容数と、前記確認処理を通して確認された前記再送成功数とが一致する場合、前記1つまたは複数のプロセッサは、前記設定処理を再度実行することにより、前記再送許容数を増加させる
     請求項2に記載の受信装置。
  6.  送信装置および受信装置を備え、
     前記送信装置は、
     画像データを取得する画像取得部と、
     前記画像取得部によって取得された前記画像データが一時的に記録される第1のメモリと、
     シーケンス番号を含む前記画像データを前記受信装置に送信し、かつ前記画像データの再送を要求するための再送要求を前記受信装置から受信する第1の無線通信機と、
     前記第1の無線通信機が前記再送要求を前記受信装置から受信した場合、前記再送要求によって要求された前記画像データを、前記第1の無線通信機を使用することにより前記受信装置に送信する再送処理を実行する1つまたは複数の第1のプロセッサと、
     を備え、
     前記受信装置は、
     前記画像データを前記送信装置から受信する第2の無線通信機と、
     前記第2の無線通信機の物理レートおよび前記画像データの通信レートが記録される第2のメモリと、
     1つまたは複数の第2のプロセッサと、
     を備え、
     前記1つまたは複数の第2のプロセッサは、
      前記第2の無線通信機によって受信された前記画像データの前記シーケンス番号を前記第2のメモリに記録する記録処理と、
      前記第2の無線通信機によって受信された前記画像データをモニタに出力する画像出力処理と、
      前記第2のメモリに記録されている前記シーケンス番号に基づいて再送候補を特定し、前記再送候補は、前記送信装置によって送信され、かつ前記第2の無線通信機によって受信されていない前記画像データである特定処理と、
      前記第2のメモリに記録されている前記物理レートおよび前記通信レートに基づいて再送上限数を算出し、前記再送上限数は、再送が要求される前記画像データの数の上限である算出処理と、
      前記再送上限数以下である再送許容数を設定する設定処理と、
      前記特定処理を通して特定された前記再送候補の数が前記再送許容数を超えている場合、前記第2の無線通信機を使用することにより、前記再送許容数と同じ数の前記再送候補の再送を要求するための再送要求を前記送信装置に送信する再送要求処理と、
     を実行する通信システム。
  7.  受信装置の1つまたは複数のプロセッサに記録処理、画像出力処理、特定処理、算出処理、設定処理、および再送要求処理を実行させるためのプログラムを記録したコンピュータ読み取り可能な非一時的記録媒体であって、
     前記受信装置は、
     送信装置によって送信され、かつシーケンス番号を含む画像データを受信する無線通信機と、
     前記無線通信機の物理レートおよび前記画像データの通信レートが記録されるメモリと、
     前記1つまたは複数のプロセッサと、
     を備え、
     前記1つまたは複数のプロセッサは、
      前記無線通信機によって受信された前記画像データの前記シーケンス番号を前記メモリに記録する前記記録処理と、
      前記無線通信機によって受信された前記画像データをモニタに出力する前記画像出力処理と、
      前記メモリに記録されている前記シーケンス番号に基づいて再送候補を特定し、前記再送候補は、前記送信装置によって送信され、かつ前記無線通信機によって受信されていない前記画像データである前記特定処理と、
      前記メモリに記録されている前記物理レートおよび前記通信レートに基づいて再送上限数を算出し、前記再送上限数は、再送が要求される前記画像データの数の上限である前記算出処理と、
      前記再送上限数以下である再送許容数を設定する前記設定処理と、
      前記特定処理を通して特定された前記再送候補の数が前記再送許容数を超えている場合、前記無線通信機を使用することにより、前記再送許容数と同じ数の前記再送候補の再送を要求するための再送要求を前記送信装置に送信する前記再送要求処理と、
     を実行する記録媒体。
PCT/JP2020/006781 2020-02-20 2020-02-20 受信装置、通信システム、および記録媒体 WO2021166159A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2022501508A JP7286868B2 (ja) 2020-02-20 2020-02-20 受信装置、通信システム、および記録媒体
PCT/JP2020/006781 WO2021166159A1 (ja) 2020-02-20 2020-02-20 受信装置、通信システム、および記録媒体
US17/851,419 US11689320B2 (en) 2020-02-20 2022-06-28 Reception device, communication system, and recording medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2020/006781 WO2021166159A1 (ja) 2020-02-20 2020-02-20 受信装置、通信システム、および記録媒体

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US17/851,419 Continuation US11689320B2 (en) 2020-02-20 2022-06-28 Reception device, communication system, and recording medium

Publications (1)

Publication Number Publication Date
WO2021166159A1 true WO2021166159A1 (ja) 2021-08-26

Family

ID=77392241

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/006781 WO2021166159A1 (ja) 2020-02-20 2020-02-20 受信装置、通信システム、および記録媒体

Country Status (3)

Country Link
US (1) US11689320B2 (ja)
JP (1) JP7286868B2 (ja)
WO (1) WO2021166159A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113473086B (zh) * 2021-07-06 2022-09-06 阿波罗智联(北京)科技有限公司 视频播放的方法、装置、电子设备、智慧高速大屏

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006054721A (ja) * 2004-08-12 2006-02-23 Sony Corp 受信装置および方法、記録媒体、プログラム、並びに通信システム
JP2017208707A (ja) * 2016-05-18 2017-11-24 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置、情報処理システム、撮像装置、ヘッドマウントディスプレイ、および情報処理方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170230149A1 (en) * 2013-07-11 2017-08-10 InterDigital Pantent Holdings, Inc. Systems and methods for smart harq for wifi
JP2015095705A (ja) 2013-11-11 2015-05-18 株式会社 日立産業制御ソリューションズ 映像監視システム
US20190158249A1 (en) * 2016-05-06 2019-05-23 Ntt Docomo, Inc. User terminal and radio communication method
US10973008B2 (en) * 2018-03-12 2021-04-06 Apple Inc. Wireless device preferred bandwidth part configuration and duty cycle indication
US10863389B2 (en) * 2018-03-12 2020-12-08 Apple Inc. Network assisted wireless device preferred bandwidth part configuration

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006054721A (ja) * 2004-08-12 2006-02-23 Sony Corp 受信装置および方法、記録媒体、プログラム、並びに通信システム
JP2017208707A (ja) * 2016-05-18 2017-11-24 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置、情報処理システム、撮像装置、ヘッドマウントディスプレイ、および情報処理方法

Also Published As

Publication number Publication date
US11689320B2 (en) 2023-06-27
JPWO2021166159A1 (ja) 2021-08-26
JP7286868B2 (ja) 2023-06-05
US20220329356A1 (en) 2022-10-13

Similar Documents

Publication Publication Date Title
US9661685B2 (en) Wireless communication system and communication device therefor
CN111432169B (zh) 视频传输方法、装置、设备和系统
WO2021166159A1 (ja) 受信装置、通信システム、および記録媒体
EP1097671A2 (en) Remote medical service system using communications network and method therefor
US20150145979A1 (en) Radio communication system and communication method
US10390017B2 (en) Compressed image data transmitting device, compressed image data transmitting and receiving system, compressed image data transmitting method, and non-transitory medium saving program
CN109199354B (zh) 一种心率数据采集方法及心率测量设备
JP2009172280A (ja) 内視鏡装置
JP2000350217A (ja) 動画送信/受信装置、及び動画データ記録媒体
US10594361B2 (en) Communication system, communication apparatus, communication method, hopping pattern determining method and program
US10764616B2 (en) Image transmission apparatus, image transmission method, and recording medium
JP2001268093A (ja) データ伝送装置
CN107454462B (zh) 一种数据传输方法、装置及系统
US11184502B2 (en) Communication system, reception terminal, communication method, and recording medium
JPH11331261A (ja) パケット通信装置
US11316627B2 (en) Communication system, transmission device, communication method, and recording medium
JP2006094270A (ja) 無線通信方法および無線通信システム
CN113824851A (zh) 图像处理方法、装置、存储介质及电子设备
GB2544289B (en) Method and device for transmission of video data packets
CN107004061B (zh) 传输数据的方法及装置、第一设备
CN116705280A (zh) 一种超声图像的远程传输控制系统及方法
JP4245095B2 (ja) 画像送信装置
JP2004328022A (ja) 無線伝送システム
JP2007036902A (ja) 画像データ受信装置及び画像データ受信方法
KR20120121478A (ko) 의료기기를 이용한 의료 영상 제공 시스템 및 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20919500

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2022501508

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20919500

Country of ref document: EP

Kind code of ref document: A1