WO2018107338A1 - 图像信号处理方法和装置 - Google Patents

图像信号处理方法和装置 Download PDF

Info

Publication number
WO2018107338A1
WO2018107338A1 PCT/CN2016/109528 CN2016109528W WO2018107338A1 WO 2018107338 A1 WO2018107338 A1 WO 2018107338A1 CN 2016109528 W CN2016109528 W CN 2016109528W WO 2018107338 A1 WO2018107338 A1 WO 2018107338A1
Authority
WO
WIPO (PCT)
Prior art keywords
slice
pixels
image
image frame
storage space
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/CN2016/109528
Other languages
English (en)
French (fr)
Inventor
朱磊
王晓东
龚明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SZ DJI Technology Co Ltd
Original Assignee
SZ DJI Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SZ DJI Technology Co Ltd filed Critical SZ DJI Technology Co Ltd
Priority to CN201680002556.1A priority Critical patent/CN106717000A/zh
Priority to PCT/CN2016/109528 priority patent/WO2018107338A1/zh
Publication of WO2018107338A1 publication Critical patent/WO2018107338A1/zh
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel

Definitions

  • Embodiments of the present invention relate to the field of image processing technologies, and in particular, to an image signal processing method and apparatus.
  • Ultra-low latency video transmission is currently the key technology in wireless video live broadcast, remote machine vision and wireless image transmission of drones.
  • the processing modules at various levels generally use a frame-level interaction mode to transmit images, that is, the processing modules at various levels usually process after completing one frame of image processing, and complete processing of one frame of image. After that, the transmission starts.
  • the encoding device performs encoding after receiving a frame of image from the image signal processing device, and after transmitting the encoding of the frame image, transmits to the transmitter, and at the receiving end, the decoder is in the slave
  • the receiver performs encoding after receiving one frame of image, and sends it to the display controller after decoding one frame of image.
  • Such a video transmission method does not utilize the overall delay of reducing video transmission, which hinders the development of ultra-low delay video transmission technology.
  • Embodiments of the present invention provide an image signal processing method and apparatus capable of reducing transmission delay of video transmission.
  • an image signal processing method comprising: acquiring pixels in a slice of an image frame captured by a visual sensor, wherein the slice comprises pixels in an unprocessed pixel included in the image frame Part of processing the pixels in the slice; transmitting the slice in response to processing the pixels in the slice.
  • an image encoding method including: acquiring a slice of an image frame, wherein the slice includes a pixel that is a part of an uncoded pixel included in the image frame; and performing the slice Encoding; transmitting the slice in response to encoding the pixels in the slice.
  • an image processing method comprising: acquiring pixels in a slice of an image frame captured by a visual sensor, wherein the slice comprises pixels in an unprocessed pixel included in the image frame Part of: processing pixels in the slice; encoding the slice in response to processing the pixels in the slice; transmitting the slice in response to encoding the pixels in the slice .
  • a fourth aspect provides an image decoding method, including: acquiring a slice of an image frame, wherein the slice includes a pixel that is a part of an undecoded pixel included in the image frame; The slice is decoded; the slice is transmitted in response to decoding the pixels in the slice.
  • a fifth aspect provides a display control method, comprising: receiving a slice of an image frame, wherein the slice includes a pixel that is a part of an undisplayed pixel included in the image frame; The pixels in the slice are displayed and outputted.
  • a sixth aspect provides an image processing method, including: acquiring a slice of an image frame, wherein the slice includes a pixel that is a part of an undecoded pixel included in the image frame; Decoding; in response to decoding the pixels in the slice, the slice is displayed and output.
  • an image signal processing apparatus comprising: an acquisition module, configured to acquire pixels in a slice of an image frame captured by a visual sensor, wherein the slice includes pixels that are included in the image frame a portion of the unprocessed pixels; a processing module for processing pixels in the slice; and a transmission module for transmitting the slice in response to processing the pixels in the slice.
  • an image signal processing apparatus comprising: at least one memory for storing computer executable instructions; at least one processor, used alone or collectively, for accessing the at least one memory and performing the The computer executable instructions to perform the operations in the method of the first aspect.
  • a ninth aspect provides an encoding apparatus, including: an acquiring module, configured to acquire a fragment of an image frame, where the fragment includes a pixel that is part of an uncoded pixel included in the image frame; and an encoding module And the encoding module is configured to transmit the fragment in response to encoding the pixels in the fragment.
  • an encoding apparatus comprising: at least one memory for storing computer executable instructions; at least one processor, used alone or collectively, for: accessing the at least one memory, and executing the computer Executing instructions to perform the operations in the method of the second aspect Work.
  • an image processing apparatus comprising: an acquisition module, configured to acquire pixels in a slice of an image frame captured by a visual sensor, wherein the slice includes pixels that are included in the image frame a portion of the unprocessed pixels; a processing module for processing pixels in the slice; an encoding module, configured to encode the slice in response to processing the pixels in the slice; And a module for transmitting the slice in response to encoding the pixels in the slice.
  • an image processing apparatus comprising: at least one memory for storing computer executable instructions; and at least one processor, singly or collectively, for accessing the at least one memory and performing the The computer executable instructions to perform the operations in the method of the third aspect.
  • a decoding apparatus comprising: an obtaining module, configured to acquire a slice of an image frame, wherein the slice includes a pixel that is part of an undecoded pixel included in the image frame a decoding module, configured to decode the slice; and a transmission module, configured to transmit the slice in response to decoding the pixel in the slice.
  • a decoding apparatus comprising: at least one memory for storing computer executable instructions; and at least one processor, singly or collectively, for accessing the at least one memory and performing the The computer executable instructions to perform the operations in the method of the fourth aspect.
  • a display control apparatus includes: a receiving module, configured to receive a slice of an image frame, where the slice includes a pixel that is part of an undisplayed pixel included in the image frame; And a module, configured to display and output the slice in response to receiving pixels in the slice.
  • a display control apparatus comprising: at least one memory for storing computer executable instructions; and at least one processor, singly or collectively, for accessing the at least one memory and performing the The computer executable instructions to perform the operations in the method of the fifth aspect.
  • a seventeenth aspect provides an image processing apparatus, comprising: an obtaining module, configured to acquire a slice of an image frame, wherein the slice includes a pixel that is part of an undecoded pixel included in the image frame. a decoding module, configured to decode the slice; and a display module, configured to display and output the slice in response to decoding the pixel in the slice.
  • an image processing apparatus comprising: at least one memory for Storing computer executable instructions; at least one processor, alone or collectively, for accessing the at least one memory and executing the computer executable instructions to perform the operations of the method of the sixth aspect.
  • an image processing system comprising: a visual sensor for capturing pixels of an image frame; and the image signal processing device according to the seventh aspect or the eighth aspect, connected to the visual sensor; An encoding apparatus according to the ninth or tenth aspect, coupled to the image signal processing apparatus; a transmitter coupled to the encoding apparatus for responding to receiving pixels in the slice of the image frame, The slice is transmitted.
  • an image processing system comprising: a receiver for receiving a slice of an image frame.
  • the decoding device according to the thirteenth aspect or the fourteenth aspect, wherein the display device is connected to the receiver, the display control device according to the fifteenth or sixteenth aspect, and the decoding device And a display connected to the display control device for displaying according to an output of the display control device.
  • an image processing system comprising: a visual sensing device for capturing an image frame; the image processing device according to the eleventh or twelfth aspect, relating to the visual sensing device And a transmitter coupled to the image processing device for transmitting the slice in response to receiving pixels in the slice of the image frame.
  • an image processing system comprising: a receiver for receiving a slice of an image frame.
  • An image processing apparatus according to the seventeenth aspect or the eighteenth aspect, which is connected to the receiver; and a display connected to the image processing apparatus for displaying in accordance with an output of the image processing apparatus.
  • the embodiment of the present invention can transmit pixels of an image frame in units of slices without starting to transmit the image frame after processing one image frame, the transmission delay is reduced, and the user experience is improved.
  • FIG. 1 is a schematic structural diagram of a transmitting end of a video transmission according to an embodiment of the present invention.
  • FIG. 2 is a block diagram showing the structure of a receiving end of a video transmission according to an embodiment of the present invention.
  • FIG. 3 is a schematic flow chart of an image signal processing method according to an embodiment of the present invention.
  • FIG. 4 is a schematic flow chart of an image encoding method according to an embodiment of the present invention.
  • FIG. 5 is a schematic flow chart of an image processing method according to an embodiment of the present invention.
  • FIG. 6 is a schematic flowchart of an image encoding method according to an embodiment of the present invention.
  • FIG. 7 is a schematic flow chart of a display control method according to an embodiment of the present invention.
  • FIG. 8 is a schematic flow chart of an image processing method according to an embodiment of the present invention.
  • FIG. 9 is a schematic structural diagram of an image signal processing apparatus according to an embodiment of the present invention.
  • Figure 10 is a block diagram showing the structure of a computer device in accordance with an embodiment of the present invention.
  • FIG. 11 is a schematic structural diagram of an encoding apparatus according to an embodiment of the present invention.
  • FIG. 12 is a schematic structural diagram of an image processing apparatus according to an embodiment of the present invention.
  • FIG. 13 is a schematic structural diagram of a decoding apparatus according to an embodiment of the present invention.
  • FIG. 14 is a schematic structural diagram of a display control apparatus according to an embodiment of the present invention.
  • FIG. 15 is a schematic structural diagram of an image processing apparatus according to an embodiment of the present invention.
  • FIG. 1 is a schematic structural diagram of a transmitting end 100 of a video transmission according to an embodiment of the present invention.
  • the transmitting end 100 includes an image signal processor (ISP) 110, an encoder 120, a transmitter 130, a memory 140, a transmitting antenna 150, and a visual sensor 160.
  • ISP image signal processor
  • the ISP 110 is connected to the vision sensor 160, which can be connected to the vision sensor 160, for example, via a Mobile Industry Processor Interface (MIPI).
  • the ISP 110 is configured to receive image data from the vision sensor 160, such as pixels of an image frame, and pre-process pixels of the image frame, for example, linearly correct pixels of the image frame, noise removal, dead point removal, interpolation, white Balance, automatic exposure control and other processing.
  • the ISP 160 is also used to transmit pixels of an image frame in units of slices. For example, as shown in FIG. 1, ISP 110 can directly transmit fragments through a communication interface between ISP 110 and encoder 120. Alternatively, ISP 110 can also divide The slice is written to the memory 140 so that the encoder 120 reads the slice from the memory 140.
  • the ISP 110 may also be referred to as an image signal processing unit or an image signal processing device.
  • the ISP 110 can be implemented, for example, by a system on a chip.
  • the fragmentation of the image frame refers to a part of the image frame, that is, the fragment includes a smaller number of pixels than the image frame, and the fragment may include at least one row of pixels of the pixel frame or at least A column of pixels, for example, 16 rows of pixels or 16 columns of pixels.
  • the encoder 120 is configured to encode the ISP-processed pixels in units of slices, and transmit the pixels of the encoded image frames in units of slices. For example, encoder 120 may send the encoded slice to memory 140 such that transmitter 130 reads the encoded slice from memory 140. Alternatively, encoder 120 may also transmit the encoded segments directly to transmitter 130. Encoder 120 may also be referred to as a coding unit or an encoding device.
  • the transmitter 130 is configured to receive pixels of an image frame from the encoder 120 in units of slices, and transmit pixels of the image frame through the transmitting antenna 150 in units of slices.
  • the memory 140 is configured to buffer pixels of an image frame processed by the above module.
  • the memory 140 may be, for example, a dynamic random access memory (DRAM).
  • DRAM dynamic random access memory
  • the memory 140 may be configured as an entity, or may be configured as a plurality of entities respectively distributed between the different modules.
  • Vision sensor 160 can be any type of visual sensor for capturing image data, such as a complementary metal oxide semiconductor (CMOS) sensor on a camera, camera, or other device including a camera or camera.
  • CMOS complementary metal oxide semiconductor
  • FIG. 1 illustrates the example in which the ISP 110 and the visual sensor 110 directly transmit the slice
  • the embodiment of the present invention is not limited thereto.
  • the ISP 110 may also transmit the slice to the encoder 120 through the memory 140.
  • FIG. 1 illustrates the case where the encoder 120 and the transmitter 130 sense the slice through the memory 140
  • the embodiment of the present invention is not limited thereto.
  • the encoder 120 may also directly transmit the slice to the transmitter 130.
  • FIG. 1 is described by taking an image signal processor and an encoder as separate entities, the embodiment of the present invention is not limited thereto.
  • the encoding function and the image signal processing function may also be set in In an entity, for example, it is set in the image processor.
  • FIG. 2 is a block diagram showing the structure of a receiving end 200 of a video transmission according to an embodiment of the present invention.
  • the receiving end 200 includes a display controller 210, a decoder 220, a receiver 230, a memory 240, Receive antenna 250 and display 260.
  • the receiver 230 is configured to receive pixels of an image frame through the receiving antenna 250 in units of slices, and transmit pixels of the image frame in units of slices. For example, receiver 230 stores the shards in memory 240 so that decoder 220 reads the shards from memory 240. Alternatively, receiver 230 may also transmit the slice directly to decoder 220.
  • the decoder 220 is configured to decode the pixels of the image frame received from the receiver 230 in units of slices, and send the pixels of the decoded image frame to the display controller in units of slices. 210. For example, as shown in FIG. 2, decoder 220 can transmit slices directly to display controller 210. Alternatively, decoder 220 may also cache the slices in memory 240 for display controller 210 to read the slices from memory 240.
  • the display controller 210 is configured to receive pixels of the decoded image frame from the decoder 220 in units of slices, and display pixels of the image frame through the display 260.
  • the memory 240 is used to buffer pixels of an image frame processed by the above module.
  • the memory 240 may be, for example, a dynamic random access memory (DRAM).
  • DRAM dynamic random access memory
  • the memory 240 may be configured as an entity or may be configured as a plurality of entities distributed between the different modules.
  • FIG. 2 illustrates the case where the receiver 230 and the decoder 220 transmit the slice through the memory 240
  • the embodiment of the present invention is not limited thereto.
  • the receiver 230 may also directly transmit to the decoder 220. Transfer the slice.
  • FIG. 2 illustrates the example in which the decoder 220 directly transmits the slice to the display controller 210, the embodiment of the present invention is not limited thereto.
  • the decoder 220 and the display controller 210 sense the minute through the memory 240. sheet.
  • FIG. 2 illustrates the decoder and the display controller as independent entities
  • the embodiment of the present invention is not limited thereto.
  • the decoding function and the display control function may also be set in In one entity, for example, it is provided in an image processing apparatus.
  • FIG. 3 is a schematic flow chart of an image signal processing method according to an embodiment of the present invention.
  • the embodiment of Figure 3 can be performed by the image signal processing device, image signal processor or image processing unit of Figure 1.
  • an image signal processing device will be described as an example.
  • the image signal processing method of FIG. 3 includes the following.
  • an image frame may include a plurality of slices having the same number of pixels, but embodiments of the present invention are not limited thereto, and the image frame may also include a plurality of slices having different numbers of pixels, for example, may be preset Different slices in one pixel have a different number of pixels.
  • the fragments of different service types may also be set to have different numbers of pixels.
  • the slice may include any of the following: pixels of a predetermined number of rows in the image frame (eg, 16 rows); pixels of a predetermined number of columns in the image frame (eg, 16 columns); predetermined in the image frame The number of pixels (for example, the number of pixels included in 16 rows of pixels or the number of pixels included in 16 columns of pixels).
  • the pixels of the image frame are subjected to pre-processing such as linear correction, noise removal, dead point removal, interpolation, white balance, and automatic exposure control.
  • pre-processing such as linear correction, noise removal, dead point removal, interpolation, white balance, and automatic exposure control.
  • the vision sensor may transmit the pixels of the captured image frame to the image signal processing device for preprocessing one by one or one by one. For example, whether or not a sliced pixel is processed may be determined by determining whether the number of processed pixels reaches a slice size, and each time a slice-sized pixel is processed, the image signal processing device starts transmitting the slice. At the same time, the image signal processing device continues to process other unprocessed pixels, that is, the pixels of the next slice, and once the pixels of the next slice are processed, the pixels of the next slice are transmitted, and so on.
  • the threshold of the size of the slice may be set in advance, for example, M rows of pixels or N pixels, and M and N are both positive integers. Whenever the image signal processing apparatus determines that 16 lines of pixels or N pixels have been processed, the transmission of the M lines or N pixels is started.
  • the image signal processing apparatus may start transmitting the pixels of the slice every time the pixels of one slice of the image frame are processed. Since the embodiment of the present invention can transmit pixels of an image frame in units of slices without starting to transmit the image frame after processing one image frame, the transmission delay is reduced, and the user experience is improved.
  • the transmitting the slice may include: storing the slice into the storage space, and instructing the encoding device to acquire the slice from the storage space.
  • the storage space may be part of the memory in the embodiment of Figure 1, or it may be a separate memory.
  • the storage space may be any one of: a buffer in the image signal processing device; a buffer in the encoding device; a buffer between the image signal processing device and the encoding device.
  • the image signal processing device transmits instruction information to the encoding device for instructing the encoding device to acquire the slice from the storage space.
  • the encoding device After receiving the indication information, the encoding device confirms that the storage space has stored a sliced pixel, and reads the pixel of the slice from the storage space.
  • the indication information may include address information of the first storage space, for example, a specific storage address or an index of the storage address. The indication information may also not carry the address information, but pre-arrange or set the storage address on both sides of the encoding device and the image signal processing device.
  • fragmentation is accessed by setting a storage space such that fragmentation transmission can be achieved between image signal processing devices and encoding devices belonging to different vendors or having different capabilities (e.g., transmission rates).
  • the image signal processing device may also directly transmit the slice to the encoding device.
  • an image signal processing apparatus and an encoding apparatus capable of direct communication and performance matching can be designed such that each time a slice is processed, the image signal processing apparatus can directly encode to the communication interface between the image signal processing apparatus and the encoding apparatus. The device sends the slice.
  • the image signal processing apparatus since the image signal processing apparatus directly transmits the processed sliced pixels to the encoding device, the transmission delay is further reduced, and the storage space is saved.
  • FIG. 4 is a schematic flow chart of an image encoding method according to an embodiment of the present invention.
  • the embodiment of Figure 4 can be performed by the encoding device, encoder or encoding unit of Figure 1.
  • an encoding device will be described as an example.
  • the image encoding method of FIG. 4 corresponds to the image signal processing method of FIG. 3, and a detailed description thereof will be appropriately omitted herein.
  • the image encoding method of FIG. 4 includes the following.
  • a slice of an image frame where the slice includes a pixel that is part of an uncoded pixel included in the image frame.
  • a slice of an image frame transmitted by the image signal processing device can be received.
  • an image frame may include a plurality of slices having the same number of pixels, but embodiments of the present invention are not limited thereto, and the image frame may also include a plurality of slices having different numbers of pixels, for example, may be preset Different slices in one pixel have a different number of pixels.
  • the fragments of different service types may also be set to have different numbers of pixels.
  • the image signal processing apparatus may transmit the pixels of the image frame to the encoding apparatus in units of slices, and the embodiment of the present invention is not limited thereto, and the image signal processing apparatus may also transmit the image frame to the encoding apparatus in a conventional manner.
  • the encoding is performed by the encoding device in units of slices.
  • the slice may include any of the following: a pixel of a predetermined number of rows in the image frame (eg, For example, 16 lines); a predetermined number of columns of pixels in an image frame (eg, 16 columns); a predetermined number of pixels in an image frame (eg, the number of pixels included in 16 rows of pixels or 16 columns of pixels) The number of pixels).
  • a pixel of a predetermined number of rows in the image frame eg, For example, 16 lines
  • a predetermined number of columns of pixels in an image frame eg, 16 columns
  • a predetermined number of pixels in an image frame eg, the number of pixels included in 16 rows of pixels or 16 columns of pixels
  • the shard is encoded in response to receiving a shard.
  • whether or not a sliced pixel is received may be determined by determining whether the number of received pixels reaches a slice size, and the slice is encoded each time it is determined that a sliced pixel is received.
  • the embodiment of the present invention does not limit the manner of encoding, and may be any coding method used in video or image coding technology.
  • the encoding device may acquire pixels of one slice of the image frame transmitted by the image signal processing device, and may determine whether to encode a pixel of the slice by determining whether the number of the encoded pixels reaches a size of one slice. Whenever a sliced pixel is received, the sliced pixel is encoded, and each time a slice-sized pixel is encoded, the encoding device starts transmitting the slice, and the encoding device continues to encode the next pixel. That is, the next sliced pixel, and once the next sliced pixel is encoded, the next sliced pixel is transmitted, and so on.
  • a threshold of the size of the slice may be set in advance, for example, M rows or column pixels or N pixels, and both M and N are positive integers.
  • the M row or column of pixels or N pixels are transmitted whenever the encoding device determines that M rows or columns of pixels or N pixels have been encoded.
  • the encoding device may start encoding the pixels of the slice every time a pixel of the slice is received, and start transmitting the segment every time the pixel of one slice of the image frame is encoded.
  • the pixels of the slice Since the embodiment of the present invention can transmit pixels of an image frame in units of slices, it is not necessary to wait until the encoding of one image frame to start transmitting the image frame, thereby reducing transmission delay and improving user experience.
  • the obtaining the slice of the image frame may include: acquiring the slice from the first storage space according to the indication of the image signal processing device.
  • the first storage space is similar to the storage space in the embodiment of FIG. 3, and details are not described herein again.
  • transmitting the slice specifically includes: storing the slice to the second storage space, and instructing the transmitter to acquire the slice from the second storage space.
  • the second storage space may be part of the memory in the embodiment of FIG. 1, or it may be a separate memory.
  • the second storage space is any one of: a cache in the encoding device; a buffer in the transmitter; a cache between the encoding device and the transmitter.
  • the encoding device sends indication information to the transmitter for instructing the transmitter to acquire the slice from the second storage space.
  • the transmitter determines that the second storage space has stored a fragmented pixel, and reads the pixel of the fragment from the second storage space.
  • the indication information may include address information of the second storage space, for example, a specific storage address or an index of the storage address.
  • the indication information may not carry the address information, but the storage address is pre-agreed or set on both sides of the encoding device and the transmitter.
  • fragmentation is accessed by setting a storage space such that fragmentation transmission can be achieved between encoding devices and transmitters respectively belonging to different vendors or having different capabilities (e.g., transmission rates).
  • the encoding device may also send the slice directly to the transmitter.
  • an encoding device and a transmitter capable of direct communication and performance matching can be designed such that each time a slice is processed, the encoding device can directly transmit the slice to the transmitter through a communication interface between the encoding device and the transmitter.
  • the encoding device since the encoding device directly transmits the encoded sliced pixels to the transmitter, the transmission delay is further reduced, and the storage space is saved.
  • the image signal processing function and the encoding function are implemented in an independent entity as an example.
  • the following is an example in which the image signal processing function and the encoding function are implemented in the same entity.
  • FIG. 5 is a schematic flow chart of an image processing method according to an embodiment of the present invention.
  • the embodiment of Figure 5 is performed by an image processing device.
  • the method of Figure 5 includes the following.
  • 510 Acquire a pixel in a slice of an image frame captured by a visual sensor, where the slice includes a pixel that is part of an unprocessed pixel included in the image frame. 510 is similar to 310 in FIG. 3 and will not be further described herein.
  • Process the pixels in the slice. 520 is similar to 320 in FIG. 3 and will not be further described herein.
  • the vision sensor may transmit the pixels of the captured image frame to the image processing device for preprocessing one by one or one by one.
  • the image processing apparatus may determine whether to process a sliced pixel by determining whether the number of processed pixels reaches a slice size, and each time a slice size pixel is processed, the image processing apparatus starts encoding the pixel. Fragmentation while continuing to process The incoming pixel, that is, the next sliced pixel, and once the next sliced pixel is processed, begins to encode the next sliced pixel, and so on.
  • the image processing apparatus may determine whether the image processing apparatus starts transmitting the slice every time a pixel of a slice size is encoded, by determining whether the number of the encoded pixels reaches a size of one slice, At the same time, the next pixel, that is, the next sliced pixel, continues to be encoded, and once the next sliced pixel is encoded, the next sliced pixel is transmitted, and so on.
  • the image processing apparatus may start encoding a pixel of the slice every time the pixel of one slice of the image frame is processed, and start transmitting the pixel every time the pixel of the slice is encoded. Fragmentation. Since the embodiment of the present invention can transmit the pixels of the image frame in units of slices, it is not necessary to wait until the processing of one image frame to start encoding the image frame, and it is not necessary to wait until the image frame is encoded to start transmitting the image frame, thereby reducing The transmission delay increases the user experience.
  • the method of FIG. 5 further includes: storing the slice into the first storage space before encoding the slice, wherein the foregoing encoding the slice includes: pairing from the first storage
  • the fragments obtained in the space are encoded.
  • the first storage space may be a cache in the image processing device.
  • the transmitting the slice may include: storing the slice to the second storage space; instructing the transmitter to acquire the slice from the second storage space.
  • the second storage space includes any of the following: a cache in the image processing device; a cache in the transmitter; a cache between the image processing device and the transmitter.
  • the image processing device sends the indication information to the transmitter for instructing the transmitter to acquire the slice from the second storage space.
  • the transmitter determines that the second storage space has stored a fragmented pixel, and reads the pixel of the fragment from the second storage space.
  • the indication information may include address information of the second storage space, for example, a specific storage address or an index of the storage address.
  • the indication information may not carry the address information, but the storage address is pre-agreed or set on both sides of the image processing apparatus and the transmitter.
  • fragmentation is accessed by setting a storage space such that fragmentation transmission can be achieved between image processing apparatuses and transmitters respectively belonging to different vendors or having different capabilities (e.g., transmission rates).
  • the image processing apparatus may also transmit the slice directly to the transmitter.
  • an image processing device and a transmitter capable of direct communication and performance matching can be designed such that Each time a slice is processed and encoded, the image processing device can directly transmit the slice to the transmitter through a communication interface between the image processing device and the transmitter.
  • the image processing apparatus since the image processing apparatus directly transmits the processed and encoded sliced pixels to the transmitter, the transmission delay is further reduced, and the storage space is saved.
  • the image processing apparatus since the image processing apparatus directly transmits the processed and encoded sliced pixels to the transmitter, the transmission delay is further reduced, and the storage space is saved.
  • the entity of the transmitting end is described in detail above.
  • the entity of the receiving end is described in detail below with reference to the embodiments of FIG. 6 to FIG. 8.
  • FIG. 6 is a schematic flowchart of an image encoding method according to an embodiment of the present invention.
  • the embodiment of Figure 6 can be performed by the decoding device, decoder or decoding unit of Figure 2.
  • a decoding device will be described as an example.
  • the image decoding method of FIG. 6 includes the following.
  • a slice of an image frame transmitted by the receiver can be received.
  • the definition of image frames and fragments is similar to the definition of image frames and fragments at the transmitting end, and will not be described here.
  • the receiver may transmit the pixels of the image frame to the decoding device in units of slices.
  • the embodiment of the present invention is not limited thereto, and the receiver may also send the image frame to the decoding device in a conventional manner, and the image is translated by the receiver.
  • the code device decodes in units of slices.
  • whether or not a sliced pixel is received may be determined by determining whether the number of received pixels reaches a slice size, and the slice is decoded each time it is determined that a sliced pixel is received.
  • the embodiment of the present invention does not limit the manner of decoding, and may be any decoding method used in video or image decoding technology.
  • the decoding device may acquire pixels of one slice of the image frame transmitted by the receiver, and may determine whether to receive a sliced pixel by determining whether the number of received pixels reaches a size of one slice, When a sliced pixel is received, the sliced pixel is decoded. When decoding a slice-sized pixel, the decoding device starts transmitting the slice, and the decoding device continues to decode. The down pixel, that is, the next sliced pixel, and once the next sliced pixel is decoded, begins transmitting the next sliced pixel, and so on. Can be set in advance
  • the threshold of the size of the slice for example, M rows or column pixels or N pixels, M and N are both positive integers.
  • the M row or column of pixels or N pixels are transmitted whenever the decoding device determines that M rows or columns of pixels or N pixels have been decoded.
  • the decoding apparatus may start decoding a pixel of the slice every time a pixel of the slice is received, and start decoding each time a pixel of the slice of the image frame is decoded.
  • the pixels of the slice are transmitted. Since the embodiment of the present invention can transmit the pixels of the image frame in units of slices, it is not necessary to wait until the decoding of one image frame to start transmitting the image frame, thereby reducing the transmission delay and improving the user experience.
  • the obtaining the fragment of the image frame may include: acquiring the fragment from the first storage space according to the indication of the receiver.
  • the first storage space may be part of the memory in the embodiment of FIG. 2 or it may be a separate memory.
  • the first storage space may be any of the following: a buffer in the receiver; a buffer in the decoding device; a buffer between the receiver and the decoding device.
  • the receiver sends indication information to the decoding device for instructing the decoding device to acquire the slice from the first storage space.
  • the decoding device After receiving the indication information, the decoding device confirms that the first storage space has stored a fragmented pixel, and reads the pixel of the fragment from the storage space.
  • the indication information may include address information of the first storage space, for example, a specific storage address or an index of the storage address. The indication information may also not carry the address information, but pre-arrange or set the storage address on both sides of the decoding device and the receiver.
  • fragmentation is accessed by setting a storage space such that fragmentation transmission can be achieved between receivers and decoding devices belonging to different vendors or having different capabilities (e.g., transmission rates).
  • the receiver may also send the slice directly to the decoding device.
  • a decoding device and a receiver capable of direct communication and performance matching can be designed such that each time a slice is received, the receiver can directly transmit the code to the decoding device via a communication interface between the receiver and the decoding device. Fragmentation.
  • the receiver since the receiver directly transmits the processed sliced pixels to the decoding device, the transmission delay is further reduced, and the storage space is saved.
  • the transmitting the slice may include: storing the slice to the second storage space, and instructing the display control device to acquire the slice from the second storage space.
  • the second storage space includes any one of the following Item: a buffer in the decoding device; a buffer in the display control device; a cache between the decoding device and the display control device.
  • the decoding device sends the indication information to the display control device for instructing the display control device to acquire the slice from the second storage space.
  • the display control device determines that the second storage space has stored a sliced pixel, and reads the pixel of the slice from the second storage space.
  • the indication information may include address information of the second storage space, for example, a specific storage address or an index of the storage address. Alternatively, the indication information may not carry the address information, but the storage address is pre-agreed or set on both sides of the display control device and the decoding device.
  • fragmentation is accessed by setting a storage space such that transmission of slices can be achieved between display control devices and decoding devices belonging to different vendors or having different capabilities (e.g., transmission rates).
  • the decoding device may also directly transmit the slice to the display control device.
  • a display control device and a decoding device capable of direct communication and performance matching can be designed such that each time a slice is processed, the decoding device can directly control the display through a communication interface between the display control device and the decoding device. The device sends the slice.
  • the transmission delay is further reduced, and the storage space is saved.
  • FIG. 7 is a schematic flow chart of a display control method according to an embodiment of the present invention.
  • the embodiment of Figure 7 can be performed by the display control device, display controller or display control unit of Figure 2 .
  • the display control device will be described as an example.
  • the display control method of FIG. 7 corresponds to the image decoding method of FIG. 6, and the display control method of FIG. 7 includes the following.
  • slices of image frames transmitted by the decoding device can be acquired.
  • the definition of image frames and fragments is similar to the definition of image frames and fragments at the transmitting end, and will not be described here.
  • the decoding device may transmit pixels of the image frame to the display control device in units of slices.
  • the display control means may acquire pixels of one slice of the image frame transmitted by the decoding means, and may determine by determining whether the number of received pixels reaches a size of one slice. Whether a pixel of a slice is received, and when a pixel of one slice is received, the pixel of the slice is displayed and output, and the display control device continues to receive the next pixel, that is, the pixel of the next slice, and Once the pixels of the next slice are received, the pixels that output the next slice are displayed, and so on.
  • the threshold of the size of the slice may be set in advance, for example, M rows or column pixels or N pixels, and both M and N are positive integers. Each time the display control device determines that M rows or columns of pixels or N pixels have been received, the display outputs the M rows or columns of pixels or N pixels.
  • the display control means can start displaying the pixels outputting the slice every time a pixel of the slice is received. Since the embodiment of the present invention can display the pixels of the output image frame in units of slices, it is not necessary to wait for the reception of one image frame to start displaying and outputting the image frame, thereby reducing the transmission delay and improving the user experience.
  • the obtaining the slice of the image frame may include: acquiring the slice from the storage space according to the indication of the decoding device.
  • FIG. 8 is a schematic flow chart of an image processing method according to an embodiment of the present invention.
  • the embodiment of Figure 8 is performed by an image processing device.
  • the method of Figure 8 includes the following.
  • 810 Acquire a slice of an image frame, where the slice includes a pixel that is part of an undecoded pixel included in the image frame. 810 is similar to 610 in FIG. 6, and details are not described herein again.
  • Decode the slice. 820 is similar to 620 in FIG. 6, and details are not described herein again.
  • the image processing apparatus may determine whether to decode a sliced pixel by determining whether the number of decoded pixels reaches a slice size, and image processing each time a slice size pixel is decoded.
  • the device begins to display and output the slice while continuing to decode the next pixel, that is, the next sliced pixel, and once the next sliced pixel is decoded, the next sliced pixel is displayed. analogy.
  • the image processing apparatus may start displaying the pixels outputting the slice every time the pixels of one slice of the image frame are decoded. Since the embodiment of the present invention can transmit the pixels of the image frame in units of slices, it is not necessary to wait until the processing of one image frame to start encoding the image frame, and it is not necessary to wait until the image frame is encoded to start transmitting the image frame, thereby reducing The transmission delay increases the user experience.
  • the obtaining the fragment of the image frame may include: acquiring the fragment from the storage space according to the indication of the receiver.
  • the storage space is any of the following: a buffer in the receiver; in the image processing device Cache; cache between the receiver and the image processing device.
  • FIG. 9 is a schematic structural diagram of an image signal processing apparatus 900 according to an embodiment of the present invention.
  • the image signal processing apparatus 900 includes an acquisition module 910, a processing module 920, and a transmission module 930.
  • the acquisition module 910 is configured to acquire pixels in a slice of an image frame captured by the visual sensor, wherein the slice includes pixels that are part of an unprocessed pixel included in the image frame.
  • the processing module 920 is configured to process pixels in the slice.
  • the transmission module 930 is configured to transmit the slice in response to processing the pixels in the slice.
  • the image signal processing apparatus may start transmitting the pixels of the slice every time the pixels of one slice of the image frame are processed. Since the embodiment of the present invention can transmit pixels of an image frame in units of slices without starting to transmit the image frame after processing one image frame, the transmission delay is reduced, and the user experience is improved.
  • the transmission module 930 is configured to store the slice to the storage space and instruct the encoding device to acquire the slice from the storage space.
  • the storage space may be any one of: a buffer in the image signal processing device; a buffer in the encoding device; a buffer between the image signal processing device and the encoding device.
  • the slice may comprise any of the following: pixels of a predetermined number of rows in the image frame; pixels of a predetermined number of columns in the image frame; a predetermined number of pixels in the image frame.
  • the slice comprises sixteen rows of pixels in the image frame.
  • the image frame comprises a plurality of tiles having the same number of pixels.
  • FIG. 10 is a block diagram showing the structure of a computer device 1000 in accordance with an embodiment of the present invention.
  • the computer device 100 can include at least one memory 1020 for storing computer executable instructions; at least one processor 1010, alone or collectively, for accessing at least one memory 1020 and executing computer executable instructions for performing FIG. 3 through The operation in the method described in the embodiment of 8.
  • Another embodiment of the present invention further provides an image signal processing apparatus that can be implemented by the computer apparatus of FIG. 10 for performing the method of the embodiment of FIG. The operation in .
  • FIG. 11 is a schematic structural diagram of an encoding apparatus 1100 according to an embodiment of the present invention.
  • the encoding device 1100 includes an obtaining module 1110, an encoding module 1120, and a transmission module 1130.
  • the obtaining module 1110 is configured to acquire a slice of the image frame, wherein the slice comprises a pixel that is part of an uncoded pixel included in the image frame.
  • the encoding module 1120 is configured to encode the slice.
  • the transmission module 1130 is configured to transmit the slice in response to the pixels in the encoded slice.
  • the encoding device may start encoding the pixels of the slice every time a pixel of the slice is received, and start transmitting the segment every time the pixel of one slice of the image frame is encoded.
  • the pixels of the slice Since the embodiment of the present invention can transmit pixels of an image frame in units of slices, it is not necessary to wait until the encoding of one image frame to start transmitting the image frame, thereby reducing transmission delay and improving user experience.
  • the acquisition module 1110 is configured to acquire slices of image frames transmitted by the image signal processing device.
  • the obtaining module 1110 is configured to acquire a slice from the first storage space according to an indication of the image signal processing apparatus.
  • the first storage space is any one of: a buffer in the image signal processing device; a buffer in the encoding device; a buffer between the image signal processing device and the encoding device.
  • the slice comprises any one of: a pixel of a predetermined number of rows in the image frame; a pixel of a predetermined number of columns in the image frame; a predetermined number of pixels in the image frame.
  • the slice comprises sixteen rows of pixels in the image frame.
  • the image frame comprises a plurality of tiles having the same number of pixels.
  • the transmission module 1130 is configured to store the slice to the second storage space and instruct the transmitter to acquire the slice from the second storage space.
  • the second storage space comprises any one of: a buffer in the encoding device; a buffer in the transmitter; a buffer between the encoding device and the transmitter.
  • Another embodiment of the present invention also provides an encoding apparatus that can be implemented by the computer apparatus of FIG. 10 for performing the operations in the method of the embodiment of FIG.
  • FIG. 12 is a schematic structural diagram of an image processing apparatus 1200 according to an embodiment of the present invention.
  • the image processing apparatus 1200 includes an acquisition module 1210, a processing module 1220, an encoding module 1230, and a transmission module 1240.
  • the acquisition module 1210 is configured to acquire pixels in a slice of an image frame captured by the visual sensor, wherein the slice includes pixels that are part of an unprocessed pixel included in the image frame.
  • the processing module 1220 is configured to process pixels in the slice.
  • Encoding module 1230 is for encoding the tiles in response to processing the pixels in the slice.
  • the transmission module 1240 is configured to transmit the slice in response to the pixels in the encoded slice.
  • the image processing apparatus may start encoding a pixel of the slice every time the pixel of one slice of the image frame is processed, and start transmitting the pixel every time the pixel of the slice is encoded. Fragmentation. Since the embodiment of the present invention can transmit the pixels of the image frame in units of slices, it is not necessary to wait until the processing of one image frame to start encoding the image frame, and it is not necessary to wait until the image frame is encoded to start transmitting the image frame, thereby reducing The transmission delay increases the user experience.
  • the encoding module 1230 is further configured to store the fragment into the first storage space before encoding the fragment, where the encoding module 1230 is configured to obtain the score obtained from the first storage space.
  • the slice is encoded.
  • the first storage space is a cache in the image processing device.
  • the slice comprises any one of: a pixel of a predetermined number of rows in the image frame; a pixel of a predetermined number of columns in the image frame; a predetermined number of pixels in the image frame.
  • the slice comprises sixteen rows of pixels in the image frame.
  • the image frame comprises a plurality of tiles having the same number of pixels.
  • the transmission module 1240 is configured to store the slice to the second storage space; and instruct the transmitter to acquire the slice from the second storage space.
  • the second storage space comprises any one of: a cache in the image processing device; a buffer in the transmitter; a cache between the image processing device and the transmitter.
  • Another embodiment of the present invention also provides an image processing apparatus that can be implemented by the computer apparatus of FIG. 10 for performing the operations in the method of the embodiment of FIG.
  • FIG. 13 is a schematic structural diagram of a decoding apparatus 1300 according to an embodiment of the present invention.
  • the decoding device 1300 includes an acquisition module 1310, a decoding module 1320, and a transmission module 1330.
  • the obtaining module 1310 is configured to acquire a slice of the image frame, wherein the slice comprises a pixel that is part of an uncoded pixel included in the image frame.
  • the decoding module 1320 is configured to decode the slice.
  • the transmission module 1330 is configured to transmit the slice in response to decoding the pixels in the slice.
  • the decoding apparatus may start decoding a pixel of the slice every time a pixel of the slice is received, and start decoding each time a pixel of the slice of the image frame is decoded.
  • the pixels of the slice are transmitted. Since the embodiment of the present invention can transmit the pixels of the image frame in units of slices, it is not necessary to wait until the decoding of one image frame to start transmitting the image frame, thereby reducing the transmission delay and improving the user experience.
  • the acquisition module 1310 acquires slices of image frames transmitted by the receiver.
  • the acquisition module 1310 acquires the slice from the first storage space according to the indication of the receiver.
  • the first storage space is any one of: a buffer in the receiver; a buffer in the decoding device; a buffer between the receiver and the decoding device.
  • the slice comprises any one of: a pixel of a predetermined number of rows in the image frame; a pixel of a predetermined number of columns in the image frame; a predetermined number of pixels in the image frame.
  • the slice comprises sixteen rows of pixels in the image frame.
  • the image frame comprises a plurality of tiles having the same number of pixels.
  • the transmission module 1330 stores the slice to the second storage space and instructs the display control device to acquire the slice from the second storage space.
  • the second storage space comprises any one of: a buffer in the decoding device; a buffer in the display control device; a buffer between the decoding device and the display control device.
  • Another embodiment of the present invention also provides an image processing apparatus that can be implemented by the computer apparatus of FIG. 10 for performing the operations in the method of the embodiment of FIG.
  • FIG. 14 is a schematic structural diagram of a display control device 1400 according to an embodiment of the present invention.
  • the display control device 1400 includes a receiving module 1410 and a display module 1420.
  • the receiving module 1410 is configured to receive a slice of the image frame, where the slice includes a pixel that is part of an undisplayed pixel included in the image frame.
  • the display module 1420 is configured to display and output the slice in response to receiving the pixels in the slice.
  • the display control means can start displaying the pixels outputting the slice every time a pixel of the slice is received. Since the embodiment of the present invention can display the pixels of the output image frame in units of slices, it is not necessary to wait for the reception of one image frame to start displaying and outputting the image frame, thereby reducing the transmission delay and improving the user experience.
  • receiving module 1410 receives the slices of the image frames transmitted by the decoding device.
  • the receiving module 1410 obtains slices from the storage space in accordance with an indication from the decoding device.
  • the storage space is any one of: a buffer in the decoding device; a buffer in the display control device; a buffer between the display control device and the decoding device.
  • the slice comprises any one of: a pixel of a predetermined number of rows in the image frame; a pixel of a predetermined number of columns in the image frame; a predetermined number of pixels in the image frame.
  • the slice comprises sixteen rows of pixels in the image frame.
  • the image frame comprises a plurality of tiles having the same number of pixels.
  • Another embodiment of the present invention also provides a display control device that can be implemented by the computer device of FIG. 10 for performing the operations in the method of the embodiment of FIG.
  • FIG. 15 is a schematic structural diagram of an image processing apparatus 1500 according to an embodiment of the present invention.
  • the obtaining module 1510 is configured to acquire a slice of the image frame, where the slice includes a pixel that is part of an undecoded pixel included in the image frame.
  • the decoding module 1520 is configured to decode the fragment.
  • the display module 1530 is configured to display and output the slice in response to decoding the pixels in the slice.
  • the image processing apparatus may start displaying the pixels outputting the slice every time the pixels of one slice of the image frame are decoded. Since the embodiment of the present invention can transmit the pixels of the image frame in units of slices, it is not necessary to wait until the processing of one image frame to start encoding the image frame, and it is not necessary to wait until the image frame is encoded to start transmitting the image frame, thereby reducing The transmission delay increases the user experience.
  • the acquisition module 1510 acquires slices of image frames transmitted by the receiver.
  • the acquisition module 1510 acquires the slice from the storage space according to the indication of the receiver.
  • the storage space is any one of: a buffer in the receiver; a buffer in the image processing device; a cache between the receiver and the image processing device.
  • the slice comprises any one of: a pixel of a predetermined number of rows in the image frame; a pixel of a predetermined number of columns in the image frame; a predetermined number of pixels in the image frame.
  • the slice comprises sixteen rows of pixels in the image frame.
  • the image frame comprises a plurality of tiles having the same number of pixels.
  • Another embodiment of the present invention also provides an image processing apparatus that can be implemented by the computer apparatus of FIG. 10 for performing the operations in the method of the embodiment of FIG.
  • Embodiments of the present invention also provide an image processing system.
  • the image processing system can include the transmitting end of FIG.
  • the image processing system includes: a visual sensor for capturing pixels of an image frame; an image signal processing device as in the above embodiment, connected to the visual sensor; an encoding device as in the above embodiment, connected to the image signal processing device; And coupled to the encoding device for transmitting the slice in response to receiving pixels in the slice of the image frame.
  • Embodiments of the present invention also provide another image processing system.
  • the image processing system can include the receiving end of FIG.
  • the image processing system includes a receiver for receiving a slice of an image frame.
  • the decoding device of the above embodiment is connected to the receiver; the display control device of the above embodiment is connected to the decoding device; and the display is connected to the display control device for displaying according to the output of the display control device .
  • Embodiments of the present invention also provide another image processing system.
  • the image processing system can include the transmitting end of FIG.
  • the image processing system may include a visual sensing device for capturing an image frame; the image processing device of the above embodiment, coupled to the visual sensing device; and a transmitter coupled to the image processing device for receiving in response to receiving The pixels in the slice of the image frame are transmitted, and the slice is transmitted.
  • Embodiments of the present invention also provide another image processing system.
  • the image processing system can include the receiving end of FIG.
  • the image processing system may include: a receiver for receiving a slice of the image frame; an image processing device as described in the above embodiment, connected to the receiver; and a display coupled to the image processing device for the image according to the image The output of the processing device is displayed.
  • the disclosed systems, devices, and methods may be implemented in other manners.
  • the device embodiments described above are merely illustrative.
  • the division of the unit is only a logical function division.
  • there may be another division manner for example, multiple units or components may be combined or Can be integrated into another system, or some features can be ignored or not executed.
  • the mutual coupling or direct coupling or communication connection shown or discussed may be an indirect coupling or communication connection through some interface, device or unit, and may be in an electrical, mechanical or other form.
  • the units described as separate components may or may not be physically separated, and the components displayed as units may or may not be physical units, that is, may be located in one place, or may be distributed to multiple network units. Some or all of the units may be selected according to actual needs to achieve the purpose of the solution of the embodiment.
  • each functional unit in each embodiment of the present invention may be integrated into one processing unit, or each unit may exist physically separately, or two or more units may be integrated into one unit.
  • the functions may be stored in a computer readable storage medium if implemented in the form of a software functional unit and sold or used as a standalone product.
  • the technical solution of the present invention which is essential or contributes to the prior art, or a part of the technical solution, may be embodied in the form of a software product, which is stored in a storage medium, including
  • the instructions are used to cause a computer device (which may be a personal computer, server, or network device, etc.) to perform all or part of the steps of the methods described in various embodiments of the present invention.
  • the foregoing storage medium includes: a U disk, a mobile hard disk, a read-only memory (ROM), a random access memory (RAM), a magnetic disk, or an optical disk, and the like. .

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

提供了一种图像信号处理方法和装置。该方法包括：获取由视觉传感器捕获的图像帧的分片中的像素，其中所述分片包含的像素为所述图像帧包含的未处理的像素中的一部分；对所述分片中的像素进行处理；响应于处理完所述分片中的像素，传输所述分片。本技术方案能够降低视频传输的传输延时。

Description

图像信号处理方法和装置 技术领域
本发明的实施例涉及图像处理技术领域，尤其是涉及一种图像信号处理方法和装置。
背景技术
随着信息技术的不断进步以及人们对于现代通信方式的追求，图像传输，例如，视频传输，已经越来越广泛地应用到各个领域。尤其是视频传输，已经成为多媒体信息传输的核心。
超低延时的视频传输是目前无线视频直播、远程机器视觉以及无人机的无线图像传输中的关键技术。在现有的视频传输技术中，各级处理模块之间一般采用帧级别的交互方式来传输图像，即各级处理模块通常在收集完成一帧图像之后才进行处理，在完成一帧图像的处理之后才开始传输。例如，在发送端，编码装置在从图像信号处理装置接收完一帧图像之后才进行编码，并且在完成对该帧图像的编码之后，才发送给发射器，而在接收端，解码器在从接收器接收完一帧图像之后才进行编码，并且在译码完一帧图像之后才发送给显示控制器。这样的视频传输方式不利用降低视频传输的整体延时，阻碍了超低延时视频传输技术的发展。
因此，亟待提出一种能够降低视频传输的传输延时的方案。
发明内容
本发明的实施例提出了一种图像信号处理方法和装置，能够降低视频传输的传输延时。
第一方面，提供了一种图像信号处理方法，包括：获取由视觉传感器捕获的图像帧的分片中的像素，其中所述分片包含的像素为所述图像帧包含的未处理的像素中的一部分；对所述分片中的像素进行处理；响应于处理完所述分片中的像素，传输所述分片。
第二方面，提供了一种图像编码方法，包括：获取图像帧的分片，其中所述分片包含的像素为所述图像帧包含的未编码的像素中的一部分；对所述分片进行编码；响应于编码完所述分片中的像素，传输所述分片。
第三方面，提供了一种图像处理方法，包括：获取由视觉传感器捕获的图像帧的分片中的像素，其中所述分片包含的像素为所述图像帧包含的未处理的像素中的一部分；对所述分片中的像素进行处理；响应于处理完所述分片中的像素，对所述分片进行编码；响应于编码完所述分片中的像素，传输所述分片。
第四方面，提供了一种图像译码方法，包括：获取图像帧的分片，其中所述分片包含的像素为所述图像帧包含的未译码的像素中的一部分；对所述分片进行译码；响应于译码完所述分片中的像素，传输所述分片。
第五方面，提供了一种显示控制方法，包括：接收图像帧的分片，其中所述分片包含的像素为所述图像帧包含的未显示的像素中的一部分；响应于接收完所述分片中的像素，对所述分片进行显示输出。
第六方面，提供了一种图像处理方法，包括：获取图像帧的分片，其中所述分片包含的像素为所述图像帧包含的未译码的像素中的一部分；对所述分片进行译码；响应于译码完所述分片中的像素，对所述分片进行显示输出。
第七方面，提供了一种图像信号处理装置，包括：获取模块，用于获取由视觉传感器捕获的图像帧的分片中的像素，其中所述分片包含的像素为所述图像帧包含的未处理的像素中的一部分；处理模块，用于对所述分片中的像素进行处理；传输模块，用于响应于处理完所述分片中的像素，传输所述分片。
第八方面，提供了一种图像信号处理装置，包括：至少一个存储器，用于存储计算机可执行指令；至少一个处理器，单独或共同地用于：访问所述至少一个存储器，并执行所述计算机可执行指令，以进行第一方面所述的方法中的操作。
第九方面，提供了一种编码装置，包括：获取模块，用于获取图像帧的分片，其中所述分片包含的像素为所述图像帧包含的未编码的像素中的一部分；编码模块，用于对所述分片进行编码；传输模块，用于响应于编码完所述分片中的像素，传输所述分片。
第十方面，提供了一种编码装置，包括：至少一个存储器，用于存储计算机可执行指令；至少一个处理器，单独或共同地用于：访问所述至少一个存储器，并执行所述计算机可执行指令，以进行第二方面所述的方法中的操 作。
第十一方面，提供了一种图像处理装置，包括：获取模块，用于获取由视觉传感器捕获的图像帧的分片中的像素，其中所述分片包含的像素为所述图像帧包含的未处理的像素中的一部分；处理模块，用于对所述分片中的像素进行处理；编码模块，用于响应于处理完所述分片中的像素，对所述分片进行编码；传输模块，用于响应于编码完所述分片中的像素，传输所述分片。
第十二方面，提供了一种图像处理装置，包括：至少一个存储器，用于存储计算机可执行指令；至少一个处理器，单独或共同地用于：访问所述至少一个存储器，并执行所述计算机可执行指令，以进行第三方面所述的方法中的操作。
第十三方面，提供了一种译码装置，包括：获取模块，用于获取图像帧的分片，其中所述分片包含的像素为所述图像帧包含的未译码的像素中的一部分；译码模块，用于对所述分片进行译码；传输模块，用于响应于译码完所述分片中的像素，传输所述分片。
第十四方面，提供了一种译码装置，包括：至少一个存储器，用于存储计算机可执行指令；至少一个处理器，单独或共同地用于：访问所述至少一个存储器，并执行所述计算机可执行指令，以进行第四方面所述的方法中的操作。
第十五方面，提供一种显示控制装置，包括：接收模块，用于接收图像帧的分片，其中所述分片包含的像素为所述图像帧包含的未显示的像素中的一部分；显示模块，用于响应于接收完所述分片中的像素，对所述分片进行显示输出。
第十六方面，提供了一种显示控制装置，包括：至少一个存储器，用于存储计算机可执行指令；至少一个处理器，单独或共同地用于：访问所述至少一个存储器，并执行所述计算机可执行指令，以进行第五方面所述的方法中的操作。
第十七方面，提供了一种图像处理装置，包括：获取模块，用于获取图像帧的分片，其中所述分片包含的像素为所述图像帧包含的未译码的像素中的一部分；译码模块，用于对所述分片进行译码；显示模块，用于响应于译码完所述分片中的像素，对所述分片进行显示输出。
第十八方面，提供了一种图像处理装置，包括：至少一个存储器，用于 存储计算机可执行指令；至少一个处理器，单独或共同地用于：访问所述至少一个存储器，并执行所述计算机可执行指令，以进行第六方面所述的方法中的操作。
第十九方面，提供了一种图像处理系统，包括：视觉传感器，用于捕获图像帧的像素；如第七方面或第八方面所述的图像信号处理装置，与所述视觉传感器相连接；如第九方面或第十方面所述的编码装置，与图像信号处理装置相连接；发射器，与所述编码装置相连接，用于响应于接收完所述图像帧的分片中的像素，发射所述分片。
第二十方面，提供了一种图像处理系统，包括：接收器，用于接收图像帧的分片。如第十三方面或第十四方面所述的译码装置，与所述接收器相连接；如权利要求第十五方面或第十六方面所述的显示控制装置，与所述译码装置相连接；显示器，与所述显示控制装置相连接，用于根据所述显示控制装置的输出进行显示。
第二十一方面，提供了一种图像处理系统，包括：视觉传感装置，用于捕获图像帧；如第十一方面或第十二方面所述的图像处理装置，与视觉传感装置相连接；发射器，与所述图像处理装置相连接，用于响应于接收完所述图像帧的分片中的像素，发射所述分片。
第二十二方面，提供了一种图像处理系统，包括：接收器，用于接收图像帧的分片。如十七方面或第十八方面所述的图像处理装置，与所述接收器相连接；显示器，与所述图像处理装置相连接，用于根据所图像处理装置的输出进行显示。
由于本发明的实施例可以以分片为单位传输图像帧的像素，而无需等到处理完一个图像帧才开始传输该图像帧，因此减少了传输延时，提高了用户体验。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是根据本发明的一个实施例的视频传输的发送端的结构示意图。
图2是根据本发明的一个实施例的视频传输的接收端的结构示意图。
图3是根据本发明一个实施例的图像信号处理方法的示意性流程图。
图4是根据本发明一个实施例的图像编码方法的示意性流程图。
图5是根据本发明一个实施例的图像处理方法的示意性流程图。
图6是根据本发明一个实施例的图像编码方法的示意性流程图。
图7是根据本发明一个实施例的显示控制方法的示意性流程图。
图8是根据本发明一个实施例的图像处理方法的示意性流程图。
图9是本发明一个实施例提供的图像信号处理装置的结构示意图。
图10是根据本发明的实施例的计算机装置的结构示意图。
图11是本发明一个实施例提供的编码装置的结构示意图。
图12是本发明一个实施例提供的图像处理装置的结构示意图。
图13是本发明一个实施例提供的译码装置的结构示意图。
图14是本发明一个实施例提供的显示控制装置的结构示意图。
图15是本发明一个实施例提供的图像处理装置的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
图1是根据本发明的一个实施例的视频传输的发送端100的结构示意图。
发送端100包括图像信号处理器(ISP)110、编码器120、发射器130，存储器140、发射天线150和视觉传感器160。
ISP110与视觉传感器160相连接，ISP110例如可以通过移动工业处理器接口(Mobile Industry Processor Interface，MIPI)与视觉传感器160相连接。ISP110用于从视觉传感器160接收图像数据，例如，图像帧的像素，并对图像帧的像素进行预处理，例如，对图像帧的像素进行线性纠正、噪声去除、坏点去除、内插、白平衡、自动曝光控制等处理。ISP160还用于以分片(slice)为单位传输图像帧的像素。例如，如图1所示，ISP110可以通过ISP110与编码器120之间的通信接口直接传输分片。可替代地，ISP110也可以将分 片写入存储器140，以便编码器120从存储器140读取分片。ISP110也可以称为图像信号处理单元或图像信号处理装置。ISP110例如可以由片上系统(system on a chip)来实现。
在本发明的实施例中，图像帧的分片是指图像帧的一部分，即分片所包含的像素数小于图像帧所包含的像素数，分片可以包括图像素帧的至少一行像素或至少一列像素，例如，16行像素或者16列像素。
编码器120用于以分片为单位对经过ISP处理的像素进行编码处理，并以分片为单位传输经过编码处理后的图像帧的像素。例如，编码器120可以将经过编码处理的分片发送到存储器140，以便发射器130从存储器140读取经过编码处理的分片。作为替代，编码器120也可以直接向发射器130传输经过编码处理的分片。编码器120也可以称为编码单元或编码装置。
发射器130用于以分片为单位从编码器120接收图像帧的像素，并且以分片为单位通过发射天线150发送图像帧的像素。
存储器140用于缓存经过上述模块处理后的图像帧的像素。存储器140例如可以是动态随机存取存储器(Dynamic Random Access Memory，DRAM)，存储器140可以设置为一个实体，也可以设置为分别分布于上述不同模块之间的多个实体。
视觉传感器160可以是任何类型的用于捕获图像数据的视觉传感器，例如，照相机、摄像机或者其它包括照相机或摄像机的设备上的互补金属氧化物半导体(Complementary Metal Oxide Semiconductor，CMOS)传感器。
应理解，虽然图1以ISP110和视觉传感器110直接传输分片为例进行说明，但本发明的实施例并不限于此，例如，ISP110也可以通过存储器140向编码器120传输分片。虽然图1以编码器120和发射器130通过存储器140传感分片为例进行说明，但本发明的实施例并不限于此，例如，编码器120也可以直接向发射器130传输分片。
还应理解，虽然图1的实施例以图像信号处理器和编码器为独立实体为例进行说明，但本发明的实施例并不限于此，例如，编码功能和图像信号处理功能也可设置在一个实体中，例如，设置在图像处理器中。
图2是根据本发明的一个实施例的视频传输的接收端200的结构示意图。
接收端200包括显示控制器210、译码器220、接收器230，存储器240、 接收天线250和显示器260。
接收器230用于以分片为单位通过接收天线250接收图像帧的像素，并以分片为单位传输图像帧的像素。例如，接收器230将分片存储在存储器240中，以便译码器220从存储器240中读取分片。作为替代，接收器230也可以直接向译码器220传输分片。
译码器220用于以分片为单位对从接收器230接收到的图像帧的像素进行译码处理，并以分片为单位将经过译码处理后的图像帧的像素发送给显示控制器210。例如，如图2所示，译码器220可以直接向显示控制器210传输分片。作为替代，译码器220也可以将分片缓存在存储器240中，以便显示控制器210从存储器240中读取分片。
显示控制器210用于以分片为单位从译码器220接收经过译码处理的图像帧的像素，并通过显示器260显示图像帧的像素。
存储器240用于缓存经过上述模块处理后的图像帧的像素。存储器240例如可以是动态随机存取存储器(Dynamic Random Access Memory，DRAM)，存储器240可以设置为一个实体，也可以设置为分布于上述不同模块之间的多个实体。
应理解，虽然图2以接收器230和译码器220通过存储器240传输分片为例进行说明，但本发明的实施例并不限于此，例如，接收器230也可以直接向译码器220传输分片。虽然图2以译码器220直接向显示控制器210传输分片为例进行说明，但本发明的实施例并不限于此，例如，译码器220和显示控制器210通过存储器240传感分片。
还应理解，虽然图2的实施例以译码器和显示控制器为独立实体为例进行说明，但本发明的实施例并不限于此，例如，译码功能和显示控制功能也可设置在一个实体中，例如，设置在图像处理装置中。
下面结合图3至图5的实施例对发送端的实体所执行的方法进行详细的描述。
图3是根据本发明一个实施例的图像信号处理方法的示意性流程图。图3的实施例可以由图1的图像信号处理装置、图像信号处理器或图像处理单元来执行。以下以图像信号处理装置为例进行说明。图3的图像信号处理方法包括如下内容。
310，获取由视觉传感器捕获的图像帧的分片中的像素，其中分片包含 的像素为图像帧包含的未处理的像素中的一部分。
例如，图像帧可以包括多个具有相同数量的像素的分片，但本发明的实施例并不限于此，图像帧也可以包括多个具有不同数量的像素的分片，例如，可以预先设置同一个像素中的不同分片具有不同数量的像素。可选地，作为另一实施例，也可以设置不同业务类型的分片具有不同数量的像素。
例如，分片可以包括以下任意一项：图像帧中的预定数量的行的像素(例如，16行)；图像帧中的预定数量的列的像素(例如，16列)；图像帧中的预定数量的像素(例如，16行像素所包含的像素的数量或16列像素所包含的像素的数量)。
320，对分片中的像素进行处理。
例如，对图像帧的像素进行线性纠正、噪声去除、坏点去除、内插、白平衡、自动曝光控制等预处理。
330，响应于处理完分片中的像素，传输分片。
具体地，视觉传感器可以将捕获的图像帧的像素逐个或逐行传输给图像信号处理装置进行预处理。例如，可以通过确定处理过的像素的数目是否达到一个分片的大小来确定是否处理完一个分片的像素，每当处理完一个分片大小的像素时，图像信号处理装置开始传输该分片，同时图像信号处理装置继续处理其它未处理的像素，即下一分片的像素，并且一旦处理完下一分片的像素时，就开始传输下一分片的像素，以此类推。例如，可以预先设置分片的大小的阈值，例如，M行像素或者N个像素，M和N均为正整数。每当图像信号处理装置确定处理完16行像素或N个像素时，开始传输这M行或N个像素。
根据本发明的实施例，图像信号处理装置可以每当处理完图像帧的一个分片的像素时，就开始传输该分片的像素。由于本发明的实施例可以以分片为单位传输图像帧的像素，而无需等到处理完一个图像帧才开始传输该图像帧，因此减少了传输延时，提高了用户体验。
在330中，上述传输分片可以包括：将分片存储到存储空间，并指示编码装置从存储空间获取分片。
例如，存储空间可以为图1的实施例中的存储器中的一部分，也可以是一个独立的存储器。存储空间可以为以下任意一项：图像信号处理装置中的缓存；编码装置中的缓存；在图像信号处理装置和编码装置之间的缓存。
例如，每当处理完一个分片，并将该分片的像素存储到存储空间时，图像信号处理装置向编码装置发送指示信息，用于指示编码装置从存储空间获取该分片。编码装置在接收到该指示信息后，确认存储空间已经存储了一个分片的像素，并从存储空间读取该分片的像素。该指示信息可以包括第一存储空间的地址信息，例如，具体的存储地址或存储地址的索引。指示信息也可以不携带该地址信息，而是在编码装置和图像信号处理装置两侧预先约定或设置该存储地址。
根据本发明的实施例，通过设置存储空间来存取分片，使得分别属于不同厂商或者具有不同性能(例如，传输速率)的图像信号处理装置和编码装置之间可以实现分片的传输。
可替代，作为另一实施例，图像信号处理装置也可以直接向编码装置发送该分片。例如，可以设计能够直接通信且性能匹配的图像信号处理装置和编码装置，使得每当处理完一个分片时，图像信号处理装置可以通过图像信号处理装置与编码装置之间的通信接口直接向编码装置发送该分片。
根据本发明的实施例，由于图像信号处理装置直接将处理完的分片的像素发送给编码装置，进一步减少了传输延时，并且节省了存储空间。
图4是根据本发明一个实施例的图像编码方法的示意性流程图。图4的实施例可以由图1的编码装置、编码器或编码单元来执行。以下以编码装置为例进行说明。图4的图像编码方法对应于图3的图像信号处理方法，在此适当省略详细的描述。图4的图像编码方法包括如下内容。
410，获取图像帧的分片，其中分片包含的像素为图像帧包含的未编码的像素中的一部分。具体地，可以接收由图像信号处理装置传输的图像帧的分片。
例如，图像帧可以包括多个具有相同数量的像素的分片，但本发明的实施例并不限于此，图像帧也可以包括多个具有不同数量的像素的分片，例如，可以预先设置同一个像素中的不同分片具有不同数量的像素。可选地，作为另一实施例，也可以设置不同业务类型的分片具有不同数量的像素。
应理解，图像信号处理装置可以以分片为单位向编码装置发送图像帧的像素，本发明的实施例并不限于此，图像信号处理装置也可以按常规的方式向编码装置发送图像帧，而由编码装置以分片为单位进行编码。
例如，分片可以包括以下任意一项：图像帧中的预定数量的行的像素(例 如，16行)；图像帧中的预定数量的列的像素(例如，16列)；图像帧中的预定数量的像素(例如，16行像素所包含的像素的数量或16列像素所包含的像素的数量)。
420，对分片进行编码。响应于接收到一个分片，对分片进行编码。
例如，可以通过确定接收到的像素的数目是否达到一个分片的大小来确定是否接收到一个分片的像素，并且每当确定接收到一个分片的像素时，对分片进行编码。本发明的实施例对编码的方式不作限定，可以是视频或图像编码技术中使用的任意编码方式。
430，响应于编码完分片中的像素，传输分片。
具体地，编码装置可以获取图像信号处理装置传输的图像帧的一个分片的像素，并且可以通过确定编码完的像素的数目是否达到一个分片的大小来确定是否编码完一个分片的像素，每当接收到一个分片的像素时，对该分片的像素进行编码，每当编码完一个分片大小的像素时，编码装置开始传输该分片，同时编码装置继续编码接下来的像素，即下一分片的像素，并且一旦编码完下一分片的像素时，就开始传输下一分片的像素，以此类推。例如，可以预先设置分片的大小的阈值，例如，M行或列像素或者N个像素，M和N均为正整数。每当编码装置确定编码完M行或列像素或N个像素时，开始传输这M行或列像素或N个像素。
根据本发明的实施例，编码装置可以每当接收到一个分片的像素时，就开始编码该分片的像素，并且每当编码完图像帧的一个分片的像素时，就开始传输该分片的像素。由于本发明的实施例可以以分片为单位传输图像帧的像素，而无需等到编码完一个图像帧才开始传输该图像帧，从而减少了传输延时，提高了用户体验。
根据本发明的实施例，上述获取图像帧的分片可以包括：根据图像信号处理装置的指示从第一存储空间中获取分片。第一存储空间与图3的实施例中的存储空间类似，在此不再赘述。
在430中，传输分片具体包括：将分片存储到第二存储空间，并指示发射器从第二存储空间获取分片。
例如，第二存储空间可以为图1的实施例中的存储器中的一部分，也可以是一个独立的存储器。第二存储空间为以下任意一项：编码装置中的缓存；发射器中的缓存；在编码装置和发射器之间的缓存。
例如，编码装置在将一个分片的像素存储到第二存储空间后，向发射器发送指示信息，用于指示发射器从第二存储空间获取该分片。发射器在接收到该指示信息后，确定第二存储空间已经存储了一个分片的像素，并从第二存储空间读取该分片的像素。该指示信息可以包括第二存储空间的地址信息，例如，具体的存储地址或存储地址的索引。作为替代，指示信息也可以不携带该地址信息，而是在编码装置和发射器两侧预先约定或设置该存储地址。
根据本发明的实施例，通过设置存储空间来存取分片，使得分别属于不同厂商或者具有不同性能(例如，传输速率)的编码装置和发射器之间可以实现分片的传输。
可替代，作为另一实施例，编码装置也可以直接向发射器发送该分片。例如，可以设计能够直接通信且性能匹配的编码装置和发射器，使得每当处理完一个分片时，编码装置可以通过编码装置与发射器之间的通信接口直接向发射器发送该分片。
可替代地，也可以将根据本发明的实施例，由于编码装置直接将编码完的分片的像素发送给发射器，进一步减少了传输延时，并且节省了存储空间。
上面以图像信号处理功能和编码功能在独立实体中实现为例进行了描述，下面以图像信号处理功能和编码功能在同一实体中实现为例进行说明。
图5是根据本发明一个实施例的图像处理方法的示意性流程图。图5的实施例由图像处理装置来执行。图5的方法包括如下内容。
510，获取由视觉传感器捕获的图像帧的分片中的像素，其中该分片包含的像素为图像帧包含的未处理的像素中的一部分。510与图3中的310类似，在此不再赘述。
520，对分片中的像素进行处理。520与图3中的320类似，在此不再赘述。
530，响应于处理完分片中的像素，对分片进行编码。
540，响应于编码完分片中的像素，传输分片。
具体地，视觉传感器可以将捕获的图像帧的像素逐个或逐行传输给图像处理装置进行预处理。例如，图像处理装置可以通过确定处理完的像素的数目是否达到一个分片的大小来确定是否处理完一个分片的像素，每当处理完一个分片大小的像素时，图像处理装置开始编码该分片，同时继续处理接下 来的像素，即下一分片的像素，并且一旦处理完下一分片的像素时，就开始编码下一分片的像素，以此类推。图像处理装置可以通过确定编码完的像素的数目是否达到一个分片的大小来确定是否编码完一个分片的像素每当编码完一个分片大小的像素时，图像处理装置开始传输该分片，同时继续编码接下来的像素，即下一分片的像素，并且一旦编码完下一分片的像素时，就开始传输下一分片的像素，以此类推。
根据本发明的实施例，图像处理装置可以每当处理完图像帧的一个分片的像素时，就开始编码该分片的像素，并且每当编码完一个分片的像素时，就开始传输该分片。由于本发明的实施例可以以分片为单位传输图像帧的像素，而无需等到处理完一个图像帧才开始编码该图像帧，也无需等到编码完该图像帧才开始传输该图像帧，因此减少了传输延时，提高了用户体验。
可选地，作为另一实施例，图5的方法还包括：在对分片进行编码之前，将分片存储到第一存储空间，其中上述对分片进行编码，包括：对从第一存储空间中获取的分片进行编码。例如，第一存储空间可以为图像处理装置中的缓存。
在540中，上述传输分片可以包括：将分片存储到第二存储空间；指示发射器从第二存储空间获取分片。例如，第二存储空间包括以下任意一项：图像处理装置中的缓存；发射器中的缓存；在图像处理装置和发射器之间的缓存。
例如，图像处理装置在将一个分片的像素存储到第二存储空间后，向发射器发送指示信息，用于指示发射器从第二存储空间获取该分片。发射器在接收到该指示信息后，确定第二存储空间已经存储了一个分片的像素，并从第二存储空间读取该分片的像素。该指示信息可以包括第二存储空间的地址信息，例如，具体的存储地址或存储地址的索引。作为替代，指示信息也可以不携带该地址信息，而是在图像处理装置和发射器两侧预先约定或设置该存储地址。
根据本发明的实施例，通过设置存储空间来存取分片，使得分别属于不同厂商或者具有不同性能(例如，传输速率)的图像处理装置和发射器之间可以实现分片的传输。
可替代，作为另一实施例，图像处理装置也可以直接向发射器发送该分片。例如，可以设计能够直接通信且性能匹配的图像处理装置和发射器，使 得每当处理和编码完一个分片时，图像处理装置可以通过图像处理装置与发射器之间的通信接口直接向发射器发送该分片。
可替代地，也可以将根据本发明的实施例，由于图像处理装置直接将处理和编码完的分片的像素发送给发射器，进一步减少了传输延时，并且节省了存储空间。
根据本发明的实施例，由于图像处理装置直接将处理和编码完的分片的像素发送给发射器，进一步减少了传输延时，并且节省了存储空间。
以上对发送端的实体进行了详细的描述，下面结合图6至图8的实施例对接收端的实体进行详细的描述。
图6是根据本发明一个实施例的图像编码方法的示意性流程图。图6的实施例可以由图2的译码装置、译码器或译码单元来执行。以下以译码装置为例进行说明。图6的图像译码方法包括如下内容。
610，获取图像帧的分片，其中分片包含的像素为图像帧包含的未译码的像素中的一部分。
具体地，可以接收由接收器传输的图像帧的分片。图像帧和分片的定义与发送端的图像帧和分片的定义类似，在此不再赘述。
应理解，接收器可以以分片为单位向译码装置发送图像帧的像素，本发明的实施例并不限于此，接收器也可以按常规的方式向译码装置发送图像帧，而由译码装置以分片为单位进行译码。
620，对分片进行译码。
例如，可以通过确定接收到的像素的数目是否达到一个分片的大小来确定是否接收到一个分片的像素，并且每当确定接收到一个分片的像素时，对分片进行译码。本发明的实施例对译码的方式不作限定，可以是视频或图像译码技术中使用的任意译码方式。
630，响应于译码完分片中的像素，传输分片。
具体地，译码装置可以获取接收器传输的图像帧的一个分片的像素，并且可以通过确定接收到的像素的数目是否达到一个分片的大小来确定是否接收到一个分片的像素，每当接收到一个分片的像素时，对该分片的像素进行译码，每当译码完一个分片大小的像素时，译码装置开始传输该分片，同时译码装置继续译码接下来的像素，即下一分片的像素，并且一旦译码完下一分片的像素时，就开始传输下一分片的像素，以此类推。可以预先设置分 片的大小的阈值，例如，M行或列像素或者N个像素，M和N均为正整数。每当译码装置确定译码完M行或列像素或N个像素时，开始传输这M行或列像素或N个像素。
根据本发明的实施例，译码装置可以每当接收到一个分片的像素时，就开始译码该分片的像素，并且每当译码完图像帧的一个分片的像素时，就开始传输该分片的像素。由于本发明的实施例可以以分片为单位传输图像帧的像素，而无需等到译码完一个图像帧才开始传输该图像帧，从而减少了传输延时，提高了用户体验。
根据本发明的实施例，上述获取图像帧的分片可以包括：根据接收器的指示从第一存储空间获取分片。
例如，第一存储空间可以为图2的实施例中的存储器中的一部分，也可以是一个独立的存储器。第一存储空间可以为以下任意一项：接收器中的缓存；译码装置中的缓存；在接收器和译码装置之间的缓存。
例如，每当接收完一个分片，并将该分片的像素存储到第一存储空间时，接收器向译码装置发送指示信息，用于指示译码装置从第一存储空间获取该分片。译码装置在接收到该指示信息后，确认第一存储空间已经存储了一个分片的像素，并从存储空间读取该分片的像素。该指示信息可以包括第一存储空间的地址信息，例如，具体的存储地址或存储地址的索引。指示信息也可以不携带该地址信息，而是在译码装置和接收器两侧预先约定或设置该存储地址。
根据本发明的实施例，通过设置存储空间来存取分片，使得分别属于不同厂商或者具有不同性能(例如，传输速率)的接收器和译码装置之间可以实现分片的传输。
可替代，作为另一实施例，接收器也可以直接向译码装置发送该分片。例如，可以设计能够直接通信且性能匹配的译码装置和接收器，使得每当接收完一个分片时，接收器可以通过接收器与译码装置之间的通信接口直接向译码装置发送该分片。
根据本发明的实施例，由于接收器直接将处理完的分片的像素发送给译码装置，进一步减少了传输延时，并且节省了存储空间。
在630中，上述传输分片可以包括：将分片存储到第二存储空间，并指示显示控制装置从第二存储空间获取分片。第二存储空间包括以下任意一 项：译码装置中的缓存；显示控制装置中的缓存；在译码装置和显示控制装置之间的缓存。
例如，译码装置在将一个分片的像素存储到第二存储空间后，向显示控制装置发送指示信息，用于指示显示控制装置从第二存储空间获取该分片。显示控制装置在接收到该指示信息后，确定第二存储空间已经存储了一个分片的像素，并从第二存储空间读取该分片的像素。该指示信息可以包括第二存储空间的地址信息，例如，具体的存储地址或存储地址的索引。作为替代，指示信息也可以不携带该地址信息，而是在显示控制装置和译码装置两侧预先约定或设置该存储地址。
根据本发明的实施例，通过设置存储空间来存取分片，使得分别属于不同厂商或者具有不同性能(例如，传输速率)的显示控制装置和译码装置之间可以实现分片的传输。
可替代，作为另一实施例，译码装置也可以直接向显示控制装置发送该分片。例如，可以设计能够直接通信且性能匹配的显示控制装置和译码装置，使得每当处理完一个分片时，译码装置可以通过显示控制装置与译码装置之间的通信接口直接向显示控制装置发送该分片。
根据本发明的实施例，由于直接将译码完的分片的像素发送给显示控制装置，进一步减少了传输延时，并且节省了存储空间。
图7是根据本发明一个实施例的显示控制方法的示意性流程图。图7的实施例可以由图2的显示控制装置、显示控制器或显示控制单元来执行。以下以显示控制装置为例进行说明。图7的显示控制方法对应于图6的图像译码方法，图7的显示控制方法包括如下内容。
710，接收图像帧的分片，其中分片包含的像素为图像帧包含的未显示的像素中的一部分。
具体地，可以获取由译码装置传输的图像帧的分片。图像帧和分片的定义与发送端的图像帧和分片的定义类似，在此不再赘述。
应理解，译码装置可以以分片为单位向显示控制装置发送图像帧的像素。
720，响应于接收完分片中的像素，对分片进行显示输出。
具体地，显示控制装置可以获取译码装置传输的图像帧的一个分片的像素，并且可以通过确定接收到的像素的数目是否达到一个分片的大小来确定 是否接收到一个分片的像素，每当接收到一个分片的像素时，对该分片的像素进行显示输出，同时显示控制装置继续接收接下来的像素，即下一分片的像素，并且一旦接收完下一分片的像素时，就开始显示输出下一分片的像素，以此类推。例中，可以预先设置分片的大小的阈值，例如，M行或列像素或者N个像素，M和N均为正整数。每当显示控制装置确定接收完M行或列像素或N个像素时，开始显示输出这M行或列像素或N个像素。
根据本发明的实施例，显示控制装置可以每当接收到一个分片的像素时，就开始显示输出该分片的像素。由于本发明的实施例可以以分片为单位显示输出图像帧的像素，而无需等到接收完一个图像帧才开始显示输出该图像帧，从而减少了传输延时，提高了用户体验。
根据本发明的实施例，上述获取图像帧的分片可以包括：根据译码装置的指示从存储空间获取分片。
图8是根据本发明一个实施例的图像处理方法的示意性流程图。图8的实施例由图像处理装置来执行。图8的方法包括如下内容。
810，获取图像帧的分片，其中分片包含的像素为图像帧包含的未译码的像素中的一部分。810与图6中的610类似，在此不再赘述。
820，对分片进行译码。820与图6中的620类似，在此不再赘述。
830，响应于译码完分片中的像素，对分片进行显示输出。
具体地，图像处理装置可以通过确定译码完的像素的数目是否达到一个分片的大小来确定是否译码完一个分片的像素，每当译码完一个分片大小的像素时，图像处理装置开始显示输出该分片，同时继续译码接下来的像素，即下一分片的像素，并且一旦译码完下一分片的像素时，就开始显示下一分片的像素，以此类推。
根据本发明的实施例，图像处理装置可以每当译码完图像帧的一个分片的像素时，就开始显示输出该分片的像素。由于本发明的实施例可以以分片为单位传输图像帧的像素，而无需等到处理完一个图像帧才开始编码该图像帧，也无需等到编码完该图像帧才开始传输该图像帧，因此减少了传输延时，提高了用户体验。
在810中，上述获取图像帧的分片可以包括：根据接收器的指示从存储空间获取分片。
例如，存储空间为以下任意一项：接收器中的缓存；图像处理装置中的 缓存；在接收器和图像处理装置之间的缓存。
上面详细描述了根据本发明实施例的方法，下面分别结合图9至图15描述根据本发明实施例的装置。
图9是本发明一个实施例提供的图像信号处理装置900的结构示意图。图像信号处理装置900包括获取模块910、处理模块920和传输模块930。
获取模块910用于获取由视觉传感器捕获的图像帧的分片中的像素，其中分片包含的像素为图像帧包含的未处理的像素中的一部分。处理模块920用于对分片中的像素进行处理。传输模块930用于响应于处理完分片中的像素，传输该分片。
根据本发明的实施例，图像信号处理装置可以每当处理完图像帧的一个分片的像素时，就开始传输该分片的像素。由于本发明的实施例可以以分片为单位传输图像帧的像素，而无需等到处理完一个图像帧才开始传输该图像帧，因此减少了传输延时，提高了用户体验。
根据本发明的实施例，传输模块930用于将分片存储到存储空间，并指示编码装置从存储空间获取分片。
根据本发明的实施例，存储空间可以为以下任意一项：图像信号处理装置中的缓存；编码装置中的缓存；在图像信号处理装置和编码装置之间的缓存。
根据本发明的实施例，分片可以包括以下任意一项：图像帧中的预定数量的行的像素；图像帧中的预定数量的列的像素；图像帧中的预定数量的像素。
根据本发明的实施例，分片包括图像帧中的十六行像素。
根据本发明的实施例，图像帧包括多个具有相同数量的像素的分片。
图像信号处理装置900的各个模块的操作和功能可以参考上述图3的方法，为了避免重复，在此不再赘述。
图10是根据本发明的实施例的计算机装置1000的结构示意图。计算机装置100可以包括至少一个存储器1020，用于存储计算机可执行指令；至少一个处理器1010，单独或共同地用于：访问至少一个存储器1020，并执行计算机可执行指令，以进行图3至图8的实施例所述的方法中的操作。
本发明的另一实施例还提供了一种图像信号处理装置，该图像信号处理装置可以由图10的计算机装置来实现，用于进行图3的实施例所述的方法 中的操作。
图11是本发明一个实施例提供的编码装置1100的结构示意图。编码装置1100包括：获取模块1110、编码模块1120和传输模块1130。
获取模块1110用于获取图像帧的分片，其中分片包含的像素为图像帧包含的未编码的像素中的一部分。编码模块1120用于对分片进行编码。传输模块1130用于响应于编码完分片中的像素，传输分片。
根据本发明的实施例，编码装置可以每当接收到一个分片的像素时，就开始编码该分片的像素，并且每当编码完图像帧的一个分片的像素时，就开始传输该分片的像素。由于本发明的实施例可以以分片为单位传输图像帧的像素，而无需等到编码完一个图像帧才开始传输该图像帧，从而减少了传输延时，提高了用户体验。
根据本发明的实施例，获取模块1110用于获取由图像信号处理装置传输的图像帧的分片。
根据本发明的实施例，获取模块1110用于根据图像信号处理装置的指示从第一存储空间中获取分片。
根据本发明的实施例，第一存储空间为以下任意一项：图像信号处理装置中的缓存；编码装置中的缓存；在图像信号处理装置和编码装置之间的缓存。
根据本发明的实施例，分片包括以下任意一项：图像帧中的预定数量的行的像素；图像帧中的预定数量的列的像素；图像帧中的预定数量的像素。
根据本发明的实施例，分片包括图像帧中的十六行像素。
根据本发明的实施例，图像帧包括多个具有相同数量的像素的分片。
根据本发明的实施例，传输模块1130用于将分片存储到第二存储空间，并指示发射器从第二存储空间获取分片。
根据本发明的实施例，第二存储空间包括以下任意一项：编码装置中的缓存；发射器中的缓存；在编码装置和发射器之间的缓存。
编码装置1100的各个模块的操作和功能可以参考上述图4的方法，为了避免重复，在此不再赘述。
本发明的另一实施例还提供了一种编码装置，该编码装置可以由图10的计算机装置来实现，用于进行图4的实施例所述的方法中的操作。
图12是本发明一个实施例提供的图像处理装置1200的结构示意图。图 像处理装置1200包括：获取模块1210、处理模块1220、编码模块1230和传输模块1240。
获取模块1210用于获取由视觉传感器捕获的图像帧的分片中的像素，其中分片包含的像素为图像帧包含的未处理的像素中的一部分。处理模块1220用于对分片中的像素进行处理。编码模块1230用于响应于处理完分片中的像素，对分片进行编码。传输模块1240用于响应于编码完分片中的像素，传输分片。
根据本发明的实施例，图像处理装置可以每当处理完图像帧的一个分片的像素时，就开始编码该分片的像素，并且每当编码完一个分片的像素时，就开始传输该分片。由于本发明的实施例可以以分片为单位传输图像帧的像素，而无需等到处理完一个图像帧才开始编码该图像帧，也无需等到编码完该图像帧才开始传输该图像帧，因此减少了传输延时，提高了用户体验。
可选地，作为另一实施例，编码模块1230还用于在对分片进行编码之前，将分片存储到第一存储空间，其中编码模块1230用于对从第一存储空间中获取的分片进行编码。
根据本发明的实施例，第一存储空间为图像处理装置中的缓存。
根据本发明的实施例，分片包括以下任意一项：图像帧中的预定数量的行的像素；图像帧中的预定数量的列的像素；图像帧中的预定数量的像素。
根据本发明的实施例，分片包括图像帧中的十六行像素。
根据本发明的实施例，图像帧包括多个具有相同数量的像素的分片。
根据本发明的实施例，传输模块1240用于将分片存储到第二存储空间；指示发射器从第二存储空间获取分片。
根据本发明的实施例，第二存储空间包括以下任意一项：图像处理装置中的缓存；发射器中的缓存；在图像处理装置和发射器之间的缓存。
图像处理装置1200的各个模块的操作和功能可以参考上述图5的方法，为了避免重复，在此不再赘述。
本发明的另一实施例还提供了一种图像处理装置，该图像信号处理装置可以由图10的计算机装置来实现，用于进行图5的实施例所述的方法中的操作。
图13是本发明一个实施例提供的译码装置1300的结构示意图。译码装置1300包括：获取模块1310、译码模块1320和传输模块1330。
获取模块1310用于获取图像帧的分片，其中分片包含的像素为图像帧包含的未译码的像素中的一部分。译码模块1320用于对分片进行译码。传输模块1330用于响应于译码完分片中的像素，传输分片。
根据本发明的实施例，译码装置可以每当接收到一个分片的像素时，就开始译码该分片的像素，并且每当译码完图像帧的一个分片的像素时，就开始传输该分片的像素。由于本发明的实施例可以以分片为单位传输图像帧的像素，而无需等到译码完一个图像帧才开始传输该图像帧，从而减少了传输延时，提高了用户体验。
根据本发明的实施例，获取模块1310获取由接收器传输的图像帧的分片。
根据本发明的实施例，获取模块1310根据接收器的指示从第一存储空间获取分片。
根据本发明的实施例，第一存储空间为以下任意一项：接收器中的缓存；译码装置中的缓存；在接收器和译码装置之间的缓存。
根据本发明的实施例，分片包括以下任意一项：图像帧中的预定数量的行的像素；图像帧中的预定数量的列的像素；图像帧中的预定数量的像素。
根据本发明的实施例，分片包括图像帧中的十六行像素。
根据本发明的实施例，图像帧包括多个具有相同数量的像素的分片。
根据本发明的实施例，传输模块1330将分片存储到第二存储空间，并指示显示控制装置从第二存储空间获取分片。
根据本发明的实施例，第二存储空间包括以下任意一项：译码装置中的缓存；显示控制装置中的缓存；在译码装置和显示控制装置之间的缓存。
译码装置1300的各个模块的操作和功能可以参考上述图6的方法，为了避免重复，在此不再赘述。
本发明的另一实施例还提供了一种图像处理装置，该译码装置可以由图10的计算机装置来实现，用于进行图6的实施例所述的方法中的操作。
图14是本发明一个实施例提供的显示控制装置1400的结构示意图。显示控制装置1400包括：接收模块1410和显示模块1420。
接收模块1410用于接收图像帧的分片，其中分片包含的像素为图像帧包含的未显示的像素中的一部分。显示模块1420用于响应于接收完分片中的像素，对分片进行显示输出。
根据本发明的实施例，显示控制装置可以每当接收到一个分片的像素时，就开始显示输出该分片的像素。由于本发明的实施例可以以分片为单位显示输出图像帧的像素，而无需等到接收完一个图像帧才开始显示输出该图像帧，从而减少了传输延时，提高了用户体验。
根据本发明的实施例，接收模块1410接收由译码装置传输的图像帧的分片。
根据本发明的实施例，接收模块1410根据译码装置的指示从存储空间获取分片。
根据本发明的实施例，存储空间为以下任意一项：译码装置中的缓存；显示控制装置中的缓存；在显示控制装置和译码装置之间的缓存。
根据本发明的实施例，分片包括以下任意一项：图像帧中的预定数量的行的像素；图像帧中的预定数量的列的像素；图像帧中的预定数量的像素。
根据本发明的实施例，分片包括图像帧中的十六行像素。
根据本发明的实施例，图像帧包括多个具有相同数量的像素的分片。
显示控制装置1400的各个模块的操作和功能可以参考上述图7的方法，为了避免重复，在此不再赘述。
本发明的另一实施例还提供了一种显示控制装置，该译码装置可以由图10的计算机装置来实现，用于进行图7的实施例所述的方法中的操作。
图15是本发明一个实施例提供的图像处理装置1500的结构示意图。
获取模块1510，用于获取图像帧的分片，其中分片包含的像素为图像帧包含的未译码的像素中的一部分。译码模块1520，用于对分片进行译码。显示模块1530，用于响应于译码完分片中的像素，对分片进行显示输出。
根据本发明的实施例，图像处理装置可以每当译码完图像帧的一个分片的像素时，就开始显示输出该分片的像素。由于本发明的实施例可以以分片为单位传输图像帧的像素，而无需等到处理完一个图像帧才开始编码该图像帧，也无需等到编码完该图像帧才开始传输该图像帧，因此减少了传输延时，提高了用户体验。
根据本发明的实施例，获取模块1510获取由接收器传输的图像帧的分片。
根据本发明的实施例，获取模块1510根据接收器的指示从存储空间获取分片。
根据本发明的实施例，存储空间为以下任意一项：接收器中的缓存；图像处理装置中的缓存；在接收器和图像处理装置之间的缓存。
根据本发明的实施例，分片包括以下任意一项：图像帧中的预定数量的行的像素；图像帧中的预定数量的列的像素；图像帧中的预定数量的像素。
根据本发明的实施例，分片包括图像帧中的十六行像素。
根据本发明的实施例，图像帧包括多个具有相同数量的像素的分片。
图像处理装置1500的各个模块的操作和功能可以参考上述图8的方法，为了避免重复，在此不再赘述。
本发明的另一实施例还提供了一种图像处理装置，该译码装置可以由图10的计算机装置来实现，用于进行图8的实施例所述的方法中的操作。
本发明的实施例还提供了一种图像处理系统。该图像处理系统可以包括图1的发送端。该图像处理系统包括：视觉传感器，用于捕获图像帧的像素；如以上实施例的图像信号处理装置，与视觉传感器相连接；如以上实施例的编码装置，与图像信号处理装置相连接；发射器，与编码装置相连接，用于响应于接收完图像帧的分片中的像素，发射分片。
本发明的实施例还提供了另一种图像处理系统。该图像处理系统可以包括图2的接收端。该图像处理系统包括：接收器，用于接收图像帧的分片。如以上实施例的译码装置，与接收器相连接；如以上实施例的显示控制装置，与译码装置相连接；显示器，与显示控制装置相连接，用于根据显示控制装置的输出进行显示。
本发明的实施例还提供了另一种图像处理系统。该图像处理系统可以包括图1的发送端。图像处理系统可以包括视觉传感装置，用于捕获图像帧；如权利要求以上实施例的图像处理装置，与视觉传感装置相连接；发射器，与图像处理装置相连接，用于响应于接收完图像帧的分片中的像素，发射分片。
本发明的实施例还提供了另一种图像处理系统。该图像处理系统可以包括图2的接收端。该图像处理系统可以包括：接收器，用于接收图像帧的分片；如以上实施例所述的图像处理装置，与接收器相连接；显示器，与图像处理装置相连接，用于根据所图像处理装置的输出进行显示。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结 合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易 想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。

Claims (102)

  1. 一种图像信号处理方法，其特征在于，包括：
    获取由视觉传感器捕获的图像帧的分片中的像素，其中所述分片包含的像素为所述图像帧包含的未处理的像素中的一部分；
    对所述分片中的像素进行处理；
    响应于处理完所述分片中的像素，传输所述分片。
  2. 根据权利要求1所述的图像信号处理方法，其特征在于，所述传输所述分片，包括：
    将所述分片存储到存储空间；
    指示编码装置从所述存储空间获取所述分片。
  3. 根据权利要求2所述的图像信号处理方法，其特征在于，所述存储空间为以下任意一项：
    图像信号处理装置中的缓存；
    所述编码装置中的缓存；
    在所述图像信号处理装置和所述编码装置之间的缓存。
  4. 根据权利要求1至3中的任一项所述的图像信号处理方法，其特征在于，所述分片包括以下任意一项：
    所述图像帧中的预定数量的行的像素；
    所述图像帧中的预定数量的列的像素；
    所述图像帧中的预定数量的像素。
  5. 根据权利要求4所述的图像信号处理方法，其特征在于，所述分片包括所述图像帧中的十六行像素。
  6. 根据权利要求1至5中的任一项所述的图像信号处理方法，其特征在于，所述图像帧包括多个具有相同数量的像素的分片。
  7. 一种图像编码方法，其特征在于，包括：
    获取图像帧的分片，其中所述分片包含的像素为所述图像帧包含的未编码的像素中的一部分；
    对所述分片进行编码；
    响应于编码完所述分片中的像素，传输所述分片。
  8. 根据权利要求7所述的图像编码方法，其特征在于，所述获取图像帧的分片，包括：
    获取由图像信号处理装置传输的所述图像帧的分片。
  9. 根据权利要求8所述的图像编码方法，其特征在于，所述获取由图像信号处理装置传输的所述图像帧的分片，包括：
    根据所述图像信号处理装置的指示从第一存储空间中获取所述分片。
  10. 根据权利要求9所述的图像编码方法，其特征在于，所述第一存储空间为以下任意一项：
    所述图像信号处理装置中的缓存；
    编码装置中的缓存；
    在所述图像信号处理装置和所述编码装置之间的缓存。
  11. 根据权利要求7至10中的任一项所述的图像编码方法，其特征在于，所述分片包括以下任意一项：
    所述图像帧中的预定数量的行的像素；
    所述图像帧中的预定数量的列的像素；
    所述图像帧中的预定数量的像素。
  12. 根据权利要求7至11中的任一项所述的图像编码方法，其特征在于，所述分片包括所述图像帧中的十六行像素。
  13. 根据权利要求7至12中的任一项所述的图像编码方法，其特征在于，所述图像帧包括多个具有相同数量的像素的分片。
  14. 根据权利要求7至13中的任一项所述的图像编码方法，其特征在于，所述传输所述分片，包括：
    将所述分片存储到第二存储空间；
    指示发射器从所述第二存储空间获取所述分片。
  15. 根据权利要求14所述的图像编码方法，其特征在于，所述第二存储空间包括以下任意一项：
    编码装置中的缓存；
    所述发射器中的缓存；
    在所述编码装置和所述发射器之间的缓存。
  16. 一种图像处理方法，其特征在于，包括：
    获取由视觉传感器捕获的图像帧的分片中的像素，其中所述分片包含的像素为所述图像帧包含的未处理的像素中的一部分；
    对所述分片中的像素进行处理；
    响应于处理完所述分片中的像素，对所述分片进行编码；
    响应于编码完所述分片中的像素，传输所述分片。
  17. 根据权利要求16所述的图像处理方法，其特征在于，还包括：
    在对所述分片进行编码之前，将所述分片存储到第一存储空间，
    其中所述对所述分片进行编码，包括：
    对从所述第一存储空间中获取的所述分片进行编码。
  18. 根据权利要求17所述的图像处理方法，其特征在于，所述第一存储空间为图像处理装置中的缓存。
  19. 根据权利要求16至18中的任一项所述的图像处理方法，其特征在于，所述分片包括以下任意一项：
    所述图像帧中的预定数量的行的像素；
    所述图像帧中的预定数量的列的像素；
    所述图像帧中的预定数量的像素。
  20. 根据权利要求16至19中的任一项所述的图像处理方法，其特征在于，所述分片包括所述图像帧中的十六行像素。
  21. 根据权利要求16至20中的任一项所述的图像处理方法，其特征在于，所述图像帧包括多个具有相同数量的像素的分片。
  22. 根据权利要求16至21中的任一项所述的图像处理方法，其特征在于，所述传输所述分片，包括：
    将所述分片存储到第二存储空间；
    指示发射器从所述第二存储空间获取所述分片。
  23. 根据权利要求22所述的图像处理方法，其特征在于，所述第二存储空间包括以下任意一项：
    图像处理装置中的缓存；
    所述发射器中的缓存；
    在所述图像处理装置和所述发射器之间的缓存。
  24. 一种图像译码方法，其特征在于，包括：
    获取图像帧的分片，其中所述分片包含的像素为所述图像帧包含的未译码的像素中的一部分；
    对所述分片进行译码；
    响应于译码完所述分片中的像素，传输所述分片。
  25. 根据权利要求24所述的图像译码方法，其特征在于，所述获取图像帧的分片，包括：
    获取由接收器传输的所述图像帧的分片。
  26. 根据权利要求25所述的图像译码方法，其特征在于，所述获取由接收器传输的所述图像帧的分片，包括：
    根据所述接收器的指示从第一存储空间获取所述分片。
  27. 根据权利要求26所述的图像译码方法，其特征在于，所述第一存储空间为以下任意一项：
    所述接收器中的缓存；
    译码装置中的缓存；
    在所述接收器和所述译码装置之间的缓存。
  28. 根据权利要求24至27中的任一项所述的图像译码方法，其特征在于，所述分片包括以下任意一项：
    所述图像帧中的预定数量的行的像素；
    所述图像帧中的预定数量的列的像素；
    所述图像帧中的预定数量的像素。
  29. 根据权利要求24至28中的任一项所述的图像译码方法，其特征在于，所述分片包括所述图像帧中的十六行像素。
  30. 根据权利要求24至29中的任一项所述的图像译码方法，其特征在于，所述图像帧包括多个具有相同数量的像素的分片。
  31. 根据权利要求24至30中的任一项所述的图像译码方法，其特征在于，所述传输所述分片，包括：
    将所述分片存储到第二存储空间；
    指示显示控制装置从所述第二存储空间获取所述分片。
  32. 根据权利要求31所述的图像译码方法，其特征在于，所述第二存储空间包括以下任意一项：
    译码装置中的缓存；
    所述显示控制装置中的缓存；
    在所述译码装置和所述显示控制装置之间的缓存。
  33. 一种显示控制方法，其特征在于，包括：
    接收图像帧的分片，其中所述分片包含的像素为所述图像帧包含的未显 示的像素中的一部分；
    响应于接收完所述分片中的像素，对所述分片进行显示输出。
  34. 根据权利要求33所述的显示控制方法，其特征在于，所述获取图像帧的分片，包括：
    获取由译码装置传输的所述图像帧的分片。
  35. 根据权利要求34所述的显示控制方法，其特征在于，所述获取由译码装置传输的所述图像帧的分片，包括：
    根据所述译码装置的指示从第一存储空间获取所述分片。
  36. 根据权利要求35所述的显示控制方法，其特征在于，所述第一存储空间为以下任意一项：
    所述译码装置中的缓存；
    显示控制装置中的缓存；
    在所述显示控制装置和所述译码装置之间的缓存。
  37. 权利要求33至36中的任一项所述的显示控制方法，其特征在于，所述分片包括以下任意一项：
    所述图像帧中的预定数量的行的像素；
    所述图像帧中的预定数量的列的像素；
    所述图像帧中的预定数量的像素。
  38. 根据权利要求33至37中的任一项所述的显示控制方法，其特征在于，所述分片包括所述图像帧中的十六行像素。
  39. 根据权利要求33至38中的任一项所述的显示控制方法，其特征在于，所述图像帧包括多个具有相同数量的像素的分片。
  40. 一种图像处理方法，其特征在于，
    获取图像帧的分片，其中所述分片包含的像素为所述图像帧包含的未译码的像素中的一部分；
    对所述分片进行译码；
    响应于译码完所述分片中的像素，对所述分片进行显示输出。
  41. 根据权利要求40所述的图像处理方法，其特征在于，所述获取图像帧的分片，包括：
    获取由接收器传输的所述图像帧的分片。
  42. 根据权利要求41所述的图像处理方法，其特征在于，所述获取由 接收器传输的所述图像帧的分片，包括：
    根据所述接收器的指示从存储空间获取所述分片。
  43. 根据权利要求42所述的图像处理方法，其特征在于，所述存储空间为以下任意一项：
    所述接收器中的缓存；
    图像处理装置中的缓存；
    在所述接收器和所述图像处理装置之间的缓存。
  44. 根据权利要求40至43中的任一项所述的图像处理方法，其特征在于，所述分片包括以下任意一项：
    所述图像帧中的预定数量的行的像素；
    所述图像帧中的预定数量的列的像素；
    所述图像帧中的预定数量的像素。
  45. 根据权利要求40至44中的任一项所述的图像处理方法，其特征在于，所述分片包括所述图像帧中的十六行像素。
  46. 根据权利要求40至45中的任一项所述的图像处理方法，其特征在于，所述图像帧包括多个具有相同数量的像素的分片。
  47. 一种图像信号处理装置，其特征在于，包括：
    获取模块，用于获取由视觉传感器捕获的图像帧的分片中的像素，其中所述分片包含的像素为所述图像帧包含的未处理的像素中的一部分；
    处理模块，用于对所述分片中的像素进行处理；
    传输模块，用于响应于处理完所述分片中的像素，传输所述分片。
  48. 根据权利要求47所述的图像信号处理装置，其特征在于，所述传输模块用于将所述分片存储到存储空间，并指示编码装置从所述存储空间获取所述分片。
  49. 根据权利要求48所述的图像信号处理装置，其特征在于，所述存储空间为以下任意一项：图像信号处理装置中的缓存；所述编码装置中的缓存；在所述图像信号处理装置和所述编码装置之间的缓存。
  50. 根据权利要求47至49中的任一项所述的图像信号处理装置，其特征在于，所述分片包括以下任意一项：所述图像帧中的预定数量的行的像素；所述图像帧中的预定数量的列的像素；所述图像帧中的预定数量的像素。
  51. 根据权利要求50所述的图像信号处理装置，其特征在于，所述分 片包括所述图像帧中的十六行像素。
  52. 根据权利要求47至51中的任一项所述的图像信号处理装置，其特征在于，所述图像帧包括多个具有相同数量的像素的分片。
  53. 一种图像信号处理装置，其特征在于，包括：
    至少一个存储器，用于存储计算机可执行指令；
    至少一个处理器，单独或共同地用于：访问所述至少一个存储器，并执行所述计算机可执行指令，以进行根据权利要求1至6中任一项所述的方法中的操作。
  54. 一种编码装置，其特征在于，包括：
    获取模块，用于获取图像帧的分片，其中所述分片包含的像素为所述图像帧包含的未编码的像素中的一部分；
    编码模块，用于对所述分片进行编码；
    传输模块，用于响应于编码完所述分片中的像素，传输所述分片。
  55. 根据权利要求54所述的编码装置，其特征在于，所述获取模块用于获取由图像信号处理装置传输的所述图像帧的分片。
  56. 根据权利要求55所述的编码装置，其特征在于，所述获取模块用于根据所述图像信号处理装置的指示从第一存储空间中获取所述分片。
  57. 根据权利要求56所述的编码装置，其特征在于，所述第一存储空间为以下任意一项：所述图像信号处理装置中的缓存；编码装置中的缓存；在所述图像信号处理装置和所述编码装置之间的缓存。
  58. 根据权利要求54至57中的任一项所述的编码装置，其特征在于，所述分片包括以下任意一项：所述图像帧中的预定数量的行的像素；所述图像帧中的预定数量的列的像素；所述图像帧中的预定数量的像素。
  59. 根据权利要求54至58中的任一项所述的编码装置，其特征在于，所述分片包括所述图像帧中的十六行像素。
  60. 根据权利要求54至59中的任一项所述的编码装置，其特征在于，所述图像帧包括多个具有相同数量的像素的分片。
  61. 根据权利要求54至60中的任一项所述的编码装置，其特征在于，所述传输模块用于将所述分片存储到第二存储空间，并指示发射器从所述第二存储空间获取所述分片。
  62. 根据权利要求61所述的编码装置，其特征在于，所述第二存储空 间包括以下任意一项：编码装置中的缓存；所述发射器中的缓存；在所述编码装置和所述发射器之间的缓存。
  63. 一种编码装置，其特征在于，包括：
    至少一个存储器，用于存储计算机可执行指令；
    至少一个处理器，单独或共同地用于：访问所述至少一个存储器，并执行所述计算机可执行指令，以进行根据权利要求7至15中任一项所述的方法中的操作。
  64. 一种图像处理装置，其特征在于，包括：
    获取模块，用于获取由视觉传感器捕获的图像帧的分片中的像素，其中所述分片包含的像素为所述图像帧包含的未处理的像素中的一部分；
    处理模块，用于对所述分片中的像素进行处理；
    编码模块，用于响应于处理完所述分片中的像素，对所述分片进行编码；
    传输模块，用于响应于编码完所述分片中的像素，传输所述分片。
  65. 根据权利要求64所述的图像处理装置，其特征在于，还包括：
    在对所述分片进行编码之前，将所述分片存储到第一存储空间，其中所述编码模块用于对从所述第一存储空间中获取的所述分片进行编码。
  66. 根据权利要求65所述的图像处理装置，其特征在于，所述第一存储空间为图像处理装置中的缓存。
  67. 根据权利要求64至66中的任一项所述的图像处理装置，其特征在于，所述分片包括以下任意一项：所述图像帧中的预定数量的行的像素；所述图像帧中的预定数量的列的像素；所述图像帧中的预定数量的像素。
  68. 根据权利要求64至67中的任一项所述的图像处理装置，其特征在于，所述分片包括所述图像帧中的十六行像素。
  69. 根据权利要求64至68中的任一项所述的图像处理装置，其特征在于，所述图像帧包括多个具有相同数量的像素的分片。
  70. 根据权利要求44至69中的任一项所述的图像处理装置，其特征在于，传输模块用于将所述分片存储到第二存储空间；指示发射器从所述第二存储空间获取所述分片。
  71. 根据权利要求70所述的图像处理装置，其特征在于，所述第二存储空间包括以下任意一项：图像处理装置中的缓存；所述发射器中的缓存；在所述图像处理装置和所述发射器之间的缓存。
  72. 一种图像处理装置，其特征在于，包括：
    至少一个存储器，用于存储计算机可执行指令；
    至少一个处理器，单独或共同地用于：访问所述至少一个存储器，并执行所述计算机可执行指令，以进行根据权利要求16至23中任一项所述的方法中的操作。
  73. 一种译码装置，其特征在于，包括：
    获取模块，用于获取图像帧的分片，其中所述分片包含的像素为所述图像帧包含的未译码的像素中的一部分；
    译码模块，用于对所述分片进行译码；
    传输模块，用于响应于译码完所述分片中的像素，传输所述分片。
  74. 根据权利要求73所述的译码装置，其特征在于，所述获取模块获取由接收器传输的所述图像帧的分片。
  75. 根据权利要求74所述的译码装置，其特征在于，所述获取模块根据所述接收器的指示从第一存储空间获取所述分片。
  76. 根据权利要求75所述的译码装置，其特征在于，所述第一存储空间为以下任意一项：
    所述接收器中的缓存；
    译码装置中的缓存；
    在所述接收器和所述译码装置之间的缓存。
  77. 根据权利要求73至76中的任一项所述的译码装置，其特征在于，所述分片包括以下任意一项：
    所述图像帧中的预定数量的行的像素；
    所述图像帧中的预定数量的列的像素；
    所述图像帧中的预定数量的像素。
  78. 根据权利要求73至77中的任一项所述的译码装置，其特征在于，所述分片包括所述图像帧中的十六行像素。
  79. 根据权利要求73至78中的任一项所述的译码装置，其特征在于，所述图像帧包括多个具有相同数量的像素的分片。
  80. 根据权利要求73至79中的任一项所述的译码装置，所述传输模块将所述分片存储到第二存储空间，并指示显示控制装置从所述第二存储空间获取所述分片。
  81. 根据权利要求80所述的译码装置，其特征在于，所述第二存储空间包括以下任意一项：
    译码装置中的缓存；
    所述显示控制装置中的缓存；
    在所述译码装置和所述显示控制装置之间的缓存。
  82. 一种译码装置，其特征在于，包括：
    至少一个存储器，用于存储计算机可执行指令；
    至少一个处理器，单独或共同地用于：访问所述至少一个存储器，并执行所述计算机可执行指令，以进行根据权利要求24至32中任一项所述的方法中的操作。
  83. 一种显示控制装置，其特征在于，包括：
    接收模块，用于接收图像帧的分片，其中所述分片包含的像素为所述图像帧包含的未显示的像素中的一部分；
    显示模块，用于响应于接收完所述分片中的像素，对所述分片进行显示输出。
  84. 根据权利要求83所述的显示控制装置，其特征在于，所述获取模块获取由译码装置传输的所述图像帧的分片。
  85. 根据权利要求84所述的显示控制装置，所述获取模块根据所述译码装置的指示从第一存储空间获取所述分片。
  86. 根据权利要求85所述的显示控制装置，其特征在于，所述第一存储空间为以下任意一项：
    所述译码装置中的缓存；
    显示控制装置中的缓存；
    在所述显示控制装置和所述译码装置之间的缓存。
  87. 根据权利要求83至86中的任一项所述的显示控制装置，其特征在于，所述分片包括以下任意一项：
    所述图像帧中的预定数量的行的像素；
    所述图像帧中的预定数量的列的像素；
    所述图像帧中的预定数量的像素。
  88. 根据权利要求83至87中的任一项所述的显示控制装置，其特征在于，所述分片包括所述图像帧中的十六行像素。
  89. 根据权利要求83至88中的任一项所述的显示控制装置，其特征在于，所述图像帧包括多个具有相同数量的像素的分片。
  90. 一种显示控制装置，其特征在于，包括：
    至少一个存储器，用于存储计算机可执行指令；
    至少一个处理器，单独或共同地用于：访问所述至少一个存储器，并执行所述计算机可执行指令，以进行根据权利要求33至39中任一项所述的方法中的操作。
  91. 一种图像处理装置，其特征在于，包括：
    获取模块，用于获取图像帧的分片，其中所述分片包含的像素为所述图像帧包含的未译码的像素中的一部分；
    译码模块，用于对所述分片进行译码；
    显示模块，用于响应于译码完所述分片中的像素，对所述分片进行显示输出。
  92. 根据权利要求91所述的图像处理装置，其特征在于，所述获取模块获取由接收器传输的所述图像帧的分片。
  93. 根据权利要求92所述的图像处理方法，其特征在于，所述获取模块根据所述接收器的指示从存储空间获取所述分片。
  94. 根据权利要求93所述的图像处理装置，其特征在于，所述存储空间为以下任意一项：
    所述接收器中的缓存；
    图像处理装置中的缓存；
    在所述接收器和所述图像处理装置之间的缓存。
  95. 根据权利要求91至94中的任一项所述的图像处理装置，其特征在于，所述分片包括以下任意一项：
    所述图像帧中的预定数量的行的像素；
    所述图像帧中的预定数量的列的像素；
    所述图像帧中的预定数量的像素。
  96. 根据权利要求91至95中的任一项所述的图像处理装置，其特征在于，所述分片包括所述图像帧中的十六行像素。
  97. 根据权利要求91至96中的任一项所述的图像处理装置，其特征在于，所述图像帧包括多个具有相同数量的像素的分片。
  98. 一种图像处理装置，其特征在于，包括：
    至少一个存储器，用于存储计算机可执行指令；
    至少一个处理器，单独或共同地用于：访问所述至少一个存储器，并执行所述计算机可执行指令，以进行根据权利要求40至46中任一项所述的方法中的操作。
  99. 一种图像处理系统，其特征在于，包括：
    视觉传感器，用于捕获图像帧的像素；
    如权利要求47至53中的任一项所述的图像信号处理装置，与所述视觉传感器相连接；
    如权利要求54至63中的任一项所述的编码装置，与图像信号处理装置相连接；
    发射器，与所述编码装置相连接，用于响应于接收完所述图像帧的分片中的像素，发射所述分片。
  100. 一种图像处理系统，其特征在于，包括：
    接收器，用于接收图像帧的分片。
    如权利要求64至72中的任一项所述的译码装置，与所述接收器相连接；
    如权利要求73至82中的任一项所述的显示控制装置，与所述译码装置相连接；
    显示器，与所述显示控制装置相连接，用于根据所述显示控制装置的输出进行显示。
  101. 一种图像处理系统，其特征在于，包括：
    视觉传感装置，用于捕获图像帧；
    如权利要求83至90中的任一项所述的图像处理装置，与视觉传感装置相连接；
    发射器，与所述图像处理装置相连接，用于响应于接收完所述图像帧的分片中的像素，发射所述分片。
  102. 一种图像处理系统，其特征在于，包括：
    接收器，用于接收图像帧的分片；
    如权利要求91至98中的任一项所述的图像处理装置，与所述接收器相连接；
    显示器，与所述图像处理装置相连接，用于根据所图像处理装置的输出 进行显示。
PCT/CN2016/109528 2016-12-12 2016-12-12 图像信号处理方法和装置 Ceased WO2018107338A1 (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201680002556.1A CN106717000A (zh) 2016-12-12 2016-12-12 图像信号处理方法和装置
PCT/CN2016/109528 WO2018107338A1 (zh) 2016-12-12 2016-12-12 图像信号处理方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2016/109528 WO2018107338A1 (zh) 2016-12-12 2016-12-12 图像信号处理方法和装置

Publications (1)

Publication Number Publication Date
WO2018107338A1 true WO2018107338A1 (zh) 2018-06-21

Family

ID=58903789

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2016/109528 Ceased WO2018107338A1 (zh) 2016-12-12 2016-12-12 图像信号处理方法和装置

Country Status (2)

Country Link
CN (1) CN106717000A (zh)
WO (1) WO2018107338A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019023914A1 (zh) * 2017-07-31 2019-02-07 深圳市大疆创新科技有限公司 一种图像处理方法、无人机、地面控制台及其图像处理系统
EP3643074A4 (en) * 2017-08-25 2020-04-29 SZ DJI Technology Co., Ltd. SYSTEMS AND METHODS FOR SYNCHRONIZING FRAME SYNCHRONIZATION BETWEEN A PHYSICAL LAYER FRAME AND A VIDEO FRAME
CN109587504A (zh) * 2017-09-29 2019-04-05 北京传送科技有限公司 Vr影像数据压缩方法
CN109785347A (zh) 2018-04-27 2019-05-21 京东方科技集团股份有限公司 图像处理方法、图像处理系统及存储介质
CN113160026B (zh) * 2020-01-07 2024-03-05 北京地平线机器人技术研发有限公司 图像处理方法、装置、介质以及电子设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1126410A (zh) * 1995-01-06 1996-07-10 大宇电子株式会社 数字视频信号的并行解码装置
US6167442A (en) * 1997-02-18 2000-12-26 Truespectra Inc. Method and system for accessing and of rendering an image for transmission over a network
CN101282478A (zh) * 2008-04-24 2008-10-08 上海华平信息技术股份有限公司 实现高清视频并行编码的方法及系统
CN102625149A (zh) * 2004-09-27 2012-08-01 英特尔公司 使用基于片的再现系统的低等待时间远程显示再现

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8260068B2 (en) * 2007-05-17 2012-09-04 Sony Corporation Encoding and decoding device and associated methodology for obtaining a decoded image with low delay
JP5914962B2 (ja) * 2010-04-09 2016-05-11 ソニー株式会社 画像処理装置および方法、プログラム、並びに、記録媒体
CN105791353B (zh) * 2014-12-23 2020-03-17 深圳市腾讯计算机系统有限公司 基于纠删码的分布式数据存储方法及系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1126410A (zh) * 1995-01-06 1996-07-10 大宇电子株式会社 数字视频信号的并行解码装置
US6167442A (en) * 1997-02-18 2000-12-26 Truespectra Inc. Method and system for accessing and of rendering an image for transmission over a network
CN102625149A (zh) * 2004-09-27 2012-08-01 英特尔公司 使用基于片的再现系统的低等待时间远程显示再现
CN101282478A (zh) * 2008-04-24 2008-10-08 上海华平信息技术股份有限公司 实现高清视频并行编码的方法及系统

Also Published As

Publication number Publication date
CN106717000A (zh) 2017-05-24

Similar Documents

Publication Publication Date Title
CN105917649B (zh) 用于将兴趣区域指示包括在压缩视频数据中的设备及方法
WO2018107338A1 (zh) 图像信号处理方法和装置
EP3642705B1 (en) Real-time screen sharing
US20160007026A1 (en) Techniques for image encoding based on region of interest
JP2019517191A (ja) ３６０度ビデオのためのハイブリッドなグラフィックスおよびピクセル領域アーキテクチャ
WO2015144084A1 (en) Video synchronous playback method, apparatus, and system
EP2768230B1 (en) Image processing device
US11831888B2 (en) Reducing latency in wireless virtual and augmented reality systems
CN106534859A (zh) 基于spice协议的图像传输方法及装置
WO2019011053A1 (zh) 一种图像数据的处理方法和装置
US9621891B2 (en) Apparatus for transmitting image data
WO2019091191A1 (en) Data processing method and apparatus
KR20140030473A (ko) 멀티 뷰 영상 처리 방법 및 이를 수행하는 장치
EP4340376A2 (en) Image processing method and apparatus and terminal device
CN115918064A (zh) 一种数据传输方法及装置
WO2021057684A1 (zh) 视频解码方法和装置、视频编码方法和装置、存储介质及电子装置
KR101410837B1 (ko) 비디오 메모리의 모니터링을 이용한 영상 처리 장치
US10880555B2 (en) Information processing system and information processing apparatus
US9819958B2 (en) Drawing system, information processing apparatus and drawing control method which switch drawing from still image data to video image data
US20170070734A1 (en) Coding apparatus, decoding apparatus, and video transmission system
CN115623217B (zh) 一种图像预处理方法、装置及系统
CN115299033B (zh) 拍摄装置和拍摄处理方法
CN103888214B (zh) 渐进式数据编码传输方法
WO2021042341A1 (zh) 视频显示方法、接收端、系统及存储介质
CN117376607A (zh) 一种视频码流处理方法、装置、设备及介质

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16923676

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16923676

Country of ref document: EP

Kind code of ref document: A1