CN112351251A - 图像处理系统和终端设备 - Google Patents

图像处理系统和终端设备 Download PDF

Info

Publication number
CN112351251A
CN112351251A CN202011135683.3A CN202011135683A CN112351251A CN 112351251 A CN112351251 A CN 112351251A CN 202011135683 A CN202011135683 A CN 202011135683A CN 112351251 A CN112351251 A CN 112351251A
Authority
CN
China
Prior art keywords
image
video
ultrasound
video image
processing system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011135683.3A
Other languages
English (en)
Inventor
刘智光
刘学东
代一尘
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Mindray Bio Medical Electronics Co Ltd
Original Assignee
Shenzhen Mindray Bio Medical Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Mindray Bio Medical Electronics Co Ltd filed Critical Shenzhen Mindray Bio Medical Electronics Co Ltd
Priority to CN202011135683.3A priority Critical patent/CN112351251A/zh
Publication of CN112351251A publication Critical patent/CN112351251A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/67ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for remote operation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/04Synchronising
    • H04N5/06Generation of synchronising signals
    • H04N5/067Arrangements or circuits at the transmitter end
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Biomedical Technology (AREA)
  • General Business, Economics & Management (AREA)
  • Business, Economics & Management (AREA)
  • Epidemiology (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Primary Health Care (AREA)
  • Public Health (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)

Abstract

本申请提供了一种图像处理系统和终端设备,图像处理系统包括:超声图像获取设备,接收目标对象的超声图像;视频获取设备,接收指示超声图像获取信息和/或目标对象信息的视频图像;第一处理器,基于同一时钟信号,将所述超声图像和视频图像进行同步关联后发送,例如发送给终端设备以使终端设备播放同步关联的超声图像和视频图像。方便医生,专家在远程查看超声图像时可以了解超声图像获取设备和/或目标对象的状态。

Description

图像处理系统和终端设备
技术领域
本申请涉及超声成像技术领域,尤其涉及一种图像处理系统和终端设备。
背景技术
随着网络通信技术的发展,远程诊断技术在医用超声成像领域中得到了应用。通过现代通信网络,位于不同地区、城市甚至国家的不同专家可以远程地对某个病例共同进行扫查和诊断,以获得更准确的诊断结果。
在实时超声会诊中,超声图像获取设备的画面可以通过网络,传给不在设备旁边的医生,以进行远程的诊断。但是由于超声检查没有标准的体位,仅凭超声图像获取设备的画面,无法得到成像时超声图像获取设备和目标对象的状态,不利于会诊专家完整地了解检查的过程。
发明内容
基于此,本申请提供了一种图像处理系统和终端设备,可以方便不在超声检查现场的医生、专家完整地了解检查的过程。
第一方面,本申请实施例提供了一种图像处理系统,所述图像处理系统包括:
超声图像获取设备,接收目标对象的超声图像;
视频获取设备,接收指示所述超声图像获取信息和/或所述目标对象信息的视频图像;以及
第一处理器,基于同一时钟信号,将所述超声图像和视频图像进行同步关联后发送。
第二方面,本申请实施例提供了一种终端设备,所述终端设备包括:
显示屏,能够显示图像;
通信模块,用于连接图像处理系统;和
第二处理器,通过所述通信模块接收所述图像处理系统发送的同步关联的超声图像和视频图像,并通过所述显示屏播放所述同步关联的超声图像和视频图像。
本申请实施例提供了一种图像处理系统和终端设备,通过超声图像获取设备接收目标对象的超声图像,通过视频获取设备接收指示超声图像获取信息和/或目标对象信息的视频图像,以及基于同一时钟信号,将超声图像和视频图像进行同步关联后发送,以便医生,专家在远程查看超声图像时可以了解超声图像获取设备和/或目标对象的状态,如探头的位置/角度、病人的姿态和环境等信息,以帮助不在现场的医生、专家完整地了解检查的过程。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本申请实施例的公开内容。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种图像处理系统的示意性框图;
图2是本申请实施例提供的一种图像处理系统的工作场景的示意图;
图3是本申请实施例提供的一种终端设备的示意性框图。
附图标记:20、终端设备;201、近端的终端设备;202、远程的终端设备;21、显示屏;22、通信模块;23、第二处理器;30、目标对象;40、服务器;100、图像处理系统;110、超声图像获取设备;120、视频获取设备;130、第一处理器;200、超声成像设备;210、探头;300、拍摄装置。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
附图中所示的流程图仅是示例说明,不是必须包括所有的内容和操作/步骤,也不是必须按所描述的顺序执行。例如,有的操作/步骤还可以分解、组合或部分合并,因此实际执行的顺序有可能根据实际情况改变。
下面结合附图,对本申请的一些实施方式作详细说明。在不冲突的情况下,下述的实施例及实施例中的特征可以相互组合。
请参阅图1,图1是本申请实施例提供的一种图像处理系统100的示意性框图。
如图2所示,图像处理系统100可以用于将超声图像远程传输给终端设备20,由终端设备20播放和/或存储超声图像等过程。
如图1所示,图像处理系统100包括超声图像获取设备110、视频获取设备120和第一处理器130。
其中,超声图像获取设备110能够接收目标对象30的超声图像,视频获取设备120能够接收指示超声图像获取信息和/或目标对象信息的视频图像。
具体的,超声图像可以通过向目标对象30,如人或动物发射超声波,接收经目标对象30返回的超声波的超声回波,获得超声回波信号,基于该超声回波信号生成。本文所指的超声图像可以是超声视频,也可以是一张张的超声图片/图像。
在一些实施方式中,超声图像获取设备110包括第一通信接口,如图2所示,图像处理系统100能够通过该第一通信接口与超声成像设备200通信连接。示例性的,该第一通信接口连接第一处理器130,图像处理系统100的第一处理器130可以通过该第一通信接口从超声成像设备200接收超声图像。
示例性的,该第一通信接口可以包括视频传输接口、网线接口、USB接口、无线通信组件中的至少一种。
在一些实施方式中,超声图像获取设备110包括超声成像设备200,如图2所示,该超声成像设备200能够与图像处理系统100的第一处理器130通信连接,超声成像设备200可以通过向目标对象30发射超声波,接收经目标对象30返回的超声波的超声回波,获得超声回波信号,基于该超声回波信号生成超声图像,以及将生成的超声图像发送给图像处理系统100的第一处理器130。
示例性的,视频图像可以由拍摄装置300获取,例如,拍摄装置300包括摄像头,能够采集拍摄视野内的图像。
在一些实施方式中,视频获取设备120包括第二通信接口,如图2所示,图像处理系统100能够通过该第二通信接口与拍摄装置300通信连接。示例性的,该第二通信接口连接第一处理器130,图像处理系统100的第一处理器130可以通过该第二通信接口从拍摄装置300接收视频图像。
示例性的,该第二通信接口可以包括视频传输接口、网线接口、USB接口、无线通信组件中的至少一种。
在一些实施方式中,视频获取设备120包括拍摄装置300,如图2所示,该拍摄装置300能够与图像处理系统100的第一处理器130通信连接。拍摄装置300获取拍摄视野内的视频图像以及将获取的视频图像发送给图像处理系统100的第一处理器130。
具体的,图像处理系统100的第一处理器130可以从超声成像设备200接收超声图像,从拍摄装置300接收视频图像,以及基于同一时钟信号,将超声图像和视频图像进行同步关联后发送。
在一些实施方式中,图像处理系统100的第一处理器130还能够与终端设备20进行通信。可以理解的,图像处理系统100可以不包括终端设备20,也可以不包括终端设备20,可以包括一个终端设备20,同时也可以与额外的终端设备20进行通信。
示例性的,如图2所示,例如,图像处理系统100包括近端的终端设备201,图像处理系统100还能够与远程的终端设备202进行通信。
具体的,图像处理系统100的第一处理器130可以独立于超声图像获取设备110、视频获取设备120设置,也可以与超声图像获取设备110一体式设置,或者可以与视频获取设备120一体式设置,或者超声图像获取设备110、视频获取设备120和第一处理器130一体式设置。
在一些实施方式中,如图2所示,图像处理系统100的第一处理器130还能够与服务器40进行通信。
在一些实施方式中,图像处理系统100可以集成到超声成像设备200,或者可以集成到拍摄装置300。
在一些实施方式中,图像处理系统100可以包括服务器或独立的终端设备。
示例性的,图像处理系统100可以包括手机、平板电脑、台式电脑、笔记本电脑等终端设备。
在一些实施方式中,图像处理系统100包括视频传输接口、网线接口、USB接口、无线通信组件中的至少一种。
示例性的,图像处理系统100包括两个视频传输接口、一个USB接口和一个网线接口,其中一个视频传输接口作为超声图像获取设备110通过视频传输线缆连接超声成像设备200,另一个视频传输接口用于连接近端的终端设备201,USB接口作为视频获取设备120通过USB线缆连接拍摄装置300,网线接口通过网线接入互联网,以便远程的终端设备202在接入互联网后能够图像处理系统100进行通信。
如图2所示,拍摄装置300可以搭载摄像头,摄像头具有一定的拍摄视角,拍摄装置300可以获取摄像头的拍摄视角中的图像以生成视频图像,该视频图像可以指示超声图像获取信息和/或目标对象信息的视频图像。
示例性的,视频图像可以包括超声成像设备200和/或目标对象30的信息。
在一些实施方式中,视频图像用于指示超声成像设备200的探头210在目标对象30上的位置和/或角度。
示例性的,如图2所示,拍摄装置300的拍摄方向朝向超声成像设备200的探头210和目标对象30的接触位置。从而,拍摄装置300获取的视频图像可以体现探头210在目标对象30上的位置和/或角度。
在一些实施方式中,视频图像用于指示目标对象30的姿态、神态或目标对象30周围的环境中的任意一个或多个。示例性的,拍摄装置300的拍摄方向可以朝向目标对象30的身体的某一部位,如躯干或脸部,或者可以朝向目标对象30的周围。
可以理解的,在一些实施方式中,视频图像可以既指示超声成像设备200的探头210在目标对象30上的位置和/或角度,也指示目标对象30的姿态、神态或目标对象30周围的环境,例如拍摄装置300搭载的摄像头为广角摄像头,视频图像可以包括更丰富的信息。
在一些实施方式中,图像处理系统100的第一处理器130可以从超声成像设备200接收超声图像,从拍摄装置300接收视频图像,以及将同一时刻或相近时刻发生的超声图像和视频图像进行同步关联后向终端设备20发送,以使终端设备20播放同步关联的超声图像和视频图像。
具体的,如图3所示,终端设备20包括一个或多个显示屏21,能够播放超声图像和视频图像。示例性的,终端设备20可以包括手机、平板电脑、台式电脑、笔记本电脑、会议平板、智慧屏等。
示例性的,终端设备20可以在接收到当前的超声图像和视频图像时,即时播放该超声图像和视频图像,以实现实时会诊。
示例性的,终端设备20可以在接收到各时刻的同步关联的超声图像和视频图像时,将同步关联的超声图像和视频图像进行存储,在接收到播放指令时开始播放相应时刻的同步关联的超声图像和视频图像,即可以回放超声图像和视频图像,例如可以用于事后诊断或者用于教学。
示例性的,终端设备20通过显示屏21播放同步关联的超声图像和视频图像时,可以在同一显示屏21的不同区域分别播放超声图像和视频图像,或者可以通过不同的显示屏21播放超声图像和视频图像。可以理解的,超声图像和视频图像是独立的,而不是合并在一帧图像中的,因此,可以根据需要将超声图像和视频图像分屏播放,或者可以调整超声图像和视频图像播放的相对位置和相对大小。
在一些实施方式中,第一处理器130可以基于同一时钟信号,将超声图像和视频图像进行同步关联后向近端的终端设备201发送,以使近端的终端设备201播放同步关联的超声图像和视频图像。
在一些实施方式中,图像处理系统100还可以包括显示设备,以播放获取到的超声图像,或者还可以在播放超声图像的同时播放同步关联的视频图像,以便能让用户可以实时查看到超声检查的情况和结果。
在一些实施方式中,第一处理器130用于基于同一时钟信号,将超声图像和视频图像进行同步关联后向远程的终端设备202发送,以使远程的终端设备202可以播放同步关联的超声图像和视频图像。
从而可以实现在远程超声会诊中,超声机器的画面可以通过网络,传给不在机器旁边的终端设备20进行播放,以供医生,专家以进行远程的诊断和指导。通过在终端设备20播放超声图像时播放关联的视频图像,可以使得医生,专家了解超声成像设备200的探头210的位置和/或角度、病人的姿态和环境等信息,以帮助不在现场的医生、专家完整地了解检查的过程。
在一些实施方式中,第一处理器130用于基于同一时钟信号,将超声图像和视频图像进行同步关联后向服务器40发送,以使服务器40存储和/或分发同步关联的超声图像和视频图像。
为便于说明,下面主要以第一处理器130基于同一时钟信号,将超声图像和视频图像进行同步关联后向终端设备20发送为例进行说明。
示例性的,在远程会诊场景中,进行同步关联的超声图像和视频图像分开传输,可以通过基于同一时钟信号,将超声图像和视频图像进行同步关联后向终端设备20发送,以及终端设备20播放同步关联的超声图像和视频图像,保证超声图像和视频图像在时间上的关联关系,防止因为网络速度和延时等因素,超声图像和视频图像未同步传输和播放,而引起的误诊,还可以防止在回看时超声图像和视频图像无法同步。
在一些实施方式中,图像处理系统100的第一处理器130基于同一时钟信号,将超声图像和视频图像进行同步关联后发送,具体包括:第一处理器130基于同一时钟信号,将超声图像打上第一同步标记后向终端设备20发送,将视频图像打上第二同步标记后向终端设备20发送。可以理解的,第一同步标记和第二同步标记用于同步关联超声图像和视频图像,以使终端设备20根据第一同步标记和第二同步标记播放同步关联的超声图像和视频图像。
示例性的,图像处理系统100的第一处理器130可以给每帧超声图像和视频图像分别打上同步标记。终端设备20可以根据同步标记确定两个视频源的每一帧图像,实现基于同一时钟信号播放同步关联的超声图像和视频图像。
示例性的,第一同步标记可以根据超声图像生成的时间确定,第二同步标记可以根据视频图像生成的时间确定。可以理解的,同步关联的超声图像和视频图像生成的时间相同或相差小于或等于预设的第一时间偏差。例如,超声图像由超声成像设备200生成,视频图像由拍摄装置300生成,超声成像设备200的时钟和拍摄装置300的时钟可以基于同一时钟信号进行关联。例如,可以基于超声成像设备200的时间,将拍摄装置300的时间关联到成像设备200的时间。超声成像设备200基于超声回波信号生成超声图像时,可以基于时钟信号,将生成的超声图像打上第一时间戳;拍摄装置300通过摄像头拍摄视频图像时,可以基于与超声成像设备200相同的时钟信号,将视频图像打上第二时间戳。这样,如果超声图像的第一时间戳与视频图像的第二时间戳之间相差的时间差小于或等于预设的第一时间偏差,则认为对应的超声图像与视频图像同步。
当然,超声成像设备200基于超声回波信号生成超声图像时,可以基于超声成像设备200的时钟信号,将生成的超声图像打上第一时间戳;拍摄装置300通过摄像头拍摄视频图像时,可以基于拍摄装置300的时钟信号,将视频图像打上第二时间戳。可以基于超声成像设备200的时钟信号,对拍摄装置300的时钟信号进行关联。例如,通过比较得知拍摄装置300的时钟信号指示的时间比超声成像设备200的时钟信号指示的时间慢5分钟,则可以知道第一时间戳指示的时间与慢5分钟的第二时间戳指示的时间同步。这样,如果超声图像的第一时间戳与视频图像的第二时间戳之间相差的时间差小于或等于5分钟加/减预设的第一时间偏差,则也认为对应的超声图像与视频图像同步。
示例性的,第一同步标记可以根据图像处理系统100的超声图像获取设备110或第一处理器130接收到超声图像的时间确定,第二同步标记根据图像处理系统100的视频获取设备120或第一处理器130接收到视频图像的时间确定。可以理解的,接收到同步关联的超声图像和视频图像的时间差小于或等于预设的第二时间偏差。
例如,第一处理器130接收到超声图像获取设备110获取的超声图像时,可以将超声图像打上第一时间戳作为第一同步标记;第一处理器130接收到视频获取设备120获取的视频图像时,可以将视频图像打上第二时间戳作为第二同步标记。
可以理解的,同步标记可以包括时间戳,第一同步标记包括第一时间戳,第二同步标记包括第二时间戳。如果超声图像的第一时间戳与视频图像的第二时间戳表示的时间之间相差的时间差小于或等于预设的第二时间偏差,则认为对应的超声图像与视频图像同步。第一处理器130可以将超声图像打上第一时间戳后向终端设备20发送,将视频图像打上第二时间戳后向终端设备20发送,以使终端设备20根据第一时间戳和第二时间戳播放同步关联的超声图像和视频图像。
示例性的,终端设备20可以确定与播放起始时间最接近的第一时间戳和第二时间戳,同步播放与该播放起始时间最接近的第一时间戳对应的超声图像和与该播放起始时间最接近的第二时间戳对应的视频图像。
示例性的,将超声图像和视频图像分别打上时间标记以进行同步关联,在终端设备20播放时,可以根据时间标记,协调超声图像和视频图像的播放速度,让同时发生的超声图像和视频图像,出现在屏幕上的时间差很短,实现播放同步关联的超声图像和视频图像。
在一些实施方式中,同步标记可以包括图像的顺序标记。例如,第一同步标记包括第一顺序标记,第二同步标记包括第二顺序标记,超声图像和视频图像通过第一顺序标记和第二顺序标记关联。
示例性的,第一同步标记可以根据超声图像生成的顺序确定,第二同步标记根据视频图像生成的顺序确定。例如,超声成像设备200和拍摄装置300的时钟可以根据同一时钟信息进行关联,超声成像设备200基于超声回波信号生成超声图像时,可以将超声图像打上第一顺序标记作为第一同步标记;拍摄装置300通过摄像头拍摄视频图像时可以将视频图像打上第二顺序标记作为第二同步标记。示例性的,第一处理器130可以根据用户输入的开始拍摄指令,控制超声成像设备200开始生成超声图像和控制拍摄装置300生成视频图像,以及按照预设的时间间隔,根据超声图像的生成时间和生成顺序给一段、各帧或多帧超声图像打上第一顺序标记,并根据视频图像的生成时间和生成顺序给一段、各帧或多帧视频图像打上第二顺序标记。
可以理解的,如果超声图像和视频图像生成的顺序相同或相差小于或等于预设的第一顺序偏差,则认为对应的超声图像和视频图像同步。
示例性的,第一同步标记可以根据图像处理系统100的超声图像获取设备110或第一处理器130接收到超声图像的时间和顺序确定,第二同步标记根据图像处理系统100的视频获取设备120或第一处理器130接收到视频图像的时间和顺序确定。可以理解的,如果接收到的超声图像和视频图像顺序相同或相差小于或等于预设的第二顺序偏差,则认为对应的超声图像和视频图像同步。
例如,第一处理器130可以根据用户输入的开始拍摄指令,开始接收超声图像和视频图像,以及按照预设的时间间隔,根据各帧超声图像的接收时间和接收顺序给各帧超声图像打上第一顺序标记,并根据各帧视频图像的接收时间和接收顺序给各帧视频图像打上第二顺序标记。如果接收到的超声图像和视频图像顺序相同或相差小于或等于预设的第二顺序偏差,则认为对应的超声图像和视频图像同步
可以理解的,第一处理器130可以将超声图像打上第一顺序标记作为第一同步标记,将视频图像打上第二顺序标记作为第二同步标记,以及将打上同步标记的超声图像和视频图像发送给终端设备20,以使终端设备20可以根据第一顺序标记和第二顺序标记播放同步关联的超声图像和视频图像。
在一些实施方式中,第一处理器130基于同一时钟信号,将超声图像和视频图像进行同步关联后发送,具体包括:第一处理器130基于同一时钟信号,将同一时间段接收的超声图像和视频图像打包为数据包后发送,其中,数据包中的超声图像和视频图像相互独立。以使终端设备20处理数据包得到同步关联的超声图像和视频图像,以及播放同步关联的超声图像和视频图像。
示例性的,数据包中可以包括同步关联的一帧超声图像和一帧视频图像,虽然打包在一起,但是该超声图像和视频图像两者是独立的,还可以在终端设备20处理数据包时得到独立的超声图像和视频图像,从而可以根据需要将超声图像和视频图像分屏播放,或者可以调整超声图像和视频图像播放的相对位置和相对大小。
示例性的,打包在数据包中的超声图像和视频图像也可以打上同步标记,如时间戳和/或顺序标记,从而可以提高同步传输、同步处理的是准确性。
在一些实施方式中,图像处理系统100还包括音频获取设备,音频获取设备接收目标对象30所在环境的音频数据。
在一些实施方式中,音频获取设备包括第三通信接口,图像处理系统100能够通过该第三通信接口与麦克风通信连接。示例性的,该第三通信接口连接第一处理器130,图像处理系统100的第一处理器130可以通过该第三通信接口从麦克风接收音频数据。
示例性的,该第三通信接口可以包括音频传输接口、网线接口、USB接口、无线通信组件中的至少一种。
可以理解的,超声图像获取设备110的第一通信接口、第二通信接口、第三通信接口可以分别独立设置,也可以其中两个或三个一体式设置,或者可以为同一个通信接口或通信模块。
在一些实施方式中,超声图像获取设备110包括麦克风,该麦克风能够与图像处理系统100的第一处理器130通信连接,将采集的音频数据发送给图像处理系统100的第一处理器130。
示例性的,第一处理器130基于同一时钟信号,将超声图像和视频图像进行同步关联后发送,具体包括:第一处理器130基于同一时钟信号,将超声图像、视频图像以及音频数据进行同步关联后发送。
示例性的,超声图像获取设备110、视频获取设备120、图像处理系统100中的至少一个上设置有麦克风,或者连接有麦克风。图像处理系统100的第一处理器130可以获取麦克风采集的音频数据,以及将音频数据与同一时刻或相近的时刻发生的超声图像和视频图像进行同步关联后向终端设备20发送。以使终端设备20在播放同步关联的超声图像和视频图像时可以同步播放目标对象30所在环境的音频数据。具体的,音频数据也可以打上同步标记,以便终端设备20播放同步关联的超声图像和视频图像时,播放同步关联的音频数据。
从而,在实施远程会诊时,远程的医生、专家可以得知超声检查现场的声音信息,示例性的,用户可以和远程的医生、专家语音沟通,以向医生、专家反馈现场情况,还可以接受医生、专家的远程语音指导。
本申请实施例提供的图像处理系统100,通过超声图像获取设备110接收目标对象30的超声图像,通过视频获取设备120接收指示超声图像获取信息和/或目标对象信息的视频图像,以及基于同一时钟信号,将超声图像和视频图像进行同步关联后发送,以便医生,专家在远程查看超声图像时可以了解超声图像获取信息和/或目标对象信息,如探头210的位置/角度、病人的姿态和环境等信息,以帮助不在现场的医生、专家完整地了解检查的过程。
请结合上述实施例参阅图3,图3是本申请实施例提供的终端设备20的示意性框图。
该终端设备20可以用于在现场或者远程从图像处理系统100获取超声图像,以及播放和/或存储超声图像等过程。示例性的,如图2所示,例如,图像处理系统100包括近端的终端设备201,图像处理系统100还能够与远程的终端设备202进行通信。
如图3所示,终端设备20包括显示屏21、通信模块22和第二处理器23。
其中,显示屏21能够显示图像,通信模块22用于连接图像处理系统100。具体的,图像处理系统100用于接收目标对象30的超声图像和接收指示超声图像获取信息和/或目标对象信息的视频图像。
第二处理器23连接通信模块22和显示屏21,用于通过通信模块22接收图像处理系统100发送的同步关联的超声图像和视频图像,并通过显示屏21播放同步关联的超声图像和视频图像。可以理解的,同步关联的超声图像和视频图像是同一时刻或相近的时刻发生的。
在一些实施方式中,图像处理系统100在将超声图像和视频图像进行同步关联时,将超声图像打上第一同步标记,将视频图像打上第二同步标记。则第二处理器23可以根据超声图像中包含的第一同步标记和视频图像中包含的第二同步标记将超声图像和视频图像进行同步关联。
具体的,超声图像可以通过向目标对象30,如人或动物发射超声波,接收经目标对象30返回的超声波的超声回波,获得超声回波信号,基于该超声回波信号生成。
示例性的,视频图像可以由拍摄装置300获取,例如,拍摄装置300包括摄像头,能够采集拍摄视野内的图像。如图2所示,该拍摄装置300能够与图像处理系统100通信连接。拍摄装置300获取拍摄视野内的视频图像以及将获取的视频图像发送给图像处理系统100。
如图2所示,拍摄装置300可以搭载摄像头,摄像头具有一定的拍摄视角,拍摄装置300可以获取摄像头的拍摄视角中的图像以生成视频图像,该视频图像可以指示超声图像获取信息和/或目标对象信息的视频图像。
示例性的,视频图像可以包括超声成像设备200和/或目标对象30的信息。
在一些实施方式中,视频图像用于指示超声成像设备200的探头210在目标对象30上的位置和/或角度。
示例性的,如图2所示,拍摄装置300的拍摄方向朝向超声成像设备200的探头210和目标对象30的接触位置。从而,拍摄装置300获取的视频图像可以体现探头210在目标对象30上的位置和/或角度。
在一些实施方式中,视频图像用于指示目标对象30的姿态、神态或目标对象30周围的环境中的任意一个或多个。示例性的,拍摄装置300的拍摄方向可以朝向目标对象30的身体的某一部位,如躯干或脸部,或者可以朝向目标对象30的周围。
可以理解的,在一些实施方式中,视频图像可以既指示超声成像设备200的探头210在目标对象30上的位置和/或角度,也指示目标对象30的姿态、神态或目标对象30周围的环境,例如拍摄装置300搭载的摄像头为广角摄像头,视频图像可以包括更丰富的信息。
示例性的,通信模块22可以包括视频传输接口、网线接口、USB接口、无线通信组件中的至少一种。
示例性的,终端设备20能够通过网线或者运营商网络进行通信。
具体的,如图3所示,终端设备20的显示屏21能够显示超声图像和视频图像。示例性的,终端设备20可以包括手机、平板电脑、台式电脑、笔记本电脑、会议平板、智慧屏等。
示例性的,终端设备20可以在接收到当前的超声图像和视频图像时,即时播放该超声图像和视频图像,以实现实时会诊。
示例性的,终端设备20可以在接收到同步关联的超声图像和视频图像时,将同步关联的超声图像和视频图像进行存储,在接收到播放指令时开始播放相应时刻的同步关联的超声图像和视频图像,即可以回放超声图像和视频图像,例如可以用于事后诊断或者用于教学。
在一些实施方式中,第二处理器23通过显示屏21播放同步关联的超声图像和视频图像时,通过不同的显示界面播放超声图像和超声图像关联的视频图像。示例性的,不同的显示界面位于同一显示屏21,或者不同的显示界面位于不同的显示屏21。
示例性的,终端设备20通过显示屏21播放同步关联的超声图像和视频图像时,可以通过同一显示屏21的不同区域播放超声图像和视频图像,或者可以通过不同的显示屏21播放超声图像和视频图像。可以理解的,超声图像和视频图像是独立的,而不是合并在一帧图像中的,因此,可以根据需要将超声图像和视频图像分屏播放,或者可以调整超声图像和视频图像播放的相对位置和相对大小。
示例性的,终端设备20可以包括指令接收装置,例如触控屏、鼠标、键盘、按钮等。用户通过指令接收装置可以输入播放指令,即指令接收装置可以接收用户输入的播放指令。例如,播放指令可以包括播放起始时间、播放结束时间、播放时长或播放速度中的一个或多个。
示例性的,第二处理器23能够根据指令接收装置接收到的界面调整指令,调整播放超声图像的显示界面的位置、界面大小或亮度中的一个或多个,和/或调整播放视频图像的显示界面的位置、界面大小或亮度中的一个或多个。例如,当用户更关注超声图像时,可以将播放超声图像的显示界面的界面调大,当用户更关注视频图像时,则可以将播放视频图像的显示界面的界面调大。
在一些实施方式中,第二处理器23可以根据指令接收装置接收到的播放指令,确定要通过显示屏21播放的超声图像和视频图像。
示例性的,终端设备20可以连接多个图像处理系统100,接收多路图像处理系统100各自发送的同步关联的超声图像和视频图像,则用户可以通过输入播放指令,使得终端设备20播放其中一路或多路图像处理系统100各自发送的同步关联的超声图像和视频图像。
在一些实施方式中,第二处理器23能够根据指令接收装置接收到的用户对超声图像或者视频图像的播放进度调整指令,同步调整超声图像的播放进度和视频图像的播放进度。
示例性的,第二处理器23能够根据播放起始时间、播放结束时间、播放时长,同步调整超声图像的播放进度和视频图像的播放进度。
示例性的,当用户在播放超声图像的显示界面中调整超声图像的播放进度时,视频图像的播放进度也会自动调整;当用户在播放视频图像的显示界面中调整视频图像的播放进度时,超声图像的播放进度也会自动调整;从而可以使得同时播放的超声图像和视频图像是同步关联的超声图像和视频图像,即可以实现超声图像和视频图像的同步播放。
在远程超声会诊中,超声机器的画面可以通过网络,传给不在机器旁边的终端设备20进行播放,以供医生,专家以进行远程的诊断和指导。通过在终端设备20播放超声图像时播放关联的视频图像,可以使得医生,专家了解超声成像设备200的探头210的位置和/或角度、病人的姿态和环境等信息,以帮助不在现场的医生、专家完整地了解检查的过程。
在远程会诊场景中,超声图像和视频图像分开传输,可以通过将相同或相近时刻产生的超声图像和视频图像同步向终端设备20发送,以及终端设备20同步播放相同或相近时刻产生的超声图像和视频图像,保证超声图像和视频图像在时间上的关联关系,防止因为网络速度和延时等因素,超声图像和视频图像未同步传输和播放,而引起的误诊,还可以防止在回看时超声图像和视频图像无法同步。
在一些实施方式中,第二处理器23在通过通信模块22接收图像处理系统100发送的同步关联的超声图像和视频图像时,还接收与超声图像和视频图像同步关联的音频数据。以及,第二处理器23通过显示屏21播放同步关联的超声图像和视频图像时,还播放与超声图像和视频图像同步关联的音频数据。
示例性的,音频数据为目标对象30所在环境的音频数据。音频数据可以是图像处理系统100通过麦克风采集的。具体的,音频数据也可以打上同步标记,以便终端设备20播放同步关联的超声图像和视频图像时,还播放同步关联的音频数据。
从而,在实施远程会诊时,远程的医生、专家可以得知超声检查现场的声音信息,示例性的,用户可以和远程的医生、专家语音沟通,以向医生、专家反馈现场情况,还可以接受医生、专家的远程语音指导。
本申请实施例提供的终端设备20的具体原理和实现方式均与前述实施例的图像处理系统100类似,此处不再赘述。
本申请实施例提供的终端设备20,通过接收图像处理系统100发送的同步关联的超声图像和视频图像,以及通过显示屏21播放同步关联的超声图像和视频图像,以便医生,专家在远程查看超声图像时可以了解超声图像获取信息和/或目标对象信息,如探头210的位置/角度、病人的姿态和环境等信息,以帮助不在现场的医生、专家完整地了解检查的过程。
应当理解,在此本申请中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本申请。
还应当理解,在本申请和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。
以上,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以权利要求的保护范围为准。

Claims (15)

1.一种图像处理系统,其特征在于,所述图像处理系统包括:
超声图像获取设备,接收目标对象的超声图像;
视频获取设备,接收指示所述超声图像获取信息和/或所述目标对象信息的视频图像;以及
第一处理器,基于同一时钟信号,将所述超声图像和视频图像进行同步关联后发送。
2.根据权利要求1所述的图像处理系统,其特征在于,所述视频图像用于指示所述超声图像获取设备的探头在所述目标对象上的位置和/或角度,或者指示所述目标对象的姿态、神态或所述目标对象周围的环境中的任意一个或多个。
3.根据权利要求1或2所述的图像处理系统,其特征在于,所述第一处理器基于同一时钟信号,将所述超声图像和视频图像进行同步关联后发送,具体包括:
所述第一处理器基于同一时钟信号,将所述超声图像打上第一同步标记发送,将所述视频图像打上第二同步标记后发送。
4.根据权利要求3所述的图像处理系统,其特征在于,所述第一同步标记根据所述超声图像生成的时间确定,所述第二同步标记根据所述视频图像生成的时间确定,同步关联的超声图像和视频图像的生成的时间相同或相差小于或等于预设的第一时间偏差;或者
所述第一同步标记根据所述图像处理系统接收到所述超声图像的时间确定,所述第二同步标记根据所述图像处理系统接收到所述视频图像的时间确定,接收到同步关联的超声图像和视频图像的时间差小于或等于预设的第二时间偏差。
5.根据权利要求4所述的图像处理系统,其特征在于,所述第一同步标记包括第一时间戳,所述第二同步标记包括第二时间戳,所述超声图像和所述视频图像通过所述第一时间戳和所述第二时间戳关联。
6.根据权利要求3所述的图像处理系统,其特征在于,所述第一同步标记根据所述超声图像生成的顺序确定,所述第二同步标记根据所述视频图像生成的顺序确定,同步关联的超声图像和视频图像生成的顺序相同或相差小于或等于预设的第一顺序偏差;或者
所述第一同步标记根据所述图像处理系统接收到所述超声图像的顺序确定,所述第二同步标记根据所述图像处理系统接收到所述视频图像的顺序确定,同步关联的超声图像和视频图像接收到的顺序相同或相差小于或等于预设的第二顺序偏差。
7.根据权利要求6所述的图像处理系统,其特征在于,所述第一同步标记包括第一顺序标记,所述第二同步标记包括第二顺序标记,所述超声图像和所述视频图像通过所述第一顺序标记和所述第二顺序标记关联。
8.根据权利要求1或2所述的图像处理系统,其特征在于,所述第一处理器基于同一时钟信号,将所述超声图像和视频图像进行同步关联后发送,具体包括:
所述第一处理器基于同一时钟信号,将同一时间段接收的超声图像和视频图像打包为数据包后发送,所述数据包中的超声图像和视频图像相互独立。
9.根据权利要求1或2所述的图像处理系统,其特征在于,所述图像处理系统还包括:
音频获取设备,接收所述目标对象所在环境的音频数据;
所述第一处理器基于同一时钟信号,将所述超声图像和视频图像进行同步关联后发送,具体包括:
所述第一处理器基于同一时钟信号,将所述超声图像、视频图像以及音频数据进行同步关联后发送。
10.一种终端设备,其特征在于,所述终端设备包括:
显示屏,能够显示图像;
通信模块,用于连接图像处理系统;和
第二处理器,通过所述通信模块接收所述图像处理系统发送的同步关联的超声图像和视频图像,并通过所述显示屏播放同步关联的超声图像和视频图像。
11.根据权利要求10所述的终端设备,其特征在于,所述终端设备还包括:
指令接收装置,接收用户输入的播放指令,所述播放指令包括播放起始时间、播放结束时间、播放时长或播放速度中的一个或多个;
所述第二处理器根据所述指令接收装置接收到的播放指令,确定要通过显示屏播放的超声图像和视频图像。
12.根据权利要求11所述的终端设备,其特征在于,所述第二处理器通过所述显示屏播放所述同步关联的超声图像和视频图像时,通过不同的显示界面播放所述超声图像和所述超声图像关联的视频图像;
所述不同的显示界面位于同一显示屏,或者所述不同的显示界面位于不同的显示屏。
13.根据权利要求12所述的终端设备,其特征在于,所述第二处理器根据所述指令接收装置接收到的界面调整指令,调整播放所述超声图像的显示界面的位置、界面大小或亮度中的一个或多个,和/或调整播放所述视频图像的显示界面的位置、界面大小或亮度中的一个或多个。
14.根据权利要求11所述的终端设备,其特征在于,所述第二处理器根据所述指令接收装置接收到的用户对所述超声图像或者所述视频图像的播放进度调整指令,同步调整所述超声图像的播放进度和所述视频图像的播放进度。
15.根据权利要求10-14中任一项所述的终端设备,其特征在于,所述第二处理器通过所述通信模块接收所述图像处理系统发送的同步关联的超声图像和视频图像时,还接收与所述超声图像和视频图像同步关联的音频数据;
所述第二处理器通过所述显示屏播放所述同步关联的超声图像和视频图像时,还播放所述与所述超声图像和视频图像同步关联的音频数据。
CN202011135683.3A 2020-10-21 2020-10-21 图像处理系统和终端设备 Pending CN112351251A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011135683.3A CN112351251A (zh) 2020-10-21 2020-10-21 图像处理系统和终端设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011135683.3A CN112351251A (zh) 2020-10-21 2020-10-21 图像处理系统和终端设备

Publications (1)

Publication Number Publication Date
CN112351251A true CN112351251A (zh) 2021-02-09

Family

ID=74359620

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011135683.3A Pending CN112351251A (zh) 2020-10-21 2020-10-21 图像处理系统和终端设备

Country Status (1)

Country Link
CN (1) CN112351251A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113645416A (zh) * 2021-10-11 2021-11-12 深圳迈瑞动物医疗科技有限公司 一种超声成像系统以及图像处理设备及方法
WO2023155907A1 (zh) * 2022-02-21 2023-08-24 深圳迈瑞生物医疗电子股份有限公司 超声成像系统、医学影像系统、终端设备
EP4285833A1 (en) * 2022-06-02 2023-12-06 Koninklijke Philips N.V. Ultrasound systems and patient monitoring systems
WO2023232918A1 (en) * 2022-06-02 2023-12-07 Koninklijke Philips N.V. Ultrasound systems and patient monitoring systems

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1782984A (zh) * 2004-11-30 2006-06-07 北京中科大洋科技发展股份有限公司 多画面分割系统
CN102655584A (zh) * 2011-03-04 2012-09-05 中兴通讯股份有限公司 一种远程呈现技术中媒体数据发送和播放的方法及系统
CN102727248A (zh) * 2011-04-15 2012-10-17 西门子公司 超声系统以及超声系统中的图像处理方法和装置
WO2017015902A1 (zh) * 2015-07-29 2017-02-02 深圳迈瑞生物医疗电子股份有限公司 一种超声成像系统及方法
CN107241624A (zh) * 2017-07-05 2017-10-10 北京辰安信息科技有限公司 信息处理的方法及装置
CN107843650A (zh) * 2017-10-31 2018-03-27 上海市东方海事工程技术有限公司 一种双轨式钢轨超声波探伤与图像监控综合系统及其方法
CN109498056A (zh) * 2018-10-30 2019-03-22 上海长征医院 用于实时远程教学的处理超声影像的设备和方法以及装置
CN111092898A (zh) * 2019-12-24 2020-05-01 华为终端有限公司 报文传输方法及相关设备
CN111343415A (zh) * 2018-12-18 2020-06-26 杭州海康威视数字技术股份有限公司 数据传输方法及装置

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1782984A (zh) * 2004-11-30 2006-06-07 北京中科大洋科技发展股份有限公司 多画面分割系统
CN102655584A (zh) * 2011-03-04 2012-09-05 中兴通讯股份有限公司 一种远程呈现技术中媒体数据发送和播放的方法及系统
CN102727248A (zh) * 2011-04-15 2012-10-17 西门子公司 超声系统以及超声系统中的图像处理方法和装置
WO2017015902A1 (zh) * 2015-07-29 2017-02-02 深圳迈瑞生物医疗电子股份有限公司 一种超声成像系统及方法
CN107241624A (zh) * 2017-07-05 2017-10-10 北京辰安信息科技有限公司 信息处理的方法及装置
CN107843650A (zh) * 2017-10-31 2018-03-27 上海市东方海事工程技术有限公司 一种双轨式钢轨超声波探伤与图像监控综合系统及其方法
CN109498056A (zh) * 2018-10-30 2019-03-22 上海长征医院 用于实时远程教学的处理超声影像的设备和方法以及装置
CN111343415A (zh) * 2018-12-18 2020-06-26 杭州海康威视数字技术股份有限公司 数据传输方法及装置
CN111092898A (zh) * 2019-12-24 2020-05-01 华为终端有限公司 报文传输方法及相关设备

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113645416A (zh) * 2021-10-11 2021-11-12 深圳迈瑞动物医疗科技有限公司 一种超声成像系统以及图像处理设备及方法
CN113645416B (zh) * 2021-10-11 2022-02-11 深圳迈瑞动物医疗科技有限公司 一种超声成像系统以及图像处理设备及方法
WO2023155907A1 (zh) * 2022-02-21 2023-08-24 深圳迈瑞生物医疗电子股份有限公司 超声成像系统、医学影像系统、终端设备
EP4285833A1 (en) * 2022-06-02 2023-12-06 Koninklijke Philips N.V. Ultrasound systems and patient monitoring systems
WO2023232918A1 (en) * 2022-06-02 2023-12-07 Koninklijke Philips N.V. Ultrasound systems and patient monitoring systems

Similar Documents

Publication Publication Date Title
CN112351251A (zh) 图像处理系统和终端设备
CN107708571B (zh) 一种超声成像系统及方法
CN108900859B (zh) 直播方法及系统
US9232934B2 (en) Systems and methods for communicating ultrasound probe location and image information
KR101769118B1 (ko) 텔레프레젠스 영상 합성 장치, 텔레프레젠스 영상 합성 시스템 및 원격지 촬영 장치
CN108632543B (zh) 图像显示方法、装置、存储介质及电子设备
JP2000299851A (ja) 指示情報伝達装置
CN105938665A (zh) 一种远程音视频手术示教系统
JP2009071478A (ja) 情報通信端末および情報通信システム
JP2009089324A (ja) テレビ会議システムおよびプログラム、記録媒体
US20240015264A1 (en) System for broadcasting volumetric videoconferences in 3d animated virtual environment with audio information, and procedure for operating said device
US7986336B2 (en) Image capture apparatus with indicator
JP2000231625A (ja) 指示情報伝達装置
CN111163280A (zh) 非对称性视频会议系统及其方法
JP2005303734A (ja) 通信装置およびサーバシステム
CN116916813A (zh) 用于生理信号数据与位置信息收集及呈现的方法以及实现该方法的服务器及系统
US20210383841A1 (en) Camera video transmission and playback system, and camera and viewing device configuring same
JP3449939B2 (ja) 映像表示方法及びそのプログラムを記録した記録媒体
WO2019047080A1 (zh) 超声诊断仪及使用超声诊断仪获取远程辅助数据的方法
JP2005303683A (ja) 画像送受信装置
CN113645416B (zh) 一种超声成像系统以及图像处理设备及方法
JP3759216B2 (ja) テレビカメラ通信装置及び多地点接続装置
JPWO2021029180A5 (zh)
KR20160082368A (ko) 네트워크 기반 멀티 디스플레이에서 콘텐츠 간 동기화 방법 및 시스템
JP2006122078A (ja) 超音波診断システム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20210209

RJ01 Rejection of invention patent application after publication