CN117857912A - 用于牙科的信息采集方法和系统 - Google Patents
用于牙科的信息采集方法和系统 Download PDFInfo
- Publication number
- CN117857912A CN117857912A CN202410053733.5A CN202410053733A CN117857912A CN 117857912 A CN117857912 A CN 117857912A CN 202410053733 A CN202410053733 A CN 202410053733A CN 117857912 A CN117857912 A CN 117857912A
- Authority
- CN
- China
- Prior art keywords
- target object
- image
- information
- user
- congeners
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 31
- 239000000039 congener Substances 0.000 claims description 46
- 230000001502 supplementing effect Effects 0.000 claims description 4
- 208000024891 symptom Diseases 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 1
- 230000005802 health problem Effects 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Landscapes
- Dental Tools And Instruments Or Auxiliary Dental Instruments (AREA)
Abstract
本申请公开了一种用于牙科的信息采集方法，应用于移动终端，包括：根据用户的输入指令确定目标对象，并且进入采集模式，所述目标对象是指用户选中的牙齿；获取移动终端姿态传感器的姿态信息，并确定当前移动终端的摄像头拍摄的方向，所述拍摄方向包括朝上拍摄和朝下拍摄；根据拍摄的方向是否与目标对象所处位置符合，提示用户调整手机姿态；在手机姿态正确时，通过移动终端的摄像头获取图像信息；根据所述图像信息和姿态信息，引导用户拍摄目标对象。
Description
技术领域
本申请涉及图像处理，特别是一种用于牙科的信息采集方法和系统。
背景技术
远程采集患者信息可以供医疗机构进行预先的信息收集，对患者进行分诊或者情况预判。对于牙科等，若想要采集牙齿的信息，通常只能通过手机进行拍照等方式，但是如果患者需要自行采集，则存在一定的难度。
虽然可以使用前置摄像头配合手机屏幕进行拍摄，但是用户操作仍然存在一定的难度，若需要放大拍摄，用户一般难以操作。碍于前置摄像头性能问题，拍摄放大有限度，也不能进行补光的操作，尤其在拍摄上排牙齿时，图像质量不理想。
发明内容
本发明旨在至少解决现有技术中存在的技术问题之一。为此，本发明提供一种用于牙科的信息采集方法和系统,以辅助用户方便地自行完成牙齿信息的采集。
一方面，本申请实施例提供了一种用于牙科的信息采集方法，应用于移动终端，包括：
根据用户的输入指令确定目标对象，并且进入采集模式，所述目标对象是指用户选中的牙齿；
获取移动终端姿态传感器的姿态信息，并确定当前移动终端的摄像头拍摄的方向，所述拍摄方向包括朝上拍摄和朝下拍摄；
根据拍摄的方向是否与目标对象所处位置符合，提示用户调整手机姿态；
在手机姿态正确时，通过移动终端的摄像头获取图像信息；
根据所述图像信息和姿态信息，引导用户拍摄目标对象。
在一些实施例中，所述根据所述图像信息和姿态信息，引导用户拍摄目标对象，具体包括：
根据所述图像信息，确定目标对象是否在图像中，以及目标对象在图像中的位置；
当目标对象处于图像中时，根据目标对象在图像中的位置和图像中心的相对位置关系，产生语音引导用户拍摄；
当目标对象不处于图像中时，根据估计的目标对象的位置和图像中心的相对位置关系，产生语音引导用户拍摄。
在一些实施例中，根据所述图像信息，确定目标对象是否在图像中，以及目标对象在图像中的位置，具体包括：
从图像中识别目标对象的同类物，确定目标对象的同类物在图像中的位置分布；
根据目标对象在牙齿模型中的位置，以及目标对象的同类物在图像中的位置分布，估计目标对象是否在图像中，以及目标对象在图像中的位置。
在一些实施例中，根据目标对象在牙齿模型中的位置，以及目标对象的同类物在图像中的位置分布，估计目标对象是否在图像中，以及目标对象在图像中的位置，具体包括：
根据目标对象的同类物在图像中的位置分布进行曲线拟合，估计出牙齿的实际分布曲线；
根据目标对象在牙齿模型中的位置，结合实际分布曲线，估计目标对象的实际位置；
根据上述实际位置是否在图像之中，确定目标对象是否在图像之中，若目标对象在图像之中，则根据该实际位置作为目标对象在图像中的位置。
在一些实施例中，根据目标对象的同类物在图像中的位置分布进行曲线拟合，估计出牙齿的实际分布曲线，具体是：
判断目标对象的同类物是否属于同一排，若是同一排则根据所述同类物在图像中的位置分布进行曲线拟合，估计出牙齿的实际分布曲线；
其中，通过以下方式判断同类物是否属于同一排：
根据同类物之间的距离对同类物进行分类，将距离小于阈值的两个同类物分类到同一分类；
若同类物全部分类到同一个分类，则判定所有同类物属于同一排；
当同类物分类到两个分类，则根据当前手机的姿态信息确定用于拟合实际分布曲线的同类物分类。
在一些实施例中，所述引导用户拍摄目标对象，具体是：
根据手机的姿态信息，产生引导用户将目标对象移动到拍摄画面的预设中心区域内。
在一些实施例中，还包括以下步骤：
当所述目标对象位于预设中心区域内时，自动调整拍摄尺寸和/或进行补光拍摄。
在一些实施例中，还包括以下步骤：
每个尺寸采集多个图像，并评估图像的清晰度，将各尺寸中清晰度最高的图像上传到服务器。
在一些实施例中，还包括：采集用户的诉求和症状描述信息。
本实施例公开了一种用于牙科的信息采集系统，包括：
存储器，用于存储程序；
处理器，用于加载所述程序以执行所述的用于牙科的信息采集方法。
通过本申请实施例中根据用户的输入指令确定目标对象，并且进入采集模式，所述目标对象是指用户选中的牙齿；然后获取移动终端姿态传感器的姿态信息，并确定当前移动终端的摄像头拍摄的方向，所述拍摄方向包括朝上拍摄和朝下拍摄；接着根据拍摄的方向是否与目标对象所处位置符合，提示用户调整手机姿态；当手机姿态正确时，通过移动终端的摄像头获取图像信息；根据所述图像信息和姿态信息，引导用户拍摄目标对象；本申请实施例应用在移动终端中，使得用户可以方便地根据引导来进行牙齿的拍摄，解决了原有拍摄不方便拍摄质量不好的问题。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图做一简单地介绍。
图1是本申请实施例所提供的一种方法流程图；
图2是本申请实施例所提供的一种从图像中识别牙齿的示意图；
图3是本申请实施例所提供的一种牙齿的分布示意图；
图4是本身请实施例所提供的系统框图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚，以下将参照本申请实施例中的附图，通过实施方式清楚、完整地描述本申请的技术方案，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
本申请整合医院等场所的多种资源，包括但不限于接入医院的开方系统、人力资源系统、设备资源系统等进行综合调度，以解决一定时间和空间内的资源分流问题，实现准确的调度以优化资源利用效率，优化参与者的体验感。
参照图1，本实施例公开了一种用于牙科的信息采集方法，应用于移动终端，包括：
S1、根据用户的输入指令确定目标对象，并且进入采集模式，所述目标对象是指用户选中的牙齿。在本实施例中，手机端首先显示信息采集页面，用户需要根据页面的指示，选择对上排牙齿或者下排牙齿进行采集，然后采集自己觉得有健康问题的牙齿的位置。其中，在用户选择牙齿时，模型根据预先采集的用户信息(如牙齿的数量)生产用户的牙齿模型，以便于用户可以选择中自己的某个牙齿。
S2、获取移动终端姿态传感器的姿态信息，并确定当前移动终端的摄像头拍摄的方向，所述拍摄方向包括朝上拍摄和朝下拍摄。其中，通过手机的姿态传感器可以确定出当前手机的拍摄状态，包括朝上拍摄和朝下拍摄，本方案可以使用后置摄像头。
S3、根据拍摄的方向是否与目标对象所处位置符合，提示用户调整手机姿态。当用户选择的目标对象实际在下排，而用户手机则是朝上拍摄的时候，会提醒用户调整拍摄姿态，例如告诉用户当前手机需要翻转。可以限定手机拍摄指向相对于水平面的角度来确定姿态是否满足。
S4、在手机姿态正确时，通过移动终端的摄像头获取图像信息。在本步骤中，会先确定移动终端的拍摄方向是正确的。
S5、根据所述图像信息和姿态信息，引导用户拍摄目标对象。在本步骤中，可以通过语音等方式提醒用户移动手机的位置。在一些实施例中，可以是根据目标对象的位置，指示用户当前应该向左右前后来移动手机，以清晰地拍摄目标牙齿。
具体地，步骤S5、所述根据所述图像信息和姿态信息，引导用户拍摄目标对象，具体包括：
S51、根据所述图像信息，确定目标对象是否在图像中，以及目标对象在图像中的位置。在该步骤中，会根据摄像头采集到的信息，判断目标对象是否在图像之中，以及，如果目标对象在图像之中，其在图像之中的位置。
S52、当目标对象处于图像中时，根据目标对象在图像中的位置和图像中心的相对位置关系，产生语音引导用户拍摄。可以理解的是，当确定目标对象在图像中的位置之后，并且确定要将目标对象移动图像中央，就可以确定出用户需要移动手机的方向，此时，可以检索对应的引导语音，例如，向右一点，向左一点等。直到目标对象移动到图像中央的预设的区域之中。
S53、当目标对象不处于图像中时，根据估计的目标对象的位置和图像中心的相对位置关系，产生语音引导用户拍摄。在本实施例中，当目标对象不在图像中时，可以根据识别到的结果估计目标对象在图像外的位置。此时，只需要知道牙齿的位置相对于图像中心的位置就可以确定引导方式。
其中，S51、根据所述图像信息，确定目标对象是否在图像中，以及目标对象在图像中的位置，具体包括：
S511、从图像中识别目标对象的同类物，确定目标对象的同类物在图像中的位置分布。在本步骤中，可以通过yolo等图像识别模型在图像中识别出牙齿这一类物品，由于牙齿比较相识，识别牙齿具体是哪个牙齿存在一定的难度，大多数模型难以完成准确的识别。但是一般情况下人类的牙齿分布有一定的规律。通常呈抛物线，并且牙齿的数量也有一定规律。因此，只要识别出牙齿的位置，根据牙齿的位置就可以大致分析出牙齿是否我们需要查找的目标。如图2所示，可以识别出牙齿的位置，牙齿的在图像中的坐标可以用识别框的中心点作为标记。
S512、根据目标对象在牙齿模型中的位置，以及目标对象的同类物在图像中的位置分布，估计目标对象是否在图像中，以及目标对象在图像中的位置。
步骤S512具体是：
S5121、根据目标对象的同类物在图像中的位置分布进行曲线拟合，估计出牙齿的实际分布曲线。在本实施例中，认为牙齿一般呈现抛物线的形状图3所示。因此，通过牙齿的分布位置可以进行抛物线的拟合，拟合曲线的方法可以是最小二乘法等方法。
本步骤具体包括，判断目标对象的同类物是否属于同一排，若是同一排则根据所述同类物在图像中的位置分布进行曲线拟合，估计出牙齿的实际分布曲线。
其中，通过以下方式判断同类物是否属于同一排：
根据同类物之间的距离对同类物进行分类，将距离小于阈值的两个同类物分类到同一分类。
若同类物全部分类到同一个分类，则判定所有同类物属于同一排。
当同类物分类到两个分类，则根据当前手机的姿态信息确定用于拟合实际分布曲线的同类物分类。
在拍摄的过程中，可能因为角度问题会将两排牙齿均拍摄到图像中，例如，当前拍摄下排牙齿，如果上排牙齿也被排进去，则会在分类中上排牙齿和下排牙齿各分成两类，此时，根据手机拍摄的姿态和要拍摄的对象在下排，就可以确定出属于下方的分类的是目标对象所在的排。
S5122、根据目标对象在牙齿模型中的位置，结合实际分布曲线，估计目标对象的实际位置。目标对象由用户选定，因此其在牙齿模型中的位置是确定的，系统已知牙齿所在的具体第几颗牙齿。对于实际分布曲线而言，其反映的是牙齿在图像所在的空间中的位置。因此，实际上无论目标对象是否在图像中，也可以根据曲线来估计牙齿的位置。通过图像中的曲线，以及各牙齿之间在图像中的距离，可以按照近似的距离(如平均距离)在实际分布曲线上，估计出牙齿的位置。
S5123、根据上述实际位置是否在图像之中，确定目标对象是否在图像之中，若目标对象在图像之中，则根据该实际位置作为目标对象在图像中的位置。
步骤S5121具体是：
根据手机的姿态信息，产生引导用户将目标对象移动到拍摄画面的预设中心区域内。
部分实施例中，还包括以下步骤：
当所述目标对象位于预设中心区域内时，自动调整拍摄尺寸和/或进行补光拍摄。可以理解的是，当目标对象所处的预设中心区域的亮度较低的时候，启动补光拍摄。当目标对象处于预设中心区域内时，可以放大拍摄倍数。
采集用户的诉求和症状描述信息，每个尺寸采集多个图像，并评估图像的清晰度，将各尺寸中清晰度最高的图像上传到服务器。在本地，可以进行多个图像的采集，并根据图像的清晰度来上传清晰度最高的照片，这样可以提供质量较高的图像。
参照图4，本申请实施例提供了一种用于牙科的信息采集系统，包括：
存储器，用于存储程序；
处理器，用于加载所述程序以执行所述的用于牙科的信息采集方法。
注意，上述仅为本申请的较佳实施例及所运用技术原理。本领域技术人员会理解，本申请不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本申请的保护范围。因此，虽然通过以上实施例对本申请进行了较为详细的说明，但是本申请不仅仅限于以上实施例，在不脱离本申请构思的情况下，还可以包括更多其他等效实施例，而本申请的范围由所附的权利要求范围决定。
Claims (10)
1.一种用于牙科的信息采集方法，其特征在于，应用于移动终端，包括：
根据用户的输入指令确定目标对象，并且进入采集模式，所述目标对象是指用户选中的牙齿；
获取移动终端姿态传感器的姿态信息，并确定当前移动终端的摄像头拍摄的方向，所述拍摄方向包括朝上拍摄和朝下拍摄；
根据拍摄的方向是否与目标对象所处位置符合，提示用户调整手机姿态；
在手机姿态正确时，通过移动终端的摄像头获取图像信息；
根据所述图像信息和姿态信息，引导用户拍摄目标对象。
2.根据权利要求1所述的用于牙科的信息采集方法，其特征在于，所述根据所述图像信息和姿态信息，引导用户拍摄目标对象，具体包括：
根据所述图像信息，确定目标对象是否在图像中，以及目标对象在图像中的位置；
当目标对象处于图像中时，根据目标对象在图像中的位置和图像中心的相对位置关系，产生语音引导用户拍摄；
当目标对象不处于图像中时，根据估计的目标对象的位置和图像中心的相对位置关系，产生语音引导用户拍摄。
3.根据权利要求2所述的用于牙科的信息采集方法，其特征在于，根据所述图像信息，确定目标对象是否在图像中，以及目标对象在图像中的位置，具体包括：
从图像中识别目标对象的同类物，确定目标对象的同类物在图像中的位置分布；
根据目标对象在牙齿模型中的位置，以及目标对象的同类物在图像中的位置分布，估计目标对象是否在图像中，以及目标对象在图像中的位置。
4.根据权利要求3所述的用于牙科的信息采集方法，其特征在于，根据目标对象在牙齿模型中的位置，以及目标对象的同类物在图像中的位置分布，估计目标对象是否在图像中，以及目标对象在图像中的位置，具体包括：
根据目标对象的同类物在图像中的位置分布进行曲线拟合，估计出牙齿的实际分布曲线；
根据目标对象在牙齿模型中的位置，结合实际分布曲线，估计目标对象的实际位置；
根据上述实际位置是否在图像之中，确定目标对象是否在图像之中，若目标对象在图像之中，则根据该实际位置作为目标对象在图像中的位置。
5.根据权利要求4所述的用于牙科的信息采集方法，其特征在于，根据目标对象的同类物在图像中的位置分布进行曲线拟合，估计出牙齿的实际分布曲线，具体是：
判断目标对象的同类物是否属于同一排，若是同一排则根据所述同类物在图像中的位置分布进行曲线拟合，估计出牙齿的实际分布曲线；
其中，通过以下方式判断同类物是否属于同一排：
根据同类物之间的距离对同类物进行分类，将距离小于阈值的两个同类物分类到同一分类；
若同类物全部分类到同一个分类，则判定所有同类物属于同一排；
当同类物分类到两个分类，则根据当前手机的姿态信息确定用于拟合实际分布曲线的同类物分类。
6.根据权利要求1所述的用于牙科的信息采集方法，其特征在于，所述引导用户拍摄目标对象，具体是：
根据手机的姿态信息，产生引导用户将目标对象移动到拍摄画面的预设中心区域内。
7.根据权利要求6所述的用于牙科的信息采集方法，其特征在于，还包括以下步骤：
当所述目标对象位于预设中心区域内时，自动调整拍摄尺寸和/或进行补光拍摄。
8.根据权利要求7所述的用于牙科的信息采集方法，其特征在于，还包括以下步骤：
每个尺寸采集多个图像，并评估图像的清晰度，将各尺寸中清晰度最高的图像上传到服务器。
9.根据权利要求1所述的用于牙科的信息采集方法，其特征在于，还包括：采集用户的诉求和症状描述信息。
10.一种用于牙科的信息采集系统，其特征在于，包括：
存储器，用于存储程序；
处理器，用于加载所述程序以执行如权利要求1-9任一项所述的用于牙科的信息采集方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202410053733.5A CN117857912B (zh) | 2024-01-15 | 2024-01-15 | 用于牙科的信息采集方法和系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202410053733.5A CN117857912B (zh) | 2024-01-15 | 2024-01-15 | 用于牙科的信息采集方法和系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN117857912A true CN117857912A (zh) | 2024-04-09 |
| CN117857912B CN117857912B (zh) | 2024-06-07 |
Family
ID=90539781
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202410053733.5A Active CN117857912B (zh) | 2024-01-15 | 2024-01-15 | 用于牙科的信息采集方法和系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN117857912B (zh) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20160001254U (ko) * | 2014-10-07 | 2016-04-18 | 김경수 | 스마트폰 치아 확인용 카메라 |
| CN105635540A (zh) * | 2015-02-15 | 2016-06-01 | 熵零股份有限公司 | 影像装置、影像头分置手机、影像头分置相机 |
| US20210052138A1 (en) * | 2018-04-02 | 2021-02-25 | Koninklijke Philips N.V. | Guidance method and systems for teledentistry imaging |
| WO2022022350A1 (zh) * | 2020-07-27 | 2022-02-03 | 上海商汤智能科技有限公司 | 图像处理方法及装置、电子设备、存储介质和计算机程序产品 |
| WO2023165505A1 (zh) * | 2022-03-01 | 2023-09-07 | 先临三维科技股份有限公司 | 牙齿矫正效果的检测方法、装置、设备和存储介质 |
-
2024
- 2024-01-15 CN CN202410053733.5A patent/CN117857912B/zh active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20160001254U (ko) * | 2014-10-07 | 2016-04-18 | 김경수 | 스마트폰 치아 확인용 카메라 |
| CN105635540A (zh) * | 2015-02-15 | 2016-06-01 | 熵零股份有限公司 | 影像装置、影像头分置手机、影像头分置相机 |
| US20210052138A1 (en) * | 2018-04-02 | 2021-02-25 | Koninklijke Philips N.V. | Guidance method and systems for teledentistry imaging |
| WO2022022350A1 (zh) * | 2020-07-27 | 2022-02-03 | 上海商汤智能科技有限公司 | 图像处理方法及装置、电子设备、存储介质和计算机程序产品 |
| WO2023165505A1 (zh) * | 2022-03-01 | 2023-09-07 | 先临三维科技股份有限公司 | 牙齿矫正效果的检测方法、装置、设备和存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN117857912B (zh) | 2024-06-07 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9282238B2 (en) | Camera system for determining pose quality and providing feedback to a user | |
| US9491370B2 (en) | Methods and apparatuses for providing guide information for a camera | |
| TW202009805A (zh) | 圖像處理方法和裝置 | |
| JP2020008904A (ja) | 学習データ収集装置、学習データ収集システム、及び学習データ収集方法 | |
| KR20010029936A (ko) | 안면화상 촬영장치 및 안면화상 촬영방법 | |
| CN108307120B (zh) | 图像拍摄方法、装置及电子终端 | |
| CN103559717A (zh) | 拍照设备的拍照预览构图辅助方法及装置 | |
| CN112001334B (zh) | 人像识别装置 | |
| CN105049714B (zh) | 一种人物图像预览方法和装置 | |
| CN110826487B (zh) | 一种人脸表情数据采集方法 | |
| JP5862071B2 (ja) | 画像処理装置、撮像装置およびプログラム | |
| WO2020008711A1 (ja) | 学習装置、学習システム、及び学習方法 | |
| CN108769538B (zh) | 自动对焦方法、装置、存储介质及终端 | |
| CN117857912B (zh) | 用于牙科的信息采集方法和系统 | |
| CN113456095A (zh) | 一种放射科远程智能检查系统 | |
| JP7202739B2 (ja) | 歯の骨年齢を決定するための装置、方法及び命令を記録した記録媒体 | |
| CN109843178A (zh) | 放射线摄像系统、摄像装置、控制装置及其控制方法 | |
| CN116248803A (zh) | Tdi成像系统及其校准方法、装置和计算机设备 | |
| CN113313050A (zh) | 一种基于视频流的皮肤智能检测系统 | |
| CN113091908A (zh) | 体温监测方法及系统 | |
| CN112954204B (zh) | 拍照控制方法及装置、存储介质、终端 | |
| JP5626444B2 (ja) | 撮像装置、プログラム及び撮像支援方法 | |
| CN113842166B (zh) | 基于超声影像设备的超声图像采集方法以及相关装置 | |
| CN117957418A (zh) | 尺寸测量装置、尺寸测量方法以及程序 | |
| JP2024004581A (ja) | プログラム、情報処理装置、及び方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant |