申请/专利权人：平安科技(深圳)有限公司

申请日：2019-05-20

公开（公告）日：2024-04-16

公开（公告）号：CN110264443B

主分类号：G06T7/00

分类号：G06T7/00;G06V10/25;G06V10/44;G06V10/764;G06V10/82

优先权：

专利状态码：有效-授权

法律状态：2024.04.16#授权;2021.04.30#实质审查的生效;2019.09.20#公开

摘要：本发明属于人工智能技术领域，公开了一种基于特征可视化的眼底图像病变标注方法，包括：获取待标注眼底图像；通过训练得到的分类模型对所述待标注眼底图像进行分类；根据分类结果对所述待标注眼底图像进行特征可视化处理，得到所述待标注眼底图像的灰度特征图；根据所述灰度特征图获取最小矩形框坐标；利用矩形框坐标对应的矩形框对所述待标注眼底图像进行病灶标注。本发明还公开了一种电子装置和存储介质。本发明通过对待标注眼底图像进行特征可视化处理，实现对眼底图像的病灶标注，减少了标注的工作量，不需要专家进行人工标注，节省人力。并且，通过本发明可以实现对数据集的批量标注，提高效率。

主权项：1.一种基于特征可视化的眼底图像病变标注方法，应用于电子装置，其特征在于，包括：获取待标注眼底图像；通过训练得到的分类模型对所述待标注眼底图像进行分类；根据分类结果对所述待标注眼底图像进行特征可视化处理，得到所述待标注眼底图像的灰度特征图；根据所述灰度特征图获取最小矩形框坐标；利用所述最小矩形框坐标对应的矩形框对所述待标注眼底图像进行病灶标注；其中，所述分类结果包括与所述待标注眼底图像对应的多个分类类别时，根据分类结果对所述待标注眼底图像进行特征可视化处理，得到所述待标注眼底图像的灰度特征图，包括：根据所述分类结果对应的各个分类类别分别对所述待标注眼底图像进行特征可视化处理，得到多个灰度特征图；根据所述灰度特征图获取最小矩形框坐标，包括：分别根据每个灰度特征图获取与相应分类类别对应的最小矩形框坐标；根据分类结果对所述待标注眼底图像进行特征可视化处理，得到所述待标注眼底图像的灰度特征图，还包括：获取所述待标注眼底图像的分类类别；根据所述待标注眼底图像的分类类别选择所述分类模型中与所述分类类别相对应的全连接层的权重值；将选择的权重值与所述分类模型中最后一个卷积层的输出做内积运算，得到第一图像；将第一图像通过上采样处理，与输入的待标注眼底图像叠加，得到所述待标注眼底图像的灰度特征图；根据所述灰度特征图获取最小矩形框坐标的步骤包括：提取所述灰度特征图的图像像素点；根据所述图像像素点获取所述灰度特征图的所有轮廓；根据轮廓点坐标确定包含轮廓的最小矩形框坐标。

全文数据：基于特征可视化的眼底图像病变标注方法、装置及介质技术领域本发明涉及人工智能技术领域，尤其涉及一种基于特征可视化的眼底图像病变标注方法、装置及介质。背景技术目前，由于医学图像的特殊性，通常只有经过专业培养的医生才能够精确且可靠的对医学图像进行标注，包括病灶等区域。在对医学图像进行标注的过程中，通常需要医生手动确定疾病类型、筛查病变区域、勾画病灶区域等，这一标注过程需要医生投入大量的时间和精力。深度学习被广泛应用于医学图像处理，大大提高医生筛查疾病的效率，但是，利用神经网络对医学图像进行标注时，难以直观地看出输入的医学图像的哪些地方被神经网络关注到，导致难以实现对图像数据集进行批量标注，使得标注的工作量较大。发明内容本发明提供一种基于特征可视化的眼底图像病变标注方法、装置及介质，以解决现有技术难以实现对图像进行批量标注的问题。为了实现上述目的，本发明的一个方面是提供一种基于特征可视化的眼底图像病变标注方法，包括：获取待标注眼底图像；通过训练得到的分类模型对所述待标注眼底图像进行分类；根据分类结果对所述待标注眼底图像进行特征可视化处理，得到所述待标注眼底图像的灰度特征图；根据所述灰度特征图获取最小矩形框坐标；利用矩形框坐标对应的矩形框对所述待标注眼底图像进行病灶标注。优选地，通过训练得到的分类模型对所述待标注眼底图像进行分类的步骤包括：将所述待标注眼底图像输入所述分类模型；通过所述分类模型输出与所述待标注眼底图像相对应的多个分类类别的概率值；获取设定的概率阈值；将大于所述概率阈值的概率值所对应的分类类别作为分类结果。优选地，所述分类结果包括与所述待标注眼底图像对应的多个分类类别时，根据分类结果对所述待标注眼底图像进行特征可视化处理，包括：根据分类结果对应的各个分类类别分别对所述待标注眼底图像进行特征可视化处理，得到多个灰度特征图；根据所述灰度特征图获取最小矩形框坐标，包括：分别根据每个灰度特征图获取与相应分类类别对应的最小矩形框坐标。优选地，所述分类模型包括输入层、多层卷积层Convolutionallayer，CONV、全局平均池化GlobalAveragePooling，GAP层和全连接层。优选地，对所述待标注眼底图像进行特征可视化处理的步骤包括：获取所述待标注眼底图像的分类类别；根据所述待标注眼底图像的分类类别选择所述分类模型中与所述分类类别相对应的全连接层的权重值；将选择的权重值与所述分类模型中最后一个卷积层的输出做内积运算，得到第一图像；将第一图像通过上采样处理，与输入的待标注眼底图像叠加，得到所述待标注眼底图像的灰度特征图。优选地，根据所述灰度特征图获取最小矩形框坐标的步骤包括：提取所述灰度特征图的图像像素点；根据所述图像像素点获取所述灰度特征图的所有轮廓；根据轮廓点坐标确定包含轮廓的最小矩形框坐标。优选地，提取所述灰度特征图的图像像素点的步骤包括：设定不同的特征阈值；根据所述特征阈值对所述灰度特征图的图像像素点进行分类；根据对图像像素点的分类结果提取所述图像像素点。优选地，根据所述图像像素点获取所述灰度特征图的所有轮廓的步骤包括：获取第一个非零像素点，将所述第一个非零像素点入栈，并将所述第一个非零像素点作为栈顶元素；获取所述栈顶元素相邻的八邻域非零像素点，并将所述八邻域非零像素点入栈；将所述栈顶元素删除，完成区域的连通，获取一个轮廓；重复上述步骤，获取所有轮廓。为了实现上述目的，本发明的另一个方面是提供一种电子装置，该电子装置包括：处理器，存储器，所述存储器中包括基于特征可视化的眼底图像病变标注程序，所述眼底图像病变标注程序被所述处理器执行时实现如上所述的眼底图像病变标注方法的步骤。为了实现上述目的，本发明的再一个方面是提供一种计算机可读存储介质，所述计算机可读存储介质中包括眼底图像病变标注程序，所述眼底图像病变标注程序被处理器执行时，实现如上所述的眼底图像病变标注方法的步骤。相对于现有技术，本发明具有以下优点和有益效果：本发明通过分类模型进行眼底图像分类，根据分类结果对待标注眼底图像进行特征可视化处理，实现对眼底图像的病灶标注，减少了标注的工作量，不需要专家进行人工标注，节省人力。并且，通过本发明可以同时标注多种病灶类型，实现对数据集的批量标注，提高效率。并且，在实际筛查系统中通过本发明所述病变标注方法可以对病灶区域进行显示，辅助医生诊疗。附图说明图1为本发明所述基于特征可视化的眼底图像病变标注方法的流程示意图；图2和图3为本发明中对待标注眼底图像进行特征可视化的过程示意图；图4为本发明中基于特征可视化的眼底图像病变标注程序的模块示意图。本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。具体实施方式下面将参考附图来描述本发明所述的实施例。本领域的普通技术人员可以认识到，在不偏离本发明的精神和范围的情况下，可以用各种不同的方式或其组合对所描述的实施例进行修正。因此，附图和描述在本质上是说明性的，仅仅用以解释本发明，而不是用于限制权利要求的保护范围。此外，在本说明书中，附图未按比例画出，并且相同的附图标记表示相同的部分。图1为本发明所述基于特征可视化的眼底图像病变标注方法的流程示意图，如图1所示，本发明所述基于特征可视化的眼底图像病变标注方法，包括以下步骤：步骤S1、获取待标注眼底图像，待标注的眼底图像中可能包括一种或多种病灶类型，或者一个或多个病灶位置；步骤S2、通过训练得到的分类模型对所述待标注眼底图像进行分类，根据图像中包括的病灶类型获取待标注眼底图像所属的分类类别；步骤S3、根据分类结果对所述待标注眼底图像进行特征可视化处理，得到所述待标注眼底图像的灰度特征图；步骤S4、根据所述灰度特征图获取最小矩形框坐标，最小矩形框坐标表征了病灶在眼底图像中的相对位置，以对眼底图像中包括的病灶进行定位，但本发明并不限于此，也可以用于对图像中的某一关键区域定位，获取该关键区域的最小矩形框坐标，对关键区域进行标注；步骤S5、利用所述矩形框坐标对应的矩形框对所述待标注眼底图像进行病灶标注。本发明通过分类模型进行眼底图像分类，根据分类结果进行特征可视化处理，实现对眼底图像的病灶标注，减少了标注的工作量，不需要专家进行人工标注。并且，通过本发明可以实现对数据集的批量标注，提高效率。并且，在实际筛查系统中通过本发明所述病变标注方法可以对病灶区域进行显示，辅助医生诊疗。优选地，所述分类模型包括输入层、多层卷积层、全局平均池化层和全连接层。本发明中，通过经过训练的分类模型对待标注眼底图像进行分类。训练时，选用的待标注眼底图像训练样本来自Kaggle挑战赛中的糖尿病性视网膜病变检测提供的公开数据集，并对该数据集进行重新标注，对数据集中每张眼底图像进行多分类标注，标签分为四类：微动脉瘤，软渗出，硬渗出，出血点。训练时的损失函数为二类交叉熵损失函数，优化方法使用Adam方法，初始学习率为0.001，训练得到平均召回率为0.93。本发明的一个可选的实施例中，通过训练得到的分类模型对所述待标注眼底图像进行分类的步骤包括：将所述待标注眼底图像输入所述分类模型；通过所述分类模型输出与所述待标注眼底图像相对应的多个分类类别的概率值；获取设定的概率阈值；将大于所述概率阈值的概率值所对应的分类类别作为分类结果。根据分类结果获取待标注眼底图像中可能包括的病灶类型。病人的一张眼底图像可能有多种类型的病变，根据设定的概率阈值的不同，通过分类模型得到的分类结果可能包括一个或多个分类类别，当分类结果包括多个分类类别时，根据分类结果对所述待标注眼底图像进行特征可视化处理，包括：根据分类结果对应的各个分类类别分别对所述待标注眼底图像进行特征可视化处理，得到多个灰度特征图；根据所述灰度特征图获取最小矩形框坐标，包括：分别根据每个灰度特征图获取与相应分类类别对应的最小矩形框坐标。即，对应几个分类类别对待标注眼底图像处理几次，每次处理获取的最小矩形框坐标表征与此次分类类别对应的病灶位置。例如，若一张待标注眼底图像中包括出血点、软渗出和硬渗出等，将该眼底图像输入分类模型中之后，通过分类模型得到该眼底图像属于出血点病变类别的概率值为0.9，属于软渗出病变类别的概率值为0.8，属于硬渗出类别的概率值为0.6，通过设定概率阈值为0.75之后，获得的分类结果为与该眼底图像相对应的病变类别为出血点病变和软渗出病变。获取最小矩形框坐标时，先针对出血点病变对待标注眼底图像进行可视化处理，获取与出血点病变对应的最小矩形框坐标，再针对软渗出病变对待标注眼底图像进行可视化处理，获取与软渗出病变对应的最小矩形框坐标，因此，对于图像中的每个病灶都被会标注出一个矩形框。应当理解的是，针对不同分类类别对待标注眼底图像的处理没有先后次序之分。本发明的一个实施例中，通过训练得到的分类模型对所述待标注眼底图像进行分类的步骤包括：将所述待标注眼底图像输入所述分类模型；通过所述分类模型输出与所述待标注眼底图像相对应的多个分类类别的概率值；将得到的概率值按照从大到小的顺序排列；选择排序靠前的一个或多个概率值所对应的分类类别作为分类结果。本发明的一个实施例中，对所述待标注眼底图像进行特征可视化处理的步骤包括：获取所述待标注眼底图像的分类类别；根据所述待标注眼底图像的分类类别选择所述分类模型中与所述分类类别相对应的全连接层的权重值；将选择的权重值与所述分类模型中最后一个卷积层的输出做内积运算，得到第一图像；将第一图像通过上采样处理上采样到原图大小，然后与输入的待标注眼底图像叠加，得到所述待标注眼底图像的灰度特征图。图2和图3为本发明中对待标注眼底图像进行特征可视化的过程示意图，如图2所示，对于待标注的眼底图像，经过多层CONV层、GAP层的处理，根据待标注眼底图像对应的“出血”的分类类别，确定对应的全连接层的权重值W1，W2，…，Wn，之后，如图3所示，将权重值W1，W2，…，Wn与最后一个CONV层的输出做内积运算，得到第一图像，其中，最后一个CONV层的输出为最深层次的特征图，将第一图像通过上采样处理，得到与待标注的眼底图像相同分辨率的第二图像，再将第二图像与输入的待标注眼底图像按照7:3的权重比进行相加，得到经过特征图渲染后的图像，即为待标注眼底图像的灰度特征图，最后，利用最小矩形框坐标对应的矩形框进行标注。当一张眼底图像通过分类模型得到多个分类类别时，对于每种分类类别分别进行特征可视化处理，得到与每种分类类别相对应的灰度特征图，用于确定最小矩形框坐标。例如，当一张眼底图像获得的分类结果为与该眼底图像相对应的病变类别为出血点病变和软渗出病变时，先选择与出血点病变类别对应的全连接层的权重值，得到与出血点病变对应的第一灰度特征图，通过第一灰度特征图确定出血点病灶的最小矩形框坐标，再选择与软渗出病变类别对应的全连接层的权重值，得到与软渗出病变对应的第二灰度特征图，通过第二特征灰度图确定软渗出病灶的最小矩形框坐标，经过两次可视化处理得到的最小矩形框坐标可以在待标注的眼底图像中进行病灶标注。上述仅以分类结果包括两种病灶分类类别为例进行说明，而本发明并不限于此，一张待标注眼底图像可能包括多种病灶分类类别，依照上述方式，可以分别对相应的多个灰度特征图进行处理，获取最小矩形框坐标。应当理解的是，本发明中的术语“第一”和“第二”等仅用于区别类似的对象，而不用于描述特定的顺序或先后次序，应该理解这样使用的数据在适当情况下可以互换，以便于本发明中描述的实施例能够以除了描述的那些以外的顺序实施。例如，对于第一灰度特征图和第二灰度特征图的处理顺序并无先后之分。本发明的一个可选实施例中，根据所述灰度特征图获取最小矩形框坐标的步骤包括：提取所述灰度特征图的图像像素点；根据所述图像像素点获取所述灰度特征图的所有轮廓；根据轮廓点坐标确定包含轮廓的最小矩形框坐标。将获取的最小矩形框坐标标注到原始的眼底图像上，即可得到图像中的病灶类型以及病灶位置。不同的病灶类型可以使用不同颜色的矩形框进行标注，以便于从标注后的图像中显而易见的获取到病灶数量以及相应的病灶种类。进一步地，提取所述灰度特征图的图像像素点的步骤包括：设定不同的特征阈值；根据所述特征阈值对所述灰度特征图的图像像素点进行分类；根据对图像像素点的分类结果提取所述图像像素点。本发明的一个实施例中，采用最大连通区域算法寻找灰度特征图的所有轮廓，优选地，根据所述图像像素点获取所述灰度特征图的所有轮廓的步骤包括：获取第一个非零像素点，将所述第一个非零像素点入栈，并将所述第一个非零像素点作为栈顶元素；获取所述栈顶元素相邻的八邻域非零像素点，并将所述八邻域非零像素点入栈；将所述栈顶元素删除，完成区域的连通，获取一个轮廓；重复上述步骤，获取所有轮廓。进一步地，获取第一个非零像素点之前，还包括：为所述图像像素点添加是否已访问的属性；获取第一个非零像素点之后，还包括：将所述第一个非零像素点是否已访问的属性设置为真，从而可以避免在获取所有轮廓时，对图像像素点的查询进入死循环。需要说明的是，本发明所述眼底图像病变标注方法不仅可以用于眼底图像的病变标注，还可以用于对基于分类问题的数据进行关键区域标注，通用性较强。通过本发明所述眼底图像病变标注方法完成病灶区域的标注之后，对于已经标注病灶区域的眼底图像病变的数据集可以用于对眼底病变的检测。本发明所述基于特征可视化的眼底图像病变标注方法应用于电子装置，所述电子装置可以是电视机、智能手机、平板电脑、计算机等终端设备。所述电子装置包括：处理器；存储器，用于存储基于特征可视化的眼底图像病变标注程序，处理器执行所述基于特征可视化的眼底图像病变标注程序，实现以下的基于特征可视化的眼底图像病变标注方法的步骤：获取待标注眼底图像；通过训练得到的分类模型对所述待标注眼底图像进行分类；根据分类结果对所述待标注眼底图像进行特征可视化处理，得到所述待标注眼底图像的灰度特征图；根据所述灰度特征图获取最小矩形框坐标；利用矩形框坐标对应的矩形框对所述待标注眼底图像进行病灶标注。所述电子装置还包括网络接口和通信总线等。其中，网络接口可以包括标准的有线接口、无线接口，通信总线用于实现各个组件之间的连接通信。存储器包括至少一种类型的可读存储介质，可以是闪存、硬盘、光盘等非易失性存储介质，也可以是插接式硬盘等，且并不限于此，可以是以非暂时性方式存储指令或软件以及任何相关联的数据文件并向处理器提供指令或软件程序以使该处理器能够执行指令或软件程序的任何装置。本发明中，存储器存储的软件程序包括基于特征可视化的眼底图像病变标注程序，并可以向处理器提供该基于特征可视化的眼底图像病变标注程序，以使得处理器可以执行该基于特征可视化的眼底图像病变标注程序，实现基于特征可视化的眼底图像病变标注方法的步骤。处理器可以是中央处理器、微处理器或其他数据处理芯片等，可以运行存储器中的存储程序，例如，本发明中基于特征可视化的眼底图像病变标注程序。所述电子装置还可以包括显示器，显示器也可以称为显示屏或显示单元。在一些实施例中显示器可以是LED显示器、液晶显示器、触控式液晶显示器以及有机发光二极管OrganicLight-EmittingDiode，OLED触摸器等。显示器用于显示在电子装置中处理的信息以及用于显示可视化的工作界面，包括原始的待标注眼底图像以及利用矩形框标注后的眼底图像等信息。所述电子装置还可以包括用户接口，用户接口可以包括输入单元比如键盘、语音输出装置比如音响、耳机等。在其他实施例中，基于特征可视化的眼底图像病变标注程序还可以被分割为一个或者多个模块，一个或者多个模块被存储于存储器中，并由处理器执行，以完成本发明。本发明所称的模块是指能够完成特定功能的一系列计算机程序指令段。图4为本发明中基于特征可视化的眼底图像病变标注程序的模块示意图，如图4所示，所述基于特征可视化的眼底图像病变标注程序可以被分割为：图像获取模块1、分类模块2、可视化处理模块3、坐标获取模块4和标注模块5。上述模块所实现的功能或操作步骤均与上文类似，此处不再详述，示例性地，例如其中：图像获取模块1，获取待标注眼底图像；分类模块2，通过训练得到的分类模型对所述待标注眼底图像进行分类；可视化处理模块3，根据分类结果对所述待标注眼底图像进行特征可视化处理，得到所述待标注眼底图像的灰度特征图；坐标获取模块4，根据所述灰度特征图获取最小矩形框坐标；标注模块5，利用矩形框坐标对应的矩形框对所述待标注眼底图像进行病灶标注。优选地，所述分类模型包括输入层、多层卷积层、全局平均池化层和全连接层。对分类模型进行训练时，选用的待标注眼底图像训练样本来自Kaggle挑战赛中的糖尿病性视网膜病变检测提供的公开数据集，并对该数据集进行重新标注，对数据集中每张眼底图像进行多分类标注，标签分为四类：微动脉瘤，软渗出，硬渗出，出血点。训练时的损失函数为二类交叉熵损失函数，优化方法使用Adam方法，初始学习率为0.001，训练得到平均召回率为0.93。本发明的一个可选的实施例中，分类模块2包括：输入单元，将所述待标注眼底图像输入所述分类模型；输出单元，通过所述分类模型输出与所述待标注眼底图像相对应的多个分类类别的概率值；阈值设定单元，设定概率阈值；结果获取单元，将大于所述概率阈值的概率值所对应的分类类别作为分类结果。根据分类结果获取待标注眼底图像中可能包括的病灶类型。病人的一张眼底图像可能有多种类型的病变，根据设定的概率阈值的不同，通过分类模型得到的分类结果可能包括一个或多个分类类别，当分类结果包括多个分类类别时，可视化处理模块根据分类结果对应的各个分类类别分别对所述待标注眼底图像进行特征可视化处理，得到多个灰度特征图；坐标获取模块分别根据每个灰度特征图获取与相应分类类别对应的最小矩形框坐标。即，对应几个分类类别对待标注眼底图像处理几次，每次处理获取的最小矩形框坐标表征与此次分类类别对应的病灶位置。例如，若一张待标注眼底图像中包括出血点、软渗出和硬渗出等，将该眼底图像输入分类模型中之后，通过分类模型得到该眼底图像属于出血点病变类别的概率值为0.9，属于软渗出病变类别的概率值为0.8，属于硬渗出类别的概率值为0.6，通过设定概率阈值为0.75之后，获得的分类结果为与该眼底图像相对应的病变类别为出血点病变和软渗出病变。获取最小矩形框坐标时，先针对出血点病变对待标注眼底图像进行可视化处理，获取与出血点病变对应的最小矩形框坐标，再针对软渗出病变对待标注眼底图像进行可视化处理，获取与软渗出病变对应的最小矩形框坐标，因此，对于图像中的每个病灶都被会标注出一个矩形框。应当理解的是，针对不同分类类别对待标注眼底图像的处理没有先后次序之分。本发明的一个实施例中，可视化处理模块包括：类别获取单元，获取所述待标注眼底图像的分类类别；权重选择单元，根据所述待标注眼底图像的分类类别选择所述分类模型中与所述分类类别相对应的全连接层的权重值；内积运算单元，将选择的权重值与所述分类模型中最后一个卷积层的输出做内积运算，得到第一图像；叠加单元，将第一图像通过上采样处理上采样到原图大小，与输入的待标注眼底图像叠加，得到所述待标注眼底图像的灰度特征图。当一张眼底图像通过分类模型得到多个分类类别时，对于每种分类类别分别进行特征可视化处理，得到与每种分类类别相对应的灰度特征图，用于确定最小矩形框坐标。例如，当一张眼底图像获得的分类结果为与该眼底图像相对应的病变类别为出血点病变和软渗出病变时，先选择与出血点病变类别对应的全连接层的权重值，得到与出血点病变对应的第一灰度特征图，通过第一灰度特征图确定出血点病灶的最小矩形框坐标，再选择与软渗出病变类别对应的全连接层的权重值，得到与软渗出病变对应的第二灰度特征图，通过第二特征灰度图确定软渗出病灶的最小矩形框坐标，经过两次可视化处理得到的最小矩形框坐标可以在待标注的眼底图像中进行病灶标注。本发明的一个可选实施例中，坐标获取模块4包括：提取单元，提取所述灰度特征图的图像像素点；轮廓获取单元，根据所述图像像素点获取所述灰度特征图的所有轮廓；坐标确定单元，根据轮廓点坐标确定包含轮廓的最小矩形框坐标。将获取的最小矩形框坐标标注到原始的眼底图像上，即可得到图像中的病灶类型以及病灶位置。不同的病灶类型可以使用不同颜色的矩形框进行标注，以便于从标注后的图像中显而易见的获取到病灶数量以及相应的病灶种类。进一步地，通过提取单元提取所述灰度特征图的图像像素点的步骤包括：设定不同的特征阈值；根据所述特征阈值对所述灰度特征图的图像像素点进行分类；根据对图像像素点的分类结果提取所述图像像素点。本发明的一个实施例中，所述轮廓获取单元采用最大连通区域算法寻找灰度特征图的所有轮廓，优选地，通过轮廓获取单元获取所述灰度特征图的所有轮廓的步骤包括：获取第一个非零像素点，将所述第一个非零像素点入栈，并将所述第一个非零像素点作为栈顶元素；获取所述栈顶元素相邻的八邻域非零像素点，并将所述八邻域非零像素点入栈；将所述栈顶元素删除，完成区域的连通，获取一个轮廓；重复上述步骤，获取所有轮廓。进一步地，获取第一个非零像素点之前，还包括：为所述图像像素点添加是否已访问的属性；获取第一个非零像素点之后，还包括：将所述第一个非零像素点是否已访问的属性设置为真，从而可以避免在获取所有轮廓时，对图像像素点的查询进入死循环。本发明的一个实施例中，计算机可读存储介质可以是任何包含或存储程序或指令的有形介质，其中的程序可以被执行，通过存储的程序指令相关的硬件实现相应的功能。例如，计算机可读存储介质可以是计算机磁盘、硬盘、随机存取存储器、只读存储器等。本发明并不限于此，可以是以非暂时性方式存储指令或软件以及任何相关数据文件或数据结构并且可提供给处理器以使处理器执行其中的程序或指令的任何装置。所述计算机可读存储介质中包括基于特征可视化的眼底图像病变标注程序，所述基于特征可视化的眼底图像病变标注程序被处理器执行时，实现如下的基于特征可视化的眼底图像病变标注方法：获取待标注眼底图像；通过训练得到的分类模型对所述待标注眼底图像进行分类；根据分类结果对所述待标注眼底图像进行特征可视化处理，得到所述待标注眼底图像的灰度特征图；根据所述灰度特征图获取最小矩形框坐标；利用所述矩形框坐标对应的矩形框对所述待标注眼底图像进行病灶标注。本发明之计算机可读存储介质的具体实施方式与上述基于特征可视化的眼底图像病变标注方法、电子装置的具体实施方式大致相同，在此不再赘述。需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、装置、物品或者方法不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、装置、物品或者方法所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、装置、物品或者方法中还存在另外的相同要素。上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在如上所述的一个存储介质如ROMRAM、磁碟、光盘中，包括若干指令用以使得一台终端设备可以是手机，计算机，服务器，或者网络设备等执行本发明各个实施例所述的方法。以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

权利要求：1.一种基于特征可视化的眼底图像病变标注方法，应用于电子装置，其特征在于，包括：获取待标注眼底图像；通过训练得到的分类模型对所述待标注眼底图像进行分类；根据分类结果对所述待标注眼底图像进行特征可视化处理，得到所述待标注眼底图像的灰度特征图；根据所述灰度特征图获取最小矩形框坐标；利用所述矩形框坐标对应的矩形框对所述待标注眼底图像进行病灶标注。2.根据权利要求1所述的基于特征可视化的眼底图像病变标注方法，其特征在于，通过训练得到的分类模型对所述待标注眼底图像进行分类的步骤包括：将所述待标注眼底图像输入所述分类模型；通过所述分类模型输出与所述待标注眼底图像相对应的多个分类类别的概率值；获取设定的概率阈值；将大于所述概率阈值的概率值所对应的分类类别作为分类结果。3.根据权利要求1所述的基于特征可视化的眼底图像病变标注方法，其特征在于，所述分类结果包括与所述待标注眼底图像对应的多个分类类别时，根据分类结果对所述待标注眼底图像进行特征可视化处理，包括：根据所述分类结果对应的各个分类类别分别对所述待标注眼底图像进行特征可视化处理，得到多个灰度特征图；根据所述灰度特征图获取最小矩形框坐标，包括：分别根据每个灰度特征图获取与相应分类类别对应的最小矩形框坐标。4.根据权利要求1所述的基于特征可视化的眼底图像病变标注方法，其特征在于，所述分类模型包括输入层、多层卷积层、全局平均池化层和全连接层。5.根据权利要求4所述的基于特征可视化的眼底图像病变标注方法，其特征在于，对所述待标注眼底图像进行特征可视化处理的步骤包括：获取所述待标注眼底图像的分类类别；根据所述待标注眼底图像的分类类别选择所述分类模型中与所述分类类别相对应的全连接层的权重值；将选择的权重值与所述分类模型中最后一个卷积层的输出做内积运算，得到第一图像；将第一图像通过上采样处理，与输入的待标注眼底图像叠加，得到所述待标注眼底图像的灰度特征图。6.根据权利要求1所述的基于特征可视化的眼底图像病变标注方法，其特征在于，根据所述灰度特征图获取最小矩形框坐标的步骤包括：提取所述灰度特征图的图像像素点；根据所述图像像素点获取所述灰度特征图的所有轮廓；根据轮廓点坐标确定包含轮廓的最小矩形框坐标。7.根据权利要求6所述的基于特征可视化的眼底图像病变标注方法，其特征在于，提取所述灰度特征图的图像像素点的步骤包括：设定不同的特征阈值；根据所述特征阈值对所述灰度特征图的图像像素点进行分类；根据对图像像素点的分类结果提取所述图像像素点。8.根据权利要求6所述的基于特征可视化的眼底图像病变标注方法，其特征在于，根据所述图像像素点获取所述灰度特征图的所有轮廓的步骤包括：获取第一个非零像素点，将所述第一个非零像素点入栈，并将所述第一个非零像素点作为栈顶元素；获取所述栈顶元素相邻的八邻域非零像素点，并将所述八邻域非零像素点入栈；将所述栈顶元素删除，完成区域的连通，获取一个轮廓；重复上述步骤，获取所有轮廓。9.一种电子装置，其特征在于，该电子装置包括：处理器，存储器，所述存储器中包括基于特征可视化的眼底图像病变标注程序，所述眼底图像病变标注程序被所述处理器执行时实现如权利要求1至8中任一项所述的眼底图像病变标注方法的步骤。10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中包括基于特征可视化的眼底图像病变标注程序，所述眼底图像病变标注程序被处理器执行时，实现如权利要求1至8中任一项所述的眼底图像病变标注方法的步骤。

百度查询： 平安科技(深圳)有限公司 基于特征可视化的眼底图像病变标注方法、装置及介质

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD