时间:2024-09-03
唐广发 李彩云 招晶晶 许晓安 卢子忱
一种多维度的医疗红外热图质量评价方法及改进策略*
唐广发1李彩云2招晶晶2许晓安3卢子忱1
(1.中国科学院云计算产业技术创新与育成中心,广东 东莞 523000 2.东莞市中医院,广东 东莞 523000 3.广东技术师范大学,广东 广州 510665)
针对医疗红外热图存在噪声、图像特性缺陷、专业度缺陷等问题,提出一种多维度的医疗红外热图质量评价方法及改进策略。经实验验证:医疗红外热图的质量指标得到有效量化,且以此量化指标提出的改进策略能满足数据质量智能筛选的需求。
红外热图;图像质量评价;改进策略;图像处理
人体由于结构、组织代谢、血液循环等不同,导致各部位的温度也不同。医疗红外热图是利用医学、红外摄像和计算机等技术,经图像处理,以伪彩色热图形式显示人体温度场分布的一种医疗图像。医疗图像是医疗大数据平台数据源的重要组成部分。据统计,超过90%的医疗数据来自医学影像[1]。因此,研究高效、安全、可控的医疗图像质量评价方法意义重大。
目前,医疗红外热图的质量评价方法主要分为主观评价和客观评价。常用的主观评价方法有均值意见评分法(mean opinion score, MOS)和国际标准Method for the Subjective Assessment of the Quality of Television Pictures Recommended by CCIR500[2],主要依靠人眼进行主观判断,评价过程耗时长,受自身素质、情绪和测试环境影响较大,且成本高。客观评价方法的核心思想是计算与标准图像的差异,但使用广泛且针对医疗特殊性质的方法较少且效果差。
本文根据医疗红外热图的特性,提出一种通过多个主客观维度评价医疗红外热图的方法及可动态调整指标权重的图像数据集质量改进策略。
1.1.1 随机噪声
随机噪声是一种由时间上随机产生的大量起伏骚扰积累而造成的,其值在给定瞬间内不能预测的噪声。在任何时候,其幅度、相位及波形都是随机的[3]。红外热图随机噪声主要由红外成像系统的工作环境干扰产生,包括热噪声、有色噪声、温度起伏噪声等。
1.1.2 固有噪声
固有噪声主要由红外成像系统内部产生,并随着系统的变化而变化[3],主要包括背景噪声、探测器噪声、电路噪声、电荷噪声、光子噪声、A/D转换噪声等。
对于医疗红外热图图像特性缺陷,本文主要分析图像对比度和图像二维熵的异常。
图像对比度是指一幅图像中明暗区域最亮的白和最暗的黑之间不同亮度层级的测量值,即一幅图像灰度反差的大小[4]。当医疗红外热图的目标与背景的红外辐射亮度差值越大时,其对比度越大。
图像二维熵是反映图像灰度分布的空间特征[5],可理解为反映图像像素位置的灰度信息与其邻域灰度分布的综合特征。
医疗红外热图对比度缺陷产生的主要原因包括目标形态、红外辐射特性、环境条件和红外探测器性能等。具体来说,成像视野内所有物体的发射率和表面温度,环境温湿度以及红外探测器辐射亮度性能等,都会使目标辐射亮度和背景辐射亮度产生偏差,从而导致对比度和二维熵的不同。
医疗红外热图专业度可分为垂直投影特性和人体占比范围。其背景的灰度值为低温色彩对应的色标灰度值,而人体区域的灰度值为高温色彩对应的色标灰度值。对医疗红外热图进行垂直灰度投影,会呈近似正态分布,形成两边低中间高的灰度投影特性。另外,医疗红外热图中人体占比一般在一个合理区间范围内。医疗红外热图中没有人体,或出现其他异物背景杂乱,或诊室温湿度失衡,或成像数据出错等因素,都可能导致医疗红外热图专业度缺陷。
本文通过均方根误差(mean squared error, MSE)和峰值信噪比(peak signal-to-noise ratio, PSNR)来评价医疗红外热图的质量。
是参数估计值与参考值之差平方的期望值,可评价红外热图变化程度。越小,说明数据具有较好的精确度[6]。
用于衡量图像失真或噪声水平,其值越大,图像质量越好[5]。
式中,为图像最大像素值;由式(1)求得。
医疗红外热图对比度计算公式为
式中,(,)为二维特征(,)出现的频数;为医疗红外热图尺度。
本文提出一种基于支持向量机(support vector machine, SVM)的图像质量分类器。支持向量机是一种应用于分类与回归分析的有监督式机器学习算法[7],质量分类流程如图1所示。
图1 SVM红外图像质量分类流程
提取医疗红外热图对比度、二维熵、边缘锐度和噪声4个特征信息作为支持向量机的输入= {1,2,3,4},输出为差异主观评分值(different mean opinion score, DMOS)的4个等级O = {1,2,3,4}。DMOS值越小代表图像质量越高,DMOS评分表如表1所示。
表1 医疗红外热图DMOS评分表
灰度投影法是利用图像灰度分布变化的特点得到图像帧间运动矢量[8]。医疗红外热图垂直平均积分灰度投影定义为
式中,(,)为像素点(,)的灰度值。
连通区域是指图像中具有相同像素值且位置相邻的前景像素点组成的图像区域。连通区域分析是指将图像中的各个连通区域找出并标记[9]。连通区域的人体占比可作为医疗红外热图质量评价的指标之一。本文对医疗红外热图的连通区域占比范围进行统计,结果如表2所示。
表2 医疗红外热图的连通区域占比范围
矩阵每一行的和即为矩阵特征向量;对特征向量进行归一化处理,公式为
为验证本文提出的医疗红外热图质量评价方法的准确性,对1 500例医疗红外热图数据分别进行噪声、图像特性、专业度评价实验。
医疗红外热图部分噪声实例如图2和表3所示。
图2 医疗红外热图噪声实例
表3 噪声评价表
图2(b)为经过图像增强处理的医疗红外热图,为124.8,为27.17;图2(c)为加入轻微的椒盐噪声的医疗红外热图,为998.0,为18.13;图2(d)为加入重度的高斯噪声的医疗红外热图,为5 736.0,为10.54。由此可知:图像噪声越大,越大,越小。因此,可根据用户自定义标准拟定和的阈值作为评价医疗红外热图质量的指标之一。
选取医疗红外热图正样本274张,椒盐噪声医疗红外热图127张,高斯模糊医疗红外热图233张;RGB通道值随机打乱医疗红外热图224张,并为每张热图标记DMOS值。图3列举了4个DMOS图像等级的示例:图3(a)为经图像增强算法处理的优质医疗红外热图,标记图像等级为1;图3(b)为标准医疗红外热图原图,标记图像等级为2;图3(c)为分辨率低、较模糊的医疗红外热图,标记图像等级为3,图3(d)为带有严重椒盐噪声的医疗红外热图,标记图像等级为4。
医疗红外热图质量回归预测模型训练采用SVM软件LIBSVM工具[10]。SVM分类器训练效果图如图4所示,不同形状的标识代表不同噪声以及不同DMOS值的数据,曲线为SVM分类器的分类表现。假设把图4中数据集看成离散点集,SVM的分类表现基本贴合离散点集的拟合曲线路径,其评价效果与主观感受大体吻合。SVM分类器的训练准确率和测试准确率如表4所示。
图3 DMOS评分示例
图4 SVM分类器训练效果图
表4 训练与测试准确率
由表4可知,此方法能较好地对医疗红外热图质量进行分类。
图5(c)、图5(d)分别为图5(a)、图5(b)的垂直灰度投影。对比图5(c)、图5(d)可以看出:目标医疗红外热图的垂直灰度投影分布呈近似正态分布,中间位置拥有较高的灰度值,两端灰度值较低;干扰图像的垂直灰度投影分布较为平均。
图5 灰度垂直投影实验结果
部分医疗红外热图目标区域的前景提取效果图如图6所示。从人体不同角度拍摄的医疗红外热图对应的前景连通区域占比范围如表5所示。
表5 本文方法的医疗红外热图占比范围
由表5可知,各分类占比值满足表2医疗红外热图的连通区域占比范围。
本文分别从噪声、图像特性、专业度3个维度对医疗红外热图进行质量评价,并给出数据改进策略。经实验验证,此方法有效可行,为医疗红外热图质量评价以及数据改进提供参考依据。
[1] 涂仕奎,杨杰,连勇,等.关于智能医疗研究与发展的思考[J].科学,2017,69(3):9-11.
[2] Narita N. Method for the subjective assessment of the quality of television picture.[J]. CCIR Recommended 500.Terebijon Gakkaishi (Journal of the Institute of Television Engineers of Japan), 1993,47(7):979-982.
[3] 郑欣.红外图像无参考图评价方法及应用研究[D].成都:电子科技大学,2015.
[4] 刘扬东,王璐,李栋.针对检疫物的CT图像着色和自动识别方法研究[J].自动化与信息工程,2019,40(2):20-24.
[5] 于虹,甄彤.图像去噪经典算法研究[J].信息与电脑(理论版),2020,32(14):66-67.
[6] 马悦.基于深度学习的低照度图像增强方法[J].信息技术,2021(1):85-89.
[7] GUO Yinan, ZHANG Zirui, TANG Fengzhen. Feature selection with kernelized multi-class support vector machine[J]. Pattern Recognition,2021,117(5324):107988.
[8] 汪启伟.图像直方图特征及其应用研究[D].合肥:中国科学技术大学,2014.
[9] 马敬奇,卢亚,李柳琼,等.基于Canny算子和改进型Hough变换的边缘定位方法[J].自动化与信息工程,2017,38(3):32-36.
[10] 颜伟超.基于LIBSVM的简单图形识别研究与实现[J].电子技术,2020,49(1):44-46.
A Multi-dimensional Quality Evaluation Method of Medical Infrared Image and Its Improvement Strategy
Tang Guangfa1Li Caiyun2Zhao Jingjing2Xu Xiaoan3Lu Zichen1
(1.Cloud Computing Center Chinese Academy of Sciences, Dongguan 523000, China 2.Chinese Medicine Hospital of Dongguan, Dongguan 523000, China 3.Guangdong Polytechnic Normal University, Dongguan 510665, China)
Aiming at the problems of noise, image characteristic defects and professional defects in medical infrared image, a multi-dimensional quality evaluation method of medical infrared image and its improvement strategy are proposed. The experimental results show that the quality index of medical infrared image has been effectively quantified, and the improvement strategy proposed based on this quantitative index can meet the needs of intelligent screening of data quality.
infrared image; image quality evaluate; improvement strategy; image processing
唐广发,男,1988年生,硕士研究生,工程师,主要研究方向:人工智能与机器视觉。
李彩云,女,1978年生,本科,副主任医师,主要研究方向:耳鼻喉临床医学。
招晶晶,女,1984年生,本科,中医师,主要研究方向:红外临床医学。
许晓安,男,1974年生,硕士研究生,副教授,主要研究方向:计算机应用。
卢子忱(通信作者),男,1969年生,硕士研究生,高级工程师,主要研究方向:红外医学与大数据。E-mail:luzichen@casc.ac.cn
基金项目:国家重点研发计划重点专项项目(2018YFC1311900);东莞市社会科技发展重点项目(2020507102159)。
TP391
A
1674-2605(2021)05-0010-06
10.3969/j.issn.1674-2605.2021.05.010
我们致力于保护作者版权,注重分享,被刊用文章因无法核实真实出处,未能及时与作者取得联系,或有版权异议的,请联系管理员,我们会立即处理! 部分文章是来自各大过期杂志,内容仅供学习参考,不准确地方联系删除处理!