非凡起点··最新:搞医学影像,为什么都青睐于CPU?
医学影像,越来越需要AI的帮助了。
根据数据统计,目前我国医学影像数据年增速在30%,但影像科医生年增速却只有4%,医生面临较大的工作压力。
那么,AI医学影像市场发展得如何呢?
AI影像行业,是人工智能在医疗领域里面探索最久的赛道之一,近年来人工智能辅助诊断三类证的获批数量持续增长,整个人工智能医学影像市场预计会在4年左右的时间突破百亿,保持高增长。参考亿欧智库发布的《2023年中国人工智能医学影像产品生态路线研究报告》,2023年我国AI医学影像市场规模为24亿元,2030年将达到 137.4亿元,年复合增长率为33.8%。
虽然有了AI帮忙,能提升诊疗效率、改善患者就医体验,但同时也带来一个问题:
医院对于医学影像系统的花费越来越高了,患者看病的成本也大幅提高。
所以在这个技术飞速进步的时代,医院不是简单采用新技术就能造福患者的,也要综合考虑投入产出,才能关怀到每个病人。
在这样的背景下,医学影像系统如何在满足功能、性能需求的同时降低总体拥有成本 (TCO),就成了关键问题。
以东软智慧医学影像信息系统PACS/RIS为例,该系统提供了覆盖检查预约、到诊排队、用药管理、检查管理、影像诊断等在内的一体融合全医学影像管理能力,可辅助医生更好地开展工作。东软在新一代的PACS/RIS产品中,就采用了基于CPU的方案运行三维可视化、AI推理等工作负载。
在三维可视化加持下,融合影像分析等技术,让医务人员通过旋转、缩放、分割、图像增强等操作,从多角度清晰了解到医学影像中各结构之间的空间位置关系,在疾病诊断的可视化、术前评估、手术规划、手术实时指导等方面发挥重要价值。
要知道三维可视化、AI推理都是非常吃硬件性能的,好在经过指令集、软件等方面做性能优化后,东软将PACS/RIS系统的三维可视化效率提升达2.45倍,AI推理性能提升高达8.49倍,并有效地控制了成本。
到这里看似圆满结局了,但其实过程中还有更多的细节更值得关注和借鉴,比如系统性能是如何优化提升上去的,CPU又为什么是破局的关键?
##性能如何搞上去?
东软集团相信大家并不陌生,作为中国第一家上市软件公司,在医疗健康领域已深耕多年。
这次他们之所以选择英特尔当合作伙伴,正是因为在三维可视化和AI推理这两大性能杀手面前,第五代英特尔® 至强® 可扩展处理器拥有两大法宝:
OpenMP与SSE4(Streaming SIMD Extensions 4)指令集,和英特尔® AMX加速器。
首先来看三维可视化部分。
东软主要采用了体渲染(Volume Rendering)技术,通过OpenMP与SSE4指令集支持光线合成的实现。
SSE4指令集不仅扩展了Intel® 64指令集架构,还加入了图形、视频编码及处理、三维成像等方面的指令,使涉及音频、图像和数据压缩算法的应用程序性能大幅提升。
为了找出执行三维可视化任务时,其产品在部分应用中性能不足的瓶颈所在,东软使用了英特尔提供的VTune™ Profiler工具,最终确定了瓶颈函数SafeGradz。该函数主要利用SSE4指令集进行三线性插值,从而实现光线上点的梯度计算。通过对该函数的代码进行优化,东软成功提升了三维可视化应用的性能。
在不同代英特尔® 至强® 可扩展处理器上进行测试,结果显示,在处理器开通4并发8线程时,第五代英特尔® 至强® 铂金8592+处理器的三维重建效率,相比第二代的英特尔® 至强® 银牌4210R处理器提升达2.45倍,让三维影像的交互更加流畅顺滑。
图注:PACS/RIS 系统的三维重建应用运行效率比较
值得注意的是,第五代英特尔® 至强® 铂金8592+的主频为1.90GHz,比第二代英特尔® 至强® 银牌4210R的2.40GHz主频还要低。
更进一步说明了,性能提升靠的不是主频提升,而是靠适合工作负载的指令集和各种优化工作。
接下来看AI推理部分。
东软借助处理器内置的英特尔® AMX(高级矩阵扩展)技术,让CPU也能轻松驾驭深度学习任务。
英特尔® AMX针对广泛的硬件和软件进行了优化,在前代VNNI和BF16技术的基础上,进一步增强了矩阵计算能力,最大限度地利用计算资源,改善高速缓存利用率,避免潜在的带宽瓶颈。
东软在第二代/第四代/第五代英特尔® 至强® 可扩展处理器上,测试了不同参数规模的AI模型在同步和异步模式下的推理表现。
测试数据显示,对于参数量为31,185,568的较大模型,在BF16精度和异步模式下,第五代英特尔® 至强® 铂金8592+处理器相比第二代英特尔® 至强® 银牌4210R处理器,推理性能提升高达8.49倍。这意味着AI辅助诊断能以更快的速度为医生提供洞见。
图注:BF16 精度下的异步推理性能比较
之所以选择第五代英特尔® 至强® 可扩展处理器,除了其本身性能够强之外,还有一些额外的好处。
比如辅以英特尔提供的OpenVINO™ 工具套件优化和部署各类模型,还可跨英特尔® 硬件扩展计算机视觉和非视觉工作负载,从而大幅提高性能,达到软硬协同的效果。
又比如第五代至强® 与上一代产品在软件和平台上兼容,因此在部署新系统时可以大大减少测试和验证工作。
……
在减少测试和验证这里,其实也起到一些节省成本的效果了。
不过在省钱这件事上,除了与具体技术优化相关,还有更多行业经验可以分享。
##成本怎么打下来
其实医疗行业在选择硬件这件事上,CPU早已成为各大玩家们眼中的“香饽饽”。
原因也是很简单,GPU固然在性能方面存在一定的优势,但“硬伤”也是比较明显,那便是成本过高。
并且从宏观角度来看,大模型的火热确实催动了GPU需求的激增,在训练阶段尤甚;但现如今到了以推理为主的阶段,如何能让AI“快好省”地用起来成为了关键点。在部署时盲目堆GPU不仅可能会造成算力过剩,出现“大炮打蚊子”的现象,更是会导致成本的“水涨船高”。
而诸如第五代英特尔® 至强® 这样的高端CPU,不仅能够很好地跟上性能的脚步,在成本的控制方面也是给出了满足成本条件的更加可行、更符合实际的方案。
一言蔽之,高性价比才是关键中的关键。
其次,CPU也算找准了“赛道”——部分医疗场景的AI推理具备批处理特性,对AI推理时延性能不敏感,更适合采用CPU进行推理。
具体到性能方面,第五代英特尔® 至强® 的“打开方式”是这样的:
●整体性能提升:21%
●推理性能提升:42%
●内存速度提升:16%
●三级缓存提升:2.7倍
●每瓦性能提升:10倍
也正因如此,第五代英特尔® 至强® 在处理多样化的任务负载时,可以显著提升每瓦特性能,尤其在人工智能、数据中心管理、网络操作和科学计算领域,而且还能显著降低总体拥有成本(TCO)。
而这也还仅是东软等医疗行业选择CPU的原因之一,广泛的兼容性和成熟的技术也是不可忽视的。
众所周知,CPU技术的发展相对来说较为成熟,几乎所有软件应用和操作系统都能在CPU上良好运行。
而在医疗行业中,存在大量基于传统架构开发的软件,这些软件通常设计为在标准的CPU上运行。因此,使用CPU可以确保与现有系统和软件的广泛兼容性。
其次,CPU易于维护和升级也是重要的一点,而GPU在这方面会显得更为复杂。医疗行业依赖于稳定运行的系统来保证服务的连续性,因此更倾向于选择维护简便、升级路径明确的硬件解决方案。
加之CPU早已在医疗行业上岗,广泛用于电子病历系统、医院资源规划系统等,培养出成熟的技术团队,也建立了完善的采购流程。
因此,为什么医疗行业青睐于CPU、为什么越来越多的人会选择CPU做AI推理,也就不难理解了。
在这一点上,或许也正应了英特尔CEO帕特·基辛格曾经表达过的观点:
>从经济学的角度看推理应用的话,很多客户并不需要高端的GPU设备,因为它成本太高,耗电太多,并且需要构建新的技术架构,以及新的IT设施,一切都是全新的挑战。
>如果我能在标准版的英特尔芯片上运行AI应用且满足需求,就不会出现这些问题。
##能用起来才是硬道理
如果说东软选择第五代英特尔® 至强® 这件事是一个“点”,它其实能够带出来的是一个更大的“面”——
技术,需得广泛用起来,这才是硬道理。
诚然现在是以大模型为主流的时代,但回看2023年至今的发展,其实也是在印证着这一点。
起初大模型的发展先是掀起了以训练为主的百模大战,而后又迅速转向了推理阶段,也就是技术要落地。
到了今年,这一趋势也是越发明显,不论是OpenAI、谷歌等巨头,还是乘AIGC东风起家的初创,都在发力于如何让AIGC更好地用起来。
一言蔽之,现在已然是应用为王的阶段。
而要让前沿技术做到真正落地,就必须要在性能和成本之间做好平衡;或许这也正是近期国内大厂们掀起疯狂“价格战”的原因之一。
但无论AI如何发展,算力,永远是绕不开的一个话题。
因此,站在现在这个“AI一日,人间一年”的时代,纵使技术日新月异,要想让它们广泛被用起来,性能和成本之间的这杆秤,需是得从最底层的基础设施抓起。
而东软和英特尔的合作模式,是一个可以值得借鉴的“范本”了。