首页 > 其他分享 >AI医学影像三大技术实战、优劣、经验及发展

AI医学影像三大技术实战、优劣、经验及发展

时间:2023-08-01 17:00:59浏览次数:38  
标签:医疗 AI 图像 网络 FCN 三大 应用 医学影像 影像


这是AI掘志的第二个讲座,美女CEO

简介如下:




AI医学影像三大技术实战、优劣、经验及发展_AI医学影像


授课目录:1.医疗影像AI的发展状况以及我们可以怎么做


2.医疗影像应用的深度学习解决方案

3.分类网络在医疗影像中的应用及拓展

4图像切割在医疗影像中的应用及拓展

----------------------------------------------------------------------------------------------------------

1.

AI医学影像三大技术实战、优劣、经验及发展_AI医学影像_02

这部分就是概括一下AI的作用


2.医疗影像应用的深度学习解决方案

复习:医疗影像类型

光学断层相干检查,主要用于眼科的眼底病的检查)

    2.超声检测(实时查看,不利于图像的存储)

    3.病理检测(图片超大)

    4.内窥镜检测

    5.高倍拍照:眼底、皮肤

举例:黄斑的分类

AI医学影像三大技术实战、优劣、经验及发展_数据_03


应用深度

AI医学影像三大技术实战、优劣、经验及发展_AI医学影像_04

3.分类网络在医疗影像中的应用及拓展

主要包括分类网络

AI医学影像三大技术实战、优劣、经验及发展_深度学习_05

AI医学影像三大技术实战、优劣、经验及发展_AI医学影像_06

我们可以在上述网络中了解并且实现。

这部分讲解了三个案例

    1.   眼底等级判读

        谷歌的眼底分类网络 

AI医学影像三大技术实战、优劣、经验及发展_AI医学影像_07

训练这个网络 使用的数据量非常大,包括128000张图像,其中,每一张图像都得到了54位眼科医生中3到7位医生的评估。这同样也会产生一个问题,就是医生的不一致程度高。如下图所示:

AI医学影像三大技术实战、优劣、经验及发展_AI医学影像_08

不同的颜色块代表疾病的不同程度,如果所有医生判断的一致性越高,那么一行的数据就越相同。

这个例子所用的数据量很大,可以直接训练。但如果数据集稍微小一点,可以用迁移学习。

基于Resnet和InceptionV3均可以迁移+Finetune

训练技巧:根据样本的复杂度选择锁层数量

2.X光及关注区域的获取

CAM网络(class activation mapping)可以用在无监督的情况下判断影像分类的区域。

AI医学影像三大技术实战、优劣、经验及发展_深度学习_09

    方案要点:构成原理类似FCN网络,优势在于无监督,但在结论不够精确

    训练:需要预训练

    前提:需要物体相对明确。

如果数据是直接从医院拿过来的,那么多半是只有分类标签,而没有其他的标注,这种时候就可以尝试CAM方法。

3.sliding window病理切片的区域判读

AI医学影像三大技术实战、优劣、经验及发展_AI医学影像_10

 病理切片的特点:

    1.大尺寸,确保足量够切

    2.相似性,不太具有contexture(上下文关系)

AI医学影像三大技术实战、优劣、经验及发展_深度学习_11

应用方案:sliding window+分类网络

实操要点:数据处理、multi-scale、置信区间、后期降噪

AI医学影像三大技术实战、优劣、经验及发展_数据_12


4图像切割在医疗影像中的应用及拓展

主流做法:编码解码结构

    孔洞卷积(事实证明很有用)

    条件随机场

常用的网络如:

AI医学影像三大技术实战、优劣、经验及发展_AI医学影像_13

分割主流网络:unet(属于FCN网络)

是首个 应用于医学案例,也是深度学习用于图像切割早期重要论文。

最新进展:

 *大内核:解决FCN同时多个问题切分的问题

*PSPnet:整合全局信息

*MaskRCNN:整合物体识别的优势和方法

优缺点:适用于有明确边缘的组织和病灶;缺点是标记难拿,数量不足,病灶类别不平衡

应用案例:

案例一:标注FCN网络

AI医学影像三大技术实战、优劣、经验及发展_AI医学影像_14

论文;

AI医学影像三大技术实战、优劣、经验及发展_数据_15

优点:基于整图的学习识别、速度快;不足:局部特征提取精度不足,微小病灶难以识别

案例二:

切片+跨越式结构+FCN(肽积木)

GAN网络

适用于各类生成、转化、在医疗领域应用似乎有限,但比较火

医疗领域的应用场景:

图像切割:标记生成

增强样本:可多提供一些数据,强化结果等

切割案例:

AI医学影像三大技术实战、优劣、经验及发展_数据_16

合成病灶:生成假的肺结节

AI医学影像三大技术实战、优劣、经验及发展_解决方案_17


标签:医疗,AI,图像,网络,FCN,三大,应用,医学影像,影像
From: https://blog.51cto.com/u_16159492/6924572

相关文章

  • A Novel Noise Injection-based Training Scheme for Better Model Robustness
    郑重声明:原文参见标题,如有侵权,请联系作者,将会撤销发布!https://arxiv.org/abs/2302.10802......
  • LemurBrowser狐猴浏览器:支持插件扩展、内置免费AI工具的移动端浏览器
    如何选择一款合适的浏览器?在这个数字化时代,浏览器作为互联网的入口。然而,选择一款合适的浏览器却并不容易。注释:狐猴浏览器是浏览器新标签页插件Wetab提供的支持在移动端安装插件,内置免费AI工具助手的新一代移动端浏览器,像Infinity/Wetab一样简洁优雅好用的Tab浏览器。浏览......
  • AI飙车!亚马逊云科技Amazon DeepRacer大赛帮助学生快速get云技能
    亚马逊云科技AmazonDeepRacer比赛既是一场比拼速度和技术的游戏,也是一种学习人工智能的方式,参赛选手不仅能边玩边学,还有可能成长为技术大牛。而且,它可不只是一场让年轻人打call的比赛,更是亚马逊云科技与高校共建云人才生态的重头戏。不少才华横溢的年轻人,就通过这个比赛踏上了前沿......
  • 这是一篇水文!三大范式
    第一范式:要求保证数据表中的每一列都是原子的,不可再拆分。举个例子:我们可以将address列拆分成:省、市、区三列。那这里的address其实就不符合第一范式规范要求。第二范式:首先得满足第一范式。其次要求数据表中的每一个非关键属性列(普通列)都和主键唯一相关,而不是和主键的一部分相关......
  • Unity 将UnityWebRequest改为async/await异步
    花了一点时间,对UnityWebRequest进行了简单封装,使用起来更方便一些,顺便实现了post接口轮询、重试的功能usingSystem;usingSystem.Collections;usingSystem.Collections.Generic;usingSystem.Runtime.CompilerServices;usingSystem.Text;usingSystem.Threading.Tasks;......
  • 聊聊时下火热的 AIGC 与 Web3
    近期,AI已经开始影响到了音乐行业,在B站搜索“AI孙燕姿”,从流行歌曲到摇滚,从周杰伦到王力宏,没有AI孙燕姿驾驭不了的歌曲。有用户评论:“我感觉AI没把歌手干掉,先把翻唱干掉了。”AI走红“乐坛”的时间不足一个月,而AI绘画对设计师的影响可不止一个月。自从AIGC诞生以来......
  • "Your app contains unsafe cryptographic encryption patterns" - How I can get rid
      "Yourappcontainsunsafecryptographicencryptionpatterns"-HowIcangetridofthiswarning?AskQuestionAsked 2years,2monthsagoActive 2yearsagoViewed 5ktimes 7Fewdaysago,In"Pre-launchreportforAPK"inGooglePlayCo......
  • promise和async await的差别
    Promise是ES6引入的一种处理异步操作的机制。它可以表示一个异步操作的最终完成或失败,并在完成或失败后返回结果或错误信息。Async/await是ES8(ECMAScript2017)引入的一种基于Promise的语法糖,用于更简洁地处理异步操作。它可以让异步的代码看起来更像同步的代码,提供了更好......
  • 大连人工智能计算平台——华为昇腾AI平台——高性能计算HPC的pytorch环境的软件升级—
       aarch64架构CPU下Ubuntu系统环境源码编译pytorch-gpu-2.0.1版本X86架构CPU下Ubuntu系统环境源码编译pytorch-gpu-2.0.1版本如何拉取指定CPU架构并且指定ubuntu版本并且指定cuda和cudnn版本的docker镜像如何拉取指定CPU架构并且指定ubuntu版本并且指定cuda和cudnn版本......
  • 自己动手实现AI系统的设计思路
    我想自己实现一个AI系统,在此记录一下设计思路.训练算法:采用遗传进化算法.原因如下:我没有深厚的数学功底,不善长BP网络相关算法;而遗传算法比较容易理解和实现遗传算法对神经网络的结构没有要求,使得神经网络的能力潜力很大可扩展能力强,很容易实现并行计算神经......