0.8 版本的新特性#

  • 可微分神经网络拓扑搜索

  • 用于数字病理 WSI 分析的多实例学习

  • 自监督表示学习

  • monai.transforms 的主要可用性改进

用于数字病理 WSI 分析的多实例学习#

对于数字病理全玻片图像 (WSI) 的分类,MONAI 引入了新的变换和网络模块用于多实例学习。其中包括自注意力 transformer 块,用于在训练期间明确考虑实例(图像块)之间的依赖关系。欲了解更多详情,请查看多实例学习教程

multi-instance

自监督表示学习#

MONAI 在此里程碑版本中开始探索自监督表示学习。Vision Transformer 已得到扩展,可以通过各种数据增强和正则化对比损失从自监督重建任务中学习。预训练主干网络的权重可用于增强新的下游深度学习任务的性能。

该教程展示了如何使用无标签数据通过自监督任务生成一组好的预训练权重,然后使用这些预训练权重在基于 transformer 的 UNETR 上执行全监督体积分割任务的微调。

self-supervised

Major usability improvements in monai.transforms#

monai.transforms 在 0.8 版本中现在更加灵活易用。

  • 改进了输入类型处理和后端 API,以尽可能支持 NumPy 和 PyTorch。

  • 文档中添加了可视化示例,以说明各种图像处理的效果。

  • 提供了新的可视化工具并进行了增强,以便通过可视化体积图像输入、分割图和中间特征图等来快速进行模型定性评估。TensorBoard 工具、matshow3dblend_images 的可视化教程现已提供。