以下内容均为个人理解,如有错误,欢迎指正。
论文链接:地址

UNet-3D和UNet-2D的基本结构是差不多的,分成小模块来看,也是有连续两次卷积,下采样,上采样,特征融合以及最后一次卷积。
UNet-2D可参考:VGG16+UNet个人理解及代码实现(Pytorch)
不同的是,UNet-3D的卷积是三维的卷积。
关于2D卷积和3D卷积的区别可参见这篇文章:链接
需要注意的是,UNet-3D的连续两次卷积操作中,第一次卷积和第二次卷积的输出通道数是不同的(UNet-2D的连续两次卷积操作的输出通道数是相同的)。
单从图示的网络结构来看,UNet-3D的网络深度为4,2D的网络深度为5,这个深度可以改变。
理清楚这些之后就可以着手写代码实现网络结构了。
使用PyTorch实现
import torch
import torch.nn as nn
from torch.nn import functional as F
class DoubleConv(nn.Module):
def __init__(self, in_channels, out_channels, bath_normal=False):
super(DoubleConv, self).__init__()
channels = out_channels / 2
if in_channels > out_channels:
channels = in_channels / 2
layers = [
# in_channels:输入通道数
# channels:输出通道数
# kernel_size:卷积核大小
# stride:步长
# padding:边缘填充
nn.Conv3d(in_channels, channels, kernel_size=3, stride=1, padding=0),
nn.ReLU(True),
nn.Conv3d(channels, out_channels, kernel_size=3, stride=1, padding=0),
nn.ReLU(True)
]
if bath_normal: # 如果要添加BN层
layers.insert(1, nn.BatchNorm3d(channels))
layers.insert(len(layers) - 1, nn.BatchNorm3d(out_channels))
# 构造序列器
self.double_conv = nn.Sequential(*layers)
def forward(self, x):
return self.double_conv(x)
class DownSampling(nn.Module):
def __init__(self, in_channels, out_channels, batch_normal=False):
super(DownSampling, self).__init__()
self.maxpool_to_conv = nn.Sequential(
nn.MaxPool3d(kernel_size=2, stride=2),
DoubleConv(in_channels, out_channels, batch_normal)
)
def forward(self, x):
return self.maxpool_to_conv(x)
class UpSampling(nn.Module):
def __init__(self, in_channels, out_channels, batch_normal=False, bilinear=True):
super(UpSampling, self).__init__()
if bilinear:
# 采用双线性插值的方法进行上采样
self.up = nn.Upsample(scale_factor=2, mode='bilinear', align_corners=True)
else:
# 采用反卷积进行上采样
self.up = nn.ConvTranspose3d(in_channels, in_channels // 2, kernel_size=2, stride=2)
self.conv = DoubleConv(in_channels + in_channels / 2, out_channels, batch_normal)
# inputs1:上采样的数据(对应图中黄色箭头传来的数据)
# inputs2:特征融合的数据(对应图中绿色箭头传来的数据)
def forward(self, inputs1, inputs2):
# 进行一次up操作
inputs1 = self.up(inputs1)
# 进行特征融合
outputs = torch.cat([inputs1, inputs2], dim=1)
outputs = self.conv(outputs)
return outputs
class LastConv(nn.Module):
def __init__(self, in_channels, out_channels ):
super(LastConv, self).__init__()
self.conv = nn.Conv3d(in_channels, out_channels, kernel_size=1 )
def forward(self, x):
return self.conv(x)
class UNet3D(nn.Module):
def __init__(self, in_channels, num_classes=2, batch_normal=False, bilinear=True):
super(UNet3D, self).__init__()
self.in_channels = in_channels
self.batch_normal = batch_normal
self.bilinear = bilinear
self.inputs = DoubleConv(in_channels, 64, self.batch_normal)
self.down_1 = DownSampling(64, 128, self.batch_normal)
self.down_2 = DownSampling(128, 256, self.batch_normal)
self.down_3 = DownSampling(256, 512, self.batch_normal)
self.up_1 = UpSampling(512, 256, self.batch_normal, self.bilinear)
self.up_2 = UpSampling(256, 128, self.batch_normal, self.bilinear)
self.up_3 = UpSampling(128, 64, self.batch_normal, self.bilinear)
self.outputs = LastConv(64, num_classes)
def forward(self, x):
# down 部分
x1 = self.inputs(x)
x2 = self.down_1(x1)
x3 = self.down_2(x2)
x4 = self.down_3(x3)
# up部分
x5 = self.up_1(x4, x3)
x6 = self.up_2(x5, x2)
x7 = self.up_3(x6, x1)
x = self.outputs(x7)
return x
最近学习UNet-3D的内容时,我觉得网络上现有的学习资料不是很多,没有像UNet-2D的学习资料那么多,在这里略总结一下可以参考的学习资料:
1.视频:【中文字幕】3D-图像分割超详细教程U-Net
这是B站上一位up主上传的油管上 的一条视频,有中文字幕,主要讲解的是3D格式的数据,以及如何实现3D格式的图像的分割,也介绍了依赖的库等,视频中的博主使用notebook做的项目,他也演示了整个项目的实现和运行的效果。
2.视频:医学分割项目:自己写的2D、3D医学分割项目
也是B站上的视频,是一位up主介绍的自己做的2D和3D的分割项目,视频主要介绍的是如何使用代码(视频下方有代码的github链接),我觉得可以参考up主的代码是怎么实现的,参考他的数据处理方式。
3.博文:3D-UNet
分析了论文中的细节,介绍了3维数据以及3D卷积等
4.博文+代码实现
3D-UNet的Pytorch实现
pytorch实战-Unet3d(LiTS)
3D U-Net脑胶质瘤分割BraTs + Pytorch实现
3D U-Net: Learning Dense Volumetric Segmentation from Sparse Annotation 论文解读与程序复现
【MICCAI2018论文翻译】使用集成的3D U-Net分割脑肿瘤和放射特征预测总生存率
对于我个人来说,想要快速学习的话就是先看论文理解原理,然后直接看代码,参考一些条理清晰的项目代码,理解该项目的流程,学习代码是如何实现的。
我觉得对于我个人来说,数据处理方面有点儿难,数据处理也是花时间最多的一步,怎么处理数据,怎么把处理好的数据输入到网络中训练,等等。
如何在buildr项目中使用Ruby?我在很多不同的项目中使用过Ruby、JRuby、Java和Clojure。我目前正在使用我的标准Ruby开发一个模拟应用程序,我想尝试使用Clojure后端(我确实喜欢功能代码)以及JRubygui和测试套件。我还可以看到在未来的不同项目中使用Scala作为后端。我想我要为我的项目尝试一下buildr(http://buildr.apache.org/),但我注意到buildr似乎没有设置为在项目中使用JRuby代码本身!这看起来有点傻,因为该工具旨在统一通用的JVM语言并且是在ruby中构建的。除了将输出的jar包含在一个独特的、仅限ruby
在rails源中:https://github.com/rails/rails/blob/master/activesupport/lib/active_support/lazy_load_hooks.rb可以看到以下内容@load_hooks=Hash.new{|h,k|h[k]=[]}在IRB中,它只是初始化一个空哈希。和做有什么区别@load_hooks=Hash.new 最佳答案 查看rubydocumentationforHashnew→new_hashclicktotogglesourcenew(obj)→new_has
我有一个用户工厂。我希望默认情况下确认用户。但是鉴于unconfirmed特征,我不希望它们被确认。虽然我有一个基于实现细节而不是抽象的工作实现,但我想知道如何正确地做到这一点。factory:userdoafter(:create)do|user,evaluator|#unwantedimplementationdetailshereunlessFactoryGirl.factories[:user].defined_traits.map(&:name).include?(:unconfirmed)user.confirm!endendtrait:unconfirmeddoenden
我的主要目标是能够完全理解我正在使用的库/gem。我尝试在Github上从头到尾阅读源代码,但这真的很难。我认为更有趣、更温和的踏脚石就是在使用时阅读每个库/gem方法的源代码。例如,我想知道RubyonRails中的redirect_to方法是如何工作的:如何查找redirect_to方法的源代码?我知道在pry中我可以执行类似show-methodmethod的操作,但我如何才能对Rails框架中的方法执行此操作?您对我如何更好地理解Gem及其API有什么建议吗?仅仅阅读源代码似乎真的很难,尤其是对于框架。谢谢! 最佳答案 Ru
我的假设是moduleAmoduleBendend和moduleA::Bend是一样的。我能够从thisblog找到解决方案,thisSOthread和andthisSOthread.为什么以及什么时候应该更喜欢紧凑语法A::B而不是另一个,因为它显然有一个缺点?我有一种直觉,它可能与性能有关,因为在更多命名空间中查找常量需要更多计算。但是我无法通过对普通类进行基准测试来验证这一点。 最佳答案 这两种写作方法经常被混淆。首先要说的是,据我所知,没有可衡量的性能差异。(在下面的书面示例中不断查找)最明显的区别,可能也是最著名的,是你的
几个月前,我读了一篇关于rubygem的博客文章,它可以通过阅读代码本身来确定编程语言。对于我的生活,我不记得博客或gem的名称。谷歌搜索“ruby编程语言猜测”及其变体也无济于事。有人碰巧知道相关gem的名称吗? 最佳答案 是这个吗:http://github.com/chrislo/sourceclassifier/tree/master 关于ruby-寻找通过阅读代码确定编程语言的rubygem?,我们在StackOverflow上找到一个类似的问题:
我目前正在使用以下方法获取页面的源代码:Net::HTTP.get(URI.parse(page.url))我还想获取HTTP状态,而无需发出第二个请求。有没有办法用另一种方法做到这一点?我一直在查看文档,但似乎找不到我要找的东西。 最佳答案 在我看来,除非您需要一些真正的低级访问或控制,否则最好使用Ruby的内置Open::URI模块:require'open-uri'io=open('http://www.example.org/')#=>#body=io.read[0,50]#=>"["200","OK"]io.base_ur
无论您是想搭建桌面端、WEB端或者移动端APP应用,HOOPSPlatform组件都可以为您提供弹性的3D集成架构,同时,由工业领域3D技术专家组成的HOOPS技术团队也能为您提供技术支持服务。如果您的客户期望有一种在多个平台(桌面/WEB/APP,而且某些客户端是“瘦”客户端)快速、方便地将数据接入到3D应用系统的解决方案,并且当访问数据时,在各个平台上的性能和用户体验保持一致,HOOPSPlatform将帮助您完成。利用HOOPSPlatform,您可以开发在任何环境下的3D基础应用架构。HOOPSPlatform可以帮您打造3D创新型产品,HOOPSSDK包含的技术有:快速且准确的CAD
前言作为一名程序员,自己的本质工作就是做程序开发,那么程序开发的时候最直接的体现就是代码,检验一个程序员技术水平的一个核心环节就是开发时候的代码能力。众所周知,程序开发的水平提升是一个循序渐进的过程,每一位程序员都是从“菜鸟”变成“大神”的,所以程序员在程序开发过程中的代码能力也是根据平时开发中的业务实践来积累和提升的。提高代码能力核心要素程序员要想提高自身代码能力,尤其是新晋程序员的代码能力有很大的提升空间的时候,需要针对性的去提高自己的代码能力。提高代码能力其实有几个比较关键的点,只要把握住这些方面,就能很好的、快速的提高自己的一部分代码能力。1、多去阅读开源项目,如有机会可以亲自参与开源
华为OD机试题本篇题目:明明的随机数题目输入描述输出描述:示例1输入输出说明代码编写思路最近更新的博客华为od2023|什么是华为od,od薪资待遇,od机试题清单华为OD机试真题大全,用Python解华为机试题|机试宝典【华为OD机试】全流程解析+经验分享,题型分享,防作弊指南华为o