README.md 3.31 KB
Newer Older
liucong's avatar
liucong committed
1
2
3
4
5
6
7
8
# Convolutional Networks for Biomedical Image Segmentation(U-Net)

## 模型介绍
语义分割(Semantic Segmentation)是图像处理和机器视觉一个重要分支。与分类任务不同,语义分割需要判断图像每个像素点的类别,进行精确分割。语义分割目前在自动驾驶、自动抠图、医疗影像等领域有着比较广泛的应用。其中,Unet模型是最常用、最简单的一种分割模型,它简单、高效、易懂、容易构建、可以从小数据集中训练,具有较好的分割效果。

## 模型结构
U-net模型整体为U型结构,主要分为三部分:下采样、上采样以及跳跃连接。首先,在左半部分进行编码阶段,通过卷积和下采样降低图像尺寸,提取一些浅层特征。其次,在右半部分进行解码阶段,通过卷积和上采样来获取一些深层次的特征。其中卷积采用无填充方式来保证结果都是基于没有缺失上下文特征得到的,因此每次经过卷积后,图像的大小会减小。最后,通过concat的方式,将编码阶段获得的feature map同解码阶段获得的feature map结合在一起,得到更加精细的细节,从而根据feature map进行预测分割。

9
## 构建安装
liucong's avatar
liucong committed
10

11
在光源可拉取推理的docker镜像,U-net模型推理的镜像如下: 
liucong's avatar
liucong committed
12

13
14
15
16
17
```python
docker pull image.sourcefind.cn:5000/dcu/admin/base/custom:ort1.14.0_migraphx3.0.0-dtk22.10.1
```

### 安装Opencv依赖
liucong's avatar
liucong committed
18
19

```python
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
cd <path_to_migraphx_samples>
sh ./3rdParty/InstallOpenCVDependences.sh
```

### 修改CMakeLists.txt

- 如果使用ubuntu系统,需要修改CMakeLists.txt中依赖库路径:
  将"${CMAKE_CURRENT_SOURCE_DIR}/depend/lib64/"修改为"${CMAKE_CURRENT_SOURCE_DIR}/depend/lib/"

- **MIGraphX2.3.0及以上版本需要c++17**


### 安装OpenCV并构建工程

```
rbuild build -d depend
```

### 设置环境变量

将依赖库依赖加入环境变量LD_LIBRARY_PATH,在~/.bashrc中添加如下语句:

**Centos**:

```
export LD_LIBRARY_PATH=<path_to_migraphx_samples>/depend/lib64/:$LD_LIBRARY_PATH
liucong's avatar
liucong committed
46
47
```

48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
**Ubuntu**:

```
export LD_LIBRARY_PATH=<path_to_migraphx_samples>/depend/lib/:$LD_LIBRARY_PATH
```

然后执行:

```
source ~/.bashrc
```

## 推理

下面介绍如何运行python代码和C++代码示例,具体推理代码解析,在Doc目录中有详细说明。

### python版本推理

1.参考《MIGraphX教程》中的安装方法安装MIGraphX并设置好PYTHONPATH

2.安装依赖:

```Python
# 进入migraphx samples工程根目录
cd <path_to_migraphx_samples> 

# 进入示例程序目录
cd Python/Segmentation

# 安装依赖
pip install -r requirements.txt
```

3.在Python/Segmentation目录下执行如下命令运行该示例程序:
liucong's avatar
liucong committed
82
83

```python
84
python Unet.py
liucong's avatar
liucong committed
85
86
```

87
输出结果为:
liucong's avatar
liucong committed
88

liucong's avatar
liucong committed
89
<img src="./Doc/Images/Unet_03.jpg" style="zoom:100%;" align=middle>
liucong's avatar
liucong committed
90

91
### C++版本推理
liucong's avatar
liucong committed
92

93
切换到build目录中,执行如下命令:
liucong's avatar
liucong committed
94
95

```python
96
97
98
99
100
101
102
103
cd ./build/
./MIGraphX_Samples
```

根据提示选择运行U-net模型的示例程序

```c++
./MIGraphX_Samples 0
liucong's avatar
liucong committed
104
105
```

106
会在当前目录中生成分割结果图像Result.jpg
liucong's avatar
liucong committed
107

liucong's avatar
liucong committed
108
<img src="./Doc/Images/Unet_02.jpg" style="zoom:100%;" align=middle>
liucong's avatar
liucong committed
109
110
111
112
113
114
115
116
117

## 历史版本

https://developer.hpccube.com/codes/modelzoo/unet_migraphx

## 参考资料

https://github.com/ROCmSoftwarePlatform/AMDMIGraphX/tree/develop/examples/vision/python_unet