README.md 4.07 KB
Newer Older
chenzk's avatar
v1.0  
chenzk committed
1
2
3
4
5
6
7
8
9
# U-KAN
U-KAN精度高于Mamba、Transformer构建的Unet模型,本算法基于U-KAN进一步优化精度。
## 论文
`U-KAN Makes Strong Backbone for Medical Image Segmentation and Generation`
- https://arxiv.org/pdf/2406.02918

## 模型结构
KAN已成为MLP的一个有前景的替代方案,U-KAN将新兴算法KAN的优势融入到成熟的U-Net Pipeline 中提升精度,同时增加可解释性,本算法进一步引入部分QKV注意力、KAN ffn等来增强模型的特征提取能力,弥补KAN的不足。
<div align=center>
chenzk's avatar
v1.0.1  
chenzk committed
10
    <img src="./Seg_UKAN/doc/structure.png"/>
chenzk's avatar
v1.0  
chenzk committed
11
12
13
14
15
</div>

## 算法原理
U-KAN与其它图像分割算法一样,将图片数据送入模型后,依次通过预处理、特征提取,最后经过卷积预测出像素类别实现分割。
<div align=center>
chenzk's avatar
v1.0.1  
chenzk committed
16
    <img src="./Seg_UKAN/doc/algorithm.png"/>
chenzk's avatar
v1.0  
chenzk committed
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
</div>

## 环境配置
```
mv U-KAN-optimize_pytorch U-KAN # 去框架名后缀
# if torch>2.0, modify /usr/local/lib/python3.10/site-packages/timm/models/layers/helpers.py: from torch._six import container_abcs -> import collections.abc as container_abcs 
```

### Docker(方法一)
```
docker pull image.sourcefind.cn:5000/dcu/admin/base/pytorch:2.1.0-ubuntu20.04-dtk24.04.1-py3.10 
# <your IMAGE ID>为以上拉取的docker的镜像ID替换,本镜像为:a4dd5be0ca23
docker run -it --shm-size=32G -v $PWD/U-KAN:/home/U-KAN -v /opt/hyhal:/opt/hyhal:ro --privileged=true --device=/dev/kfd --device=/dev/dri/ --group-add video --name ukan <your IMAGE ID> bash
cd /home/U-KAN
pip install -r Seg_UKAN/requirements.txt # requirements.txt
```
### Dockerfile(方法二)
```
cd U-KAN/docker
docker build --no-cache -t ukan:latest .
docker run --shm-size=32G --name ukan -v /opt/hyhal:/opt/hyhal:ro --privileged=true --device=/dev/kfd --device=/dev/dri/ --group-add video -v $PWD/../../U-KAN:/home/U-KAN -it ukan bash
# 若遇到Dockerfile启动的方式安装环境需要长时间等待,可注释掉里面的pip安装,启动容器后再安装python库:pip install -r Seg_UKAN/requirements.txt。
```
### Anaconda(方法三)
1、关于本项目DCU显卡所需的特殊深度学习库可从光合开发者社区下载安装:
chenzk's avatar
chenzk committed
42
- https://developer.sourcefind.cn/tool/
chenzk's avatar
v1.0  
chenzk committed
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
```
DTK驱动:dtk24.04.1
python:python3.10
torch:2.1.0
torchvision:0.16.0
```

`Tips:以上dtk驱动、python、torch等DCU相关工具版本需要严格一一对应。`

2、其它非特殊库参照requirements.txt安装
```
pip install -r Seg_UKAN/requirements.txt # requirements.txt
```

## 数据集
`BUSI(Breast Ultrasound Image)`
- https://www.kaggle.com/datasets/aryashah2k/breast-ultrasound-images-dataset

本项目无需下载原始数据集,采用U-KAN作者提供的预处理数据[pre-processed dataset](https://mycuhk-my.sharepoint.com/:f:/g/personal/1155206760_link_cuhk_edu_hk/ErDlT-t0WoBNlKhBlbYfReYB-iviSCmkNRb1GqZ90oYjJA?e=hrPNWD) 即可。
chenzk's avatar
v1.0.4  
chenzk committed
62
项目中已包含[`busi`](./Seg_UKAN/inputs/busi.zip),解压即可使用,训练数据目录结构如下:
chenzk's avatar
v1.0  
chenzk committed
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
```
Seg_UKAN
├── inputs
│   ├── busi
│     ├── images
│           ├── malignant (1).png
|           ├── ...
|     ├── masks
│        ├── 0
│           ├── malignant (1)_mask.png
|           ├── ...
```

## 训练
### 单机单卡
```
# 以公开数据集busi为基础进行算法效果优化
cd Seg_UKAN
python train.py --arch UKAN --dataset busi --input_w 256 --input_h 256 --name busi_UKAN  --data_dir ./inputs
```
chenzk's avatar
v1.0.1  
chenzk committed
83
更多资料可参考源项目的[`README_origin`](./README_origin.md)
chenzk's avatar
v1.0  
chenzk committed
84
85
86

## result
<div align=center>
chenzk's avatar
v1.0.1  
chenzk committed
87
    <img src="./Seg_UKAN/doc/seg.png"/>
chenzk's avatar
v1.0  
chenzk committed
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
</div>

### 精度
数据集:busi,max epoch为400,训练框架:pytorch。

|    算法     |  Dice  |
|:---------:|:------:|
| U-KAN  | 78.75% |
| U-KAN-optimize | 79.64% |

## 应用场景
### 算法类别
`图像分割`
### 热点应用行业
`医疗,电商,制造,能源`
## 源码仓库及问题反馈
chenzk's avatar
chenzk committed
104
- http://developer.sourcefind.cn/codes/modelzoo/u-kan-optimize_pytorch.git
chenzk's avatar
v1.0  
chenzk committed
105
106
107
108
## 参考资料
- https://github.com/CUHK-AIM-Group/U-KAN.git
- https://github.com/KindXiaoming/pykan.git
- https://kindxiaoming.github.io/pykan/