README.md 3.47 KB
Newer Older
Pan Zezhong's avatar
Pan Zezhong committed
1
2
# InfiniCore

3
InfiniCore 是一个跨平台统一编程工具集,为不同芯片平台的功能(包括计算、运行时、通信等)提供统一 C 语言接口。目前支持的硬件和后端包括:
Pan Zezhong's avatar
Pan Zezhong committed
4

5
6
7
8
9
10
11
12
13
14
- CPU;
- CUDA
  - 英伟达 GPU;
  - 摩尔线程 GPU;
  - 天数智芯 GPU;
  - 沐曦 GPU;
  - 曙光 DCU;
- 华为昇腾 NPU;
- 寒武纪 MLU;
- 昆仑芯 XPU;
Pan Zezhong's avatar
Pan Zezhong committed
15

16
## 配置和使用
Pan Zezhong's avatar
Pan Zezhong committed
17

18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
### 软件依赖

- XMake编译器

  XMake配置选项(`XMAKE_CONFIG_FLAGS`)以及含义
  
  - `--omp=[y|n]` 是否使用OpenMP,默认开启
  - `--cpu=[y|n]` 是否编译CPU接口实现,默认开启
  - `--nv-gpu=[y|n]` 是否编译英伟达GPU接口实现
  - `--ascend-npu=[y|n]` 是否编译昇腾NPU接口实现
  - `--cambricon-mlu=[y|n]` 是否编译寒武纪MLU接口实现
  - `--metax-gpu=[y|n]` 是否编译沐曦GPU接口实现
  - `--moore-gpu=[y|n]` 是否编译摩尔线程GPU接口实现
  - `--sugon-dcu=[y|n]` 是否编译曙光DCU接口实现
  - `--kunlun-xpu=[y|n]` 是否编译昆仑XPU接口实现

34
35
### 一键安装

36
`script/` 目录中提供了 `install.py` 安装脚本。使用方式如下:
37
38
39
40

```shell
cd InfiniCore

41
python scripts/install.py [XMAKE_CONFIG_FLAGS]
42
43
44
45
```

### 手动安装

46
1. 项目配置
Pan Zezhong's avatar
Pan Zezhong committed
47

48
   - 查看当前配置
Pan Zezhong's avatar
Pan Zezhong committed
49

50
51
52
     ```shell
     xmake f -v
     ```
Pan Zezhong's avatar
Pan Zezhong committed
53

54
   - 配置 CPU(默认配置)
Pan Zezhong's avatar
Pan Zezhong committed
55

56
57
58
     ```shell
     xmake f -cv
     ```
Pan Zezhong's avatar
Pan Zezhong committed
59

60
   - 配置加速卡
Pan Zezhong's avatar
Pan Zezhong committed
61

62
63
64
65
     ```shell
     # 英伟达
     # 可以指定 CUDA 路径, 一般环境变量为 `CUDA_HOME` 或者 `CUDA_ROOT`
     xmake f --nv-gpu=true --cuda=$CUDA_HOME -cv
Pan Zezhong's avatar
Pan Zezhong committed
66

67
68
     # 寒武纪
     xmake f --cambricon-mlu=true -cv
Pan Zezhong's avatar
Pan Zezhong committed
69

70
71
72
     # 华为昇腾
     xmake f --ascend-npu=true -cv
     ```
Pan Zezhong's avatar
Pan Zezhong committed
73

74
75
76
77
78
79
80
81
82
83
84
85
2. 编译安装

   默认安装路径为 `$HOME/.infini`

   ```shell
   xmake build && xmake install
   ```

3. 设置环境变量

   按输出提示设置 `INFINI_ROOT``LD_LIBRARY_PATH` 环境变量。

86
87
88
### 运行测试

#### 运行Python算子测试
Pan Zezhong's avatar
Pan Zezhong committed
89

90
91
92
93
94
95
96
97
98
```shell
python test/infiniop/[operator].py [--cpu | --nvidia | --cambricon | --ascend]
```

#### 一键运行所有Python算子测试

```shell
python scripts/python_test.py [--cpu | --nvidia | --cambricon | --ascend]
```
Pan Zezhong's avatar
Pan Zezhong committed
99

100
101
102
103
#### 算子测试框架

详见 `test/infiniop-test` 目录

104
## 开发指南
Pan Zezhong's avatar
Pan Zezhong committed
105

106
### 代码格式化
Pan Zezhong's avatar
Pan Zezhong committed
107

108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
本项目使用 [`scripts/format.py`](/scripts/format.py) 脚本实现代码格式化检查和操作。

使用

```shell
python scripts/format.py -h
```

查看脚本帮助信息:

```plaintext
usage: format.py [-h] [--ref REF] [--path [PATH ...]] [--check] [--c C] [--py PY]

options:
  -h, --help         show this help message and exit
  --ref REF          Git reference (commit hash) to compare against.
  --path [PATH ...]  Files to format or check.
  --check            Check files without modifying them.
  --c C              C formatter (default: clang-format-16)
  --py PY            Python formatter (default: black)
Pan Zezhong's avatar
Pan Zezhong committed
128
```
129
130
131
132
133
134
135
136
137
138
139

参数中:

- `ref``path` 控制格式化的文件范围
  -`ref``path` 都为空,格式化当前暂存(git added)的文件;
  - 否则
    -`ref` 非空,将比较指定 commit 和当前代码的差异,只格式化修改过的文件;
    -`path` 非空,可传入多个路径(`--path p0 p1 p2`),只格式化指定路径及其子目录中的文件;
- 若设置 `--check`,将检查代码是否需要修改格式,不修改文件内容;
- 通过 `--c` 指定 c/c++ 格式化器,默认为 `clang-format-16`
- 通过 `--python` 指定 python 格式化器 `black`