Commit 3cbd6a82 authored by zhanggzh's avatar zhanggzh
Browse files

update readme

parent 4a9906cb
# <div align="center"><strong>FastMoe</strong></div> # <div align="center"><strong>SparseConvNet</strong></div>
## 简介 ## 简介
这是用于训练 Submanifold 稀疏卷积网络的 PyTorch 库。 SparseConvNet 这是用于训练子流形稀疏卷积网络的 PyTorch 库
## 安装 ## 安装
组件支持组合
源码编译安装,该方式需要安装torch及fastpt工具包;注意使用fastpt包进行源码编译安装时,要匹配fastpt、torch、dtk之间的版本号,例如基于dtk2504编译,则fastpt、torch都必须是dtk2504的包,其中fastpt与torch对应的版本号关系为
| | fastpt版本 | torch版本 | DTK版本 | | PyTorch版本 | fastpt版本 |sparseconvnet版本 | DTK版本 | Python版本 | 推荐编译方式 |
| - | -------- | ------- | ------------ | | ----------- | ----------- | ----------- | ------------------------ | -----------------| ------------ |
| 1 | 2.0.1+das.dtk2504 | v2.4.1 | dtk2504| | 2.5.1 | 2.1.0 |0.2 | >= 25.04 | 3.8、3.10、3.11 | fastpt不转码 |
| 1 | 2.1.0+das.dtk2504 | v2.5.1 | dtk2504| | 2.4.1 | 2.0.1 |0.2 | >= 25.04 | 3.8、3.10、3.11 | fastpt不转码 |
| 1 | 2.0.1+das.dtk25041 | v2.4.1 | dtk25041|
| 1 | 2.1.0+das.dtk25041 | v2.5.1 | dtk25041|
## 编译流程 + pytorch版本大于2.4.1 && dtk版本大于25.04 推荐使用fastpt不转码编译。
```
pip3 install wheel ### 1、使用pip方式安装
pip3 install fastpt-2.0.1+das.dtk2504-py3-none-any.whl # 以torch2.4.1,dtk2504为例 sparseconvnet whl包下载目录:[光和开发者社区](https://download.sourcefind.cn:65024/4/main),选择对应的pytorch版本和python版本下载对应sparseconvnet的whl包
https://developer.sourcefind.cn/codes/OpenDAS/sparseconvnet.git ```shell
git checkout v0.2-fastpt #切换到相应分支 pip install torch* (下载torch的whl包)
cd fastmoe pip install fastpt* --no-deps (下载fastpt的whl包)
source /usr/local/bin/fastpt -c source /usr/local/bin/fastpt -E
python3 setup.py bdist_wheel pip install sparseconvnet* (下载的sparseconvnet的whl包)
```
## 验证安装
``` ```
source /usr/local/bin/fastpt -e ### 2、使用源码编译方式安装
pip3 list | grep sparseconvnet
#### 编译环境准备
提供基于fastpt不转码编译:
1. 基于光源pytorch基础镜像环境:镜像下载地址:[光合开发者社区](https://sourcefind.cn/#/image/dcu/pytorch),根据pytorch、python、dtk及系统下载对应的镜像版本。
2. 基于现有python环境:安装pytorch,fastpt whl包下载目录:[光合开发者社区](https://sourcefind.cn/#/image/dcu/pytorch),根据python、dtk版本,下载对应pytorch的whl包。安装命令如下:
```shell
pip install torch* (下载torch的whl包)
pip install fastpt* --no-deps (下载fastpt的whl包, 安装顺序,先安装torch,后安装fastpt)
pip install pytest
pip install wheel
``` ```
## 测试
#### 源码编译安装
- 代码下载
```shell
git clone http://developer.sourcefind.cn/codes/OpenDAS/sparseconvnet.git # 根据编译需要切换分支
``` ```
source /usr/local/bin/fastpt -e - 提供2种源码编译方式(进入sparseconvnet目录):
cd examples
python3 hello-world.py
``` ```
1. 设置不转码编译环境变量
source /usr/local/bin/fastpt -C
2. 编译whl包并安装
python3 setup.py -v bdist_wheel
pip install dist/sparseconvnet*
3. 源码编译安装
sh develop.sh
```
#### 注意事项
+ 若使用pip install下载安装过慢,可添加pypi清华源:-i https://pypi.tuna.tsinghua.edu.cn/simple/
+ ROCM_PATH为dtk的路径,默认为/opt/dtk
+ 在pytorch2.5.1环境下编译需要支持c++17语法,打开setup.py文件,把文件中的 -std=c++14 修改为 -std=c++17
## 验证
```shell
python3
Python 3.10.12 (main, Feb 4 2025, 14:57:36) [GCC 11.4.0] on linux
Type "help", "copyright", "credits" or "license" for more information.
>>> import sparseconvnetd
>>> sparseconvnet.__version__
'0.2'
>>>
```
版本号与官方版本同步,查询该软件的版本号,例如0.2.
## Known Issue
-
## 参考资料
- [README_ORIGIN](README_ORIGIN.md)
- [README_zh-CN](README_zh-CN.md)
- [https://github.com/facebookresearch/SparseConvNet](https://github.com/facebookresearch/SparseConvNet)
This diff is collapsed.
...@@ -35,3 +35,4 @@ from .tables import * ...@@ -35,3 +35,4 @@ from .tables import *
from .unPooling import UnPooling from .unPooling import UnPooling
from .utils import append_tensors, AddCoords, add_feature_planes, concatenate_feature_planes, compare_sparse from .utils import append_tensors, AddCoords, add_feature_planes, concatenate_feature_planes, compare_sparse
from .shapeContext import ShapeContext, MultiscaleShapeContext from .shapeContext import ShapeContext, MultiscaleShapeContext
__version__ = '0.2'
Markdown is supported
0% or .
You are about to add 0 people to the discussion. Proceed with caution.
Finish editing this message first!
Please register or to comment