Skip to content
GitLab
Menu
Projects
Groups
Snippets
Loading...
Help
Help
Support
Community forum
Keyboard shortcuts
?
Submit feedback
Contribute to GitLab
Sign in / Register
Toggle navigation
Menu
Open sidebar
OpenDAS
nni
Commits
f4150039
Unverified
Commit
f4150039
authored
Dec 08, 2021
by
Jiahang Xu
Committed by
GitHub
Dec 08, 2021
Browse files
[Docs] chinese doc of quickstart.rst (#4319)
parent
463c0f78
Changes
1
Hide whitespace changes
Inline
Side-by-side
Showing
1 changed file
with
88 additions
and
79 deletions
+88
-79
docs/zh_CN/Tutorial/QuickStart.rst
docs/zh_CN/Tutorial/QuickStart.rst
+88
-79
No files found.
docs/zh_CN/Tutorial/QuickStart.rst
View file @
f4150039
...
@@ -4,12 +4,12 @@
...
@@ -4,12 +4,12 @@
==========
==========
安装
安装
----
--------
----
目前支持
Linux
、
macOS
和
Windows
。
Ubuntu
16.04
或
更高版本、
macOS
10.14.1
和
Windows
10.1809
均经过测试并支持。
在
``
python
>=
3.6
``
环境中,只需运行
``
pip
install
``
即可完成安装。
目前
NNI
支持
了
Linux
、
macOS
和
Windows
系统。
其中,
Ubuntu
16.04
及
更高版本、
macOS
10.14.1
和
Windows
10.1809
均经过测试并支持。
在
``
python
>=
3.6
``
环境中,只需运行
``
pip
install
``
即可完成安装。
Linux
和
macOS
Linux
和
macOS
^^^^^^^^^^^^^^
^
^^^^^^^^^^^^^^
..
code
-
block
::
bash
..
code
-
block
::
bash
...
@@ -26,15 +26,11 @@ Windows
...
@@ -26,15 +26,11 @@ Windows
..
Note
::
如果出现
``
Segmentation
fault
``
这样的错误,参考
:
doc
:`
常见问题
<
FAQ
>`
。
..
Note
::
如果出现
``
Segmentation
fault
``
这样的错误,参考
:
doc
:`
常见问题
<
FAQ
>`
。
..
Note
::
NNI
的系统需求,参考
:
doc
:`
Linux
&
Mac
<
InstallationLinux
>`
或者
:
doc
:`
Windows
<
InstallationWin
>`
.
的安装教程。
..
Note
::
NNI
的系统需求,参考
:
doc
:`
Linux
&
Mac
<
InstallationLinux
>`
或者
:
doc
:`
Windows
<
InstallationWin
>`
的安装教程。
如果想要使用
docker
,
参考
:
doc
:`
如何使用
Docker
<
HowToUseDocker
>`
。
启用
NNI
命令行自动补全(可选)
^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^
在安装之后,您可能需要启用
**
nnictl
**
命令的自动补全功能。
请阅读
`
教程
<../
CommunitySharings
/
AutoCompletion
.
rst
>`
__
。
MNIST
上的
"Hello World"
MNIST
上的
"Hello World"
------------------------
------
------------------------
NNI
是一个能进行自动机器学习实验的工具包。
它可以自动进行获取超参、运行
Trial
,测试结果,调优超参的循环。
在这里,将演示如何使用
NNI
帮助找到
MNIST
模型的最佳超参数。
NNI
是一个能进行自动机器学习实验的工具包。
它可以自动进行获取超参、运行
Trial
,测试结果,调优超参的循环。
在这里,将演示如何使用
NNI
帮助找到
MNIST
模型的最佳超参数。
...
@@ -82,26 +78,20 @@ NNI 用来帮助超参调优。它的流程如下:
...
@@ -82,26 +78,20 @@ NNI 用来帮助超参调优。它的流程如下:
6
:
停止实验
6
:
停止实验
7
:
返回最好的实验结果
7
:
返回最好的实验结果
如果需要使用
NNI
来自动训练模型,找到最佳超参,需要根据代码,进行如下三步改动:
..
note
::
启动
Experiment
的三个步骤
如果需要使用
NNI
来自动训练模型,找到最佳超参,有两种实现方式:
^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^
**
第一步
**
:编写
JSON
格式的
``
搜索空间
``
文件,包括所有需要搜索的超参的
``
名称
``
和
``
分布
``
(离散和连续值均可)。
1.
编写配置文件,然后使用命令行启动
experiment
;
2.
直接从
Python
文件中配置并启动
experiment
。
..
code
-
block
::
diff
在本节中,我们将重点介绍第一种实现方式。如果希望使用第二种实现方式,请参考
`
教程
<
HowToLaunchFromPython
.
rst
>`
__
\
。
-
params
=
{
'batch_size'
:
32
,
'hidden_size'
:
128
,
'lr'
:
0.001
,
'momentum'
:
0.5
}
+
{
+
"batch_size"
:
{
"_type"
:
"choice"
,
"_value"
:
[
16
,
32
,
64
,
128
]},
+
"hidden_size"
:{
"_type"
:
"choice"
,
"_value"
:[
128
,
256
,
512
,
1024
]},
+
"lr"
:{
"_type"
:
"choice"
,
"_value"
:[
0.0001
,
0.001
,
0.01
,
0.1
]},
+
"momentum"
:{
"_type"
:
"uniform"
,
"_value"
:[
0
,
1
]}
+
}
*
示例
:*
:
githublink
:`
search_space
.
json
<
examples
/
trials
/
mnist
-
pytorch
/
search_space
.
json
>`
第一步:修改
``
Trial
``
代码
^^^^^^^^^^^^^^^^^^^^^^^^^^
**
第二步
**
:
修改
``
Trial
``
代码来从
NNI
获取超参,并
返回
NNI
最终
结果。
修改
``
Trial
``
代码来从
NNI
获取超参,并
向
NNI
报告训练
结果。
..
code
-
block
::
diff
..
code
-
block
::
diff
...
@@ -128,59 +118,87 @@ NNI 用来帮助超参调优。它的流程如下:
...
@@ -128,59 +118,87 @@ NNI 用来帮助超参调优。它的流程如下:
+
params
=
nni
.
get_next_parameter
()
+
params
=
nni
.
get_next_parameter
()
main
(
params
)
main
(
params
)
*
示例
:*
:
githublink
:`
mnist
.
py
<
examples
/
trials
/
mnist
-
pytorch
/
mnist
.
py
>`
*
示例:
*
:
githublink
:`
mnist
.
py
<
examples
/
trials
/
mnist
-
pytorch
/
mnist
.
py
>`
第二步:定义搜索空间
^^^^^^^^^^^^^^^^^^^
**
第三步
**\
:
定义
YAML
格式的
``
配置
``
文件,声明搜索空间和
Trail
文件的
``
路径
``
。
它还提供其他信息,例如调整算法,最大
Trial
运行次数和最大持续时间的参数
。
编写
YAML
格式的
**
搜索空间
**
文件,包括所有需要搜索的超参的
**
名称
**
和
**
分布
**
(离散和连续值均可)
。
..
code
-
block
::
yaml
..
code
-
block
::
yaml
authorName
:
default
searchSpace
:
experimentName
:
example_mnist
batch_size
:
trialConcurrency
:
1
_type
:
choice
maxExecDuration
:
1
h
_value
:
[
16
,
32
,
64
,
128
]
maxTrialNum
:
10
hidden_size
:
trainingServicePlatform
:
local
_type
:
choice
#
搜索空间文件路径
_value
:
[
128
,
256
,
512
,
1024
]
searchSpacePath
:
search_space
.
json
lr
:
useAnnotation
:
false
_type
:
choice
tuner
:
_value
:
[
0.0001
,
0.001
,
0.01
,
0.1
]
builtinTunerName
:
TPE
momentum
:
#
运行的命令,以及
Trial
代码的路径
_type
:
uniform
trial
:
_value
:
[
0
,
1
]
command
:
python3
mnist
.
py
codeDir
:
.
*
示例:
*
:
githublink
:`
config_detailed
.
yml
<
examples
/
trials
/
mnist
-
pytorch
/
config_detailed
.
yml
>`
gpuNum
:
0
也可以使用
JSON
文件来编写搜索空间,并在配置中确认文件路径。关于如何编写搜索空间,可以参考
`
教程
<
SearchSpaceSpec
.
rst
>`
__
.
第三步:配置
experiment
^^^^^^^^^^^^^^^^^^^^^^
除了在第二步中定义的搜索空间,还需要定义
YAML
格式的
**
配置
**
文件,声明
experiment
的关键信息,例如
Trail
文件,调优算法,最大
Trial
运行次数和最大持续时间等。
..
code
-
block
::
yaml
experimentName
:
MNIST
#
用于区分
experiment
的名字,可选项
trialCommand
:
python3
mnist
.
py
#
注意:如果使用
Windows
,请将
"python3"
修改为
"python"
trialConcurrency
:
2
#
同时运行
2
个
trial
maxTrialNumber
:
10
#
最多生成
10
个
trial
maxExperimentDuration
:
1
h
#
1
小时后停止生成
trial
tuner
:
#
配置调优算法
name
:
TPE
classArgs
:
#
算法特定参数
optimize_mode
:
maximize
trainingService
:
#
配置训练平台
platform
:
local
Experiment
的配置文件可以参考
`
文档
<../
reference
/
experiment_config
.
rst
>`
__
.
..
_nniignore
:
..
_nniignore
:
..
Note
::
如果要使用远程
计算机
或集群作为
:
doc
:`
训练平台
<../
TrainingService
/
Overview
>`
,为了避免产生过大的网络压力,
NNI
限制了文件的最大数量为
2000
,大小为
300
MB
。
如果
codeDir
中包含了过多的文件,可添加
``.
nniignore
``
文件来排除部分,与
``.
gitignore
``
文件用法类似。
参考
`
git
documentation
<
https
://
git
-
scm
.
com
/
docs
/
gitignore
#
_pattern_format
>`
__
,了解更多如何编写此文件的详细信息
_
。
..
Note
::
如果要使用远程
服务器
或集群作为
:
doc
:`
训练平台
<../
TrainingService
/
Overview
>`
,为了避免产生过大的网络压力,
NNI
限制了文件的最大数量为
2000
,大小为
300
MB
。
如果
代码目录
中包含了过多的文件,可添加
``.
nniignore
``
文件来排除部分,与
``.
gitignore
``
文件用法类似。
参考
`
git
documentation
<
https
://
git
-
scm
.
com
/
docs
/
gitignore
#
_pattern_format
>`
__
,了解更多如何编写此文件的详细信息。
*
示例
:
*
:
githublink
:`
config
.
yml
<
examples
/
trials
/
mnist
-
pytorch
/
config
.
yml
>`
和
:
githublink
:`.
nniignore
<
examples
/
trials
/
mnist
-
pytorch
/.
nniignore
>`
*
示例
:
*
:
githublink
:`
config
.
yml
<
examples
/
trials
/
mnist
-
pytorch
/
config
.
yml
>`
和
:
githublink
:`.
nniignore
<
examples
/
trials
/
mnist
-
pytorch
/.
nniignore
>`
上面的代码都已准备好,并保存在
:
githublink
:`
examples
/
trials
/
mnist
-
pytorch
/
<
examples
/
trials
/
mnist
-
pytorch
>`
。
上面的代码都已准备好,并保存在
:
githublink
:`
examples
/
trials
/
mnist
-
pytorch
/
<
examples
/
trials
/
mnist
-
pytorch
>`
。
第四步:运行
experiment
^^^^^^^^^^^^^^^^^^^^^^
Linux
和
macOS
Linux
和
macOS
^^^^^^^^^^^^^^^
**************
从命令行使用
**
config
.
yml
**
文件启动
MNIST
E
xperiment
。
从命令行使用
**
config
.
yml
**
文件启动
MNIST
e
xperiment
。
..
code
-
block
::
bash
..
code
-
block
::
bash
nnictl
create
--
config
nni
/
examples
/
trials
/
mnist
-
pytorch
/
config
.
yml
nnictl
create
--
config
nni
/
examples
/
trials
/
mnist
-
pytorch
/
config
_detailed
.
yml
Windows
Windows
^^^^^^^
*******
从命令行使用
**
config_
windows
.
yml
**
文件启动
MNIST
E
xperiment
。
在
**
config_detailed
.
yml
**
文件的
``
trialCommand
``
项中将
``
python3
``
修改为
``
python
``
,然后
从命令行使用
**
config_
detailed
.
yml
**
文件启动
MNIST
e
xperiment
。
..
code
-
block
::
bash
..
code
-
block
::
bash
nnictl
create
--
config
nni
\
examples
\
trials
\
mnist
-
pytorch
\
config_
windows
.
yml
nnictl
create
--
config
nni
\
examples
\
trials
\
mnist
-
pytorch
\
config_
detailed
.
yml
..
Note
::
如果使用
Windows
,则需要在
config
.
yml
文件中,将
``
python3
``
改为
``
python
``
,或者使用
config_windows
.
yml
来开始
Experiment
。
..
Note
::
``
nnictl
``
是一个命令行工具,用来控制
NNI
experiment
,如启动、停止、继续
experiment
,启动、停止
NNIBoard
等等。
点击
:
doc
:`
这里
<
Nnictl
>`
查看
``
nnictl
``
的更多用法。
..
Note
::
``
nnictl
``
是一个命令行工具,用来控制
NNI
Experiment
,如启动、停止、继续
Experiment
,启动、停止
NNIBoard
等等。
点击
:
doc
:`
这里
<
Nnictl
>`
查看
``
nnictl
``
的更多用法。
在命令行中等待输出
``
INFO
:
Successfully
started
experiment
!`` 。 此消息表明实验已成功启动。 期望的输出如下:
在命令行中等待输出
``
INFO
:
Successfully
started
experiment
!`` 。 此消息表明实验已成功启动。 期望的输出如下:
...
@@ -210,46 +228,42 @@ Windows
...
@@ -210,46 +228,42 @@ Windows
8.
nnictl
--
help
get
help
information
about
nnictl
8.
nnictl
--
help
get
help
information
about
nnictl
-----------------------------------------------------------------------
-----------------------------------------------------------------------
如果根据上述步骤准备好了相应
``
Trial
``
,
``
搜索空间
``
和
``
配置
``
,并成功创建的
NNI
任务。
NNI
会自动开始通过配置的搜索空间来运行不同的超参集合,搜索最好的超参。
通过
Web
界面可看到
NNI
的进度。
如果根据上述步骤准备好了相应
``
Trial
``
,
**
搜索空间
**
和
**
配置
**
,并成功创建的
NNI
任务。
NNI
会自动开始通过配置的搜索空间来运行不同的超参集合,搜索最好的超参。
通过
Web
界面可看到
NNI
的进度。
Web
界面
第五步:查看
experiment
---------------
^^^^^^^^^^^^^^^^^^^^^^^^^^^
启动
E
xperiment
后,可以在命令行界面找到如下的
``
Web
界面地址
``
:
启动
e
xperiment
后,可以在命令行界面找到如下的
**
Web
界面地址
**
:
..
code
-
block
::
text
..
code
-
block
::
text
The
Web
UI
urls
are
:
[
Your
IP
]:
8080
The
Web
UI
urls
are
:
[
Your
IP
]:
8080
在浏览器中打开
``
Web
界面地址
``
(即:
``
[
IP
地址
]:
8080
``
),就可以看到
Experiment
的详细信息,以及所有的
Trial
任务。
如果无法打开终端中的
Web
界面链接,可以参考
`
常见问题
<
FAQ
.
rst
>`
__
。
在浏览器中打开
**
Web
界面地址
**
(即:
``[
IP
地址
]:
8080
``
),就可以看到
experiment
的详细信息,以及所有的
Trial
任务。
如果无法打开终端中的
Web
界面链接,可以参考
`
常见问题
<
FAQ
.
rst
>`
__
。
查看概要页面
^^^^^^^^^^^^^^^^^^
Experiment
相关信息会显示在界面上,配置和搜索空间等。
NNI
还支持通过
**
Experiment
summary
**
按钮下载这些信息和参数。
查看概要页面
******************
Experiment
相关信息会显示在界面上,包括配置和搜索空间等。
NNI
还支持通过
**
Experiment
summary
**
按钮下载这些信息和参数。
..
image
::
../../
img
/
webui
-
img
/
full
-
oview
.
png
..
image
::
../../
img
/
webui
-
img
/
full
-
oview
.
png
:
target
:
../../
img
/
webui
-
img
/
full
-
oview
.
png
:
target
:
../../
img
/
webui
-
img
/
full
-
oview
.
png
:
alt
:
overview
:
alt
:
overview
查看
Trial
详情页面
查看
Trial
详情页面
^^^^^^^^^^^^^^^^^^^^^^^
***********************
可以在此页面中看到最佳的试用指标和超参数图。
当您单击按钮
``
Add
/
Remove
columns
``
时,表格内容包括更多列。
当您单击按钮
``
Add
/
Remove
columns
``
时,表格内容包括更多列。
可以在此页面中看到最佳的
``
Trial
``
指标和超参数图。
您可以点击
``
Add
/
Remove
columns
``
按钮向表格中添加更多列。
..
image
::
../../
img
/
webui
-
img
/
full
-
detail
.
png
..
image
::
../../
img
/
webui
-
img
/
full
-
detail
.
png
:
target
:
../../
img
/
webui
-
img
/
full
-
detail
.
png
:
target
:
../../
img
/
webui
-
img
/
full
-
detail
.
png
:
alt
:
detail
:
alt
:
detail
查看
experiment
管理页面
查看
Experiment
管理页面
***********************
^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^
``
All
experiments
``
页面可以查看计算机上的所有实验。
``
All
experiments
``
页面可以查看计算机上的所有实验。
...
@@ -257,22 +271,17 @@ Experiment 相关信息会显示在界面上,配置和搜索空间等。 NNI
...
@@ -257,22 +271,17 @@ Experiment 相关信息会显示在界面上,配置和搜索空间等。 NNI
:
target
:
../../
img
/
webui
-
img
/
managerExperimentList
/
expList
.
png
:
target
:
../../
img
/
webui
-
img
/
managerExperimentList
/
expList
.
png
:
alt
:
Experiments
list
:
alt
:
Experiments
list
更多信息可参考
`
此文档
<./
WebUI
.
rst
>`
__
。
更多信息可参考
`
此文档
<./
WebUI
.
rst
>`
__
。
相关主题
相关主题
-------------
-------------
*
`
进行
Debug
<
HowToDebug
.
rst
>`
__
*
`
在
Web
界面中启动
TensorBoard
<
Tensorboard
.
rst
>`
__
*
`
如何实现
Trial
代码
<../
TrialExample
/
Trials
.
rst
>`
__
*
`
尝试不同的
Tuner
<../
Tuner
/
BuiltinTuner
.
rst
>`
__
*
`
尝试不同的
Tuner
<../
Tuner
/
BuiltinTuner
.
rst
>`
__
*
`
尝试不同的
Assessor
<../
Assessor
/
BuiltinAssessor
.
rst
>`
__
*
`
尝试不同的
Assessor
<../
Assessor
/
BuiltinAssessor
.
rst
>`
__
*
`
在不同训练平台上运行
experiment
<../
training_services
.
rst
>`
__
*
`
如何使用
Annotation
<
AnnotationSpec
.
rst
>`
__
*
`
如何使用命令行工具
nnictl
<
Nnictl
.
rst
>`
__
*
`
如何使用命令行工具
nnictl
<
Nnictl
.
rst
>`
__
*
`
如何实现
Trial
代码
<../
TrialExample
/
Trials
.
rst
>`
__
*
`
在
Web
界面中启动
TensorBoard
<
Tensorboard
.
rst
>`
__
*
`
如何在本机运行
Experiment
(
支持多
GPU
卡
)
?
<../
TrainingService
/
LocalMode
.
rst
>`
__
<../
TrainingService
/
LocalMode
.
rst
>`
__
*
`
如何在多机上运行
Experiment
?
<../
TrainingService
/
RemoteMachineMode
.
rst
>`
__
*
`
如何在
OpenPAI
上运行
Experiment
?
<../
TrainingService
/
PaiMode
.
rst
>`
__
*
`
如何通过
Kubeflow
在
Kubernetes
上运行
Experiment
?
<../
TrainingService
/
KubeflowMode
.
rst
>`
__
*
`
如何通过
FrameworkController
在
Kubernetes
上运行
Experiment
?
<../
TrainingService
/
FrameworkControllerMode
.
rst
>`
__
*
`
如何通过
AdaptDL
在
Kubernetes
上运行
Experiment
?
<../
TrainingService
/
AdaptDLMode
.
rst
>`
__
Write
Preview
Markdown
is supported
0%
Try again
or
attach a new file
.
Attach a file
Cancel
You are about to add
0
people
to the discussion. Proceed with caution.
Finish editing this message first!
Cancel
Please
register
or
sign in
to comment