_toctree.yml 9.29 KB
Newer Older
1
2
3
- sections:
  - local: index
    title: 🤗 Transformers
Rockerz's avatar
Rockerz committed
4
5
  - local: quicktour
    title: クイックツアー
6
7
  - local: installation
    title: インストール
Rockerz's avatar
Rockerz committed
8
  title: Get started
9
- sections:
Rockerz's avatar
Rockerz committed
10
11
12
13
14
15
16
17
18
19
  - local: pipeline_tutorial
    title: パイプラインを使用して推論を実行する
  - local: autoclass_tutorial
    title: AutoClass を使用して移植可能なコードを作成する
  - local: preprocessing
    title: データの前処理
  - local: training
    title: 事前トレーニングされたモデルを微調整する
  - local: run_scripts
    title: スクリプトを使用してトレーニングする
20
  - local: accelerate
Rockerz's avatar
Rockerz committed
21
22
23
24
25
26
27
28
29
30
    title: 🤗 Accelerate を使用して分散トレーニングをセットアップする
  - local: peft
    title: 🤗 PEFT を使用してアダプターをロードしてトレーニングする
  - local: model_sharing
    title: モデルを共有する
  - local: transformers_agents
    title: エージェント
  - local: llm_tutorial
    title: LLM を使用した生成
  title: Tutorials
31
- sections:
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
  - isExpanded: false
  #   sections:
  #   - local: tasks/sequence_classification
  #     title: Text classification
  #   - local: tasks/token_classification
  #     title: Token classification
  #   - local: tasks/question_answering
  #     title: Question answering
  #   - local: tasks/language_modeling
  #     title: Causal language modeling
  #   - local: tasks/masked_language_modeling
  #     title: Masked language modeling
  #   - local: tasks/translation
  #     title: Translation
  #   - local: tasks/summarization
  #     title: Summarization
  #   - local: tasks/multiple_choice
  #     title: Multiple choice
  #   title: Natural Language Processing
  # - isExpanded: false
  #   sections:
  #   - local: tasks/audio_classification
  #     title: Audio classification
  #   - local: tasks/asr
  #     title: Automatic speech recognition
  #   title: Audio
  # - isExpanded: false
  #   sections:
  #   - local: tasks/image_classification
  #     title: Image classification
  #   - local: tasks/semantic_segmentation
  #     title: Semantic segmentation
  #   - local: tasks/video_classification
  #     title: Video classification
  #   - local: tasks/object_detection
  #     title: Object detection
  #   - local: tasks/zero_shot_object_detection
  #     title: Zero-shot object detection
  #   - local: tasks/zero_shot_image_classification
  #     title: Zero-shot image classification
  #   - local: tasks/monocular_depth_estimation
  #     title: Depth estimation
  #   - local: tasks/image_to_image
  #     title: Image-to-Image
  #   - local: tasks/knowledge_distillation_for_image_classification
  #     title: Knowledge Distillation for Computer Vision
  #   title: Computer Vision
  # - isExpanded: false
  #   sections:
  #   - local: tasks/image_captioning
  #     title: Image captioning
  #   - local: tasks/document_question_answering
  #     title: Document Question Answering
  #   - local: tasks/visual_question_answering
  #     title: Visual Question Answering
  #   - local: tasks/text-to-speech
  #     title: Text to speech
  #   title: Multimodal
  - isExpanded: false
    sections:
    - local: generation_strategies
      title: 生成戦略をカスタマイズする
    title: Generation
  # - isExpanded: false
  #   sections:
  #   - local: tasks/idefics
  #     title: Image tasks with IDEFICS
  #   - local: tasks/prompting
  #     title: LLM prompting guide
  #   title: Prompting
    title: Task Guides
Rockerz's avatar
Rockerz committed
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
- sections:
  - local: fast_tokenizers
    title: 🤗 トークナイザーの高速トークナイザーを使用する
  - local: multilingual
    title: 多言語モデルで推論を実行する
  - local: create_a_model
    title: モデル固有の API を使用する
  - local: custom_models
    title: カスタムモデルを共有する
  - local: chat_templating
    title: チャットモデルのテンプレート
  - local: serialization
    title: ONNX へのエクスポート
  - local: tflite
    title: TFLite へのエクスポート
  - local: torchscript
    title: トーチスクリプトへのエクスポート
  - local: benchmarks
    title: ベンチマーク
  - local: community
    title: コミュニティリソース
  - local: custom_tools
    title: カスタムツールとプロンプト
  - local: troubleshooting
    title: トラブルシューティング
  title: 開発者ガイド
- sections:
  - local: performance
    title: 概要
  - sections:
    - local: perf_train_gpu_one
      title: 単一の GPU で効率的にトレーニングするための方法とツール
    - local: perf_train_gpu_many
      title: 複数の GPU と並列処理
    - local: perf_train_cpu
      title: CPU での効率的なトレーニング
    - local: perf_train_cpu_many
      title: 分散CPUトレーニング
    - local: perf_train_tpu
      title: TPU に関するトレーニング
    - local: perf_train_tpu_tf
      title: TensorFlow を使用した TPU のトレーニング
    - local: perf_train_special
      title: 特殊なハードウェアに関するトレーニング
    - local: perf_hardware
      title: トレーニング用のカスタム ハードウェア
    - local: hpo_train
      title: Trainer API を使用したハイパーパラメータ検索
    title: 効率的なトレーニングテクニック
152
  - sections:
Rockerz's avatar
Rockerz committed
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
169
170
171
172
173
174
175
176
177
178
179
180
181
182
183
184
185
186
187
188
189
190
191
192
193
194
195
196
197
198
199
200
201
202
203
204
    - local: perf_infer_cpu
      title: CPUでの推論
    - local: perf_infer_gpu_one
      title: 1 つの GPU での推論
    - local: perf_infer_gpu_many
      title: 多くの GPU での推論
    - local: perf_infer_special
      title: 特殊なハードウェアでの推論
    title: 推論の最適化
  - local: big_models
    title: 大きなモデルのインスタンス化
  - local: tf_xla
    title: TensorFlowモデルのXLA統合
  - local: perf_torch_compile
    title: torch.compile()を使用した推論の最適化
  title: パフォーマンスとスケーラビリティ
- sections:
  - local: add_new_model
    title: 🤗 Transformersにモデルを追加する方法
  - local: add_tensorflow_model
    title: 🤗 TransformersモデルをTensorFlowに変換する方法
  - local: testing
    title: テスト
  - local: pr_checks
    title: プルリクエストのチェック
  title: 貢献する
- sections:
  - local: philosophy
    title: フィロソフィー
  - local: glossary
    title: 用語集
  - local: task_summary
    title: 🤗 Transformersの機能
  - local: tasks_explained
    title: 🤗 Transformersがタスクを解決する方法
  - local: model_summary
    title: Transformerモデルファミリー
  - local: tokenizer_summary
    title: トークナイザーの概要
  - local: attention
    title: 注意機構
  - local: pad_truncation
    title: パディングと切り詰め
  - local: bertology
    title: BERTology
  - local: perplexity
    title: 固定長モデルのパープレキシティ
  - local: pipeline_webserver
    title: Webサーバー推論用パイプライン
  - local: model_memory_anatomy
    title: モデルトレーニングの解剖学
  title: コンセプチュアルガイド
205
- sections:
206
207
208
209
210
211
212
213
214
215
216
217
218
219
220
221
222
223
224
225
226
227
228
229
230
231
232
233
234
235
236
237
238
239
240
241
242
243
244
245
246
247
248
249
250
251
252
253
254
255
256
257
258
259
260
261
262
263
264
265
266
267
  - sections:
    - local: main_classes/agent
      title: エージェントとツール
    # - local: model_doc/auto
    #   title: Auto Classes
    - local: main_classes/callback
      title: コールバック
    - local: main_classes/configuration
      title: 構成
    - local: main_classes/data_collator
      title: データ照合者
    - local: main_classes/keras_callbacks
      title: Keras コールバック
    - local: main_classes/logging
      title: ロギング
    - local: main_classes/model
      title: モデル
    - local: main_classes/text_generation
      title: テキストの生成
    - local: main_classes/onnx
      title: ONNX
    - local: main_classes/optimizer_schedules
      title: 最適化
    - local: main_classes/output
      title: モデルの出力
    - local: main_classes/pipelines
      title: パイプライン
    - local: main_classes/processors
      title: プロセッサー
    - local: main_classes/quantization
      title: 量子化
    - local: main_classes/tokenizer
      title: トークナイザー
    - local: main_classes/trainer
      title: トレーナー
    - local: main_classes/deepspeed
      title: ディープスピードの統合
    - local: main_classes/feature_extractor
      title: 特徴抽出器
    - local: main_classes/image_processor
      title: 画像処理プロセッサ
    title: 主要なクラス
  - sections:
    - local: internal/modeling_utils
      title: カスタムレイヤーとユーティリティ
    - local: internal/pipelines_utils
      title: パイプライン用のユーティリティ
    - local: internal/tokenization_utils
      title: ト=ークナイザー用のユーティリティ
    - local: internal/trainer_utils
      title: トレーナー用ユーティリティ
    - local: internal/generation_utils
      title: 発電用ユーティリティ
    - local: internal/image_processing_utils
      title: 画像プロセッサ用ユーティリティ
    - local: internal/audio_utils
      title: オーディオ処理用のユーティリティ
    - local: internal/file_utils
      title: 一般公共事業
    - local: internal/time_series_utils
      title: 時系列用のユーティリティ
    title: 内部ヘルパー
268
  title: API