自然言語処理

2021-06-13

【HF Transformers 4.6 : ノートブック : Getting Started トークナイザー】今回はノートブックから「Getting Started トークナイザー」です。transformers ラ […]

2021-06-12

【HF Transformers 4.6 : 上級ガイド : 事前訓練モデル】 HF Transformers の上級ガイドに入ります。今回は「事前訓練モデル」です。ここでは代表的な利用可能な事前訓練モデルが簡潔な説明と […]

2021-06-10

【PyTorch 1,8 : 並列と分散訓練 : 単一マシン並列ベストプラクティス】今回は「単一マシン並列ベストプラクティス」です。モデル並列は分散訓練テクニックで広く利用されます。DataParallel はマルチ […]

2021-06-09

【PyTorch 1.8 : ノート : 分散データ並列 (処理)】今回は「PyTorch 分散概要」が参照してるドキュメント「ノート : 分散データ並列 (処理)」です。torch.nn.parallel.Distr […]

2021-06-08

【PyTorch 1.8 : 並列と分散訓練 : PyTorch 分散概要】今回は「PyTorch 分散概要」です。これは torch.distributed パッケージのための概要ページですが、このパッケージについて […]