Fairseq (for PyTorch) : README.md
sales-info【Fairseq (for PyTorch) : README.md】
Fairseq は (fastText と同様に) FAIR (Facebook Research) がオープンソース化した Sequence-to-Sequence ツールキットです。主要なドキュメントを翻訳しておきました。
Fairseq は自然言語処理に関する様々なタスク – 機械翻訳/要約/言語モデリングやテキスト生成 – のためのカスタムモデルの開発と訓練を可能にする、シークエンス・モデリング・ツールキットで、PyTorch 上に実装されています。
最先端技術の様々な sequence-to-sequence モデルのリファレンス実装と事前訓練モデルが提供され、次のような訓練の高速化がサポートされています: マルチ GPU (分散) 訓練、高速ビームサーチ、遅延更新を通した巨大なミニバッチ訓練、高速な半精度浮動小数点数 (FP16) 訓練等。
