PyTorch 1.5 レシピ : 基本 : 勾配をゼロで埋める (翻訳/解説)

【PyTorch 1.5 レシピ (基本) 勾配をゼロで埋める】
今回は「基本」カテゴリーから「勾配をゼロで埋める」です。ニューラルネットワークを構築するときに勾配をゼロで埋めることは有益です。これはデフォルトでは勾配は .backward() が呼び出される時、常にバッファ上に累積されるためです。
PyTorch は TensorFlow とともにポピュラーな深層学習フレームワークです。PyTorch 1.5 では新たにレシピ集がドキュメントに追加されましたので、これも翻訳しています。
レシピは「基本」「Captum」「データ・カスタマイゼーション」「解釈可能性」「モデル最適化」等のカテゴリーに分かれています。