PyTorch 1.8 チュートリアル : テキスト : スクラッチからの NLP – Transformer で言語翻訳 (翻訳/解説)

【PyTorch 1.8 : スクラッチからの NLP - Transformer で言語翻訳】
今回は「テキスト」カテゴリー最後の「Transformer で言語翻訳」で、 torchtext を利用してスクラッチから Transformer モデルを実装していきます。
torchtext は言語翻訳モデルを作成する目的でデータセットを作成するためのユティリティを持ちます。このチュートリアルではどのように raw テキスト・センテンスをトークン化するか、語彙を構築するか、そしてトークンを tensor に数値化するかを示します。
PyTorch 1.8 がリリースされ、ドキュメント構成も変更されました。追加ドキュメントの翻訳や改訂されたドキュメントの再翻訳を行なっています。[詳細]
★ 人工知能研究開発支援 [詳細]
★ PoC(概念実証)を失敗させないための支援 [詳細]
★ 無料セミナー開催中 ウェビナー(WEBセミナー)
【2021年05月12日(水)：ウェビナー】15:30-17:30
人工知能テクノロジーを実ビジネスで活用するには？Vol.103
～ 具体的な導入プロセスと運用の考慮ポイントを解説 ～
[特別講演]モルゲンロット社の提供するGPUクラウドサービスについて紹介 [詳細]
【2021年05月19日：ウェビナー】16:00-17:30
変化に対応し、事業変革を起こすためのエッセンスを学ぶ
～ デザイン思考と人工知能テクノロジーでイノベーションを起こそう！ ～
ビジネス変革応援隊 Vol.3 [詳細]
【2021年05月26日(水)：ウェビナー】15:30-17:30
人工知能テクノロジーを実ビジネスで活用するには？Vol.104
～ 具体的な導入プロセスと運用の考慮ポイントを解説 ～
[特別講演]日本FLOWが提供している「AIデータアノテーションサービス」を紹介 [詳細]