LangChain : モジュール : 検索 – ドキュメント変換 (翻訳/解説)

【大規模言語モデル：LangChain】モジュール：検索 - ドキュメント変換

LangChain は、複数の大規模言語モデル(LLM)の組み合わせを支援するフレームワークです。

今回は、ドキュメントの分割、連結、フィルタリングそしてそれ以外の操作について説明します。

ドキュメントをロードしたら、アプリケーションに適合するように変換するケースが多いです。
最も単純な例は、長いドキュメントをモデルのコンテキストウィンドウに収まる小さいチャンクに分割する場合です。
LangChain は多くの組み込みドキュメント変換を持ちます。

大規模言語モデル (LLM) の独立した使用は真に強力なアプリケーションを作成するには不十分である場合が多く、それらを他の計算や知識のソースと組み合わせることが望ましいです。
LangChain はこのような種類のアプリケーションの開発を支援することを目標とするフレームワークです。
[More]