Nemotron-4-340B-Baseは、NVIDIAが開発した3400億パラメーターの大規模言語モデルです。4096トークンのコンテキスト長に対応し、合成データの生成、研究者や開発者による独自のLLM構築を支援します。9兆トークンで事前学習されており、50種類以上の自然言語と40種類以上のプログラミング言語を網羅しています。NVIDIAオープンモデルライセンスにより、商用利用、派生モデルの作成と配布が許可され、モデルまたは派生モデルによって生成された出力に対する所有権は主張しません。