最新のPalmyra X5は1Mトークンという長いコンテキストウィンドウに対応した適応的推論モデルで、合成データを用いGPU費用約100万ドルという比較的低コストで学習された点を特徴として公表しています。
エンタープライズ向けLLMを比較したい相談
長文コンテキストと低コスト学習の両立