NVIDIA公式のGitHubリポジトリのリリースページによれば、2026年8月19日付で「NVIDIA Megatron Core 0.19.0」がリリースされており、開発は継続的に活発化している。同リリースノートでは、DeepSeek v4の新アーキテクチャ（HybridModel）への移行対応、DeepSeek Sparse Attention（DSA）のバックエンド非依存サポート、MoE向けQuantile Balancingルーター、CUDA Graph対応のアクティベーションオフローディング等の追加が明記されており、最先端のモデルアーキテクチャへの追従が継続的に行われていることが分かる。