Tecnología
FSDP2
Relacionadas
Hugging Face ×2Nvidia ×2Expert Parallelism ×1TransformerEngine ×1Transformers v5 ×1modelos de difusión ×1flow matching ×1VAE ×1
Historias
Noticias
NVIDIA y Hugging Face integran entrenamiento distribuido de modelos de difusión a escala
NVIDIA y Hugging Face han colaborado para integrar la librería NeMo Automodel en Diffusers, permitiendo entrenar y adaptar modelos de difusión de imagen y…
Por qué importaPara equipos de investigación y empresas que trabajan con modelos generativos, esto reduce significativamente la barrera técnica de entrenamiento y…
NVIDIA NeMo AutoModel acelera el entrenamiento de modelos MoE un 3.4x con API compatible
NVIDIA ha lanzado NeMo AutoModel, una librería abierta que optimiza el entrenamiento de modelos de mezcla de expertos (MoE) sobre Transformers v5. El sistema…
Por qué importaEl entrenamiento eficiente de modelos MoE es un cuello de botella creciente en la industria; esta solución permite a equipos escalar el fine-tuning…

