Notas
Async RL: por qué separar generación y entrenamiento ya no es opcional
Hugging Face analiza 16 librerías y concluye que la tendencia es disagregar inferencia y entrenamiento para evitar GPUs ociosas y manejar rollouts largos.