Expert Parallelism Load Balancer (EPLB) es un algoritmo de balanceo de carga para el paralelismo de expertos (EP) en el aprendizaje profundo. Mediante una estrategia de expertos redundantes y un algoritmo heurístico de empaquetado, asegura el equilibrio de carga entre diferentes GPUs, utilizando al mismo tiempo el enrutamiento de expertos con restricciones de grupo para reducir el flujo de datos entre nodos. Este algoritmo tiene una importancia significativa para el entrenamiento distribuido a gran escala, pudiendo mejorar la utilización de recursos y la eficiencia del entrenamiento.