Machine Learning a Escala

AllReduce

Algoritmo de comunicación colectiva que permite la reducción y difusión sincronizada de gradientes entre todos los nodos en un entorno de entrenamiento distribuido.

← Volver