Avec de puissants GPU NVIDIA et des techniques telles que le parallélisme des données, vous pouvez entraîner vos modèles d'IA personnalisés plus rapidement.
L'utilisation de plusieurs GPU sur un seul noeud améliore les performances, mais des limitations matérielles peuvent limiter le nombre de GPU disponibles. Pour y remédier, nous pouvons tirer parti de la formation distribuée sur plusieurs instances Oracle Cloud Infrastructure (OCI) où deux noeuds ou plus sont connectés via un réseau.
C'est là qu'intervient le parallélisme. Le parallélisme consiste à décomposer le calcul en parties plus petites pouvant être exécutées simultanément sur différentes ressources de calcul.