Optimisation de la Haute Volumétrie CAS

Afin d'éviter une surcharge de la mémoire lors de l'exécution de l'action sur de larges volumétries, vous pouvez imposer une limite de sécurité avec le paramètre groupByLimit. Cette option interrompt préventivement l'analyse si le nombre de groupes générés par vos variables de classification dépasse le seuil défini. En parallèle, l'utilisation stratégique des options de gestion mémoire comme threadBlockSize et maxMemSize au sein des paramètres d'entrée garantit que l'empreinte reste maîtrisée au sein de vos plans de données CAS.

Comment sécuriser les performances de calcul lors du contrôle qualité massif avec des milliers de sous-groupes différents ? - boxChart

Afin d'éviter une surcharge de la mémoireGemini said
Espace de stockage temporaire (RAM) utilisé par le moteur CAS pour charger et traiter les données à haute vitesse, minimisant les accès disque pour optimiser les performances de SAS Viya. lors de l'exécution de l'action sur de larges volumétries, vous pouvez imposer une limite de sécurité avec le paramètre groupByLimit. Cette option interrompt préventivement l'analyse si le nombre de groupes générés par vos variablesColonnes d'une table SAS contenant des données spécifiques (numériques ou caractères). Elles possèdent des attributs comme le nom, le type, la longueur, l'étiquette et le format d'affichage. de classification dépasse le seuil défini. En parallèle, l'utilisation stratégique des options de gestion mémoireGemini said
Espace de stockage temporaire (RAM) utilisé par le moteur CAS pour charger et traiter les données à haute vitesse, minimisant les accès disque pour optimiser les performances de SAS Viya. comme threadBlockSize et maxMemSize au sein des paramètres d'entrée garantit que l'empreinte reste maîtrisée au sein de vos plans de données CAS.

Exemples pour l'action boxChart

Carte Box Chart de base

Cet exemple automatise l'analyse de capabilité via l'action boxChart. Il calcule les limites statistiques par lot pour détecter toute dérive de variabilité process.

Analyse avancée avec tests de causes spéciales et sortie des limites

Cet exemple déploie un contrôle statistique robuste : estimation sigma par méthode S pondérée, tests de Western Electric (1 et 2) et persistance des limites pour l’industrialisation du monitoring.

Conseil de l'Expert

Ne confondez pas "Parallélisation" et "Saturation". Sur SAS Viya 4, l'astuce consiste à coupler le paramètre groupByLimit avec un partitionnement physique préalable (partition dans l'action table.save ou table.loadTable). Cela permet à l'ordonnanceur CAS de distribuer les groupes de manière homogène sur les workers, évitant ainsi qu'un seul thread ne traite un groupe disproportionné (Data Skew).

Leviers Techniques de Maîtrise des Ressources

Contrôle Preventif (groupByLimit) : Définit le plafond de cardinalité avant exécution pour éviter l'explosion combinatoire de la mémoire vive (RAM) lors de jointures ou d'agrégations complexes.
Granularité de Distribution (threadBlockSize) : Ajuste la taille des blocs de données (par défaut 1MB) pour optimiser le débit I/O. Un bloc plus grand réduit l'overhead de gestion mais augmente la consommation mémoire par thread.

Cette réponse vous a-t-elle aidé ?

Vos votes aident à améliorer notre base de connaissances.

Action CAS associée

spc

boxChart