Tout savoir sur hdfs - Tutoriels et astuces #hdfs

VIYA,CAS et Kerberos Réservé aux abonnés

VIYA,CAS et Kerberos Aperçu de l'articleDécouvrez comment configurer Kerberos dans SAS CAS : distinction In-bound/Out-bound, gestion des keytabs, délégation et scénarios de connexion Hadoop.Cliquer pour lire l'article complet

Maîtrisez l'authentification Kerberos pour sécuriser vos accès de SAS Cloud Analytic Services vers Hadoop. Ce guide technique détaille les prérequis essentiels, du paramétrage des keytabs aux variables d'environnement, et compare les scénarios de connexion via compte de service ou utilisateur.
CAS et son cache disque

CAS et son cache disque

Si vous utilisez SAS Viya , vous pouvez avoir besoin de connaître les bases du fonctionnement de&...
Debugger les SAS Embedded Process ( SAS EP ) sur Hadoop.

Debugger les SAS Embedded Process ( SAS EP ) sur Hadoop.

Les SAS Embedded Process utilise un fichier xml de configuration stocké sur HDFS, le fichier ep-config.xml....
Les commandes Hadoop que chaque Data Engineer doit connaître

Les commandes Hadoop que chaque Data Engineer doit connaître Aperçu de l'articleMaîtrisez les commandes essentielles du shell Hadoop : navigation HDFS, gestion de fichiers, configuration du block size et réplication. Le guide indispensable pour tout Data Engineer.Cliquer pour lire l'article complet

Devenez un expert de l’administration HDFS en maîtrisant les commandes fondamentales du shell Hadoop. Ce guide pratique vous dévoile comment manipuler vos fichiers avec agilité, configurer vos facteurs de réplication et optimiser la taille de vos blocs pour booster les performances de votre clust...
HADOOP - Lire tous les fichiers d'un répertoire HDFS comme s'il s'agissait d'un seul fichier

HADOOP - Lire tous les fichiers d'un répertoire HDFS comme s'il s'agissait d'un seul fichier

Un répertoire HDFS contient deux fichiers csv de données :   Il est possible de lire ces deu...
HADOOP - Copier efficacement un fichier vers HDFS depuis SAS

HADOOP - Copier efficacement un fichier vers HDFS depuis SAS

Depuis SAS, il est possible de copier un fichier local dans HDFS en utilisant plusieurs méthodes. Toutef...
Connaitre l'état de son stockage HDFS

Connaitre l'état de son stockage HDFS Aperçu de l'articleOptimisez l'administration de votre cluster avec la commande hdfs dfsadmin -report. Apprenez à surveiller l'espace disque, les DataNodes et l'état de vos blocs.Cliquer pour lire l'article complet

Maîtrisez la santé de votre cluster Hadoop en un clin d'œil grâce à la commande hdfs dfsadmin -report. Cet article vous explique comment interpréter les indicateurs clés comme la capacité configurée et le DFS Used, tout en vous livrant l'astuce pour calculer la taille réelle de vos données.
Utiliser Sqoop pour charger des données dans HDFS

Utiliser Sqoop pour charger des données dans HDFS

C'est pas un scoop, mais sachez tout de même que Sqoop est un projet de la fondation Apache. Je sais c'e...