Hadoop & Big Data : Tutoriels, Debug et Intégration SAS

SAS/ACCESS to Hadoop et les champs STRING : WARNING ou ERROR ? Aperçu de l'articleOptimisez vos transferts Hadoop vers SAS ! Évitez la saturation de la WORK et les colonnes de 32K avec l'option SAS_HADOOP_FAIL_32767 et DBMAX_TEXT.Cliquer pour lire l'article complet

10 Oct 2019

Marre des tables SAS qui saturent votre disque à cause des champs STRING Hadoop ? Ce guide vous explique comment dompter le "32k string thing" en utilisant l'option DBMAX_TEXT ou en forçant l'arrêt des requêtes gourmandes via une variable d'environnement pour protéger la stabilité de votre serveur.

#hadoop #error #32k #SAS_HADOOP_FAIL_32767 #DBMAX_TEXT

Hadoop

Installer un client Beeline pour se connecter à Hive Metastore

20 Dec 2018

Dans cet article, nous verrons comment se connecter à Hive à l'aide du client Beeline. 1) Téléchargez les d...

#sas #hadoop #jdbc #beeline

Hadoop

Les commandes Hadoop que chaque Data Engineer doit connaître Aperçu de l'articleMaîtrisez les commandes essentielles du shell Hadoop : navigation HDFS, gestion de fichiers, configuration du block size et réplication. Le guide indispensable pour tout Data Engineer.Cliquer pour lire l'article complet

11 Feb 2018

Devenez un expert de l’administration HDFS en maîtrisant les commandes fondamentales du shell Hadoop. Ce guide pratique vous dévoile comment manipuler vos fichiers avec agilité, configurer vos facteurs de réplication et optimiser la taille de vos blocs pour booster les performances de votre clust...

#hadoop #hdfs

SAS•Support•SAS/ACCESS to Hadoop•Hadoop

Activer les logs de debug Java pour SAS/ACCESS interface to Hadoop Aperçu de l'articleApprenez à activer le mode DEBUG pour SAS/ACCESS Interface to Hadoop via Log4j. Guide technique pour configurer vos fichiers .properties sous Linux et Windows.Cliquer pour lire l'article complet

22 Sep 2017

Résoudre les erreurs de connexion Hadoop dans SAS demande une maîtrise précise des traces Java. Découvrez comment configurer le fichier sas.log4j.properties pour activer le mode DEBUG, isoler les échecs d'authentification Kerberos et optimiser votre diagnostic sans surcharger vos systèmes.

#Windows #Unix #hadoop #sas/Access #linux

Hadoop

Connaitre l'état de son stockage HDFS Aperçu de l'articleOptimisez l'administration de votre cluster avec la commande hdfs dfsadmin -report. Apprenez à surveiller l'espace disque, les DataNodes et l'état de vos blocs.Cliquer pour lire l'article complet

18 May 2017

Maîtrisez la santé de votre cluster Hadoop en un clin d'œil grâce à la commande hdfs dfsadmin -report. Cet article vous explique comment interpréter les indicateurs clés comme la capacité configurée et le DFS Used, tout en vous livrant l'astuce pour calculer la taille réelle de vos données.

#hadoop #Administration #hdfs #astuces

SAS•SAS/ACCESS to Hadoop•Hadoop

SAS/ACCESS to Hadoop et les colonnes String (32k string thing)

20 Apr 2017

Si vous avez l’habitude de travailler avec SAS et Hadoop vous avez sans doute été confronté, au moins une f...

#Big Data #hadoop

Hadoop

HADOOP - Créer une table est charger des données Aperçu de l'articleDécouvrez comment configurer des formats SAS (SASFMT) dans Apache Hive pour vos colonnes Timestamp. Un guide rapide pour mapper vos données avec précision.Cliquer pour lire l'article complet

24 Jan 2017

Maîtrisez l'importation de données temporelles sous Hive en configurant les propriétés SASFMT. De la création de fichiers Linux à la définition de formats de date spécifiques comme DATETIME(20), ce tutorat technique vous montre comment assurer la parfaite compatibilité de vos timestamps en quelqu...

#hadoop #bigdata #create table

Hadoop

Découverte de Hadoop REST API – WebHDFS

17 Jan 2017

Introduction Si vous pratiquez un peu hadoop, vous n’êtes pas sans ignorer l’existence de l’API...

#Big Data #hadoop #api #data

Hadoop

hive is not allowed to impersonate hive

13 Jan 2017

Après votre configuration Hadoop, dans mon cas Hortonworks, vous pouvez être confronter au message d'erreur...

#hadoop #hortonworks #configuration #impersonate #hive

Hadoop

Accès à HDFS et aux applications Hadoop à partir de SAS Base Aperçu de l'articleDécouvrez comment connecter SAS Base à Hadoop via FILENAME, PROC HADOOP et SQOOP. Optimisez vos transferts de données HDFS et configurez vos fichiers JAR/XML.Cliquer pour lire l'article complet

10 Dec 2016

Maîtrisez l'intégration de SAS au sein de l'écosystème Hadoop pour doper vos analyses Big Data. De la manipulation de fichiers HDFS avec la PROC HADOOP au transfert massif de données via SQOOP, explorez les méthodes natives et les configurations serveurs pour devenir un expert.

#hadoop #sas base