Un répertoire HDFS contient deux fichiers csv de données : Il est possible de lire ces deux fichiers comme s’il s’agissait d’un seul fichier, avec l’option concat de l’instruction filename :
|
1 |
filename foo hadoop "/companyData/" concat; |
|
1 2 3 4 5 |
data _null_; infile foo truncover; input a $1024.; put a; run; |
Depuis SAS, il est possible de copier un fichier local dans HDFS en utilisant plusieurs méthodes. Toutefois, la plus efficace consiste à utilise la Proc Hadoop. En effet, La Proc HADOOP vous permet de soumettre...
Le code ci-dessous permet de lire un fichier csv sur Hadoop :
|
1 2 3 4 5 |
filename mydata hadoop "/companyData/data.csv"; data work.person; infile mydata dlm="|"; input id $ name $ company $ siret $; run; |
Ce qui donne : En exécutant ce code SAS, les données sont lues en parallèle à partir de HDFS, transmises à...
Comme vous le savez sans doute, ANSI et UTF-8 sont des schémas de codage largement utilisés. La principale différence entre eux est leur utilisation. UTF-8 a pratiquement remplacé ANSI en tant que schéma de...
Comme vous le savez, le module SAS/ACCESS interface to Hadoop s’appuie sur Java pour communiquer avec le cluster. Aussi, pour votre besoin de débogage, il est possible d’utiliser la puissance de log4j dans l’objectif...
Dans le cadre de votre activité, vous pouvez être amené à tester la connexion à votre base Oracle. Voici donc un exemple pour vous montrer comment vous connecter à la base de données Oracle...
Si vous utilisez SAS/ACCESS interface to PostgreSQL, vous pouvez être confronté à des problèmes de lenteurs lors de l’exécution de certains requêtes. Dans cet article, je vous présente deux options PostgreSQL utiles pour améliorer...
L’utilisation des ressources système dans le schéma v_monitor de Vertica fournit un résumé de haut niveau de l’utilisation de la mémoire, du processeur, des E / S et du réseau. Cet article passera en...
Si vous êtes confronté à des problèmes techniques dans l’utilisation de vos applications Web SAS, il peut s’avérer utile de changer le niveau de traces de ces applications pour déboguer. Pour rappel, les logs...
Vous suivez mon blog et avez constaté avec effroi que je n’ai rien publié depuis un moment déjà. Hormis, bien-sûr, l’ouverture d’une rubrique VIDÉOS TUTORIELLES dans laquelle je présente clairement aux débutants comment utiliser...
![[TIPS/VERTICA] Monitoring des ressources système](https://www.nicolas-housset.fr/wp-content/themes/hueman/img/thumb-medium.png)
