Nicolas Housset | Du SAS mais pas que...

24 déc, 2017

SAS Base – Lister les bibliothèques SAS affectées

Le code ci-dessous permet de lister les bibliothèques SAS affectées dans la session SAS :

libname _all_ list;

1	libname _all_ list;

DS2 – Créer simplement une table avec DS2

Snippet

24 déc, 2017

DS2 – Créer simplement une table avec DS2

Le code complet ci-dessous permet de créer une table dans la work SAS, en utilisant une Proc DS2 pour filter une table Hive :

options set=SAS_HADOOP_CONFIG_PATH="/opt/sas/viya/config/data/hadoop/conf";
options set=SAS_HADOOP_JAR_PATH="/opt/sas/viya/config/data/hadoop/lib";

libname hivelib hadoop server='MON_SERVEUR_HIVE';

proc ds2;
     data cars;
          method run();
               set {select * from hivelib.person where nom='housset'};
          end;
     enddata;
run;
quit;

options set=SAS_HADOOP_CONFIG_PATH="/opt/sas/viya/config/data/hadoop/conf";

options set=SAS_HADOOP_JAR_PATH="/opt/sas/viya/config/data/hadoop/lib";

libname hivelib hadoop server='MON_SERVEUR_HIVE';

proc ds2;

data cars;

method run();

set {select * from hivelib.person where nom='housset'};

end;

enddata;

run;

quit;

La log complète de ce programme : Note :...

HADOOP – Lire une table Hive en SQL explicit

Snippet

24 déc, 2017

HADOOP – Lire une table Hive en SQL explicit

proc sql;
     connect to hadoop(server='MON_SERVEUR_HIVE' user='USER_HIVE' ....... );
     select * from connection to hadoop(select * from person);
quit;

proc sql;

connect to hadoop(server='MON_SERVEUR_HIVE' user='USER_HIVE' ....... );

select * from connection to hadoop(select * from person);

quit;

Pour créer une table Hive en SQL explicit, vous pouvez consulter le snippet Créer une table Hive en SAS Explicit SQL Pass-Through

DS2 – Exemple de programme de thread simple

Snippet

24 déc, 2017

DS2 – Exemple de programme de thread simple

Le programme suivant montre comment un thread crée des données et transmet des variables au programme de données :

proc ds2;
     thread monThread /overwrite=yes;
          dcl double x;
          method init();
               do i=1 to 3;
                    x=i;
                    output;
               end;
          end;
     endthread;

     data monDataset;
          dcl thread monThread t_instance;
          method run();
               set from t_instance threads=3;
          end;
     enddata;

run;
quit;

proc ds2;

thread monThread /overwrite=yes;

dcl double x;

method init();

do i=1 to 3;

x=i;

output;

end;

endthread;

data monDataset;

dcl thread monThread t_instance;

method run();

set from t_instance threads=3;

end;

enddata;

run;

quit;

Ce qui donne dans la log : La table monThread dans la work...

DS2 – Convertir une date DS2 en SAS Date

Snippet

24 déc, 2017

DS2 – Convertir une date DS2 en SAS Date

Le programme ci-dessous montre comment convertir une date DS2 en SAS Date. Nous utilisons la fonction DS2 to_double :

proc ds2;
data _null_;
dcl date maDateDs2;
dcl double maDateSAS;
method init();
maDateDs2=date'2018-12-25';
maDateSAS=to_double(maDateDs2);
put maDateSAS=;
end;
enddata;
run;
quit;

proc ds2;

data _null_;

dcl date maDateDs2;

dcl double maDateSAS;

method init();

maDateDs2=date'2018-12-25';

maDateSAS=to_double(maDateDs2);

put maDateSAS=;

end;

enddata;

run;

quit;

Source : Converting a Date Value to a SAS Date Value

Snippet

24 déc, 2017

DS2 – Variables locales et globales

Dans le langage SAS DS2, les variables sont toujours globales sauf si elle sont déclarées dans une méthode. Exemple :

proc ds2;
     data _null_ ;
          dcl int a; 
          dcl int b;

          method init();
          end;
          method run();
               dcl int c; 
               dcl int d;
          end;
enddata;
run;

proc ds2;

data _null_ ;

dcl int a;

dcl int b;

method init();

end;

method run();

dcl int c;

dcl int d;

end;

enddata;

run;

Les variables a et b sont globales car définit avant le init() (...

DS2 / SAS / Snippet

24 déc, 2017

DS2 – Variables, labels et formats

Pour illustrer l’utilisation des variables, labels et formats, prenons un exemple de définition dans une DATA STEP classique :

format Var euro9.2;
label Var='MavariablePrix"

1 2	format Var euro9.2; label Var='MavariablePrix"

Cela donne en DS2 :

dcl double var having format euro9.2. label "MavariablePrix";

1	dcl double var having format euro9.2. label "MavariablePrix";

LASR – Liste les tables en mémoire avec la Proc IMSTAT

Snippet / Uncategorized

21 déc, 2017

LASR – Liste les tables en mémoire avec la Proc IMSTAT

L’instruction TABLEINFO est utilisée pour renvoyer des informations sur une table en mémoire. Ces informations incluent le nom de la table, les label, le nombre de lignes et de colonnes, le propriétaire, l’encoding et...

HADOOP – Créer une table Hive en SAS Explicit SQL Pass-Through

Snippet

21 déc, 2017

HADOOP – Créer une table Hive en SAS Explicit SQL Pass-Through

proc sql;
connect to hadoop(server='MON_SERVEUR' user='nicolas' password='monpasswordhive');
execute(create table persons(nom string)) by hadoop;
execute(insert into persons values ('nicolas housset')) by hadoop;
quit;

proc sql;

connect to hadoop(server='MON_SERVEUR' user='nicolas' password='monpasswordhive');

execute(create table persons(nom string)) by hadoop;

execute(insert into persons values ('nicolas housset')) by hadoop;

quit;

La table est bien créée : Au passage, notez la longueur du champ « nom » ( type string dans hadoop), 32767. Pour comprendre cette longueur et le pourquoi du comment, je vous invite à lire...

Snippet

21 déc, 2017

HADOOP – Lire tous les fichiers d’un répertoire HDFS comme s’il s’agissait d’un seul fichier

Un répertoire HDFS contient deux fichiers csv de données : Il est possible de lire ces deux fichiers comme s’il s’agissait d’un seul fichier, avec l’option concat de l’instruction filename :

filename foo hadoop "/companyData/" concat;

1	filename foo hadoop "/companyData/" concat;

data _null_;
 infile foo truncover;
input a $1024.;
put a;
run;

data _null_;

infile foo truncover;

input a $1024.;

put a;

run;

Pages