HADOOP - Lecture d'un fichier csv avec l'instruction filename

Publié le 21 Dec 2017 Mis à jour le 17 Jan 2020

Le code ci-dessous permet de lire un fichier csv sur Hadoop :

filename mydata hadoop "/companyData/data.csv";
data work.person;
infile mydata dlm="|";
input id $ name $ company $ siret $;
run;

Ce qui donne : filename_hadoop

En exécutant ce code SAS, les données sont lues en parallèle à partir de HDFS, transmises à la session et traitées séquentiellement par la DATA STEP.

Nicolas Housset

Passionné d'informatique, je suis Consultant et expert technique SAS VIYA, également co-fondateur de la société Flexcelite. Spécialisé dans les technologies SAS (Viya, 9.4) et les infrastructures associées (Linux, Hadoop, Azure), ce blog est mon espace pour partager mes mémos techniques et retours d'expérience.