HADOOP – Copier efficacement un fichier vers HDFS depuis SAS
Depuis SAS, il est possible de copier un fichier local dans HDFS en utilisant plusieurs méthodes.
Toutefois, la plus efficace consiste à utilise la Proc Hadoop. En effet, La Proc HADOOP vous permet de soumettre des commandes HDFS, des programmes MapReduce et du code de langage Pig avec des données Hadoop.
Voici un exemple de code pour copier un fichier local vers HDFS :
|
1 2 3 |
proc hadoop; hdfs copyfromlocal="/tmp/mynewdata.csv" out="/tmp/"; run; |
