Catégorie: Hadoop

Connaitre l’état de son stockage HDFS 0

Connaitre l’état de son stockage HDFS

Dans la famille des options pratiques, je voudrais dfsadmin –report ou comment obtenir une photo de son système HDFS. Une commande bien pratique pour connaitre rapidement la quantité de disque disponible, le nombre de...

logo_webhdfs 0

Découverte de Hadoop REST API – WebHDFS

Introduction  Si vous pratiquez un peu hadoop, vous n’êtes pas sans ignorer l’existence  de l’API native Java « hadoop fs » prenant en charge les opérations sur système de fichiers telles que la création, le renommage...

logo_impersonate 0

hive is not allowed to impersonate hive

Après votre configuration Hadoop, dans mon cas Hortonworks, vous pouvez être confronter au message d’erreur « hive is not allowed to impersonate hive » lorsque vous tentez d’accéder à votre cluster : Error: Failed to open...

erreur_console 0

Oozie web console is disabled.

Vous essayez d’accéder à la console Oozie, via http://host_name:11000/oozie/, et obtenez le message ci-dessous. Franchement pas cool.   Pourquoi ce message ? Un petit  coup d’œil à la documentation Oozie donne quelques pistes (https://oozie.apache.org/docs/3.1.3-incubating/DG_QuickStart.html)....

sqoop et hdfs 0

Utiliser Sqoop pour charger des données dans HDFS

C’est pas un scoop, mais sachez tout de même que Sqoop est un projet de la fondation Apache. Je sais c’est une blague facile… Passons et intéressons-nous plutôt à cet outil permettant une cohabitation...