Le Datalake Manager est votre compagnon pour accéder à vos données stockées sur notre plateforme BigData.

Le Datalake Manager de Skapánê charge, récupère, renomme, efface ou déplace des fichiers de données. L’utilisateur définit les sources de données à partir desquelles les données sont récupérées (local, http, FTP,…). Par ailleurs, des flux temps réels peuvent également alimenter le Datalake Manager.

Le Datalake Manager propose les fonctions suivantes :

  • Navigation dans les fichiers et données stockées ;
  • Import / Export de données avec gestion de transformations simples (dates, numériques, …) ;
  • Renommage / Suppression / Déplacement de fichiers ;
  • Récupération de fichiers externes (Open Data, fichiers DSI, fichiers accessibles sur le web, …) avec mise à jour automatique configurable ;
  • Prévisualisation des fichiers ;
  • Création automatique de Tables HIVE/HBase alimentant les dashboards avec des données additionnelles.

Le Datalake Manager propose des fonctions de transformation prêtes à l’emploi sur les données en entrée :

  • Gestion des formats de date ;
  • Jointure de fichiers/données selon une colonne d’identifiant ;
  • Gestion des types numériques ;
  • Gestion et conversion des unités de mesure ;                                                                                                                                         Exemple : une donnée reçue en gallons pourra être convertie dynamiquement en litres.

De plus, en configurant et en combinant ces fonctions de transformation, vous avez la possibilité d’intégrer n’importe quel format de données dans le produit.

Ainsi, le Datalake Manager définit des formats d’export via une interface graphique. Ces formats seront appliqués aux données enrichies ou générées par le produit (alertes, prédictions,…). Vous pouvez configurer l’export pour fonctionner automatiquement et de manière périodique.