Pour gérer vos consentements :
Categories: Big DataCloud

Big Data : MongoDB supporte Hadoop Hive et la sauvegarde HDFS

La base de données MongoDB rencontre un certain succès depuis quelques années. Plus particulièrement sur le web et les applications mobiles qui produisent des modèles de fichiers JSON supportés par la base.

Dans le même temps, Hadoop s’affiche désormais de facto en plateforme analytique du big data.

La rencontre entre ces deux ‘produits’ tendance s’impose donc. Ce qui explique certainement la popularité acquise par le connecteur MongoDB for Hadoop. Ainsi, que la possibilité offerte par ce dernier de laisser s’exécuter les processus d’analyse des données MongoDB dans la base plutôt que de les expédier dans Hadoop.

Support de Hive et de BSON dans HDFS

Le nouveau connecteur MongoDB vient placer le support de Hive (le framework de requête SQL-like pour Hadoop) au-dessus de MapReduce (le framework Hadoop pour la manipulation des données) et de Pig (équivalent de Hive, mais qui exploite le langage Pig Latin pour les requêtes).

L’autre nouveauté majeure porte sur le support des fichiers BSON (les fichiers JSON en format binaire), natifs dans MongoDB, dans HDFS (Hadoop Distributed File System), afin de pouvoir sauvegarder ces fichiers de la base de données et de ses clusters en production dans Hadoop.

Dernier apport, MongoUpdateWriteable est un enrichissement de processus qui offre la possibilité d’exécuter des jobs MapReduce sur des collections existantes. Originellement, les collections doivent être reconstruites dans la base à chaque exécution des jobs MapReduce…


Voir aussi

Silicon.fr étend son site dédié à l’emploi IT
Silicon.fr en direct sur les smartphones et tablettes

Recent Posts

Cloud : AWS change de RSSI

CJ Moses, CISO adjoint et VP Security Engineering d'AWS, prendrait le relais de Stephen Schmidt,…

2 jours ago

Stockage primaire : que surveiller après la révolution flash ?

La mémoire flash désormais bien installée, comment évolue le marché du stockage primaire ? Aperçu…

2 jours ago

Ingénierie : 4 propositions avant la présidentielle 2022

Réindustrialisation, souveraineté énergétique, transition climatique... Syntec Ingénierie fait ses recommandations aux candidats à la présidentielle…

2 jours ago

Avenir de l’open source : les alertes se multiplient

Que faire face aux entreprises qui se nourrissent de l'open source sans contribuer en retour…

2 jours ago

Numérique et environnement : ces 7 start-up portées par Microsoft

Microsoft et ses partenaires soutiennent 7 jeunes pousses européennes, de Carbon Time à Space4Good, via…

3 jours ago

Tanzu Application Platform : VMware a-t-il trouvé son OpenShift ?

Top départ pour Tanzu Application Platform. Avec ce PaaS pour Kubernetes, VMware concrétise une démarche…

3 jours ago