Pour gérer vos consentements :
Categories: Big DataCloud

Big Data : MongoDB supporte Hadoop Hive et la sauvegarde HDFS

La base de données MongoDB rencontre un certain succès depuis quelques années. Plus particulièrement sur le web et les applications mobiles qui produisent des modèles de fichiers JSON supportés par la base.

Dans le même temps, Hadoop s’affiche désormais de facto en plateforme analytique du big data.

La rencontre entre ces deux ‘produits’ tendance s’impose donc. Ce qui explique certainement la popularité acquise par le connecteur MongoDB for Hadoop. Ainsi, que la possibilité offerte par ce dernier de laisser s’exécuter les processus d’analyse des données MongoDB dans la base plutôt que de les expédier dans Hadoop.

Support de Hive et de BSON dans HDFS

Le nouveau connecteur MongoDB vient placer le support de Hive (le framework de requête SQL-like pour Hadoop) au-dessus de MapReduce (le framework Hadoop pour la manipulation des données) et de Pig (équivalent de Hive, mais qui exploite le langage Pig Latin pour les requêtes).

L’autre nouveauté majeure porte sur le support des fichiers BSON (les fichiers JSON en format binaire), natifs dans MongoDB, dans HDFS (Hadoop Distributed File System), afin de pouvoir sauvegarder ces fichiers de la base de données et de ses clusters en production dans Hadoop.

Dernier apport, MongoUpdateWriteable est un enrichissement de processus qui offre la possibilité d’exécuter des jobs MapReduce sur des collections existantes. Originellement, les collections doivent être reconstruites dans la base à chaque exécution des jobs MapReduce…


Voir aussi

Silicon.fr étend son site dédié à l’emploi IT
Silicon.fr en direct sur les smartphones et tablettes

Recent Posts

GenAI : le Royaume-Uni poursuit ses investigations sur les partenariats de Microsoft et Amazon

L'Autorité de la concurrence et des marchés (CMA) a lancé la phase de recherche de…

17 heures ago

Clients de VMware : les raisons de la colère

Broadcom remplace pas moins de 168 logiciels VMware par deux grandes licences de location correspondant…

18 heures ago

Laurent Carlier – BNP Paribas Global Market : « L’IA permet de modéliser des relations plus complexes, mais il faut rester prudent »

La banque d’investissement de BNP Paribas utilise l'IA pour proposer des stratégies d’investissement individualisées, en…

19 heures ago

Open Compute Project : les datacenters partagent des bonnes pratiques pour l’environnement

OVHCloud partage ses efforts environnementaux au sommet de l’Open Compute Project qui se tient à…

2 jours ago

Phi-3-mini : Microsoft lance son premier SLM

Avec Phi-3-mini, Microsoft lance un SLM conçu pour attirer une clientèle disposant de ressources financières…

2 jours ago

Apple : l’UE serait prête à approuver son plan pour ouvrir l’accès NFC

La Commission européenne serait sur le point d'approuver la proposition d'Apple visant à fournir à…

2 jours ago