Pour gérer vos consentements :

LinkedIn rend Open Source Pinot, son outil d’analyse en temps réel

LinkedIn multiplie les initiatives dans le Big Data. Huit mois après avoir dévoilé son framework d’analyse de données en temps réel Pinot (en réference au cépage du même nom), le réseau social professionnel américain a annoncé, mercredi 10 juin, rendre sa solution Open Source. Le but : ouvrir Pinot aux contributions de développeurs tiers et élargir son adoption.

Pour collecter des évènements en temps réel et réagir à l’activité de l’utilisateur en quelques secondes, LinkedIn s’est détourné de solutions propriétaires et d’alternatives comme Druid, le data store Open Source qui se rapproche le plus de Pinot. Cet outil maison a été conçu pour traiter « des milliards d’évènements en temps réel par jour ». Hautement évolutif et tolérant aux pannes, selon ses promoteurs, Pinot offre un faible temps de latence et dispose d’une interface de type SQL.

Pinot en téléchargement sur Github

En interne, LinkedIn utilise Pinot depuis plus de deux ans avec 30 de ses produits, dont XLNT, plateforme de test A/B, indique dans un billet de blog Kishore Gopalakrishna, responsable technique logiciels chez LinkedIn. Parallèlement, Pinot sert de backend à plus de 25 produits d’analyse destinés aux clients et aux membres du réseau (Qui a consulté votre profil ou vos nouvelles ? Quel est l’impact des offres d’emploi et des annonces publicitaires diffusées via LinkedIn…).

Le code source de Pinot est disponible sous licence Apache 2.0 sur Github. En plus de Pinot, LinkedIn a « ouvert » d’autres solutions d’infrastructure data, parmi lesquelles : Azkaban, Kafka, Samza et Voldemort. Il n’est pas le seul. D’autres grands noms du numérique ont rendu Open Source leurs propres outils d’analyse et traitement de flux, dont eBay avec Pulsar et Twitter avec Storm.

Lire aussi :
Emploi et Big Data : LinkedIn ouvre ses données aux chercheurs
Linkedin s’empare de l’expertise Big Data de Carreerify

Crédit : McIek Shutterstock

Recent Posts

Quels impacts de l’IA générative sur le monde de la cybersécurité ? : regards croisés entre Onepoint, Wavestone et Fortinet

Quels sont les impacts immédiats de l'IA générative sur la cybersécurité ? Comment le contexte…

2 heures ago

Des serveurs IA cyberattaqués : le vecteur s’appelle Ray

Un éditeur attire l'attention sur des attaques exploitant l'absence d'autorisation dans une API du framework…

6 heures ago

Amazon débloque la deuxième tranche de son investissement dans Anthropic

Après un premier financement en septembre 2023, Amazon a débloquer le reste de l'enveloppe qu'il…

8 heures ago

Les logiciels libres entrés au SILL au premier trimestre 2024

D'Alpine Linux à XPipe, voic les dernières entrées au SILL (Socle interministériel de logiciels libres).

1 jour ago

Quelques chiffres pour contextualiser le premier livrable du comité de l’IA générative

Le comité de l'IA générative établi en septembre 2023 par le Gouvernement a formulé ses…

1 jour ago

Le DMA, cette entreprise de microgestion des Big Tech

L'UE multiplie les enquêtes et les procédures de non-conformité contre des entreprises soumises au DMA.

1 jour ago