Repose en paix Vieux ETL

L'autre chaussure est tombée aujourd'hui. L'année dernière, Tibco a été racheté par une société de capital-investissement pour 4,3 milliards de dollars. Aujourd'hui, il a été annoncé qu'Informatica serait rachetée dans le cadre d'une transaction d'une valeur de 5,3 milliards de dollars.

Ainsi, en l'espace de quelques mois, nous avons constaté l'impact sur le marché de l'abandon par les services informatiques des entreprises des technologies de gestion et d'intégration des données existantes lorsqu'il s'agit de gérer les applications et les données sociales, mobiles, analytiques/grandes données, cloud computing et l'internet des objets(SMACT) d'aujourd'hui.

Pas d'ESB . Pas d'ETL. Sans blague !

L'année dernière, j'ai publié 10 raisons pour lesquelles les anciennes technologies ETL et ESB continueront à se battre à l'ère du SMACT. Ces raisons sont les suivantes :

  1. Cannibalisation de l'activité principale sur site
  2. Les questions de patrimoine dans l'Union européenne Cloud
  3. L'EAI sans l'ESB
  4. Au-delà de l'ETL
  5. Le point à point manque l'essentiel
  6. Franken-tegration
  7. L'intégration des Big Data n'est pas essentielle...ou Cloud
  8. Mise à l'échelle élastique
  9. Une rampe d'accès à On-Prem
  10. Focus et ADN

La semaine dernière, le responsable de la gestion des produits de SnapLogic a rédigé le billet suivant iPaaS : Une nouvelle approche de l'intégration cloud. Il s'est exprimé sur l'ETL ou l'intégration de données par lots uniquement :Pas d'ETL

"L'ETL est généralement utilisé pour entrer et sortir des données d'un référentiel (data mart, data warehouse) à des fins d'analyse, et répond souvent à des besoins de nettoyage et de qualité des données ainsi que de gestion des données de référence (MDM). Avec l'arrivée d'Hadoop pour traiter de manière rentable la collecte et le stockage de données structurées et non structurées, la pertinence des approches ETL traditionnelles centrées sur les lignes et les colonnes est aujourd'hui remise en question".

David Linthicum, analyste et praticien du secteur, va plus loin dans son livre blanc : The Death of Traditional Data Integration (La mort de l'intégration traditionnelle des données). Ce document traite de l'essor des services et des technologies de diffusion en continu et, en ce qui concerne l'ETL, il fait remarquer ce qui suit :

"Les outils ETL traditionnels ne s'intéressaient qu'aux données qui devaient être copiées et modifiées. Les systèmes de données émergents abordent l'utilisation de grandes quantités de données en laissant en grande partie les données en place, et en accédant plutôt aux données et en les transformant là où elles se trouvent, qu'elles aient une structure ou non, et quel que soit l'endroit où elles se trouvent, comme dans les nuages privés, les nuages publics ou les systèmes traditionnels. JSON, un format d'échange de données léger, apparaît comme l'approche commune qui permettra à la technologie d'intégration des données de traiter simultanément des données tabulaires, non structurées et hiérarchiques. Au fur et à mesure que nous progressons, le rôle de JSON deviendra encore plus stratégique pour les approches d'intégration de données émergentes".

Enfin, Gaurav Dhillon, cofondateur et PDG de SnapLogic, qui a également cofondé et dirigé Informatica pendant plus de 12 ans, s'est récemment exprimé sur la différence entre l'ancienne et la nouvelle façon de garantir que les données et les applications de l'entreprise restent connectées :

Nous pensons qu'il est faux de dire : "Vous devez choisir un ESB pour ceci et un ETL pour cela". Nous pensons qu'il s'agit en fait d'un problème de 'tissu conjonctif'. Vous ne devriez pas avoir à modifier la charge de données ou à utiliser plusieurs plateformes d'intégration si vous connectez des applications SaaS ou un sous-système d'analyse. Il s'agit simplement de l'élan des données. Vous avez des conteneurs de données plus grands et massifs, qui se déplacent parfois plus lentement dans le lac de données. Dans le scénario de connexion cloud , vous avez beaucoup de petits conteneurs qui arrivent très rapidement. Le bon produit doit vous permettre de faire les deux. C'est là que l'iPaaS entre en jeu".

Chez SnapLogic, nous nous concentrons sur la fourniture d'un site plateforme unifié, productif, moderne et connecté pour permettre aux entreprises de résoudre le dilemme de l'intégrateur et de se connecter plus rapidement, parce que les bulldozers et les bus ne vont pas voler à l'ère SMACT.

J'aimerais souhaiter à tous mes anciens collègues d'Informatica une bonne continuation dans le processus d'investissement privé. (Veuillez noter que SnapLogic recrute).

Nous recrutons !

Découvrez votre prochaine grande opportunité de carrière.