Version d‘août 2019 (4.18) : Unifier les silos de données grâce à l‘IA les workflows

12 minutes de lecture

Nous sommes heureux d‘annoncer la disponibilité générale de la version 4.18 d‘août 2019 de la plateforme d‘intégration intelligente SnapLogic (IIP). SnapLogic Intelligent Integration Platform (IIP). Cette version continue de favoriser une meilleure productivité, des connaissances plus approfondies et des performances plus élevées, permettant aux organisations de construire leur écosystème numérique et de rendre l‘intégration d‘entreprise encore plus rapide et plus facile. La version d‘août 2019 plateforme ajoute également un nouveau portail de développement d‘API pour exposer les points d‘extrémité d‘API aux développeurs externes, ainsi qu‘une nouvelle prise en charge du traitement des big data pour les clients qui construisent des lacs de données sur Azure Databricks.

Une barrière à l‘entrée plus faible pour les intégrateurs citoyens et un temps de retour sur investissement plus rapide pour les spécialistes de l‘intégration

Depuis sa création, SnapLogic s‘est attaché à faciliter la tâche des citoyens et des intégrateurs ad hoc. À cette fin, nous proposons un site plateforme sans code et un certain nombre de fonctions de productivité qui facilitent la création d‘intégrations pour tout le monde. Avec le lancement de l‘assistant d‘intégration Iris AI il y a deux ans, SnapLogic a été le premier à améliorer la productivité grâce à l‘IA sur le marché iPaaS. Iris AI s‘appuie sur la connaissance de tous les pipelines réalisés avec succès pour recommander le premier Snap, le Snap suivant et le Snap précédent aux utilisateurs lorsqu‘ils construisent leurs pipelines. 

Avec cette version, nous améliorons encore la productivité des intégrateurs de deux manières significatives.

- Iris AI a amélioré la recherche :

  • Snap Search : SnapLogic plateforme effectue désormais une recherche contextuelle plutôt qu‘une simple recherche basée sur les étiquettes et exploite la documentation de SnapLogic pour présenter à l‘utilisateur des résultats contextuels pertinents. Par exemple, si un utilisateur souhaite lire un fichier à partir d‘un serveur SFTP, le fait de taper "sftp" dans le champ de recherche fera apparaître des Snaps tels que file reader, file writer et directory browser, puisque la documentation de ces Snaps mentionne SFTP comme l‘un des points de terminaison pris en charge. 
  • Recherche de pipeline : Une organisation peut avoir des centaines d‘utilisateurs qui utilisent SnapLogic plateforme. Chaque utilisateur peut avoir des dizaines de projets qu‘il utilise à tout moment. La recherche d‘un pipeline avec des mots-clés ou des Snaps spécifiques dans de nombreux dossiers est une tâche qui prend beaucoup de temps. Désormais, lorsqu‘un utilisateur recherche des pipelines avec des Snaps ou des mots-clés spécifiques, le site plateforme répond à la question "où" et "combien".

- Iris AI - Recommandation de pipeline :

  • Au-delà des Snaps, Iris recommande désormais des pipelines entiers aux utilisateurs en fonction des points d‘extrémité qu‘ils souhaitent connecter. Cela réduit considérablement les barrières à l‘entrée pour les nouveaux intégrateurs qui tentent d‘adopter SnapLogic plateforme , car ils peuvent désormais faire des suppositions plus éclairées. Lorsqu‘un utilisateur fait glisser le Snap source et le Snap destination sur le canevas, Iris exploite l‘intelligence des pipelines de l‘org de l‘utilisateur ou des pipelines vérifiés du catalogue de modèles SnapLogic pour suggérer des pipelines complets à l‘utilisateur.

Regardez la vidéo sur l‘amélioration de l‘IA de SnapLogic Iris vidéo SnapLogic Iris AI Enhancement pour en savoir plus.

Amélioration de la surveillance grâce aux alertes sur l‘espace disque 

Les entreprises ont besoin d‘une bonne vision de leurs environnements SnapLogic. Sans suffisamment d‘espace disque ou de mémoire, un pipeline peut s‘arrêter sans signaler clairement à l‘utilisateur ce qui s‘est réellement passé. Au cours des dernières versions, nous avons ajouté des alertes sur l‘utilisation du CPU et de la mémoire afin que les administrateurs de SnapLogic puissent prendre des mesures correctives lorsque ces statistiques dépassent des seuils prédéfinis. Nous ajoutons des alertes dans le tableau de bord si l‘espace disque libre du système de fichiers tombe en dessous d‘un seuil prédéfini. Grâce à cette alerte, les utilisateurs peuvent prendre rapidement des mesures proactives et améliorer la fiabilité de l‘exécution du pipeline. 

Amélioration des SSO

L‘authentification unique (SSO) est la norme de sécurité de nombreuses entreprises. Nous prenons en charge les connexions SSO depuis de nombreuses années. Avec cette version, nous ajoutons la prise en charge de la déconnexion unique basée sur le fournisseur de services ou le fournisseur d‘identité, ce qui aide les clients à respecter les normes de sécurité de leur entreprise dans toutes les applications. 

Support de lignage des données

Les gestionnaires et architectes de données des organisations cherchent à rationaliser et à simplifier les silos de données afin de pouvoir trouver et utiliser facilement les données pertinentes. La connaissance de l‘utilisation d‘un actif de données sur les workflows facilite l‘analyse des causes profondes lorsque les données sont modifiées de manière inattendue, ainsi que le retrait et la consolidation efficaces des actifs de données. 

SnapLogic Data Lineage fournit une représentation graphique de la source de données et de tous les SnapLogic les workflows qui interagissent avec ces sources, ce qui permet aux utilisateurs d‘effectuer des analyses d‘impact ou de résoudre des problèmes de débogage. La représentation du lignage peut être l‘une des suivantes :

  • Une ressource de données -> (utilisée par plusieurs) pipelines SnapLogic
  • Un pipeline SnapLogic -> (qui interagit avec) Une ou plusieurs sources de données

Regarder la vidéo sur l‘amélioration de la plate-forme SnapLogic vidéo sur l‘amélioration de la plate-forme SnapLogic pour en savoir plus.

Gestion de l‘API : Permettre le libre-service par le biais du portail des développeurs d‘API

Avec cette version, les entreprises peuvent désormais activer le libre-service pour les consommateurs d‘API internes ou externes de manière transparente avec le portail des développeurs. Les consommateurs d‘API n‘ont pas besoin d‘informations d‘identification SnapLogic pour accéder au portail des développeurs. Le portail des développeurs permet aux consommateurs d‘API de découvrir les API par le biais d‘une interface de recherche, de sorte qu‘ils peuvent facilement découvrir les API qu‘ils recherchent. En outre, si le type d‘approbation d‘un proxy API a été défini comme manuel, les consommateurs d‘API externes doivent faire une demande explicite d‘accès à l‘API par l‘intermédiaire du développeur et se voir accorder l‘accès avant de pouvoir consommer les API. Ce flux de demandes d‘accès est une représentation de l‘autorisation avancée basée sur la liste de contrôle d‘accès (ACL). Ainsi, une organisation disposant d‘une petite équipe de développeurs/administrateurs d‘API peut gérer des milliers de consommateurs d‘API sans effort.

DevPortalRecherche Gif

En complément du portail des développeurs, le portail du gestionnaire d‘API permet d‘effectuer des tâches d‘administration. Ce portail d‘administration permet aux gestionnaires d‘API de gérer des milliers de consommateurs d‘API de manière transparente, à partir d‘un seul site unifié : plateforme. Le portail d‘administration offre un moyen automatisé d‘intégrer et de servir les utilisateurs internes et externes avec des ressources informatiques limitées et de réduire le coût total de possession (TCO). Grâce au portail d‘administration, un gestionnaire d‘API peut :

  • Exposer les proxies sélectionnés au monde extérieur, en les rendant visibles, ainsi que les API associées, sur le portail des développeurs.
  • Spécifiez le processus d‘approbation de l‘utilisateur, qui peut être automatique ou manuel. La procédure d‘approbation manuelle peut prendre en charge des flux d‘autorisation avancés
  • Gérer les consommateurs d‘API
  • Recherche de proxies API ou d‘API spécifiques 
  • Tester les API avant de les mettre à la disposition des consommateurs d‘API

Regardez la vidéo sur les améliorations de la gestion de l‘API SnapLogic Vidéo sur les améliorations de la gestion de l‘API SnapLogic pour en savoir plus.

Améliorations de SnapLogic eXtreme

eXtreme pour Azure Databricks : SnapLogic eXtreme a été lancé en août de l‘année dernière. Il démocratise le traitement des big data pour les analystes commerciaux, en leur permettant de construire des données visuelles les workflows pour traiter des données à l‘échelle du téraoctet. SnapLogic eXtreme n‘était à l‘origine disponible que sur Amazon Web Services et s‘appuyait sur Amazon EMR pour traiter les charges de travail big data à la demande. Avec la version d‘août 2019, les analystes commerciaux peuvent désormais appliquer la même approche visuelle à la création de big data les workflows dans Azure Cloud. SnapLogic eXtreme prendra en charge Azure Databricks en tant que moteur de traitement des big data avec Windows Azure Storage Blob (WASB) en tant que lac de données. Les organisations devraient tirer parti de SnapLogic eXtreme chaque fois que les ensembles de données combinés dépassent les seuils de mémoire d‘un seul nœud de traitement SnapLogic et qu‘une logique de transformation lourde doit être mise en œuvre. 

Amazon Redshift Snaps for eXtreme : Les utilisateurs peuvent désormais lire et écrire dans les bases de données Redshift dans les pipelines SnapLogic eXtreme.

Pour en savoir plus, regardez la vidéo sur l‘amélioration de SnapLogic eXtreme vidéo sur l‘amélioration de SnapLogic eXtreme.

Sécurité renforcée, administration efficace et meilleures performances grâce aux mises à jour Snap

Nous avons mis à jour toute une série de Snap Packs dans la version d‘août 2019.

Nous avons maintenant ajouté la prise en charge des nouvelles fonctionnalités pour les Snap Packs suivants.

  • Hadoop Snap Pack prend désormais en charge Azure Data Lake Storage Gen2 (ADLS Gen2). ADLS Gen2 combine la sécurité au niveau des fichiers et l‘échelle d‘ADLS Gen 1 avec le stockage hiérarchisé, le faible coût et la haute disponibilité d‘Azure Blob Storage. 

Le SnapLogic plateforme fait partie intégrante de l‘infrastructure informatique d‘une entreprise. En tant que tel, il doit être protégé par des outils et des normes de sécurité d‘entreprise rigoureux. L‘amélioration suivante du Snap Pack aide les organisations à améliorer leur posture de sécurité pour les déploiements SnapLogic.

  • Support Active Directory pour Microsoft SQL Server Snap Pack :
    • Les administrateurs peuvent désormais réutiliser les informations d‘identification d‘Active Directory pour authentifier les utilisateurs plutôt que de créer des utilisateurs individuels pour les serveurs Microsoft SQL.
  • Prise en charge de Kerberos pour Script Snap Pack :
    • PySpark Snap prend désormais en charge le mécanisme d‘authentification Kerberos, ce qui permet aux équipes de big data et d‘ingénierie des données d‘adopter ce standard d‘entreprise pour exécuter leurs charges de travail Spark.
  • Prise en charge du chiffrement S3 pour Snowflake Snap Pack :
    • Snowflake Snap pack prend désormais en charge le chiffrement des données au repos dans le lac de données S3, ce qui évite aux clients de devoir chiffrer et déchiffrer les données manuellement.

Les mises à jour Snap suivantes simplifient grandement le travail des administrateurs SnapLogic en facilitant l‘accès et la révocation des utilisateurs aux outils essentiels à la collaboration d‘équipe. 

  • Service Account Support for Binary and Box Snap Pack : 
    • Avec les comptes de service Google, les administrateurs SnapLogic peuvent facilement fournir un accès à plusieurs utilisateurs pour effectuer une ou plusieurs opérations au sein de la plateforme Google Cloud .
    • La prise en charge des comptes de service pour Box Snap Pack permet désormais aux administrateurs SnapLogic de gérer facilement plusieurs utilisateurs pour les ressources partagées dans leurs comptes Box.

Nous avons également apporté quelques améliorations au niveau des performances afin d‘améliorer le débit des données.

  • Le Confluent Kafka Snap Pack améliore considérablement les performances des Snaps Consumer et Acknowledge en acquittant les messages Kafka en masse plutôt que d‘acquitter chaque message séparément.

Inscrivez-vous au webcast sur la version SnapLogic August 2019 qui aura lieu le jeudi 15 août, pour découvrir de plus près les nouvelles mises à jour. Vous pouvez en savoir plus sur ces mises à jour en vous rendant à l‘adresse suivante Documentation SnapLogic. Vous pouvez également visiter le site de la Communauté SnapLogic pour en savoir plus.

Ancien vice-président de la gestion des produits chez SnapLogic

Nous recrutons !

Découvrez votre prochaine grande opportunité de carrière.