Version de mai 2019 (4.17) : Une véritable automatisation de l'entreprise

9 minutes de lecture

Amélioration de la productivité, de la connaissance et de la performance grâce aux progrès de l'automatisation de l'entreprise

Nous sommes heureux d'annoncer la disponibilité générale de la version 4.17 de mai 2019 de la plateforme d'intégration intelligente (IIP) de SnapLogic. SnapLogic Intelligent Integration Platform (IIP). Cette version améliore nos capacités d'automatisation d'entreprise en vous donnant les moyens de construire vos intégrations plus rapidement, favorisant ainsi la productivité, de meilleures perspectives et de meilleures performances. Cela démontre notre focalisation continue sur l'utilisation de l'intelligence artificielle (IA) et des techniques d'apprentissage automatique (ML) pour stimuler l'innovation et la productivité pour nos utilisateurs finaux.

Plate-forme d'intégration intelligente SnapLogic : Une productivité accrue et des connaissances plus approfondies

Visualisation de la sortie de l'aperçu :

Une image en dit long ! SnapLogic plateforme offre désormais une puissante capacité à visualiser les données en mode prévisualisation à chaque étape du pipeline afin de fournir un aperçu rapide des données au fur et à mesure qu'elles circulent dans le pipeline. Différents types de graphiques - barres, lignes, camemberts, nuages de points, etc. - sont désormais pris en charge.

SnapLogic-CSV-parser-1

Vous pouvez modifier le nombre d'enregistrements à prévisualiser dans les Snaps de votre pipeline. Le paramètre par défaut est de 50 enregistrements. En fonction du pipeline, vous pouvez augmenter le nombre d'enregistrements pour une visualisation plus précise de l'ensemble des données.

SnapLogic-auto-validate-2

La visualisation des données de sortie de l'aperçu permet aux intégrateurs ad hoc d'identifier rapidement les modèles et les anomalies dans les données de sortie. Les intégrateurs peuvent réduire le délai de rentabilité en corrigeant rapidement les erreurs.

Désactiver Snap :

Les spécialistes de l'intégration et les intégrateurs citoyens construisent des pipelines complexes pour connecter les points d'extrémité des applications et des données. Cependant, plus un pipeline devient complexe, plus il est difficile et long de le déboguer. Les intégrateurs peuvent désormais désactiver un Snap pendant les tests et le dépannage sans supprimer les Snaps ou les segments d'un pipeline. Grâce à cette fonctionnalité, un utilisateur peut désactiver un Snap pendant la validation, l'exécution ou les deux. La désactivation d'un Snap entraîne la désactivation de tous les Snaps en aval.

SnapLogic-disable-snap

Avec la possibilité de désactiver un Snap, les entreprises peuvent rendre leurs intégrateurs plus productifs car ils disposent désormais de capacités de dépannage sans avoir besoin de modifier de manière significative les pipelines.

Mises à jour des performances :

SnapLogic plateforme propose désormais un certain nombre de mises à jour de performance qui accélèrent l'exécution des tâches et permettent une meilleure utilisation des ressources informatiques. Les tâches déclenchées s'exécutant sur des Groundplexes prennent désormais en charge la mise en cache locale, ce qui améliore les performances. Désormais, les exécutions de pipeline sont également réparties plus uniformément sur les nœuds Snaplex grâce à des algorithmes d'équilibrage de charge améliorés qui ont été mis en place pour prendre en compte des paramètres supplémentaires tels que l'utilisation de l'unité centrale et de la mémoire.

Alertes :

Les alertes permettent aux utilisateurs de SnapLogic plateforme de prendre des mesures sur des événements tels que les connexions d'utilisateurs, la réinitialisation de mots de passe, la congestion de Snaplex, les changements d'actifs, les utilisations quotidiennes d'API, etc. en cas de dégradation des performances ou d'accès non autorisé. Avec la version de mai 2019, SnapLogic introduit des alertes supplémentaires lorsque l'utilisation du CPU et de la mémoire sur les nœuds dépasse les seuils configurés. Les intégrateurs peuvent prendre rapidement des mesures correctives lorsque leurs nœuds sont surchargés afin de maintenir le débit de leur pipeline à un niveau élevé.

SnapLogic-notification-rule

Prise en charge des en-têtes binaires

Les pipelines SnapLogic traitent un grand nombre de fichiers binaires et il arrive que les en-têtes de ces fichiers doivent être modifiés. Sans la possibilité de manipuler l'en-tête d'un fichier binaire, ce fichier doit d'abord être converti au bon format, puis repassé en binaire après modification de l'en-tête. Les intégrateurs peuvent améliorer les performances de leurs pipelines en modifiant les en-têtes binaires dans la nouvelle vue binaire du mappeur. En outre, les en-têtes personnalisés sont désormais transmis tels quels dans le pipeline au lieu d'être rejetés.

Regardez la vidéo sur les améliorations de la plate-forme SnapLogic pour en savoir plus.

Gestion de l'API SnapLogic : Une meilleure sécurité et un support plus large

SnapLogic API Management est intégré à la plate-forme unifiée SnapLogic Intelligent Integration Platform (IIP) plateforme. Les consommateurs d'API peuvent se trouver au sein de l'organisation ou être des partenaires ou des clients. Pour répondre aux besoins de ce public varié ainsi qu'à divers besoins de conformité et de performance, les tâches sous-jacentes à ces API doivent pouvoir être exécutées sur le site cloud ou sur site, et les API elles-mêmes doivent être renforcées pour répondre aux normes de sécurité de l'entreprise.

Avec la version 4.17, la couche de gestion des API SnapLogic a été améliorée sur deux aspects importants afin de fournir une meilleure sécurité et un support plus large. Tout d'abord, les organisations peuvent désormais publier, gérer et surveiller les API pour les tâches configurées pour s'exécuter sur un Groundplex, en plus de gérer les API qui ont été configurées pour s'exécuter sur un Cloudplex.

Deuxièmement, nos clients peuvent appliquer la politique d'API OAuth2 pour sécuriser les API pendant la phase de gestion avant que les API ne soient publiées pour les consommateurs. OAuth2 est la norme préférée d'un certain nombre d'organisations pour sécuriser les points d'extrémité des API.

Regardez la vidéo SnapLogic API Management Enhancements pour en savoir plus.

SnapLogic Data Science : Entraînement supérieur des modèles pour les données inédites

Lancé en novembre 2018, SnapLogic Data Science est une solution qui permet aux utilisateurs de capturer et de préparer des données pour construire des modèles d'apprentissage automatique pour de nombreux cas d'utilisation professionnels réels.

Les ingénieurs de données et les "citizen data scientists" ont encore besoin d'une bonne dose de connaissances et d'expérience en science des données pour produire des modèles d'apprentissage automatique performants. Avec la version 4.17, les non-experts peuvent effectuer une analyse exploratoire des données avec le clustering, la technique d'apprentissage non supervisé la plus courante. Un "Snap de clustering" a été ajouté dans le cadre de l'offre "ML Core Snap Pack". ML Core Snap Pack et est utilisée pour trouver des modèles ou des groupements cachés dans les données. Elle prend en charge des scénarios d'apprentissage automatique tels que l'analyse des séquences de gènes, la segmentation du marché et la reconnaissance d'objets.

SnapLogic-clustering-snap
Figure 1 : montre un pipeline qui utilise le Clustering Snap.

Les ingénieurs et les scientifiques des données passent 70 % de leur temps à collecter et à nettoyer des données. Avec la version de mai 2019 de la plateforme d'intégration intelligente SnapLogic, nous donnons à ces utilisateurs les moyens de passer moins de temps à normaliser les ensembles de données. La solution 'Match Snap' effectue des liens d'enregistrement entre plusieurs sources de données qui peuvent représenter la même entité mais avoir des valeurs différentes - .g., comparer deux ensembles de données où l'Espagne est représentée de deux manières différentes : España vs. Espana.

SnapLogic-pipeline

SnapLogic-record-linkage
Figure 2 : Liens entre les enregistrements grâce à la fonction "Match Snap".

Un autre outil que nous mettons à la disposition des citoyens scientifiques est un nouveau logiciel de synthèse des caractéristiques (Feature Synthesis Snap). Feature Synthesis Snap" (Synthèse d'éléments) qui permet d'automatiser l'ingénierie des caractéristiques. Il leur permet d'utiliser des techniques d'ingénierie des caractéristiques pour transformer des données brutes en caractéristiques qui améliorent la précision des modèles sur des données inédites. L'ingénierie automatisée des caractéristiques peut réduire le temps de développement de l'apprentissage automatique de 10 fois par rapport à l'ingénierie manuelle des caractéristiques, tout en offrant de meilleures performances de modélisation.

La fonction "Feature Synthesis Snap" permet de créer automatiquement des caractéristiques à partir de plusieurs ensembles de données qui partagent une relation de type un à un ou un à plusieurs entre eux. Les caractéristiques générées comprennent la moyenne, le minimum, le maximum, le mode, l'unicité, le nombre, la somme et l'écart type.

Dans la version 4.17, nous avons également amélioré l'AutoML Snap de plusieurs façons qui permettent d'améliorer la productivité et la personnalisation pour les scientifiques de données citoyens, en les aidant à construire de meilleurs modèles ML dans un temps plus court.

  • Le site plateforme dispose désormais d'un tableau de classement au format HTML qui permet de mieux expliquer les résultats.
  • AutoML met beaucoup de temps à construire un modèle ML. AutoML Snap dispose désormais d'une seconde vue d'entrée dans laquelle l'utilisateur peut introduire le meilleur modèle jusqu'à présent de l'exécution précédente pour un apprentissage continu. Cela permet de réduire le temps nécessaire à AutoML Snap pour générer de nouveaux modèles ML améliorés.
  • Les utilisateurs ont la possibilité de fournir une liste de groupes d'algorithmes afin de décider du type d'algorithme à utiliser pour construire le modèle.

Visualisation des résultats du profilage : Les utilisateurs peuvent visualiser les résultats du profil sous forme de graphiques. Cela permet d'améliorer la productivité des data scientists et des data engineers, car ils peuvent désormais exploiter le résultat graphique pour déterminer facilement le nettoyage des données à effectuer.

Regardez la vidéo SnapLogic Data Science Updates pour en savoir plus.

Améliorations supplémentaires du Snap Pack

  • Hadoop Snap Pack: Le Hadoop Snap Pack existant a été certifié pour prendre en charge Cloudera (CDH) v5.16 et v6.1.
  • Kafka Snap Pack : Le Confluent Kafka Snap Pack existant a été certifié pour supporter Confluent plateforme v5.x comme recommandé par Confluent.
  • Workday Prism Analytics Snap Pack : L'option "Append" étant désormais prise en charge dans le Workday Prism Bulk Load Snap, les utilisateurs peuvent désormais ajouter les données requises à un ensemble de données existant et envoyer rapidement des données depuis différents systèmes vers Workday Prism.
  • Binary Snap Pack : Le Binary Snap Pack existant a été amélioré pour prendre en charge SMB v3.x et v2.x en plus de v1.x qui était pris en charge précédemment. Le protocole Server Message Block (SMB) est un protocole de partage de fichiers qui sert de base à la mise en œuvre du système de fichiers distribués de Microsoft. SMB v3.x fournit des schémas de sécurité avancés qui sont exigés par les organisations informatiques, ce qui en fait un choix privilégié pour les clients.

Inscrivez-vous au webcast sur la version SnapLogic May 2019 qui aura lieu le jeudi 16 mai pour découvrir de plus près les nouvelles mises à jour. Vous pouvez également visiter la Communauté SnapLogic pour en savoir plus.

Ancien vice-président de la gestion des produits chez SnapLogic
Catégorie : Produit

Nous recrutons !

Découvrez votre prochaine grande opportunité de carrière.