CONSTRUCTION D'UN SOCLE INDUSTRIEL ‘FAST DATA’

Auteurs :

Mathieu Delporte

Architecte Sénior Expert

Contactez

2 minutes

Big data Assurance

Pour la filiale assurance d’un groupe bancaire international de premier plan, Sentelis a conçu et mis en œuvre une plateforme ‘Fast Data’ industrielle en un temps record sur la base de son méta-framework Big Data, ‘SmartFoundations™ Data Fabric’. A la clé, l’opérationnalisation d’usages opérationnels temps réel à très forte volumétrie (‘off-loading’ de ‘main frame’, v360°), réglementaire (IFRS17), self-service data et data science.

L’enjeu : réduire les coûts ‘main frame’ et déployer de nouveaux usages des données

Les nouveaux usages digitaux imposent d’accéder via mobile à des données historiquement ‘bunkerisée’ dans les cœurs systèmes des entreprises. Surcharger ces systèmes n’est généralement pas une option viable économiquement, voire technologiquement, notamment lorsqu’il s’agit de servir simultanément des centaines, voire des milliers de clients. Une des alternatives est de déporter les opérations de consultation, voire de traitements sur une plateforme de données. Plus facile à dire qu’à faire, notamment lorsque la fraicheur des données est un paramètre critique. C’est pour autant, le défi qu’a décidé de relever cet acteur majeur de l’assurance qui a fait confiance à l’expertise de Sentelis.

La solution : s’adosser à une ‘Data Fabric’ industrielle

Proposer une alternative économique et fiable à des traitements historiquement pré-carrés du ‘Main Frame’ nécessite une forte expertise sur l’ensemble de la chaine de traitement de l’information : de la capture des évènements transactionnels, à leur transport, ingestion et traitement au fil de l’eau. Pour relever ce challenge architectural et technologique, Sentelis s’est appuyé sur son meta-framework SmartFoundations™ Data Fabric. Ce framework capitalise toute l’expérience d’industrialisation des technologies ‘Big Data’ de Sentelis. Supportant les filières ‘batch’ et ‘stream’, il permet à partir d’un catalogue de méta-données et de composants génériques, l’automatisation des ‘data pipelines’, de l’ingestion des données à l’exposition de leur traitement sous la forme d’API Data. Masquant la complexité des technologies sous-jacentes, proposant des fonctions issues des problématiques terrain complexes que nous avons résolues de projet en projet, il permet de se concentrer sur la réalisation des usages de la data.

La méthode

En collaboration avec les équipes clients, l’intervention de Sentelis a porté sur

  • La définition de la cible d’architecture data-centric et des patterns de traitements associés
  • La définition de la trajectoire de mise en œuvre
  • La définition de l’architecture de la plateforme data sur l’ensemble des dimensions architecturales et intégrant l’offre Big Data de la production informatique
  • La mise en place des fondamentaux de l’approche agile et son animation pour construire la plateforme data et les premiers usages
  • L’intégration du meta-framework Sentelis SmartFoundations™ Data Fabric à l’offre de service ‘Big Data’ de la production informatique
  • La mise en place d’une chaine d’intégration continue
  • La formation d’architectes et de développeurs au développement d’usages industrialisés sur la base de ce framework
  • La réalisation et ma mise en production des premiers usages à forte exigence en termes de volume, véracité et vélocité

La plateforme ‘Fast Data’ mise en place par Sentelis traite plus de 25 millions de messages par heure avec un taux de cohérence entre les données sources et les données ingérées de 99,99999625%. Un comportement iso à 100% pour les usages ‘Main Frame’ portés sur la plateforme et ce, sur des traitements pouvant atteindre le milliards d'enregistrements.