Profil de N Ny
0 missions réalisées
N Ny en quelques mots
FORMATION
2016 Formation Informatica PowerCenter
2015 Formation IBM DB2 Certified Database Associate (v10.5)
2014 Stambia formation avancée
Formation IBM Intégration des équipes TechSales IM
Formation IBM PureData System for Analytics Bootcamp
2012 Formation Big Data dédiée Partenaires
2011 Formation IBM Certified Designer Cognos 10 BI Reports
2009 Formation IBM Certified Solution Developer
2007 Ingénieur Mathématicien (Université Technique Baumann, Faculté sciences fondamentales, option mathématiques appliquées)
Formation IBM WebSphere DataStage, ProfileStage et QualityStage
2006 Formation IBM Cerfitified Database Associate
COMPETENCES TECHNIQUES
Intégration et traitement :
IBM DataStage 7.5.x, 8.x, 9.1, 11.7 (Server et PX) sur Grid sur YARN, Stambia, IBM ChangeDataCapture, Informatica PowerCenter, Talend OpenStudio, IBM BigIntegrate, Apache Spark, Hadoop (sur distribution HortonWorks), HortonWorks DataFlow (Apache NiFi, Apache Kafka), Apache ActiveMQ, Azure DataFactory
Restitution :
IBM Alphablox, IBM Cognos 8.x, JasperServer
Base de Données :
IBM DB2 (+BigSQL), Hive, HBase, MySQL, Oracle, Vectotrwise, Sybase IQ
Langages :
SQL, Java, JavaScript, Scala, Visual Basic, C, DataStage Basic, XML/XSLT, HTML/CSS
LANGUES ETRANGERES
Anglais Intermédiaire
Russe Maternel
EXPERIENCE PROFESSIONNELLE
Depuis 2017, BOLLORE LOGISTIC
Expert BIG DATA et IoT
1 – Mise en place d’une Architecture de plateforme DataLake :
Installation et configuration de cluster Hadoop (rack awareness, redistribution des blocks entre SSD/HDD) et BigSQL
Installation et configuration de DataStage sur cluster en mode YARN
Configuration de HA (High Availability)/HADR (High Availability Disaster Recovery) pour le cluster Hadoop/BigSQL
Développement des flux de chargement des données DataLake
Développement de JavaTransformer pour les transformations complexes
Mise en place de l’outil de gestion de configuration SVN pour gérer les versions des jobs, et des éléments associés
2- Etude comparative des ETL IBM DataStage et Microsoft Azure DataFactory :
Définition des données de référentiel : Couverture fonctionnelle (Gestion des métadonnées en run-time, possibilité de customisation, orchestration, etc.), coût, type de licence, …
Évaluation des outils logiciels : Mise en œuvre des tests et réalisation des cas d’usages
Qualification : Définition des besoins et des contraintes liés à la démarche de sélection
Sélection : Filtre sur les critères, les fonctionnalités, le TCO
Synthèse : Présentation du tableau de synthèse avec les éléments comparatifs
Restitution des avantages et des inconvénients, les points forts et les points faibles de chaque solution
3 – Mise en place d’une Architecture de plateforme de traitement des données IoT en temps réel :
Installation et configuration des produits Hortonworks DataFlow et ActiveMQ sur le cluster
Développement des interfaces REST pour récupérer et harmoniser des données de fournisseurs différents (OnAsset, SensiTech, Sendum)
Développement des flux Apache NiFi de traitement des données des capteurs IoT en temps réel
Monitoring de flux des données IoT
Environnement technique :
IBM DataStage 11.7, Azure BlobStorage, Azure DataFactory, Azure SQL Datawarehouse, Polybase (sur Azure), Linux RHEL, HortonWork DataFlow (Apache NiFi, Kafka), Apache ActiveMQ HortonWorks DataPlatform (HDFS, Hive, HBase), IBM BigSQL, Java, Grafana, IBM DataStage 11.5 sur Hadoop (BigIntegrate), SVN
En 2016 et en 2018, MICHELIN
Expert DataStage
Série d’interventions ponctuelles en tant qu’expert DataStage pour aider Michelin à améliorer les performances de l’ETL DataStage.
Analyse de l’architecture et du dimensionnement du serveur :
Analyse de paramétrage DataStage
Analyse de paramétrage AIX
Analyse de comportement des jobs sur les axes différentes (pour identifier les problèmes avec performance)
Audit de nouvelle plateforme d’intégration de données :
Vérification de paramètres du système Linux
Vérification de paramètres DataStage
Analyse d’infrastructure des serveurs ETL (Prod, R7, etc.)
Audit l’ensemble de composants d’infrastructure ETL sous AIX (DataStage, Oracle, AIX) :
Vérification de paramètres du moteur DataStage
Vérification de paramètres du système AIX
Mise en œuvre de paramètres permettant de déboguer des problèmes potentiels
Audit de qualité de développement
Mise en œuvre de recommandation pour l’amélioration de jobs en termes de qualité de développement et performance
Environnement technique : AIX 7, IBM DataStage 8.5/8.7/11.5, Linux, Oracle 11g/12c
En 2015, SKYGUIDE
Expert DataStage
Gestion de la montée de version de l’ETL DataStage et amélioration des performances des flux depuis SAP :
Installation du produit (client – server)
Installation de Pack for SAP R/3 (client – server)
Migration des projets DataStage de v7.5 vers v11.3
Modifications des jobs pour correspondre aux best-practices de développement des jobs utilisant connecteur SAP
Développement de flux envoyant des fichiers via SFTP
Environnement technique : DataStage 11.3, SAP
De 2014 à 2018, STAUBLI
Expert STAMBIA
Développement des interfaces de migration des données entre systèmes ERP hétérogènes et SAP :
Développement des flux de données entre les systèmes externes et SAP
Génération des IDOCs pour intégrer des données d’AS/400 vers SAP
Développement des templates Stambia pour généraliser des opérations fréquentes
Environnement technique : Stambia, AS/400, SAP, XMLXSLT, XPATH, Rhino, Groovy
En 2014, La Plateforme du bâtiment
Expert STAMBIA
Intervention ponctuelle d’audit et de conseil sur les méthodes et les pratiques de développements sous Stambia pour résoudre des problèmes bloquants
Instruction de Best Practice
Industrialisation des solutions
Modification des templates Stambia pour répondre aux besoins du client
Environnement technique : Stambia 17.2, Sybase IQ, MSSql, XMLXSLT, XPATH
De Mai à Juillet 2014,
IBM
Expert/Formateur DataStage
Formation DataStage 9.1 :
Formation des équipes sur les bases du développement DataStage
Formation avancée (création des routines PX, création des jobs génériques, SCD, Transformer Loops, nouveaux stages)
Réalisation 3 scenarios d’intégration de données en utilisant DataStage 9.1 :
Chargement de données à partir deux bases de données différentes
Extraction et transformation de données viennent de fichier XML
Chargement de données se trouvant dans le fichier XLSX et Google SpreadSheets
Présentation des capabilités d’IBM Infosphere Information Server 9.1 pour DQA :
Analyse de la qualité de données
Création des règles pour vérifier le format de champs e-mail, téléphones, pays, etc…
Environnement technique : DataStage, QualityStage, Information Analyzer, Discovery, Metadata Workbench
De 2012 à 2014, SNCF
CONSULTANT SENIOR DATASTAGE et BIG DATA
Développement et déploiement de procédures ETL génériques sur différents projets :
Révision des spécifications techniques ; consultation de chef du projet sur les sujets d’optimisation,
Faisabilité et normes de développement
Rédaction des spécifications techniques détaillées
Développement des procédures ETL
Industrialisation des procédures ETL – développement du moteur générique d’alimentation de DWH
Développement et optimisation de traitement DataStage avec une architecture Grid
Développement des entrepôts de données :
OSMOSE – gestion de matériel roulant,
GLA/GLAS – grand livre analytique / grand livre analytique stock
Encadrement technique de 3 personnes
Préparation du POC Big Data :
Installation du BigInsights (3 nœuds)
Préparation des scénarios
Environnement technique : Oracle, Vectorwise, IBM DataStage 8.5, Java, XMLXSLT, Linux, IBM InfoSphere BigInsights
En 2013, BI-3e
Expert DataStage – Migration
Développement d’un processus semi-automatique de migration des projets DataStage dans le cadre d’un projet au forfait de migration de 66 projets DataStage.
Environnement technique : DB2, IBM DataStage 8.1 vers 8.7, Oracle, XML
En 2013, I-BP
Expert DataStage
Développement des procédures ETL pour le moteur financier du groupe
Réécriture des programmes existants SAS en DataStage PX
Développements des Jobs
Encadrement technique des équipes de développement
Analyse et optimisation des performances
Expertise sur l’utilisation du module Balanced Optimization dans les projets d’I-BP
Environnement technique : Teradata, IBM DataStage 9.1, IBM DataStage Balanced Optimization
En 2013, RJD – Compagnie des chemins de fer Russes
CONSULTANT BI / DBA
Conception de la structure de la BdD
Optimisation de la performance de la BdD (plus que 500 utilisateurs concurrents, plus que 500M lignes dans la table principale)
Développement de back-end du système de restitution de données (Java + Spring + FreeMarker)
Développement de Front-end du système de restitution de données – single page application en style « Bureau » (framework ExtJs + FusionCharts)
Développement des procédures ETL
Installation et mise au point des logiciels
Environnement technique : IBM DB2, Talend Open Studio, Java, FreeMarker, XML, Spring, ExtJs, FusionCharts, HTML, Ajax, CSS, Linux
De 2006 à 2010, VOLKSWAGEN GROUP
CONSULTANT BI
Développement et mise en place du système décisionnel en alimentation et restitution :
Conception de la structure de l’entrepôt de données
Développement des procédures ETL
Développement du système des rapports
Développement des sources de données multidimensionnelles (OLAP cubes)
Développement des rapports analytiques distribués par catégories avec la division du droit d’accès
Optimisation de la performance de l’entrepôt de données
Chargement de l’entrepôt de données à partir de sources de données extérieures : fichiers plats, XLS fichiers, MS SQL, fichiers COBOL
Développement des web services permettant le chargement de l’entrepôt de données avec les données financières
Installation et mise au point des logiciels
Environnement technique : IBM DB2, IBM DataStage, IBM WebSphere, Java (spring, jExcelApi), C (pour les sous-programmes du DataStage), XMLXSLT, SOAP, AJAX, JavaScript (ExtJs), HTML, Linux, AIX
