Passer de DataStage au SQL en mode ELT ou en mode ETL avec une base tampon conteneurisée
Passer de DataStage au SQL en mode ETL , ou avec une base tampon conteneurisée Certaines entreprises envisagent de quitter DataStage, le célèbre ETL d’IBM. Les raisons sont parfois liées aux coûts de licence ou aux enjeux de maintenabilité des processus. Mais ce glissement répond surtout à un besoin de plus en plus pressant de performance et de scalabilité : les processus gérés par les ETL historiques (tels que DataStage) tendent à reculer au profit de traitements en simple SQL ou en quasi SQL dans des bases de données modernes (comme BigQuery, Snowflake, Redshift, etc.), ou via des processus ETL plus légers. Il est possible d’automatiser la transition de DataStage vers du simple SQL ou du SQL enrichi, en mode ELT. Cependant, des enjeux de lisibilité et d’efficacité de la base de données cible peuvent se poser. Ils peuvent être adressés par la parallélisation des processus sur un conteneur tiers, au sein de bases de données modernes, en ...