Qlik Compose™ for Data Lakes

La solution la plus rapide pour des data lakes prêts à l'emploi dans votre analytics.

Automatisez vos pipelines de données afin qu'ils soient prêts à l'emploi dans votre analytics

Qlik Compose for Data Lakes (anciennement Attunity Compose) automatise vos pipelines de données afin de créer des jeux de données prêts à l'emploi dans votre analytics. En automatisant l'ingestion de data, la création de schémas et les mises à jour continues, les organisations accélèrent la valorisation de leurs data lakes.

Facilité de structuration et de transformation de la data

Une interface utilisateur intuitive et guidée vous permet de créer, de modéliser et d'exécuter des pipelines vers vos data lakes.

  • Générez automatiquement des schémas et des structures de catalogues Hive pour les ODS (Operational Data Stores, magasins de données opérationnelles) et les HDS (Historical Data Stores, magasins de données historiques), sans codage manuel.

Mises à jour permanentes

Vous avez la certitude que vos ODS et HDS représentent précisément vos systèmes source.

  • Utilisez le processus Change Data Capture (CDC) pour permettre l'analytics en temps réel, tout en réduisant les coûts globaux d'administration et de traitement.
  • Traitez efficacement le chargement initial avec le threading parallèle.
  • Tirez parti d'un partitionnement temporel avec cohérence transactionnelle afin de vous assurer que seules les transactions terminées dans un laps de temps défini sont traitées.

Tirez parti des toutes dernières technologies

Profitez des dernières avancées de Hive SQL et d'Apache, notamment :

  • Les nouveautés au niveau de Hive SQL, y compris l'opération ACID MERGE qui traite, de façon efficace, les insertions, les mises à jour et les suppressions de données, tout en assurant leur intégrité.
  • Traitement « pushdown » vers les moteurs Spark ou Hadoop. La logique de transformation générée automatiquement est transmise à Hadoop ou à Spark pour traitement lorsque les données circulent dans le pipeline.

Magasin de données historiques

Générez des jeux de données spécifiques pour l'analytics à partir d'un magasin complet de données historiques (HDS).

  • De nouvelles lignes sont automatiquement ajoutées au HDS au fur et à mesure de l'arrivée de nouvelles données en provenance des systèmes source.
  • Les nouveaux enregistrements du HDS sont automatiquement horodatés, ce qui permet de créer des analyses de tendances et autres data marts analytiques basés sur le temps.
  • Prise en charge des modèles de données de type 2, ce qui ralentit l'évolution des dimensions.

Découvrez nos solutions d'intégration de données modernes.

  • Streaming des données (CDC) en temps réel

    Simplifiez le streaming des données d'entreprise pour bénéficier d'une analytics et de microservices modernes grâce à une solution simple et universelle en temps réel.
  • Automatisation agile du data warehouse

    Concevez, créez, développez, déployez et gérez rapidement des data warehouses dans le cloud sur mesure, sans codage manuel.
  • Création de data lakes gérés

    Automatisez les processus complexes d'ingestion et de transformation des données pour fournir des data lakes prêts à l'emploi et actualisés en permanence.

Rapport

Agile Data Warehouse and Data Lake Automation: InBrief Report by the Bloor Group

Fiche technique

Fiche produit sur l'ingestion des données Hadoop avec Qlik

Livre blanc

Five Principles for Effectively Managing Your Data Lake Pipeline

Découvrez Qlik Compose for Data Lakes dès aujourd'hui.