Devopsadept
Des exemples courants d'ingestion de données comprennent: déplacer les données de Salesforce.com à un entrepôt de données puis analyser avec Tableau. Capturez les données d'un fil Twitter pour l'analyse des sentiments en temps réel. Acquérir des données pour la formation des modèles d'apprentissage automatique et l'expérimentation.
- Qu'est-ce qu'une ingestion de données?
- Quelles sont les composantes de l'ingestion de données?
- Quelles sont les deux catégories d'ingestion de données?
- L'ingestion de données est-elle la même que ETL?
Qu'est-ce qu'une ingestion de données?
L'ingestion de données est le processus d'importation de fichiers de données assortis de grands et assortis de plusieurs sources dans un seul support de stockage basé sur le cloud - un entrepôt de données, Data Mart ou Database - où il est accessible et analysé.
Quelles sont les composantes de l'ingestion de données?
Les éléments clés du pipeline d'ingestion de données comprennent les sources de données, les destinations de données et le processus d'envoi de ces données ingérées de plusieurs sources à plusieurs destinations. Les sources de données courantes incluent des feuilles de calcul, des bases de données, des données JSON à partir d'API, de fichiers journaux et de fichiers CSV.
Quelles sont les deux catégories d'ingestion de données?
Il existe deux principaux types d'ingestion de données: en temps réel ou en streaming, et lot. L'ingestion en temps réel ou en streaming fait référence aux données apportées au fur et à mesure de sa création, tandis que l'ingestion par lots implique de collecter des données en même temps et de les charger dans le système.
L'ingestion de données est-elle la même que ETL?
L'ingestion de données est le processus de compilation de données brutes telles quelles - dans un référentiel. Par exemple, vous utilisez l'ingestion de données pour apporter des données d'analyse de site Web et des données CRM à un seul emplacement. Pendant ce temps, ETL est un pipeline qui transforme les données brutes et la standardise afin qu'elle puisse être interrogée dans un entrepôt.
