Ingérez des flux de données à grande échelle
Le service d'ingestion en masse dans le Cloud IICS vous permet d'ingérer efficacement des flux de données et de les déplacer vers d'autres cibles pour effectuer des analyses en temps réel. Collectez les flux de données en streaming provenant de diverses sources de données de périphériques telles que Kafka, des fichiers log, des clickstreams ou des objets connectés, et déplacez-les vers un Data Lake ou un hub de messagerie.
Principales fonctionnalités
Assistant de création de flux de données
Utilisez l'assistant de création afin de créer des flux de données pour un déploiement plus facile.
Transformation des données périphériques
Des capacités de transformation des données périphériques simples et performantes, notamment : le filtrage, la segmentation et la combinaison.
Monitoring en temps réel
Gérez en temps réel le processus d'ingestion grâce à un tableau de bord complet de visualisation et de gestion du cycle de vie avec des alertes.
Ingestion de flux en masse
Les sources de flux incluent Kafka, MQTT et des journaux. Les cibles de flux incluent Kafka, S3 et Kinesis.
Ingestion de fichiers en masse
La prise en charge de source inclut les fichiers AWS S3, Azure Blob, Azure Data Lake, Google Storage et HDFS. Les cibles incluent AWS S3, Redshift, Azure Blob, Azure Data Lake, Google Cloud Platform, Google BigQuery, HDFS et Snowflake.
Protocoles de transfert de fichiers flexibles
Prend en charge de nombreux protocoles, notamment FTP, FTPS et SFTP.