Amazon OpenSearch Ingestion offre désormais une mise en mémoire tampon persistante lors de l’ingestion de données en streaming à partir de sources push, offrant ainsi une durabilité des données et simplifiant l’architecture d’ingestion de données. Les clients peuvent désormais utiliser la mise en mémoire tampon persistante pour ingérer des données provenant de sources http telles que les collecteurs FluentD et FluentBit et OpenTelemetry sans avoir besoin de configurer une mémoire tampon autonome. La mise en mémoire tampon persistante dans Amazon OpenSearch Ingestion est sans serveur et évolue de manière élastique pour répondre aux besoins de débit, même des charges de travail les plus exigeantes.
Les clients peuvent activer la mise en mémoire tampon persistante pour leurs pipelines existants ou créer de nouveaux pipelines avec la mise en mémoire tampon persistante activée. Amazon OpenSearch Ingestion garantira ensuite que toutes les données ingérées sont conservées dans un tampon sur disque qui est répliqué sur plusieurs zones de disponibilité pour plus de durabilité avant d’être acheminées vers une destination. Le stockage sur disque avec mise en mémoire tampon persistante l’empêche d’être submergé lorsque les données s’accumulent en raison de destinations inaccessibles, garantissant ainsi qu’aucune contre-pression n’est appliquée sur la source. Outre la reconnaissance de bout en bout déjà proposée pour les sources basées sur l’extraction, Amazon OpenSearch Ingestion offre désormais une durabilité complète des données pour toutes ses sources.
Cette fonctionnalité est disponible dans toutes les régions commerciales AWS où Amazon OpenSearch Ingestion est actuellement disponible.
Vous pouvez lire l’article original (en Angais) sur le siteaws.amazon.com