O que é data firehose?
O que é data firehose?

Vídeo: O que é data firehose?

Vídeo: O que é data firehose?
Vídeo: Introduction to Kinesis Data Firehose | Amazon Web Services 2024, Abril
Anonim

UMA Mangueira de incêndio Se você for. o Mangueira de incêndio API é um fluxo constante de todos os dados de uma fonte em tempo real - uma torneira gigante que fornece dados para qualquer número de assinantes ao mesmo tempo. O fluxo é constante, entregando novos, atualizados dados como acontece.

Portanto, o que é a mangueira de incêndio de dados do Kinesis?

Amazonas Kinesis Data Firehose é a maneira mais fácil de carregar streaming de forma confiável dados em dados lagos, dados lojas e ferramentas de análise. É um serviço totalmente gerenciado que escala automaticamente para corresponder à taxa de transferência de seu dados e não requer administração contínua.

Também se pode perguntar: o que significa streaming de dados? Dados de streaming é dados que é gerado continuamente por diferentes fontes. Tal dados deve ser processado de forma incremental usando Stream Técnicas de processamento sem ter acesso a todos os dados . Geralmente é usado no contexto de grandes dados em que é gerado por muitas fontes diferentes em alta velocidade.

Da mesma forma, como funciona a mangueira de incêndio?

Mangueira de incêndio armazena os dados de entrada antes de entregá-los ao Amazon Elasticsearch Service. Você pode configurar os valores para o tamanho do buffer Elasticsearch (1 MB a 100 MB) ou intervalo do buffer (60 a 900 segundos), e a condição satisfeita primeiro aciona a entrega de dados para o Amazon Elasticsearch Service.

Qual é o principal caso de uso do Amazon Kinesis firehose?

Kinesis Firehose é Amazon's oferta de produto de ingestão de dados para Kinesis . Isto é usado para capturar e carregar dados de streaming em outros Amazonas serviços como S3 e Redshift. A partir daí, você pode carregar os fluxos em ferramentas de processamento e análise de dados como Elastic Map Reduce e Amazonas Serviço Elasticsearch.

Recomendado: