Configuração de Cluster Distribuído com Hadoop 3.2.2 e Hive 3.1.3
Compatibilidade de Versões e Arquitetura
A partir da versão 3.2.3, o ecossistema Hadoop passou a exigir obrigatoriamente o JDK 11. No entanto, o Apache Hive 3.1.3 ainda apresanta dependências críticas do JDK 1.8. Para viabilizar a execução conjunta e estável de ambos os componentes, este guia detalha a implantação do Hadoop 3.2.2 em conjunto co ...
Publicado em 7-28 07:28
API de Processamento de Fluxo Flink: Guia Completo
Evolução das APIs de Processamento de Fluxo
Existem diferentes abordagens para o processamento de streams em sistemas distribuídos. O Storm utiliza o TopologyBuilder para construir grafos, onde o desenvolvedor adiciona nós e especifica arestas direcionadas entre eles. Após a construção, o grafo pode ser submetido a um cluster remoto ou local pa ...
Publicado em 7-24 10:22
Configuração do Apache DolphinScheduler em Modo Standalone com Persistência em MySQL
O Apache DolphinScheduler, quando executado em modo Standalone padrão, utiliza o banco de dados H2 e o Zookeeper Testing Server integrados. Embora prático para testes rápidos, essa configuração não é recomendada para persistência de dados a longo prazo, pois o desligamento do processo pode resultar na perda de metadados. Para contornar essa lim ...
Publicado em 6-23 22:12