Antes de começar, precisaremos de grupos e regras de acesso, para gerar isso: O módulo de conexão varia de acordo com a versão do Airflow, para evitar informação errada, vamos renomear o arquivo de configuração atual e criar um novo: Agora vamos copiar o método de conexão para o novo Leia mais…
O Apache Airflow é uma ferramenta open source desenvolvida pela Apache Foundation para realizar a criação, agendamento e monitoramento de processos de ETL/ELT de forma programática. É escrito em Python (inclusive para os códigos ETL), funciona de maneira simples, dinâmica, escalável e possuí alguns diferenciais que auxiliam na administração como Leia mais…
O problema A configuração padrão do Airflow, além de gerar muitos logs, gera uma pasta diferente para cada log gerado. O que inviabiliza uma gerência da informação e do espaço em disco. Como proposta de solução, sugerimos mudar a configuração para ser feita um arquivo de log para cada job Leia mais…
Aqui falaremos sobre os procedimentos para a instalação do Pentaho Server. Antes de mais nada, é necessário instalar o Java: Baixe a versão mais recente do Java SE Runtime Environment 8 – JDK (o JRE não permite o TomCat executar como um serviço no Windows), disponível em http://www.oracle.com/technetwork/java/javase/downloads/index.html. Execute o Leia mais…