Faísca
Spark CI em GitHub Actions
Os trabalhos do Spark em CI passam a maior parte do tempo na inicialização da JVM e na montagem do jar.
5m → 45s
Montagem
Os trabalhos do Spark em CI passam a maior parte do tempo na inicialização da JVM e na montagem do jar.
Por que isso acontece
O jar de montagem é reconstruído a cada execução e o cache Ivy ou Coursier está frio.
O que mudar
Faísca no runnerhut
A única linha específica do runnerhut é `runs-on: runnerhut-8vcpu-ubuntu-2404`. Todo o resto são GitHub Actions padrão — as mesmas ações, os mesmos segredos e o mesmo modelo de permissões que você usa hoje.
Seu próximo build pode ser duas vezes mais rápido, pela metade do preço
Comece grátis. Sair é a mesma linha, e publicamos esse diff também.
Relacionado
Migrações de banco de dadosCada execução de teste reproduz o histórico completo de migração de um banco de dados vazio.DBTdbt analisa todo o projeto e executa novamente modelos inalterados.CondaA resolução do ambiente leva mais tempo do que a própria análise.Fluxo de arAs verificações de importação do DAG reinstalam o conjunto completo de dependências do Airflow a cada execução.