Leonardo Trevisan·Jun 19Seu cluster não está lento. Seu shuffle está gritando.Eu já trabalhei em um lugar onde isso virava quase uma disputa semanal: um processo demorava, um dashboard travava, um job passava da…
Leonardo Trevisan·Jun 9ZORDER morreu? Entendendo Liquid Clustering sem hypeVocê abre o Query Profile de uma consulta no Databricks e percebe uma coisa meio ingrata:
Leonardo Trevisan·May 30SQL ou PySpark no Databricks: a resposta que eu gostaria de ter recebido no começoQuando comecei a trabalhar com Databricks, uma dúvida aparecia com frequência:
Leonardo Trevisan·May 26O Pandas pode estar matando sua performance no DatabrickstoPandas() e collect() são os maiores vilões de performance no Databricks. Veja o porquê e como evitar