Edilson Athayde Junior·Dec 16, 2024Transformação de Dados: Da Camada Silver para Gold no AdventureWorksA camada Silver contém dados mais estruturados, mas ainda podem ser necessários ajustes adicionais para facilitar análises e relatórios…
Edilson Athayde Junior·Dec 16, 2024Data Transformation: From Silver to Gold Layer in AdventureWorksThe Silver layer contains more structured data, but additional adjustments may still be needed to facilitate advanced analytics and…
Edilson Athayde Junior·Dec 9, 2024Transformação de Dados: Da Camada Bronze para Silver no AdventureWorksA camada Silver é onde os dados começam a ganhar estrutura mais refinada e valor agregado. Nessa etapa, saímos da organização inicial e…
Edilson Athayde Junior·Dec 9, 2024Data Transformation: From Bronze to Silver Layer in AdventureWorksThe Silver layer is where data starts to gain a more refined structure and added value. At this stage, we move from the initial…
Edilson Athayde Junior·Dec 6, 2024Transformação de Dados: Da Camada Landing para Bronze no AdventureWorksA camada Bronze é a primeira etapa de organização no pipeline de dados. É aqui que começamos a dar estrutura e confiabilidade aos dados que…
Edilson Athayde Junior·Dec 6, 2024Data Transformation: From Landing to Bronze Layer in AdventureWorksThe Bronze layer is the first organizational step in the data pipeline. Here, we begin structuring and ensuring reliability for data stored…
Edilson Athayde Junior·Dec 3, 2024Projeto na Prática: Ingestão de Dados do PostgreSQL para o Landing Zone no AdventureWorksNeste post, vamos colocar a mão na massa e realizar a ingestão de dados de um banco de dados PostgreSQL para o Minio, utilizando Apache…
Edilson Athayde Junior·Dec 3, 2024Project in Practice: Data Ingestion from PostgreSQL to the Landing Zone in AdventureWorksIn this post, we will roll up our sleeves and perform the ingestion of data from a PostgreSQL database into Minio, using Apache Spark. We…
Edilson Athayde Junior·Nov 28, 2024🚀 Do Lakehouse ao PySpark: A Arquitetura e Boas Práticas para Projetos de Dados em Grande EscalaNo post anterior, falamos sobre como o Lakehouse e o Delta Lake têm revolucionado o armazenamento e processamento de dados, oferecendo uma…
Edilson Athayde Junior·Nov 28, 2024🚀 From Lakehouse to PySpark: Architecture and Best Practices for Large-Scale Data ProjectsIn the previous post, we discussed how Lakehouse and Delta Lake have revolutionized data storage and processing, offering a scalable and…