Jaimeardp·Jul 28, 2025Implementa Pipeline Realtime Analytics usando Pubsub, Dataflow, Bigtable, BigQuery y Firebase para…Cuando hablamos de un pipeline en tiempo real, nos referimos a un unbounded dataset, es decir, un flujo de datos que no tiene fin. Por…
Jaimeardp·Jul 23, 2025Implementa CDC near-realtime de tu Base de datos transaccional con GCP Datastream hacia BigQuery…Como data engineers a veces nos toca retos como migrar o sincronizar base de datos transaccionales a nuestro warehouses, para responder a…
Jaimeardp·Jul 20, 2025Construye tu Data Warehouse con GCP Dataform y Workflows en BigQuery 👾En este post vamos a usar Dataform para construir un ETL con el fin de alimentar una moderna plataforma de datos para una empresa de…
Jaimeardp·Jul 14, 2025Accediendo a tus datos de PostgreSQL con Gemini a traves de MCP ServerEn el desarrollo de aplicaciones basadas en LLMs, la integración con fuentes de datos externas como bases de datos SQL es un desafío…
Jaimeardp·Sep 26, 2024Crea tu primer Pipeline de datos con Polars en AWS usando FargateAprende a construir y automatizar tu primer pipeline de datos con Polars en AWS, optimizando tus ETLs para un rendimiento y velocidad…
Jaimeardp·May 27, 2024Exploremos Apache Flink creando un Pipeline Streaming con AWS Managed Apache Flink integrado con…Hoy quiero hablar de apache Flink y su importancia que tiene en arquitecturas event-driven, asi como también en Data Pipelines y Streaming…
Jaimeardp·Mar 24, 2024Entendiendo Componentes clave de Apache Kafka IHoy en día cuando hablamos de procesar datos, nos referimos al hecho de extraer, transformar y cargar (ETL). Hay dos formas o tres…
Jaimeardp·Feb 10, 2024AWS Kinesis Firehose ahora ofrece integración directa con Snowflake. ¡Explorémoslo en acción!Hoy en dia en Snowflake ✌️ tenemos varias opciones para hacer ingesta near-realtime “cost-effective”.
Jaimeardp·Jan 22, 2024Base de datos funcionamiento Core 👾, como es el comportamiento por debajo de un Query 🎮Hoy en día cuando ejecutamos un query no sabemos que sucede por debajo realmente, en el día a día claramente no son tareas que se solicitan…
Jaimeardp·Jan 20, 2024Implementa Microservicios con Lambda, SNS y SQS en AWS para Analítica de datosHoy viernes 19 de diciembre quiero hablarles de una arquitectura en AWS basada en eventos, además de tener un enfoque desacoplado.