Piyanat Saphiman·1d agoเมื่อ 0.0 กลายเป็น 0: กับดัก JSON ที่ผมเจอตอนเขียน Pub/Sub SMT UDFงานที่ได้รับมาฟังดูง่ายมาก: “ช่วยกรอง message ใน Pub/Sub หน่อย เอาเฉพาะสาขาที่ขึ้นต้นด้วยตัว B”
Piyanat Saphiman·Jul 28ล็อกโฟลเดอร์ลับบน macOS ด้วย Disk Utility ไม่ต้องลงแอปเพิ่มสักตัวเครื่อง Mac ทุกเครื่องมีเครื่องมือเข้ารหัสโฟลเดอร์ติดมาให้อยู่แล้ว แต่คนส่วนใหญ่ไม่เคยเปิดใช้ บทความนี้จะพาไปตั้งแต่เหตุผลว่าทำไมควรทำ…
Piyanat Saphiman·Jul 8BigQuery Time Travel: ไทม์แมชชีนกู้ข้อมูล ที่หลายคนไม่รู้ว่ามีอยู่ในมือลบ table ผิด? รัน UPDATE ลืมใส่ WHERE? ใจเย็นๆ ครับ ข้อมูลคุณยังไม่หายไปไหน
Piyanat Saphiman·Jul 6รู้จัก BigQuery Change History: ย้อนดูได้ว่าข้อมูลใน Table เปลี่ยนอะไรไปบ้างเคยเจอเหตุการณ์แบบนี้ไหมครับ?
Piyanat Saphiman·May 21Data Contract คืออะไร? อธิบายแบบให้คนไม่ใช่ Data Engineer ก็เข้าใจถ้าคุณเคยได้ยินคำว่า “Data Contract” แล้วงงว่ามันคืออะไร ทำไมทีม Data ถึงพูดถึงบ่อยจัง บทความนี้จะอธิบายให้ฟังแบบง่ายที่สุด
Piyanat Saphiman·May 6ใช้ Google Cloud Pub/Sub Trigger Airflow ด้วย PubSubPullSensorบทความนี้อธิบายวิธีให้ Airflow รอรับ message จาก Google Cloud Pub/Sub แล้วเริ่มทำงานต่อ เหมาะสำหรับคนที่เพิ่งเริ่มใช้ Airflow ร่วมกับ…
Piyanat Saphiman·Apr 23เจาะลึก logical_date ใน Apache Airflow: ทำไม Data Engineer ต้องเข้าใจให้ทะลุก่อนเขียน DAGคู่มือฉบับเข้าใจง่าย สำหรับ Data Engineer ที่อยากเขียน Airflow DAG ที่ idempotent, รองรับ rerun และ backfill ได้อย่างถูกต้อง
Piyanat Saphiman·Oct 14, 2025Setup Remote Logging ของ Airflow กับ GCS Bucket ผ่าน Helm Chartสวัสดีครับ วันนี้จะมาเล่าประสบการณ์การ setup Airflow ให้เก็บ log ไว้บน Google Cloud Storage (GCS) แทนที่จะเก็บไว้ใน pod กันครับ…
Piyanat Saphiman·Oct 1, 2025ส่งข้อมูลแบบเรียลไทม์ด้วย BigQuery Continuous Query และ Pub/Subลองนึกภาพว่าคุณมีร้านค้าออนไลน์ที่มียอดขายเข้ามาตลอดเวลา คุณอยากรู้ทันทีเมื่อมีคำสั่งซื้อใหม่เข้ามา…