BigQuery มี Data Lineage แล้ว!

ณ วันนี้ feature นี้ (เป็น feature หนึ่งใน Dataplex) อยู่ในช่วง preview เรียบร้อยแล้ว สามารถลองเล่นกันได้นะ

หน้าตาเป็นประมาณนี้เลย

โค้ด SQL ที่เราต้องเขียนก็จะเป็นแนว data transformation นะ ใช้ CREATE TABLE AS SELECT หรือพวก operation อื่น ๆ เราถึงจะเห็น lineage graph

ตอนนี้เขามี active metadata กันแล้ว น่าลดปัญหา lineage/catalog out of sync

tooling งอกมาไวมาก ตอนนี้น้องหมีขาวก็มาแรงแบบฉุดไม่อยู่ น้องเป็ดอีกตัว :joy:

1 Like