Data Engineer Cafe
ทำไมเวลาสร้าง Data Pipeline ควรโหลดข้อมูลมาเก็บลง Storage หรือ Data Lake ก่อน?
General Discussion เรื่อง Data Engineering
data-pipeline
zkan
January 10, 2022, 12:36pm
1
เพราะแบบนี้…
เราสามารถแชร์ให้กับคนอื่น หรือระบบอื่นมาหยิบข้อมูลไปใช้งานได้
ทำให้ Data Pipeline ของเรามีความ Reproducible ได้
ตามไปอ่านบทความเต็มๆ ได้ที่นี่เลยจ้า
1 Like
Related topics
Topic
Replies
Views
Activity
State of Data Engineering 2022 map by lakeFS
General Discussion เรื่อง Data Engineering
data-lake
,
data-engineering
,
lakefs
1
399
June 22, 2022
The Data Engineer's Playlist
General Discussion เรื่อง Data Engineering
data-engineering
,
song
,
spotify
3
560
July 2, 2022
Quilt, self-organizing data hub for S3
พูดคุยเกี่ยวกับ Data Tools ต่าง ๆ
open-source
,
s3
,
data-lake
,
open-data
0
450
November 13, 2021
ชวนอ่านบทความ What we are missing in data CI/CD pipelines? ของ Ivan
General Discussion เรื่อง Data Engineering
dbt
,
deployment
,
data-warehouse
,
data
0
791
October 9, 2022
Google เปิดตัว BigLake รวมพลัง Data Warehouses กับ Lakes เข้าไว้ด้วยกัน
GCP
data-lake
,
data-warehouse
,
bigquery
,
lakehouse
,
google
2
890
September 22, 2022