# แชร์ประสบการณ์ย้ายสาย Software Engineer มา Data Engineer ครับ

**URL:** <https://discuss.dataengineercafe.io/t/software-engineer-data-engineer/317>\
**Category:** General Discussion เรื่อง Data Engineering\
**Created:** [July 1, 2022, 12:43pm UTC](https://discuss.dataengineercafe.io/t/software-engineer-data-engineer/317 "2022-07-01T12:43:25Z")\
**Posts on this page:** 5\
**Page:** 1

<div class="post-metadata">

**Author:** ![yothinix](https://yyz1.discourse-cdn.com/flex035/user_avatar/discuss.dataengineercafe.io/yothinix/32/147_2.png) [@yothinix](https://discuss.dataengineercafe.io/u/yothinix)\
**Post date:** [July 1, 2022, 12:43pm UTC](https://discuss.dataengineercafe.io/t/software-engineer-data-engineer/317/1 "2022-07-01T12:43:25Z")

</div>

พอดีย้ายมาเป็น Data Engineer ได้ 3 เดือนแล้ว รู้สึกว่าเจออะไรเยอะมาก เลยแบ่งปันไว้นิดหน่อยฮะ ต้องขอบคุณ Community นี้ด้วย ที่เป็นแหล่งความรู้ให้ผมหลายอย่างเลย

> **[👷📚 เล่าให้ฟัง: ย้ายสายจาก Software Engineer มาเป็น Data Engineer สามเดือนแรก](https://yothinix.com/first-three-month-as-data-eng/)**
>
> โพสนี้เหมือนเป็นภาคต่อจาก ลาออกยังไงไม่ให้บ้านบึ้ม ครับคือกระบวนการต่างๆ มันเริ่มตั้งแต่เรายังทำงานในที่เก่าอยู่ โพสนี้เลยจะมาเล่าให้ฟังคร่าวๆ ว่าก่อนจะเริ่มงาน Data Engineer และที่ผ่านมาสามเดือนนี้ผมผ่านอะไรมาบ้าง...

---

<div class="post-metadata">

**Author:** ![kahnwong](https://yyz1.discourse-cdn.com/flex035/user_avatar/discuss.dataengineercafe.io/kahnwong/32/295_2.png) [@kahnwong](https://discuss.dataengineercafe.io/u/kahnwong)\
**Post date:** [July 1, 2022, 1:58pm UTC](https://discuss.dataengineercafe.io/t/software-engineer-data-engineer/317/2 "2022-07-01T13:58:34Z")

</div>

555 เราอยู่ๆ โดนจับมาทำ data engineer แบบไม่รู้ตัว

ของเราเริ่มจากเป็น IT support / ops / sysadmin, มาจับ programming แล้วโปรเจคแรกตอนจบคือทำ large scale web scraping  
หลังจากนั้นก็โดนจับไปทำ data platform ก็คือขึ้นโครง schema, data modeling และ วาด infra

ทำไปนานมาก จนมารู้ตัวตอนหลัง ว่า สิ่งที่ทำอยู่มันเรียกว่า platform engineering

สุดท้าย ตอนนี้เขียน terraform กับ bash บ่อยกว่า python 😂 (มัวแต่เย็บ ci/cd ให้งัยยยย)

อ้อ แล้วที่สังเกตุ ส่วนใหญ่ SWE ที่มาจับงาน data จะช็อคน้ำตอนเจอ distributed systems กับ data intuition / data modeling เพราะตอนทำ frontend/backend อาจจะไม่ได้เจอกับ data สเกลที่ยัดลง RAM ไม่ได้ และตอนเขียน backend ส่วนใหญ่ก็ทำผ่าน ORM กัน เลยอาจจะเขียน sql ไม่คล่อง

edit: เขาว่ากันว่า data platform engineer คือลูกผสมระหว่าง software engineer + devops / infra + data

---

<div class="post-metadata">

**Author:** ![yothinix](https://yyz1.discourse-cdn.com/flex035/user_avatar/discuss.dataengineercafe.io/yothinix/32/147_2.png) [@yothinix](https://discuss.dataengineercafe.io/u/yothinix)\
**Post date:** [July 2, 2022, 3:41am UTC](https://discuss.dataengineercafe.io/t/software-engineer-data-engineer/317/3 "2022-07-02T03:41:30Z")

</div>

Data Engineer, Platform ตามนั้นเลยครับ นี่นึกภาพไม่ออกเหมือนกันว่าถ้าไม่เคยทำ Ops มาก่อนจะช็อคน้ำขนาดไหน โชคดีที่ผมผ่านยุค VM → Containerize, SOA → microservices มาเลยพอเอาตัวรอดไปได้ 555

เออแต่ผม paradigm shift เหมือนกันนะ ตอนกลับมาเขียน SQL หลังจากอยู่ในโลก ORM แล้ว encourage ให้ทุกคนเขียน ORM มาตลอดชีวิต พอมาเจอ CTEs นี่ เออ SQL มันก็เขียนดีๆ ได้นี่หว่า แต่พอมองย้อนกลับไปมุมฝั่ง application development ฝั่งนั้นก็เริ่มไหลจาก Imperative (OOP) มา Declarative (FP) เหมือนกันครับ เพื่อให้ชีวิตง่ายขึ้น (มั้ยนะ 555)

---

<div class="post-metadata">

**Author:** ![kahnwong](https://yyz1.discourse-cdn.com/flex035/user_avatar/discuss.dataengineercafe.io/kahnwong/32/295_2.png) [@kahnwong](https://discuss.dataengineercafe.io/u/kahnwong)\
**Post date:** [July 2, 2022, 11:27am UTC](https://discuss.dataengineercafe.io/t/software-engineer-data-engineer/317/4 "2022-07-02T11:27:04Z")

</div>

monolith ก็ง่ายดี แต่ติด scaling เลยกลายเป็น microservices  
แล้วเจอกับดักว่า maintain ยาก share lib ลำบาก  
วนกลับมาที่ containers

โดนกันถ้วนหน้า 55555

ฝั่ง data เมื่อก่อนก็ data cube ปัจจุบันโนสนโนแคร์ ยัดลง columnar database แล้วจบ

ชีวิตก็คงง่ายขึ้นเพราะมี tooling ใหม่ มันก็คงตอบโจทย์ pain point เดิม แต่ก็ต้องรอดูว่า มันจะเจอ pain point ตัวใหม่มั้ย 🤣

---

<div class="post-metadata">

**Author:** ![zkan](https://yyz1.discourse-cdn.com/flex035/user_avatar/discuss.dataengineercafe.io/zkan/32/2_2.png) [@zkan](https://discuss.dataengineercafe.io/u/zkan)\
**Post date:** [July 2, 2022, 2:16pm UTC](https://discuss.dataengineercafe.io/t/software-engineer-data-engineer/317/5 "2022-07-02T14:16:57Z")

</div>

โพสต์นี้เพลินดี ได้อ่านประสบการณ์ของแต่ละคน ขอบคุณครับ 😊

ของผมนี่เริ่มด้วยตอนเรียนมาทาง software engineering แล้วต่อ ป.โท + เอก ไปสาย computer vision + machine learning แล้วพอจบออกมาอยากจะลองของทำแนว data science แต่บริษัทแรก (Pronto Marketing) ตอนนั้นยังไม่ได้มีระบบอะไรเลย เลยต้องสร้างขึ้นมาก่อน ถึงจะเริ่มมีข้อมูลต่าง ๆ เอามาทำโมเดล

เวลาผ่านไปสักพัก… ทำไปทำมา ทำไมมันดูยากเหลือเกิน ข้อมูลก็เพี้ยน ๆ 😂 ลองทำโมเดลยังไงก็ดูใช้งานไม่ได้เอาซะเลย แล้วก็มาได้เจอ[หนังสือ Data Engineering Teams ของ Jesse](https://www.bigdatainstitute.io/data-engineering-teams-book/) นี่แหละ ประกอบกับเจอ Airflow (ตอนนั้นยังเป็น incubator อยู่) ก็ตาสว่างทันที แล้วก็เริ่มศึกษาของพวกนี้ ลองเล่น ลองสร้างมาตั้งแต่ตอนนั้นเลย