# เรื่องการทำ SSIS แบบเมื่อ Data Source ต้นทางเปลี่ยน Data Destination ปลายทางเปลี่นนตาม

**URL:** <https://discuss.dataengineercafe.io/t/ssis-data-source-data-destination/760>\
**Category:** General Discussion เรื่อง Data Engineering\
**Tags:** sql, data-engineering\
**Created:** [November 26, 2024, 11:50am UTC](https://discuss.dataengineercafe.io/t/ssis-data-source-data-destination/760 "2024-11-26T11:50:47Z")\
**Posts on this page:** 2\
**Page:** 1

<div class="post-metadata">

**Author:** ![BOTGOM](https://yyz1.discourse-cdn.com/flex035/user_avatar/discuss.dataengineercafe.io/botgom/32/1131_2.png) [@BOTGOM](https://discuss.dataengineercafe.io/u/BOTGOM)\
**Post date:** [November 26, 2024, 11:50am UTC](https://discuss.dataengineercafe.io/t/ssis-data-source-data-destination/760/1 "2024-11-26T11:50:47Z")

</div>

ผมทำการดึงข้อมูลจาก Data Source ต้นทางโดยทำเป็นแบบ Application web ใน Visual Studio Code โดยดึงข้อมูลจาก ใน Sql Server จากอีกที่ นึงไปยัง Sql Server อีกที่นึง โดยใช้ javaScript โดยตอนนี้ตั้งว่าให้มันเช็ค เวลาล่าสุดจากทั้งใน Data Destination กับ Data Source ทุกๆ 5 วินาที ถ้า Data Source มีเวลาล่าสุดมากกว่าใน Data Destination ก็จะให้มันไปใช้ฟังก์ชั่นดึงข้อมูลหลัก ที่ทำเอาไว้ โดยตอนนี้ทำเป็นแบบ เปิด connection ใหม่ทุกครั้งที่ใช้งาน และ ปิด connection ทุกครั้งหลังใช้งานเสร็จ คืออยากสอบถามว่าแบบนี้มันดีไหมครับ หรือใช้แบบ ใช้แบบ Connection Pool คือเชื่อมต่อตลอดยาวๆ อาจจะ 1 ชั่วโมงและปิดเชื่อมต่อใหม่ หรือมีวิธีการที่ดีกว่านี้ไหมครับ \*\*\*คือกลัวว่าวิธีนี้จะเป็นการทำให้ใช้ทรัพยากรของ Sql Server ต้นทางมากเกินไป มีวิธีที่กินทรัพยากรน้อยๆ ไหมครับ

---

<div class="post-metadata">

**Author:** ![zkan](https://yyz1.discourse-cdn.com/flex035/user_avatar/discuss.dataengineercafe.io/zkan/32/2_2.png) [@zkan](https://discuss.dataengineercafe.io/u/zkan)\
**Post date:** [January 3, 2025, 2:59am UTC](https://discuss.dataengineercafe.io/t/ssis-data-source-data-destination/760/2 "2025-01-03T02:59:51Z")

</div>

การเปิด connection ค้างไว้ ไม่ค่อยดีเท่าไหร่ครับ จะกินทรัพยากรอย่างที่ว่ามาเลย แล้วก็อาจจะไปกระทบกับ app ที่มาใช้งานตัว database นี้

ผมลองคิดไว ๆ เป็นไปได้ประมาณ 3 ทางครับ

1. ทำ read replica ออกมา เพื่อไม่ให้กระทบกับ app ที่มาใช้งาน database ตัวหลัก ซึ่งเราจะสามารถทำอะไรกับตัว replica นี้ได้เลย แต่ก็จะแลกมาด้วยค่าใช้จ่ายที่เพิ่มขึ้น
2. Offload ข้อมูลออกมาที่อื่นครับ ตรงนี้ข้อดีคือเราก็จะไม่เสียเรื่อง connection มาก แต่ก็แลกมากับเรื่องที่เราเช็คทุก ๆ 5 วิ แทนครับ
3. ทำ real-time sync ประมาณที่บทความนี้เขียนไว้ครับ [ลองสร้าง Change Data Capture pipeline ด้วย Debezium และ Apache Kafka | by Nuipin Decimo | Medium](https://decimo.medium.com/%E0%B8%A5%E0%B8%AD%E0%B8%87%E0%B8%AA%E0%B8%A3%E0%B9%89%E0%B8%B2%E0%B8%87-change-data-capture-pipeline-%E0%B8%94%E0%B9%89%E0%B8%A7%E0%B8%A2-debezium-%E0%B9%81%E0%B8%A5%E0%B8%B0-apache-kafka-8bf17201a9d6)

ถ้า 3 ทางนี้เป็นไปได้ยาก ก็ต้องมาจัดการ connection pool ดี ๆ ครับ คอย monitor อยู่ตลอดว่าควรเป็นเท่าไหร่ดีเพื่อที่จะเหมาะสบกับคนที่มาใช้งาน database
