# \#s3

**URL:** https://discuss.dataengineercafe.io/tag/s3/6.md

[Latest](https://discuss.dataengineercafe.io/latest.md) · [Categories](https://discuss.dataengineercafe.io/categories.md) · [Tags](https://discuss.dataengineercafe.io/tags.md)

---

## [Spark มีปัญหา NoSuchMethodError: SemaphoredDelegatingExecutor ตอนเขียนไฟล์เข้า S3](https://discuss.dataengineercafe.io/t/spark-nosuchmethoderror-semaphoreddelegatingexecutor-s3/463)

<div class="topic-metadata">

**Author:** [@zkan](https://discuss.dataengineercafe.io/u/zkan)\
**Replies:** 1\
**Last updated:** [December 11, 2022, 5:23pm UTC](https://discuss.dataengineercafe.io/t/spark-nosuchmethoderror-semaphoreddelegatingexecutor-s3/463 "2022-12-11T17:23:15Z")

</div>

พอดีผมลองใช้ hadoop-aws เวอร์ชั่น 3.2.0 ไปแล้วตอนที่เขียนไฟล์เข้า S3 จะเจอ error ประมาณนี้ 22/12/07 11:30:32 WARN TaskSetManager: Lost task 0.0 in stage 9.0 (TID 9) (5f52d1d4aab7 executor driver): java.lang.NoSuchMetho…

---

## [MinIO ทำให้เราเสมือนมี AWS S3 หรือ Data Lake บน Local ได้](https://discuss.dataengineercafe.io/t/minio-aws-s3-data-lake-local/138)

<div class="topic-metadata">

**Author:** [@zkan](https://discuss.dataengineercafe.io/u/zkan)\
**Replies:** 1\
**Last updated:** [May 24, 2022, 9:47am UTC](https://discuss.dataengineercafe.io/t/minio-aws-s3-data-lake-local/138 "2022-05-24T09:47:55Z")

</div>

MinIO เป็น open-source S3 compatible object storage ที่เราสามารถเอามารันบน local ได้ และเป็น K8s native ด้วย หน้าตา MinIO console ก็ประมาณนี้ เราสามารถเข้าไปกำหนด users/service accounts หรือ IAM policies อะไรพวกนี้ได…

---

## [Quilt, self-organizing data hub for S3](https://discuss.dataengineercafe.io/t/quilt-self-organizing-data-hub-for-s3/19)

<div class="topic-metadata">

**Author:** [@zkan](https://discuss.dataengineercafe.io/u/zkan)\
**Replies:** 0\
**Last updated:** [November 13, 2021, 1:43am UTC](https://discuss.dataengineercafe.io/t/quilt-self-organizing-data-hub-for-s3/19 "2021-11-13T01:43:22Z")

</div>

ใครกำลังมองหาระบบเอาไว้ทำ open data ผมอยากแนะนำให้ลองดูตัวนี้ดูครับ เป็นระบบที่น่าสนใจมากๆ แถม open source ด้วย สำหรับคนที่กำลังสร้าง data lake กับ S3 ลองตามไปส่องได้ที่ลิ้งค์ด้านล่างนี้เลยครับ หน้าตา architecture…