Senior Data Engineer (9-month Contract) – ASCEND

**บทบาทและความรับผิดชอบ**

* ออกแบบและพัฒนา pipeline ข้อมูลที่เป็นไปได้สูง มั่นคง และมีประสิทธิภาพสำหรับการรับข้อมูล ประมวลผล และจัดเก็บข้อมูลจำนวนมากจากแหล่งข้อมูลหลากหลายโดยใช้เทคโนโลยีบนคลาวด์ ภาษา Python และ PySpark

* สร้างและดูแลรักษา data lakes และ data warehouses รวมถึงระบบจัดเก็บและประมวลผลข้อมูลอื่นๆ บนคลาวด์

* เขียนและดูแลรักษางาน ETL/ELT และสคริปต์การรวมข้อมูลเพื่อให้มั่นใจว่าการไหลของข้อมูลเป็นไปอย่างราบรื่นและถูกต้อง

* นำไปใช้มาตรการด้านความปลอดภัยและการปฏิบัติตามกฎหมายของข้อมูลเพื่อปกป้องความเป็นส่วนตัวของข้อมูลและให้มั่นใจว่าการปฏิบัติตามกฎหมายเป็นไปอย่างถูกต้อง

* ทำงานร่วมกับนักวิเคราะห์ข้อมูลและนักวิทยาศาสตร์ข้อมูลเพื่อเข้าใจความต้องการด้านข้อมูลของพวกเขาและให้พวกเขาได้รับการเข้าถึงข้อมูลที่จำเป็น

* อัปเดตความรู้เกี่ยวกับการพัฒนาล่าสุดในด้านวิศวกรรมข้อมูลบนคลาวด์ โดยเฉพาะในบริบทของ Azure, AWS และ GCP และนำเสนอแนวคิดและเทคโนโลยีใหม่ๆ ให้ทีมอย่างกระตือรือร้น

* ติดตามและปรับปรุงประสิทธิภาพของ pipeline ข้อมูลและระบบ ระบุและแก้ไขปัญหาหรือข้อจำกัดที่อาจเกิดขึ้น

**คุณสมบัติ**

* ปริญญาตรีหรือปริญญาโทในสาขาวิทยาศาสตร์คอมพิวเตอร์ วิทยาศาสตร์ข้อมูล หรือสาขาที่เกี่ยวข้อง

* ประสบการณ์อย่างน้อย 5 ปีในตำแหน่งวิศวกรข้อมูล โดยมุ่งเน้นไปที่โครงสร้างพื้นฐานข้อมูลบนคลาวด์

* ทักษะการเขียนโปรแกรมที่เชี่ยวชาญใน Python, Java หรือภาษาอื่นๆ ที่คล้ายกัน โดยเน้นที่ Python

* ประสบการณ์อย่างกว้างขวางในเทคโนโลยีการจัดเก็บและประมวลผลข้อมูลบนคลาวด์ โดยเฉพาะ Azure, AWS และ GCP

* ความคุ้นเคยกับเครื่องมือและเฟรมเวิร์ก ETL/ELT เช่น Apache Beam, Apache Spark หรือ Apache Flink

* ความรู้เกี่ยวกับหลักการของการจำลองข้อมูลและประสบการณ์ในการทำงานกับฐานข้อมูล SQL

* ทักษะการแก้ปัญหาที่แข็งแกร่งและความสามารถในการแก้ไขปัญหาอย่างมีประสิทธิภาพ

* ทักษะการสื่อสารและการทำงานร่วมกันที่ยอดเยี่ยมเพื่อทำงานอย่างมีประสิทธิภาพกับทีมที่หลากหลายสาขา

ออกแบบและพัฒนา pipeline ข้อมูลที่เป็นไปได้สูง มั่นคง และมีประสิทธิภาพสำหรับการรับข้อมูล ประมวลผล และจัดเก็บข้อมูลจำนวนมากจากแหล่งข้อมูลหลากหลายโดยใช้เทคโนโลยีบนคลาวด์ ภาษา Python และ PySpark

สร้างและดูแลรักษา data lakes และ data warehouses รวมถึงระบบจัดเก็บและประมวลผลข้อมูลอื่นๆ บนคลาวด์

เขียนและดูแลรักษางาน ETL/ELT และสคริปต์การรวมข้อมูลเพื่อให้มั่นใจว่าการไหลของข้อมูลเป็นไปอย่างราบรื่นและถูกต้อง

นำไปใช้มาตรการด้านความปลอดภัยและการปฏิบัติตามกฎหมายของข้อมูลเพื่อปกป้องความเป็นส่วนตัวของข้อมูลและให้มั่นใจว่าการปฏิบัติตามกฎหมายเป็นไปอย่างถูกต้อง

ทำงานร่วมกับนักวิเคราะห์ข้อมูลและนักวิทยาศาสตร์ข้อมูลเพื่อเข้าใจความต้องการด้านข้อมูลของพวกเขาและให้พวกเขาได้รับการเข้าถึงข้อมูลที่จำเป็น

อัปเดตความรู้เกี่ยวกับการพัฒนาล่าสุดในด้านวิศวกรรมข้อมูลบนคลาวด์ โดยเฉพาะในบริบทของ Azure, AWS และ GCP และนำเสนอแนวคิดและเทคโนโลยีใหม่ๆ ให้ทีมอย่างกระตือรือร้น

ติดตามและปรับปรุงประสิทธิภาพของ pipeline ข้อมูลและระบบ ระบุและแก้ไขปัญหาหรือข้อจำกัดที่อาจเกิดขึ้น

ปริญญาตรีหรือปริญญาโทในสาขาวิทยาศาสตร์คอมพิวเตอร์ วิทยาศาสตร์ข้อมูล หรือสาขาที่เกี่ยวข้อง

ประสบการณ์อย่างน้อย 5 ปีในตำแหน่งวิศวกรข้อมูล โดยมุ่งเน้นไปที่โครงสร้างพื้นฐานข้อมูลบนคลาวด์

ทักษะการเขียนโปรแกรมที่เชี่ยวชาญใน Python, Java หรือภาษาอื่นๆ ที่คล้ายกัน โดยเน้นที่ Python

ประสบการณ์อย่างกว้างขวางในเทคโนโลยีการจัดเก็บและประมวลผลข้อมูลบนคลาวด์ โดยเฉพาะ Azure, AWS และ GCP

ความคุ้นเคยกับเครื่องมือและเฟรมเวิร์ก ETL/ELT เช่น Apache Beam, Apache Spark หรือ Apache Flink

ความรู้เกี่ยวกับหลักการของการจำลองข้อมูลและประสบการณ์ในการทำงานกับฐานข้อมูล SQL

ทักษะการแก้ปัญหาที่แข็งแกร่งและความสามารถในการแก้ไขปัญหาอย่างมีประสิทธิภาพ

ทักษะการสื่อสารและการทำงานร่วมกันที่ยอดเยี่ยมเพื่อทำงานอย่างมีประสิทธิภาพกับทีมที่หลากหลายสาขา