Hands-On Apache Beam with Kotlin: Practical Data Pipeline Exercises

การประมวลผลข้อมูลขนาดใหญ่ได้อย่างมีประสิทธิภาพนั้นจำเป็นต้องใช้ทั้งเฟรมเวิร์กที่มีทรงพลังและภาษาโปรแกรมมิ่งที่สื่อความหมายได้ชัดเจน คอร์สเรียนรูปแบบข้อความนี้จะนำคุณไปสู่พื้นฐานการสร้าง data processing pipelines โดยใช้ Apache Beam และ Kotlin ซึ่งเป็นการรวมเอาโมเดลการเขียนโปรแกรมแบบรวมศูนย์ของ Beam เข้ากับไวยากรณ์ที่ทันสมัยและกระชับของ Kotlin คุณจะได้เปลี่ยนผ่านจากการเข้าใจแนวคิดหลักของ data pipeline ไปสู่การเขียน การปรับปรุงโครงสร้างโค้ด (refactoring) และการเพิ่มประสิทธิภาพโค้ด pipeline ของคุณเองผ่านแบบฝึกหัดการเขียนโค้ดที่มีโครงสร้างชัดเจน สิ่งที่คุณจะได้เรียนรู้: • เข้าใจแนวคิดหลักของ Apache Beam รวมถึง Pipelines, PCollections และ transforms • พัฒนา batch และ streaming data pipelines โดยใช้ไวยากรณ์ที่สื่อความหมายได้ชัดเจนและมีความปลอดภัยทางประเภทข้อมูล (type-safe) ของ Kotlin • ประยุกต์ใช้กลยุทธ์ windowing, triggering และ accumulation เพื่อจัดการกับข้อมูลที่เข้ามาไม่ตามลำดับ • เขียน custom PTransforms เพื่อแยกส่วนและนำลอจิกการประมวลผลข้อมูลกลับมาใช้ใหม่ • ฝึกฝนการแก้ไขจุดบกพร่อง (debugging) และการทดสอบ Apache Beam pipelines โดยใช้ local runners • รวมคุณสมบัติที่ทันสมัยของ Kotlin เช่น null safety และ data classes เพื่อเขียนโค้ด pipeline ที่สะอาดและเป็นระเบียบยิ่งขึ้น เริ่มต้นด้วยคำนิยามพื้นฐานและการติดตั้ง คุณจะได้ก้าวหน้าผ่านซีรีส์โจทย์โปรแกรมมิ่งที่ออกแบบมาเพื่อสร้างความมั่นใจของคุณทีละขั้นตอน คอร์สนี้ออกแบบมาสำหรับ software engineers, data engineers และนักพัฒนา Kotlin ที่ยังใหม่กับ Apache Beam และต้องการเส้นทางสู่ความเชี่ยวชาญในรูปแบบข้อความที่เน้นการปฏิบัติจริง ไม่จำเป็นต้องมีประสบการณ์เกี่ยวกับ Apache Beam มาก่อน เริ่มอ่านวันนี้เพื่อสร้างทักษะ data engineering ของคุณด้วย Kotlin และ Apache Beam