อาปาเช่ พิก
(Apache Pig)
นิยาม
อาปาเช่ พิก (Apache Pig) Tool
อาปาเช่ พิกเป็นแพลตฟอร์มระดับสูงสำหรับการสร้างโปรแกรมที่ทำงานบนอาปาเช่ ฮาดูป ช่วยให้งานแปลงข้อมูลและวิเคราะห์ข้อมูลที่ซับซ้อนง่ายขึ้นด้วยการให้ภาษาสคริปต์ที่ชื่อ Pig Latin ซึ่งช่วยซ่อนรายละเอียดการเขียนโปรแกรม MapReduce ที่ซับซ้อน
ระดับความเชี่ยวชาญ
ระดับที่ 1
ระดับพื้นฐาน
1. เข้าใจแนวคิดพื้นฐานและวัตถุประสงค์ของอาปาเช่ พิก
2. สามารถเขียนสคริปต์ Pig Latin ง่ายๆ เพื่อประมวลผลและแปลงข้อมูลได้
3. สามารถรันสคริปต์ Pig ในโหมดท้องถิ่นและตีความผลลัพธ์พื้นฐานได้
ระดับที่ 2
ระดับปานกลาง
1. สามารถเพิ่มประสิทธิภาพสคริปต์ Pig Latin เพื่อการทำงานที่ดีขึ้นบนคลัสเตอร์ Hadoop
2. เข้าใจวิธีการรวม Pig กับเครื่องมืออื่นในระบบนิเวศของ Hadoop
3. สามารถดีบักสคริปต์และจัดการข้อผิดพลาดได้อย่างมีประสิทธิภาพ
ระดับที่ 3
ระดับสูง
1. ออกแบบเวิร์กโฟลว์ข้อมูลที่ซับซ้อนโดยใช้ Pig สำหรับการประมวลผลข้อมูลขนาดใหญ่
2. พัฒนา UDF (ฟังก์ชันที่ผู้ใช้กำหนดเอง) เพื่อขยายความสามารถของ Pig
3. ใช้เทคนิคการเพิ่มประสิทธิภาพขั้นสูงและรวม Pig ในระบบงานจริง
