ฮาดูป
(Hadoop)
นิยาม
ฮาดูป (Hadoop) Tool
ฮาดูป คือ เฟรมเวิร์กแบบโอเพนซอร์สที่อนุญาตให้ประมวลผลชุดข้อมูลขนาดใหญ่แบบกระจายบนกลุ่มคอมพิวเตอร์โดยใช้รูปแบบการเขียนโปรแกรมที่ง่าย
ระดับความเชี่ยวชาญ
ระดับที่ 1
ระดับพื้นฐาน
1. เข้าใจแนวคิดหลักของฮาดูป เช่น HDFS และ MapReduce
2. สามารถติดตั้งและกำหนดค่าสภาพแวดล้อมฮาดูปพื้นฐานได้
3. สามารถรันงาน MapReduce ง่ายๆ กับชุดข้อมูลขนาดเล็กได้
ระดับที่ 2
ระดับปานกลาง
1. สามารถจัดการและปรับแต่งคลัสเตอร์ฮาดูปสำหรับงานประมวลผลข้อมูลขนาดกลางถึงใหญ่ได้
2. พัฒนาและแก้ไขปัญหางาน MapReduce และเวิร์กโฟลว์ที่ซับซ้อนได้
3. คุ้นเคยกับส่วนประกอบในระบบนิเวศที่เกี่ยวข้อง เช่น Hive, Pig หรือ HBase
ระดับที่ 3
ระดับสูง
1. ออกแบบและนำเสนอทางแก้ฮาดูปที่สามารถขยายได้สำหรับการวิเคราะห์ข้อมูลขนาดใหญ่
2. ปรับแต่งประสิทธิภาพคลัสเตอร์ การจัดสรรทรัพยากร และความทนทานต่อความผิดพลาดในระดับองค์กร
3. ผสานฮาดูปกับเทคโนโลยีบิ๊กดาต้าอื่นๆ และดูแลความปลอดภัยและการปฏิบัติตามข้อกำหนด
