Apache Spark / المتوسط: التوزيع وأدلة التنفيذ
Apache Spark — المتوسط: التوزيع وأدلة التنفيذ
اختر مراجعات حتمية وقيّم النوافذ والتنظيم والخطط وإعادة الاستخدام وحدود العمال.
ما الذي ستتعلمه؟
- ميّز التقسيم المنطقي وتوزيع التبادل وتنظيم الملفات.
- استخدم أدلة خطة وتحقق محددة، دون ادعاء اختبارات محرك لم تُنفذ.
النوافذ وإزالة التكرار الحتمية
احتفظ بتفاصيل القراءات عند اختيار المراجعات المعتمدة وحساب قياسات طاقة مرتبة.
ابدأ التعلّمالأقسام والتبادل وتوازن العمل
افصل التوزيع وتنظيم الملفات ومفاتيح الأعمال عند تحليل التفاوت واكتمال المراحل.
ابدأ التعلّمتنظيم Parquet ونشر المخرجات بأمان
صمم مجموعات ملفات بحدود صريحة للمخطط وتقليص القراءة والنشر والتعافي.
ابدأ التعلّمخطط التنفيذ والإحصاءات والتنفيذ المتكيف
استخدم أدلة منطقية ومادية لتقييم اختيارات المحسّن، دون اعتبار الخطة قياس أداء.
ابدأ التعلّمالحفظ وسلسلة الاشتقاق وحدود إعادة المحاولة
أعد استخدام العمل الحتمي المكلف دون خلط التخزين المؤقت ونقطة التحقق والنشر الدائم.
ابدأ التعلّمدوال Python وArrow وعقود العمليات العاملة
وسّع التحويلات عند الحاجة فقط، واحفظ دلالات النوع وNULL والتبعيات والإعادة عبر عمليات Python.
ابدأ التعلّم