تمرين خط أنابيب ETL: التحويل
تعرف على كيفية تحويل خط أنابيب وسائل التواصل الاجتماعي باستخدام Apache Airflow.
سنغطي ما يلي...
سنغطي ما يلي...
لمواصلة تنفيذ خط الأنابيب، سنركز الآن على تحويل البيانات المستخرجة. وفقًا لمتطلبات العمل ومخطط مستودع البيانات، هناك بعض المشكلات التي نحتاج إلى حلها في بياناتنا المستخرجة. وهي:
لتغيير تنسيق الشهر لجميع أعمدة التاريخ من رقمية إلى نصية (على سبيل المثال، من
08
لAug
)لإزالة علامات التبويب والأسطر الجديدة من الأعمدة
comment_text
وpost_text
لتقسيم عدد المتابعين إلى ثلاث فئات،
low
،medium
،high
(سيتم إدراج عدد المتابعين الأقل من 1000 فيlow
الفئة، سيكون عدد المتابعين بين 1000 و5000 فيmedium
الفئة، ...