HomeCoursesنقل البيانات باستخدام ETL

Intermediate

10h

Updated 4 weeks ago

نقل البيانات باستخدام ETL

إتقان عمليات ETL، واستكشاف استخراج البيانات من MySQL و PostgreSQL و MongoDB، والتعرف على جدولة خطوط أنابيب ETL وأتمتتها باستخدام أدوات مثل Apache Airflow و Python.

Join 2.8M developers at

Overview

Content

Reviews

ETL تعني الاستخراج والتحويل والتحميل. إنها مجموعة من العمليات التي تجمع البيانات من مصادر مختلفة وتحملها إلى مستودعات البيانات أو مستودعات البيانات الأخرى. ETL أمر بالغ الأهمية لتوفير البيانات المستخدمة في استخبارات الأعمال والتحليلات. في هذه الدورة، ستجرب استخراج البيانات من حلول قواعد البيانات المختلفة مثل MySQL و PostgreSQL و MongoDB. ستستخدم لغات الاستعلام والبرمجة النصية مثل SQL و Python وApache Spark لمعالجة البيانات وتحميلها إلى مستودعات البيانات أو حلول السحابة مثل Google GCP. وأخيرًا، ستتعلم كيفية جدولة أنابيب ETL الخاصة بك باستخدام cronjobs أو أتمتتها ومراقبتها باستخدام أدوات مفتوحة المصدر مثل Apache Airflow ومكتبة pandas من Python. بعد إكمال هذه الدورة، سيكون لديك فهم قوي لمختلف الطرق والأدوات والتقنيات لنقل البيانات من المصدر إلى وجهتها باستخدام أنابيب ETL.

ETL تعني الاستخراج والتحويل والتحميل. إنها مجموعة من العمليات التي تجمع البيانات من مصادر مختلفة وتحملها إلى مستودعات البيانات أ...Show More

ما سوف تتعلمه

فهم خطوات الاستخراج والتحويل والتحميل في خط أنابيب ETL

خبرة عملية في تنفيذ وتنظيم خطوط أنابيب ETL

فهم قواعد البيانات، ومستودعات البيانات، ومعالجة البيانات، واستيعاب البيانات

خبرة عملية في استخدام أدوات ETL مثل Python وSQL وApache Spark وApache Airflow

فهم خطوات الاستخراج والتحويل والتحميل في خط أنابيب ETL

المحتوى

57 Lessons1 Project7 Quizzes

مقدمة

14 Lessons

تعرف على كيفية بناء خطوط أنابيب ETL ومراحلها وأمثلة عملية لتحويل البيانات.

ابدء

مراحل خط أنابيب ETL

ما هو خط أنابيب ETL؟

نموذج جديد - تعليم اللغة الإنجليزية

مثال على الاستخراج والتحويل والتحميل (ETL)

مثال على تحويل ETL: معالجة مشكلة جودة البيانات

مثال على تحويل ETL: التعامل مع القيم والبيانات المفقودة

مثال على تحويل ETL: فرز البيانات وإنهائها

مثال ETL—التحميل

مثال على ETL—الجدولة

المعالجة الدفعية مقابل المعالجة المتدفقة

مستودع البيانات

أمثلة وحالات الاستخدام

اختبار: خطوط أنابيب ETL

هـ: استخراج

14 Lessons

ابدأ بتعلم تقنيات استخراج البيانات من مصادر مختلفة بما في ذلك قواعد البيانات وواجهات برمجة التطبيقات وكشط الويب.

مقدمة

نظرة عامة على طرق استخراج البيانات

استخراج البيانات باستخدام كشط الويب

تمرين كشط الويب: قراءة البيانات

تمرين كشط الويب: تحويل إطارات البيانات إلى CSV

الاستخراج باستخدام API REST

تمرين: استخراج البيانات باستخدام API التطبيقات REST

الاستخراج الكامل من قاعدة بيانات MySQL

الاستخراج التدريجي من قاعدة بيانات MySQL

الاستخراج من السجل الثنائي لـ MySQL

استخراج من قاعدة بيانات PostgreSQL

الاستخراج من Google BigQuery

تمرين: قواعد البيانات

اختبار: استخراج البيانات

ت: تحويل

11 Lessons

إتقان خطوات تحويل البيانات الخام إلى تنسيقات قابلة للاستخدام من خلال التنظيف والتنظيم وإخفاء الهوية والتجميع.

ل: تحميل

9 Lessons

تعرف على أساسيات تحميل البيانات المحولة إلى مستودعات وخيارات الاستضافة واستراتيجيات التحميل.

التوزيع الموسيقي

8 Lessons

قم بإلقاء نظرة عن كثب على تنظيم خطوط أنابيب ETL باستخدام Apache Airflow والنشر وإدارة المهام.

خط أنابيب ETL: المعالجة المسبقة لاكتشاف الاحتيال

Project

خاتمة

1 Lessons

تنفيذ مهارات وأدوات ETL الأساسية للهندسة المعمارية والأتمتة الفعالة للبيانات.

إنشاء خط أنابيب بيانات ETL للأخبار باستخدام Python و SQLite

Project

Premium

نظام كشف الاحتيال

Mock Interview

Premium

شهادة إتمام

اعرض إنجازك بمشاركة شهادة الإتمام الخاصة بك.

Developed by MAANG Engineers

Every Educative lesson is designed by a team of ex-MAANG software engineers and PhD computer science educators, and developed in consultation with developers and data scientists working at Meta, Google, and more. Our mission is to get you hands-on with the necessary skills to stay ahead in a constantly changing industry. No video, no fluff. Just interactive, project-based learning with personalized feedback that adapts to your goals and experience.

Trusted by 2.8 million developers working at companies

"These are high-quality courses. Trust me. I own around 10 and the price is worth it for the content quality. EducativeInc came at the right time in my career. I'm understanding topics better than with any book or online video tutorial I've done. Truly made for developers. Thanks"

Anthony Walker

@_webarchitect_

"Just finished my first full #ML course: Machine learning for Software Engineers from Educative, Inc. ... Highly recommend!"

Evan Dunbar

ML Engineer

"You guys are the gold standard of crash-courses... Narrow enough that it doesn't need years of study or a full blown book to get the gist, but broad enough that an afternoon of Googling doesn't cut it."

Software Developer

Carlos Matias La Borde

"I spend my days and nights on Educative. It is indispensable. It is such a unique and reader-friendly site"

Souvik Kundu

Front-end Developer

"Your courses are simply awesome, the depth they go into and the breadth of coverage is so good that I don't have to refer to 10 different websites looking for interview topics and content."

Vinay Krishnaiah

Software Developer

Hands-on Learning Powered by AI

See how Educative uses AI to make your learning more immersive than ever before.

Personalized Interview Prep

Skip the LeetCode grind with a custom roadmap that adapts to your goals. Hands-on practice for Coding Interviews, System Design, and more.

Mock Interviews

Test your skills in a simulated interview setting. Receive personalized feedback based on your performance. Available for Coding Interviews, System Design, and more.

AI Prompt

Build prompt engineering skills. Practice implementing AI-informed solutions.

Code Feedback

Evaluate and debug your code with the click of a button. Get real-time feedback on test cases, including time and space complexity of your solutions.

Explain with AI

Select any text within any Educative course, and get an instant explanation — without ever leaving your browser.

AI Code Mentor

AI Code Mentor helps you quickly identify errors in your code, learn from your mistakes, and nudge you in the right direction — just like a 1:1 tutor!

Course

Data Science in Production: Building Scalable Model Pipelines

Gain insights into building scalable data and model pipelines, explore different cloud environments, delve into streaming workflows, and discover essential tools for creating real-time data products.

8 h

advanced

Course

Mastering Big Data with PySpark

Gain insights into PySpark within big data. Learn about data ingestion, distributed computing, data processing, and performance optimization to solve real-world problems and apply machine learning.

12 h

beginner

Course

Mastering Big Data with Apache Spark and Java

Gain insights into Spark Java API, learn about data transformations and SQL operations, and discover how to integrate big data and Java for scalable, high-speed processing.

17 h 15 m

intermediate

Course

Getting Started with SQL and Relational Databases

Gain insights into relational databases and SQL. Learn about creating, managing, and editing tables using MySQL. Explore complex queries, indexes, and join functions for efficient data handling.

9 h 40 m

beginner

Course

Predictive Data Analysis with Python

Learn predictive data analysis with Python using NumPy, Pandas, Matplotlib, and Seaborn. Apply skills to real-world finance and advertising projects to extract and visualize insights.

10 h

beginner

Course

Python Data Analysis and Visualization

Delve into Python data analysis and visualization using NumPy, SciPy, Pandas, and Seaborn. Gain insights into reading, cleaning, and visualizing data to generate actionable insights.

2 h 30 m

beginner

Course

Data Science in Production: Building Scalable Model Pipelines

advanced

8 hour

Course

Mastering Big Data with PySpark

beginner

12 hour

Course

Mastering Big Data with Apache Spark and Java