محلل مستودع البيانات - دورة مجانية من Otus، التدريب 5 أشهر، تاريخ 30 نوفمبر 2023.
Miscellanea / / December 04, 2023
يتم إنشاء التطبيقات التحليلية اليوم عند تقاطع الممارسات الهندسية (هندسة البرمجيات/البيانات)، فهم تفاصيل المنتجات والأعمال (تحليل البيانات/الأعمال)، وتقديم الخدمات بسرعة وبجودة عالية (ديف أوبس).
تهدف الدورة إلى تعليم الطلاب كيفية تجميع حلول تحليلية كاملة وشاملة باستخدام الأدوات الأكثر صلة والمطلوبة.
سيتم دراسة المادة بشكل متعمق (على سبيل المثال، مبادئ عمل أنظمة إدارة قواعد البيانات التحليلية) وبشكل موسع (مقارنة الأدوات، وتحليل نقاط القوة والضعف في الحلول).
ما الأشياء الجديدة التي يمكنني تعلمها؟
بالنسبة لأدوار عالم البيانات، ومحلل البيانات، ومحلل المنتج:
- مبادئ تشغيل نظام إدارة قواعد البيانات التحليلي وبناء خطوط أنابيب ELT
– استخدام أفضل الممارسات لنمذجة مستودعات البيانات والأسواق
– تطبيق الأنماط المعمارية الصحيحة عند بناء الحلول
بالنسبة لأدوار مهندس البيانات، ومطور الواجهة الخلفية، وDBA، ومسؤول النظام:
- ممارسات بناء الحلول التحليلية الشاملة
- المهارات التطبيقية في التصور، ولوحة المعلومات، وذكاء الأعمال
– التركيز على خلق قيمة الأعمال
ستغطي الدورة:
– مهارات في بناء خطوط أنابيب ELT: Airflow، Nifi، Stitch
- مبادئ تشغيل نظم إدارة قواعد البيانات التحليلية: Redshift، Greenplum، Clickhouse
– أفضل ممارسات نمذجة البيانات: dbt، Data Vault
– التصور وBI: قاعدة التعريف، Superset، DataLens
– التحليلات المتقدمة: مؤشرات الأداء الرئيسية، مسارات التحويل، إسناد التسويق، المجموعة النموذجية، RFM
– ممارسات DevOps: التكامل المستمر، إجراءات Github
6
الدوراتمهندس بيانات في Wildberry، متحدث دورة DE Junior. أكثر من 7 سنوات في مجال تكنولوجيا المعلومات
خريج جامعة ولاية فورونيج بمرتبة الشرف. حاليا طالب في برنامج الماجستير في الصحة والسلامة والبيئة "هندسة النظم والبرمجيات". الخبرة المهنية - سنتان من العمل كمحلل بيانات ومهندس بيانات. وهو الآن يعمل مع 5 قواعد بيانات مشهورة، ويتطور في لغة بايثون ويطور مهاراته بسرعة. على استعداد لمشاركة تجربتي.
1
حسنًاأكثر من 6 سنوات من الخبرة في تطوير مستودعات البيانات وخطوط أنابيب ELT وتحليل البيانات وتصورها. خبرة في مجال أمن الدولة وإنشاء وتنفيذ مجموعة شركات KHD LLC "SBSV-Klyuchavto"، حاليًا...
أكثر من 6 سنوات من الخبرة في تطوير مستودعات البيانات وخطوط أنابيب ELT وتحليل البيانات وتصورها. خبرة في مجال أمن الدولة وإنشاء وتنفيذ QCD LLC "مجموعة شركات "SBSV-Klyuchavto"، التي تعمل حاليًا على تطوير QCD بالنسبة لمجموعة شركات ديلو، أنا واثق من أن البيانات هي النفط الثاني، وهي نوع من الممتلكات التي تحتاجها لتكون قادرًا على إدارتها تخلص من. يشير وجود البيانات المنظمة وتخزينها المناسب واستخدامها وبيعها وإخفاء هويتها إلى مستوى عالٍ من النضج الرقمي. مدرس
3
دورةتعمل ألكسندرا في مجال التحليلات وذكاء الأعمال منذ عام 2019. بحلول هذا الوقت، حصلت على درجة البكالوريوس في هندسة البرمجيات من جامعة ولاية سانت بطرسبرغ لإدارة الطيران، ثم درجة الماجستير. الخطوات الأولى في...
تعمل ألكسندرا في مجال التحليلات وذكاء الأعمال منذ عام 2019. بحلول هذا الوقت، حصلت على درجة البكالوريوس في هندسة البرمجيات من جامعة ولاية سانت بطرسبرغ لإدارة الطيران، ثم درجة الماجستير. اتخذ الخطوات الأولى في حياته المهنية في شركة Intermedia Cloud Communications الأمريكية كمحلل بيانات مبتدئ، وبحلول عام 2021 تمكن من أن يصبح رئيس فريق التحليلات. تم تخصيص هذا العام بأكمله لمشروع جديد مشترك بين الفرق للإدارة المالية الدولية على حزمة Microsoft (MS SQL Server، SSRS، SSIS، Power BI). منذ مارس 2022، يعمل في مجموعة شركات Tinkoff Bank كمحلل مستودعات بيانات. يوفر الدعم للإدارة العليا للقسم المالي في بناء نماذج أولية لعمليات ETL باستخدام Greenplum والتحليلات المخصصة في Python وإعداد التقارير والتصور في Tableau. وفي عام 2020، حصلت على تعليم إضافي في اتجاه مدير إدارة المشاريع في مجال تكنولوجيا المعلومات. وهو مؤيد قوي لمنهجيات التطوير المرنة. يعتقد أن الاستثمارات الأكثر ربحية هي الاستثمارات في تنمية الفرد. المكدس: SQL، SAS DIS، SSIS، Tableau، Power BI، Python
ELT: هيكل وأنواع مصادر البيانات
-الموضوع 1. مصادر البيانات: تصنيفها وخصائصها
-الموضوع 2.أدوات تنزيل البيانات – 1
-الموضوع 3.أدوات تنزيل البيانات – 2
أساسيات DWH
-الموضوع 4. المحركات التحليلية (DBMS) للتعامل مع البيانات
-الموضوع 5.مبادئ البناء DWH
-الموضوع 6.تحليل DZ – تحميل بيانات عداد الويب
-الموضوع 7.مقدمة لأداة بناء البيانات
-الموضوع 8.DBT: هندسة التحليلات
DWH المتوسطة
-الموضوع 9.تنسيق النصوص والمهام – 1
-الموضوع 10. تنسيق النصوص والمهام – 2
-الموضوع 11.تحليل DZ – تكوين وإطلاق مشروع dbt
-الموضوع الثاني عشر: جودة البيانات
-الموضوع 13. قضايا تحسين الأداء
-الموضوع 14.خزنة البيانات – 1
-الموضوع 15.خزنة البيانات – 2
-الموضوع 16.تحليل DZ - إعداد وإعداد جدول DAG لتنزيل البيانات من المصادر
ذكاء الأعمال
-الموضوع 17.BI: نظرة عامة
-الموضوع 18.BI: النشر
-الموضوع 19.BI: النمذجة والتنفيذ
-الموضوع 20.تحليل DZ – تنظيم طبقة DWH مفصلة باستخدام منهجية Data Vault
-الموضوع الحادي والعشرون: التحليلات: العروض التحليلية الأساسية
-الموضوع 22.BI: أسئلة متعمقة
-الموضوع 23. DZ Razor – تكوين ونشر حل ذكاء الأعمال
-الموضوع الرابع والعشرون: التحليلات: عروض التحليلات المتقدمة
مواضيع DWH المتقدمة
-الموضوع 25.DWH: مواضيع متقدمة
-الموضوع 26.DBT: التوسع مع الوحدات
-الموضوع 27.DWH: المراقبة + إدارة عبء العمل
-الموضوع 28.تحليل DZ – التصور ولوحة المعلومات لواجهات العرض التحليلية
-الموضوع 29.DWH: البيانات الخارجية وشبه المنظمة
-الموضوع 30.DWH: عكس-ETL
-الموضوع 31.DWH: قدرات التعلم الآلي
خلاصة
-الموضوع 32. تحليل الحالة: الحل الشامل
-الموضوع 33.تحليل DZ - DWH المتقدم: تكوين CI ووحدات dbt والجداول الخارجية
-الموضوع 34. مواصلة تطوير المهارات
مشروع العمل
-الموضوع 35. اختيار الموضوع وتنظيم عمل المشروع
-الموضوع 36.حماية أعمال التصميم