مهندس بيانات - دورة 89000 فرك. من أوتوس مدة التدريب 4 أشهر تاريخ 30 نوفمبر 2023.

مهندس بيانات في Wildberry، متحدث دورة DE Junior. أكثر من 7 سنوات في مجال تكنولوجيا المعلومات

خريج جامعة ولاية فورونيج بمرتبة الشرف. حاليا طالب في برنامج الماجستير في الصحة والسلامة والبيئة "هندسة النظم والبرمجيات". الخبرة المهنية - سنتان من العمل كمحلل بيانات ومهندس بيانات. وهو الآن يعمل مع 5 قواعد بيانات مشهورة، ويتطور في لغة بايثون ويطور مهاراته بسرعة. على استعداد لمشاركة تجربتي.

لقد قام بتطوير التحليلات في الشركة لأكثر من 10 سنوات. من بين الإنجازات: - بناء نظامنا الشامل لتحليلات الويب؛ - إنشاء مستودع تحليلي يعتمد على MPP Vertica؛ - تنظيم معالجة البيانات استنادًا إلى Spark، كافكا، HDFS؛ - بناء عمليات للعمل مع البيانات، بما في ذلك جودة البيانات؛ - إنشاء العديد من الأدوات الداخلية للعمل وتنظيم البيانات الوصفية (كتالوج البيانات)؛ - بناء نظام تقارير الشركات، بما في ذلك الوقت الفعلي؛ - لأكثر من 5 سنوات، قام بزيادة المعرفة بالبيانات داخل الشركة، وإجراء دورات تدريبية مختلفة حول العمل مع البيانات، أدوات SQL؛ كما قام أيضًا بتطوير العديد من قادة التحليلات الذين يعملون الآن في الشركات الكبيرة. ينصب التركيز الرئيسي على فهم مشاكل العمل عند العمل مع البيانات وحلها.

رئيس قسم، سبيربنك، 8 سنوات من الخبرة في مجال التطوير الصناعي، بما في ذلك إنشاء وصيانة تطبيقات الويب في الشركات الكبيرة والشركات الناشئة. 3 سنوات من تطوير الأنظمة الموزعة لكبار العملاء الحكوميين. تم تنفيذ ثلاثة مشاريع من الصفر، من النموذج الأولي إلى الجاهزية للاستخدام الصناعي. تعمل حاليًا على التطوير الشامل للعملاء الداخليين في البنك، وحل المشكلات المتعلقة بتحليل البيانات وهندستها. خبرة في البرمجة بلغة Java وScala وPython وJavascript. مجموعة واسعة من الاهتمامات المهنية، بدءًا من بناء الأنظمة الموزعة إلى التحليلات التنبؤية وتحليل النوايا. التعليم: درجة البكالوريوس من UrFU سميت على اسم. ب.ن. يلتسين "تكنولوجيا المعلومات".

هندسة البيانات
-الموضوع 1.مهندس البيانات. المهام، المهارات، الأدوات، احتياجات السوق
-الموضوع الثاني: معمارية التطبيقات التحليلية: مكوناتها ومبادئها الأساسية
-الموضوع 3.في أماكن العمل / الحلول السحابية
-الموضوع 4. أتمتة وتنسيق خطوط الأنابيب – 1
-الموضوع 5. أتمتة وتنسيق خطوط الأنابيب – 2

بحيرة البيانات
-الموضوع 6. أنظمة الملفات الموزعة. HDFS/S3
-الموضوع 7.SQL الوصول إلى Hadoop. أباتشي خلية / المعزوفة
-الموضوع 8. تنسيقات تخزين البيانات وخصائصها
-الموضوع 9. تحليل جهاز التحكم عن بعد لحالة واحدة
-الموضوع العاشر: قوائم انتظار الرسائل. نظرة عامة على كافكا.
-الموضوع الحادي عشر: تنزيل البيانات من الأنظمة الخارجية
-الموضوع 12.اباتشي سبارك – 1
-الموضوع 13.اباتشي سبارك – 2

DWH
-الموضوع الرابع عشر: نظام إدارة قواعد البيانات التحليلي. قواعد بيانات MPP
-الموضوع 15.DWH النمذجة - 1. أساسيات دي بي تي
-الموضوع 16.نمذجة DWH - 2. مخزن البيانات 2.0
-الموضوع السابع عشر: ممارسات DevOps في التطبيقات التحليلية. سي + سي دي
-الموضوع 18. تحليل جهاز التحكم عن بعد للحالة 2
-الموضوع التاسع عشر.جودة البيانات. إدارة جودة البيانات
-الموضوع العشرين. نشر حلول ذكاء الأعمال
-الموضوع 21.الرصد/البيانات الوصفية

نو إس كيو إل/نيو إس كيو إل
-الموضوع 22. تخزين NoSQL. عمود واسع وقيمة المفتاح
-الموضوع 23. تخزين NoSQL. موجه نحو الوثيقة
-الموضوع 24.ELK
-الموضوع 25.ClickHouse
-الموضوع 26. تحليل جهاز التحكم عن بعد للحالة 3

MLOps
-الموضوع 27.تنظيم وتغليف الكود
-الموضوع 28.هندسة Docker وREST
-الموضوع 29.MLFlow + DVC
-الموضوع 30. نشر النماذج
-الموضوع 31. تحليل جهاز التحكم عن بعد للحالة 4
-الموضوع 32. تحليل جهاز التحكم عن بعد للحالة 5

مشروع التخرج
-الموضوع 33. اختيار الموضوع وتنظيم عمل المشروع
-الموضوع 34.التشاور
-الموضوع 35.الحماية