استخدام Senior Data Engineer (شیراز)
شرح موقعیت شغلی
ما در تیم ابردراک به دنبال همکاری جدید با عنوان Senior Data Engineer هستیم تا در نگهداری پایپلاین های داده جاری و طراحی پایپلاین های داده جدید تیم ما را همراهی نماید.
مهارت های مورد نیاز:
- تجربه کار با لینوکس، Virtualiztion و داکر
- تجربه کار با Message Broker مانند Kafka و RabbitMQ
- تجربه کار با Data lake و انبار داده مانند ELK stack و ClickHouse
- مسلط به سیستم های مانیتورینگ مانند Grafana
- توانایی مستند سازی و توسعه CI/CD
- توانایی حل مسائل پیچیده
مسئولیت ها:
- توسعه و نگهداری Pipeline داده، انبارهای داده، Data Lake
- توسعه و نگهداری فرآیندهای ETL/ELT
- شناسایی، طراحی و اجرای بهبودهای فرآیند داخلی: خودکارسازی فرآیندهای دستی، بهینه سازی تحویل داده ها برای مقیاس پذیری بیشتر
- طراحی و پیاده سازی Data Pipeline جدید در صورت نیاز
- همکاری با سایر تیم ها و پاسخ گویی به نیازهای آنها
- مانیتورینگ Data Pipeline و مدیریت شرایط بحرانی
مهارتهای مورد نیاز
- Python
- Data engineer
- SQL
حداقل سابقه کار
- سه تا شش سال
جنسیت
- مهم نیست
وضعیت نظام وظیفه
- مهم نیست