استخدام Data Engineer
شرح موقعیت شغلی
ما به دنبال همکارانی هستیم که دارای تجربه مفید در فرآیندهای پردازش داده و تسلط به SQL Server باشند تا در توسعه ابزارهای لازم برای پشتیبانی و ارسال/دریافت داده ها از سیستمهای جانبی مشتری در محل استقرار ما را همراهی کنند.
داشتن روحیه کار تیمی و مسئولیت پذیری اهمیت زیادی دارد.
داشتن روحیه کار تیمی و مسئولیت پذیری اهمیت زیادی دارد.
- توسعه ابزارهای تبدیل و انتقال داده
- طراحی، پیاده سازی، تست و نگهداری ساختار و فرآیندهای ETL مناسب بر روی منابع داده ای مختلف
- طراحی و بکارگیری روش های مناسب برای تحلیل و ارزیابی کیفیت داده ها
- طراحی و بکارگیری روشهای مناسب برای پاک سازی داده (Data Cleaning)
- طراحی و پیاده سازی Query های لازم و بهینه سازی آنها از جهت کارایی
- بکارگیری ابزارهای کافی جهت نظارت بر عملکرد پایگاه داده، بهینه سازی و تحلیل کارایی آن و روالهای ETL
- برقراری ارتباط مناسب و همکاری با سایر اعضاء تیم
- تهیه مستندات فنی و به روز نگاه داشتن آنها
مهارت های فنی ضروری
- مسلط به طراحی و توسعه ساختارهای اطلاعاتی و پایگاه داده در SQL Server
- مسلط به زبان برنامه نویسی #C یا Python
- مسلط به طراحی و پیاده سازی Query ها و بهینه سازی آنها
- آشنا به توسعه و به روزرسانی و بهینه سازی فرآیندهای ETL با استفاده از Apache NiFi یا SSIS
- آشنا به Rest API
مهارتهای مورد نیاز
- Python
- Big Data
- #C
حداقل سابقه کار
- کمتر از سه سال
جنسیت
- مهم نیست
وضعیت نظام وظیفه
- مهم نیست