استخدام Data Engineer
شرح موقعیت شغلی
مسئولیت ها و وظایف اصلی:
- مدل سازی و پیاده سازی سیستم های ذخیره سازی داده
- نگهداری و توسعه مدل های فعلی سازمان
- پیاده سازی خطوط جریان داده به منظور استفاده در الگوریتم های یادگیری ماشین
- ارتباط مؤثر با بخش های مختلف سازمان به منظور جمع آوری نیاز های فعلی و آینده
مهارت های فنی ضروری
- تسلط به ساختمان داده و طراحی الگوریتم
- تسلط به حداقل یک ابزار طراحی جریان داده (ترجیحا Nifi)
- تسلط به پایگاه های داده رابطه ای و غیر رابطه ای
- تسلط به زبان SQL
- تجربه کار با حداقل یک ابزار CDC (Debezium ، ... )
- آشنایی با سیستم های کنترل نسخه (Git و ... )
- آشنایی با Apache Kafka
- آشنایی با Apache Spark
- آشنایی با Docker
- آشنایی با Airflow
- آشنایی با Hadoop و سیستم های ذخیره سازی آن
- آشنایی با معماری های کلان داده (Kappa، Lambda)
- آشنایی با یک زبان اسکریپ نویسی (پایتون، جاوا، ...)
- آشنایی مقدماتی با آمار
مهارت های ترجیحی
- آشنایی با پایگاه های داده غیر رابطه ای
- آشنایی مقدماتی با MLOPS
- کارشناسی یا کارشناسی ارشد رشته کامپیوتر یا علوم پایه
مهارتهای مورد نیاز
- Databases
- SQL
- پایگاه داده
حداقل سابقه کار
- کمتر از سه سال
جنسیت
- مهم نیست
وضعیت نظام وظیفه
- مهم نیست