استخدام Data Engineer(مشهد)

شرح موقعیت شغلی

1. طراحی زیرساخت مورد نیاز برای ETL بهینه، استخراج و انتقال ، بارگذاری و بارگیری داده ها از منابع مختلف داده مانند فایل‌های لاگ، دیتابیس‌های SQL 
2. نگهداری و بهینه سازی پایپ لاین های دیتا به منظور آماده سازی دیتای تمیز برای تحلیل.
3. شناسایی، طراحی و اجرای پروسه‌ها و فرایندهای داخلی ، خودکار سازی فرایندهای دستی و بهینه سازی تحویل داده ها، اصلاح ساختار دیتابیس ها با توجه به 3NF، طراحی و بهبود زیرساخت داده برای مقیاس پذیری بیشتر.
4. جمع آوری مجموعه داده های بزرگ و پیچیده جهت الزامات تجاری و  اتصال زیرساخت داده به ابزارهای BI
5. همکاری با تیم‌ها و ذینفعان مختلف مانند محصول، طراحی و تحلیل دیتا برای ارائه‌ی زیرساخت‌های لازم.

1. ساخت و بهینه سازی پایپ لاین داده، معماری ها و زیرساخت big data
2. مسلط به مفاهیم طراحی دیتابیس(OLTP) و اصول نرمال سازی
3. آشنایی با مفاهیم Data Warehouse, Data Lake  و فرآیند طراحی آنها(OLAP)
4. دانش کاری در مورد صف‌بندی پیام، پردازش جریانی و ذخیره‌سازی داده‌های بزرگ مقیاس پذیر
5. آشنایی با مفاهیم و کاربردهای دیتابیس های NoSQL
6. آشنایی با پلتفرم های BI
7. دانش و تجربه کار پیشرفته با SQL و پایگاه های داده رابطه ای و Data cleaning

• Big data and log analysis tools:(e.g: Spark, Kafka, ELK stack, etc).
• Relational SQL databases: (e.g: Postgresql, etc).
• Data pipeline and workflow management tools: (e.g: Airflow, Luigi, NiFi).
• Stream-processing systems:(e.g: Storm, Spark-Streaming, etc).
• Object-oriented/ scripting languages:(e.g: Python, Java, C++, Scala, etc).

• حضور تمام وقت در محل شرکت در مشهد (امکان دورکاری در بعضی روزها)
• ساعات کاری: شنبه الی چهارشنبه از ساعت 9:30 تا 18(امکان شناوری تا 2 ساعت وجود دارد)
• حقوق و مزایا متناسب با توانمندی‌ها
• بیمه تامین اجتماعی و تکمیل درمان
• محیط‌ کاری مفرح، خلاق و اخلاق مدار
• امکان آموزش تخصص‌های ویژه حین کار با هزینه شرکت 

مهارت‌های مورد نیاز

• Python
• SQL
• kafka
• Data engineer
• PostgreSQL
• C++

حداقل سابقه کار

• مهم نیست

جنسیت

• مهم نیست

وضعیت نظام وظیفه

• مهم‌ نیست

مشاهده آگهی‌های استخدام مشابه