استخدام Data Engineer
شرح موقعیت شغلی
پی پینگ داره دنبال شما می گرده!
فین تک یه حوزه به شدت دادهمحوره و داشتن زیرساختهای دیتابیسی و پیادهسازی Data Pipelines برای ما خیلی مهمه. برای همین دنبال یه همتیمی جدید در سمت Data Engineerمیگردیم تا با طراحی و پیاده سازی فرایند های استخراج، ذخیرهسازی و تبدیل داده، به ما در تولید و حفظ دادههای با کیفیت کمک کنه. اتوماتیک کردن این فرایندها موضوع مهمیه که شما در پیاده سازی اون به ما کمک میکنید. اگه این مهارتها رو دارید و برنامهنویسی با پایتون رو هم بلد هستید، جای شما همین جاست!
رزومهتون رو برای ما بفرستید که خیلی مشتاقیم بیشتر باهم آشنا بشیم و یه گپوگفت دوستانه به صرف چای داشته باشیم :)
ما قراره تو تیم دیتا چه کارهایی انجام بدیم:
- طراحی، ساخت و نگهداری از زیرساختهای داده
- طراحی و پیادهسازی فرایندهای ETL و اتوماسیون اونها
- طراحی و پیادهسازی فرایندهای اعتبارسنجی جریان داده
- مستندسازی و تولید گزارشهای باکیفیت از تمامی فرایندها و روند حل مسئله
- کمک به طراحی و ساخت وبسرویسهای پایدار، مقیاسپذیر و امن
- همکاری و هماهنگی با سایر تیمها برای توسعهی محصولات دادهمحور
- همیاری و کمک در راستای ایجاد و رشد فرهنگ دادهمحور در سراسر شرکت
اگر ویژگی های زیر رو دارید، زودتر میتونیم با هم همکار بشیم
- حداقل یک سال سابقه کار در حوزههای مرتبط با تحلیل داده
- تسلط به برنامه نویسی پایتون، الگوهای طراحی شیگرا، معماری میکروسرویس
- تسلط به پایگاه داده SQL و NoSQL و
- توانایی نوشتن کوئریهای سخت و پیچیده و تست یکپارچی انباره داده و مهندسی کیفیت داده با کمک dbt
- حداقل کارشناسی مهندسی نرم افزار
داشتن مهارتهای زیر مزیت محسوب میشه، ولی ضروری نیست!
- تجربه کار در پیادهسازی استراتژیهای حاکمیت داده (مخصوصا مدیریت متا دیتا و Data Lineage و تهیه Data catalog)
- آشنایی با معماریهای مدرن داده و کار با Iceberg و Delta Lake
- تجربه پیکربندی و کار با موتورهای SQL مثل Presto
- تجربه کار با سیستمهای مدیریت دادههای جریانی (Streaming) مثل Apache Kafka
- آشنایی با فرایند CDC و کار با Debezium
- تجربه کار با Apache Airflow و Perfect
- تجربه کار با گنو/لینوکس و مدیریت سرورهای لینوکسی
- آشنایی با ابزارها و رویههای توسعه نرمافزار مانند Git، Clean Code، CI/CD، Docker و Unit Test
- آشنایی با Real-time Analytic و دیتابیس ستونی مانند ClickHouse و Druid
- آشنایی با Apache Spark از پیکربندی کلاستر تا تست مسیرهای داده
- آشنایی با دیتابیس گرافی (مخصوصا Neo4j)
- مدیریت Concurrency سرویسهای پایتون
- آشنایی با API Styles (مخصوصا GraphQL)
- بهینه سازی کوئریها
- مشاهدهپذیری جریانهای داده و ابزارهای سنجش اعتبار مسیرهای داده و مدل از جمله great_expectations و dbt
- آشنایی با طراحی ORM با SQLAlchemy
- طراحی APIهای محصول با کمک FastAPI
- طراحی داشبوردهای داده با Dash/Plotly
مزایای همکاری با ما:
- اولویت ما فرهنگ تیمی و سازمانیمون
- کار در کنار باتجربهها و فرصت رشد و یادگیری
- کار با محصولی که ۲۰۰ هزار نفر یوزر داره و مطمئنا پرچالشه و جذابیتای خودش رو داره
- کار در محیط دوستانه و پویاست
معایب کار با ما:
- بیاین اگه چیزی پیدا کردین، بهمون بگین تا بهترش کنیم:)
مهارتهای مورد نیاز
- Big Data
- Data engineer
- SQL
حداقل سابقه کار
- کمتر از سه سال
جنسیت
- مهم نیست
وضعیت نظام وظیفه
- مهم نیست