شرح شغل:
طراحی، ساخت و نگهداری پایپلاینهای دادهی قابل اتکا و مقیاسپذیر برای انتقال دادهها به Data Warehouse یا پلتفرمهای مدرن داده.
همکاری در فرآیند مهاجرت داده و سوییچ کردن از زیرساختهای قدیمی به معماری جدید.
پشتیبانی و نگهداری از زیرساختهای فعلی.
طراحی و پیادهسازی مدلهای دادهای (Star Schema, Snowflake و…) متناسب با نیازهای کسبوکار.
بررسی و بهینهسازی کوئریها و جابهای پردازشی جهت بهبود پرفورمنس و مدیریت منابع.
پیادهسازی مکانیزمهای مانیتورینگ و تست خودکار برای اطمینان از صحت، دقت و یکپارچگی دادهها.
همکاری نزدیک با تیمهای Data Analysis و Data Science برای درک نیازمندیهای دادهای و حل چالشهای زیرساختی.
تهیه مستندات فنی دقیق.
نیازمندیها:
تسلط کامل به Python.
تسلط عمیق بر SQL و تجربه کار با دیتابیسهای رابطهای.
آشنایی با مفاهیم و معماریهای مدرن داده مانند Data Lakehouse.
تجربه عملی کار با ابزارهای پردازش دادههای حجیم مانند pyspark، dask یا polars.
تجربه کار با ابزارهای مدیریت گردش کار مانند Apache Airflow.
تسلط بر محیط Linux و دستورات Bash.
آشنایی با دیتابیسهای NoSQL و دیتابیسهای ستونی/تحلیلی مانند ClickHouse.
تسلط بر Git و مفاهیم Version Control.
آشنایی با موارد زیر مزیت محسوب میشود:
تسلط به Oracle Data Integrator (ODI) و PL/SQL
تجربه ادمینستریشن یا نگهداری از سرویسهای OBIEE یا WebLogic.