Data инженер

Halyk Finance Data инженері лауазымына вакансия жариялайды.

Міндеттері

• Есептемелік жүйені жасауға қатысу
• Batch ETL үрдістерін (Python, SQL, Airflow) әзірлеу және қолдау көрсету
• Деректер ағынының өңделуін (Python, RabbitMQ) әзірлеу және қолдау көрсету
• Деректер қоймасын жетілдіру және дамыту, деректер витринасын құру
• DWH-ға жаңа деректер көздерін интеграциялау
• DQ деректер сапасын тексеруді іске асыру
• Компанияда деректермен жұмыс істеу үшін жаңа құралдарды енгізу
• Жұмыс барысында тілшілермен коммуникация үрдістерін құру

Талаптар

• SQL-ді жақсы білу - терезелік функциялар, күрделі join'дар және ішкі сұраулар, үлкен SQL сұрауларын оптимизациялау тәжірибесі.
• Реляциялық және бағандық ДБЖ жұмыс принциптерін түсіну, DWH модельдеу тәжірибесі, деректерді қабаттарға бөлу
• Python-ды жақсы білу (Pandas-пен жұмыс істеу дағдылары артықшылық болып табылады), Airflow көмегімен data pipeline-дарды құру тәжірибесі
• Құралдармен жұмыс істеу: Git, Docker, NoSQL ДБЖ-мен жұмыс істеу дағдылары.
• DBT, Debezium, Greenplum, Spark, Data Lake, k8s, PowerBI, Apache NiFi технологияларын білу

Шарттары

• офистік жұмыс,
• жұмыс графигі 5/2 09:00 – 18:00
• даму және карьералық өсу
• жылдық сыйақы
• жыл соңындағы бонустар
• Компания есебінен біліктілікті арттыру