Cloudera data engineer

Pro projekt se Škoda Auto hledáme Data Engineera se specializací na Cloudera platformu, klíčovou součást naší big data databáze, která nám umožňuje získat hlubší vhled a posunout naše analytické schopnosti na další úroveň. Vaše role bude nejen získat přehled o Cloudera platformě, ale také monitorovat provoz, hledat neoptimálnosti a celkově jí dávat směr.

Pokud to sedí i s Vašimi představami, dejte nám o sobě vědět!

Co Vás na této pozici čeká?

• Aktivní monitoring produkčních úloh na platformě Cloudera;
• analýza problémů a návrh řešení;
• optimalizace provozu a zdrojů pro všechna prostředí BI (Cloudera, PowerBI atd.);
• zavedení metodických pravidel a best practice pro všechna prostředí BI;
• podpora vývojových týmů (včetně samoobslužného vývoje BI mimo IT);
• spolupráce s týmem Application Management Support;
• spolupráce na vývoji integračního rámce a přidávání nových vzorů (sdílení znalostí osvědčených postupů pro autonomní týmy);
• vývoj nástrojů pro správu datových řešení (DAP Data Viewer, DAP KPI dashboard, operativní metadata).

Co potřebujeme, abyste uměl a znal?

• Znalost Cloudera components (Impala, Hive, HDFS, SPARK) na vývojářské úrovni;
• Azure DevOps nebo podobný verzovací systém;
• Apache Airflow (znalost tool managementu);
• znalost nějakého EL / ETL nástroje;
• organizační a komunikační dovednosti – je nutná spolupráce s ostatními týmy (Cloudera operations, PBI operations, databázový tým, vývojářský tým, atd.).

‍