Python Developer – Data Ingest
Hledáme zkušeného Senior Python Developera, který posílí a pomůže rozvíjet náš Data Ingest Team. V této roli budete zodpovědní za vývoj a údržbu web scraperů, REST API connectorů, SFTP loaderů a dalších datových zdrojů, jako jsou RSS nebo XML feedy. Budete pracovat s primárními externími zdroji dat na samotném začátku našich datových pipeline a budete hrát klíčovou roli při zajišťování spolehlivého a včasného přísunu dat do našich systémů.
Součástí vaší práce bude také utváření technického směřování týmu, nastavování "best practices" a úzká spolupráce s Data Engineering týmem, datovými analytiky i business stakeholdery. Společně budete zajišťovat, že ingest vrstva odpovídá aktuálním i budoucím potřebám byznysu.
Vaše odpovědnosti
Návrh, vývoj a údržba robustních datových ingest pipeline v Pythonu, včetně web scraperů, REST API loaderů a SFTP klientů.
Návrh a implementace spolehlivých procesů pro získávání dat z primárních externích zdrojů do databáze PostgreSQL.
Vývoj a škálování REST API loaderů a tvorba interních API nad našimi databázemi pomocí FastAPI.
Průběžná optimalizace datových ingest systémů z pohledu stability, výkonu a dlouhodobé udržitelnosti tak, aby bez problémů zvládaly rostoucí objem dat i byznysové požadavky.
Spolupráce s Data Engineering týmem, datovými analytiky a business stakeholdery na zajištění souladu ingest systémů s následným zpracováním, ukládáním a analytickým využitím dat.
Podíl na architektonických rozhodnutích týkajících se deploymentu, kontejnerizace a plánování ingest úloh (např. pomocí Dockeru, Airflow nebo obdobných nástrojů).
Koho hledáme
Požadované zkušenosti a znalosti
Prokazatelné zkušenosti s Pythonem v oblasti web scrapingu, ideálně s technologiemi jako requests, curl_cffi, BeautifulSoup nebo Playwright.
Znalost klíčových Python frameworků a knihoven, například Pandas, SQLAlchemy, FastAPI a dalších webových frameworků.
Dobrá orientace v HTML, CSS a JavaScriptu a schopnost analyzovat i komplexní DOM struktury.
Velmi dobrá znalost HTTP protokolu, request/response komunikace, HTTP hlaviček a stavových kódů využívaných při scrapingu a integraci API.
Praktické zkušenosti s integrací externích API (REST nebo GraphQL), včetně autentizace a práce s paginací.
Zkušenosti s cloudovými platformami (AWS, Azure nebo GCP), Dockerem a PostgreSQL, zejména v souvislosti s nasazováním a škálováním datových pipeline.
Zkušenosti s asynchronním programováním v Pythonu (např. s využitím knihovny aiohttp) pro zvýšení výkonu a paralelizace zpracování dat.
Výhodou jsou zkušenosti z oblasti komoditního obchodování, energetiky nebo jiných datově orientovaných odvětví.
Osobnostní předpoklady
Analytické myšlení, smysl pro detail a silné schopnosti řešit problémy.
Schopnost úzce spolupracovat s business stakeholdery a převádět obchodní požadavky do funkčních technických řešení.
Dobré komunikační schopnosti pro jednání s technickým i netechnickým publikem.
Zájem sledovat nové technologie a trendy v oblasti web scrapingu a datové integrace.
Co vám nabízíme
Práci na zajímavých a technicky náročných projektech v jedné z významných českých energetických společností.
Jedinečnou možnost nahlédnout pod pokličku komoditního obchodování a spolupracovat se zkušenými odborníky z oboru.
Profesní růst v rámci dynamicky se rozvíjející společnosti.
Podporu dalšího vzdělávání včetně jazykových kurzů a profesních certifikací.
Atraktivní finanční ohodnocení a roční bonus.
Standardní benefity, jako je 5 týdnů dovolené, příspěvek na penzijní připojištění, příspěvek do cafeterie, MultiSport karta a další.
Zaujala vás tato příležitost?
Neváhejte mě kontaktovat pro více informací.
Těším se na naši spolupráci!