Dla naszego Klienta z branży bankowej poszukujemy Analityka Big Data.
Wymagania
Stack technologiczny wykorzystywany na projekcie:
- Java z wykorzystaniem JUnit, Apache Maven, Jenkins, GitLab.
- Znajomość tematyki baz danych. Umiejętność tworzenia tabel oraz znajomość języka SQL na poziomie dobrym oraz Pythona.
- Apache Hadoop, szczególnie Hive, HBase, Kafka, HDFS, MapReduce, Flink, Storm, Flume
- Mile widziana znajomość BMC Control-M
Zakres obowiązków
- Tworzenie skryptów i zapytań w SQL i Python, celem optymalizacji procesów raportowania danych digital w organizacji.
- Tworzenie i utrzymanie procesów umożliwiających dostęp do danych dla analityków danych w oparciu o aplikacje napisane w języku Java na platformie Apache Hadoop (BigData)
- Tworzenie nowych procesów zasilania (ETL) na platformie BigData
- Utrzymanie istniejących procesów służących do zasilania (ETL) na platformie BigData
- Optymalizacja istniejących procesów na platformie BigData
- Dostosowywanie istniejących procesów ETL do nowych potrzeb biznesowych, zarówno w trybie batch jak i near-realtime
- Tworzenie i utrzymanie cyklicznych zadań zasilających lub przetwarzających dane (ETL) w oparciu o platformę BMC Control-M
- Tworzenie i utrzymanie cyklicznych zadań zapewniających nieprzerwany dostęp do danych, zarówno bieżących jak i historycznych, dla analityków danych oraz innych jednostek banku
- Nadzór oraz weryfikacja ok. 750 plików log przychodzących codziennie w nocy z systemów źródłowych pod kątem ich kompletności i ich gotowości do zasilenia procesami ETL
Co oferujemy
- Wynagrodzenie do 15 000 PLN brutto na UoP bądź do 850 PLN netto+ VAT / MD na B2B
- Zatrudnienie bezpośrednio przez Klienta
- Stabilny i długoterminowy projekt
- Pełen pakiet Benefitów organizacji Klienta