skip to Main Content

Praca: Data Engineer skilled in shell and bash


ASTEK Polska jest częścią dynamicznie rozwijającej się międzynarodowej Grupy ASTEK. Specjalizujemy się w outsourcingu kadry IT i realizacji projektów informatycznych. Zatrudniamy doświadczonych specjalistów dla liderów z obszarów bankowości, ubezpieczeń, telekomunikacji, hi-tech, farmacji i logistyki w Polsce i za granicą.
Data Engineer skilled in shell and bash


Currently, we are looking for a Data Engineer skilled in shell and bash!
Location: remote
$: up to 1120 zł net/day/B2B

Project:
  • You would join a newly formed team responsible for maintaining Data Referential applications ingestion component around third party API/Files upload, an MDM and business workflow tool ingesting, controlling, enhancing data and finally data distribution via databases, APIs and ETLs.
  • Responsibilities:
  • Integration of third party provider data (via Files, APIs, Events)
  • Upgrading vendor components through their major and minor patches
  • Maintenance of connectivity with internal customer applications sourcing their data referential information via WebServices, APIs, ETLs
  • Reducing platform complexity by reducing point to point connections and favoring API connectivity
  • Building Data quality controls to monitor all our third-party data and data sent to our customers
  • Integration and maintenance of data referentials in a Dataplatform
  • Building and maintaining CI/CD Pipelines, shared libraries (data pipeline development, data quality, data lineage)
  • Designing and maintaining APIs
Requirements:
  • Scripting: Shell/bash, Powershell
  • Scheduling management Control M API (ideally)
  • Experience working with data of various formats (np. Avro, Parquet, JSON, CSV)
  • SQL expertise, knowledge of Microsoft SQL
  • ETL management
  • API building/maintenance
  • Git CD/CI
Dlaczego warto z nami pracować?
  • Solidne fundamenty
  • Ambitne projekty
  • Indywidualny rozwój i przyjazna atmosfera
  • Znane marki
  • Inspirujący liderzy
  • Elastyczność
  • Dodatkowe korzyści
  • System poleceń


Więcej informacji na temat Twoich danych przetwarzanych przez ASTEK Polska Sp. z o.o. znajdziesz tu: www.astek.pl/polityka-prywatnosci
Dlaczego warto z nami pracować?
  • Solidne fundamenty
  • Ambitne projekty
  • Indywidualny rozwój i przyjazna atmosfera
  • Znane marki
  • Inspirujący liderzy
  • Elastyczność
  • Dodatkowe korzyści
  • System poleceń
APLIKUJ TERAZ

Zobacz podobne oferty

Firma: Luxoft
  • Miejsce pracy: małopolskie /
  • Opublikowano: wczoraj

  • Provide support for production Sybase and SQL Server environments. Be able to investigate and fix software and infrastructure issues. Audit & Security: Follow and implement the Bank rules Ability to work in critical production...

Firma: Luxoft
  • Miejsce pracy: małopolskie /
  • Opublikowano: 2021-05-13

  • Youll mostly implement Spark pipelines for data ingestion, cleansing and post processing to extract valuable information from them. You should also be familiar with ELK stack as most of the data is visualized within the Kibana...

Firma: Luxoft
  • Miejsce pracy: małopolskie /
  • Opublikowano: 2021-05-13

  • As Data Engineer youll be working with alongside data architects to take data throughout its lifecycle - acquisition, exploration, data cleaning, integration, analysis, interpretation and visualization. You will be creating the...

Firma: Luxoft
  • Miejsce pracy: małopolskie /
  • Opublikowano: 2021-05-13

  • As Data Engineer youll be working with alongside data architects to take data throughout its lifecycle - acquisition, exploration, data cleaning, integration, analysis, interpretation and visualization. You will be creating the...