LogoFresh Jobs Ahead
State Street
State Street
Sponsor for H1B-visumBankvæsenFinansFintech
State Street er en global virksomhed inden for finansielle tjenester, der betjener institutionelle investorer gennem løsninger inden for kapitalforvaltning og investeringsservice. Tilbuddet omfatter blandt andet kapitalforvaltning, depotydelser og investeringsanalyse, understøttet af ekspertise inden for finans, fintech og bankvirksomhed. Virksomheden fokuserer på at hjælpe kunder med at håndtere komplekse investeringsaktiviteter ved hjælp af data, indsigt og operationelle kapaciteter, der er udviklet til at forbedre effektiviteten og understøtte finansielle beslutninger.
LinkedIn
Job i virksomheden

Dataingeniør, assisterende vicepræsident – Princeton, NJ

Opbyg AWS- og Databricks-lakehouseplatforme, der understøtter State Streets juridiske arbejde og compliancearbejde. Udvikl styrede datapipelines til analyse, rapportering og AI/ML-applikationer.

USUSAMAMassachusettsNJNew Jersey
100.000 $ – 167.500 $ / år
På arbejdspladsenFuldtidLeadPåkrævet Sprog: engelskDataingeniør
ApacheAWSAzureCloudDockerETLOraclePySparkPythonSparkSQLUnity

Beskrivelse

  • Opbyg og vedligehold skalerbare datapipelines med PySpark, Python og Spark SQL
  • Udvikl og optimer Databricks ETL/ELT-arbejdsgange med Delta Lake
  • Implementer Bronze-, Silver- og Gold-lakehousearkitektur til virksomhedens dataplatforme
  • Administrer Databricks Jobs, Workflows og Notebooks til batch- og streamingarbejdsbelastninger
  • Opret genanvendelige rammer til dataindlæsning, -behandling og orkestrering
  • Containeriser dataarbejdsbelastninger med Docker, og automatiser processer gennem scripting
  • Forbind Databricks-pipelines med Power Apps og Power Automate
  • Gør data tilgængelige for forretningsbrugere via API'er, forbindelser og kuraterede datasæt
  • Design og optimer Databricks-lakehousearkitekturer
  • Integrer SQL Server, Oracle og andre virksomhedsdatakilder
  • Anvend dimensionsmodellering, partitionering og optimeringsmetoder
  • Behandl strukturerede og semistrukturerede formater, herunder JSON og Parquet
  • Forbedr ydeevnen gennem caching, indeksering og Spark-optimering
  • Publicer kuraterede datasæt til Power BI, Power Apps og Power Automate-arbejdsgange
  • Oprethold datakvaliteten med enhedstests, valideringsrammer og automatiserede kontroller
  • Overvåg og fejlfind distribuerede Spark-arbejdsbelastninger og pipelines
  • Undersøg logfiler, og løs produktionsproblemer på tværs af Databricks- og cloudmiljøer
  • Vedligehold datalinjer, konsistens og revisionsberedskab
  • Samarbejd med juridiske, sikkerheds-, compliance- og enterprise-datateams
  • Omsæt forretningskrav til data engineering-løsninger
  • Funger som fagekspert i Databricks og lakehousearkitektur
  • Led initiativer selvstændigt, og tag ansvar for leverancer
  • Understøt datastyring med Databricks Unity Catalog samt AWS IAM- og KMS-kontroller
  • Opfyld krav til databeskyttelse, lovgivning, sikkerhed og revision
  • Vedligehold adgangskontroller samt standarder for dataklassificering og datahåndtering
  • Samarbejd med IAM- og sikkerhedsteams for at beskytte dataadgangen
  • Design og vedligehold CI/CD-pipelines med Harness, Azure DevOps eller GitHub
  • Automatiser udrulning af Databricks-aktiver med Databricks Repos og CLI
  • Overvåg, planlæg og optimer arbejdsgange med Databricks' orkestreringsværktøjer
  • Vedligehold dokumentation for arkitektur, dataflow og driftsvejledninger
  • Forbedr platformens ydeevne, skalerbarhed og omkostningseffektivitet

Krav

  • Bachelor- eller kandidatgrad i datalogi, data engineering, informationssystemer eller et beslægtet teknisk område
  • Mindst 8 års erfaring med data engineering eller udvikling af dataplatforme
  • Praktisk ekspertise i Databricks og Apache Spark
  • Gode kundskaber i PySpark, Python og SQL
  • Erfaring med AWS-datatjenester, herunder S3, Glue, Lambda og IAM
  • Erfaring med Delta Lake og lakehousearkitektur
  • Stærk viden om distribueret databehandling
  • Stærk viden om ETL- og ELT-rammer
  • Stærk viden om datamodelleringsteknikker
  • Praktisk erfaring med Databricks-komponenter som Delta Lake, Workflows og Unity Catalog
  • Omfattende erfaring med at bygge komplette batch- og streamingpipelines med AWS og Databricks
  • Kendskab til ydeevneoptimering af Spark og Delta Lake
  • Erfaring med at understøtte analyse-, rapporterings- eller AI/ML-arbejdsbelastninger på en lakehouseplatform
  • Viden om datastyring, metadatastyring og sikkerhedskontroller
  • Erfaring fra juridiske områder, compliance, finansielle tjenester eller andre regulerede brancher
  • Forståelse af juridiske datakoncepter, herunder kontrakter, klausuler, forpligtelser og sager
  • Kendskab til behandling af ustrukturerede data eller dokument- og NLP-pipelines
  • Erfaring med Power BI, Power Apps eller Power Platform
  • Erfaring med håndtering af følsomme data i revisionsdrevne miljøer

Fordele

  • 401(k)-pensionsopsparingsordning med arbejdsgivermatch
  • Forsikringsmuligheder, herunder grundlæggende livsforsikring, lægeforsikring, tandforsikring, synsforsikring, langtidsinvaliditetsforsikring og anden valgfri dækning
  • Betalt orlov til ferie, sygdom, korttidsinvaliditet og ansvar for familiepleje
  • Medarbejderassistanceprogram
  • Incitamentsaflønning med mulighed for årlige præstationsbaserede bonusser
  • Mulighed for udvalgte skattebegunstigede opsparingsordninger
  • Inkluderende muligheder for faglig udvikling
  • Fleksibel støtte til balance mellem arbejde og privatliv
  • Betalte frivilligdage
  • Medarbejdernetværk

Relaterede job

Enlight Renewable Energy Ltd (ENLT)

Ingeniørdirektør for vedvarende energi

Enlight Renewable Energy Ltd (ENLT)
51 – 200 Medarbejdere
ByggeriEnergiFremstilling
ESSpanienHybridFuldtidLeadPåkrævet Sprog: engelskSoftwareingeniør
Go

Stå i spidsen for ingeniørarbejdet med Enlight’s sol-, vind- og batterilagringsprojekter, fastlægge tekniske standarder og lede teams gennem hele projektforløbet. Rollen omfatter optimering, teknisk due diligence, støtte til indkøb og ingeniørledelse på tværs af Europa.

Åbn
General Dynamics Information Technology

Senior SME i AI-autonomi til UAS og dronesværme

General Dynamics Information Technology
Sponsor for H1B-visumLogistikRådgivningSundhedsvæsen
USUSA
170.144 $ – 218.500 $ / år
FjernarbejdeFuldtidSeniorLeadPåkrævet Sprog: engelskSoftwareingeniør
AnsibleC++CybersikkerhedKubernetesLinuxPythonPyTorchTensorFlowTerraformTypeScript

Led udviklingen af autonome UAS, dronesværme og kommando- og kontrolløsninger til forsvarsmissioner. Styrk AI- og maskinlæringskapaciteter på tværs af forsvarsministeriets miljøer.

Åbn
nahc.io

Senior fullstackudvikler (Go) – fjernarbejde, Hongkong

nahc.io
11 – 50 Medarbejdere
MarkedsføringRådgivningRekruttering
HKSAR HongkongFjernarbejdeFuldtidSeniorPåkrævet Sprog: engelskBackendingeniørSoftwareingeniør
AWSAzureCloudD3.jsGoGoogle Cloud PlatformJavaScriptReactSvelteTypeScriptVue.js

Byg TypeScript-grænseflader og Go-tjenester for en virksomhed inden for proprietary trading og forskning. Udvikl modulære finansapplikationer, realtidsanalyse, genanvendelige komponenter og SDK'er.

Åbn