Overview della posizione
Stiamo cercando un DataOps & MLOps Engineer per costruire l'infrastruttura che alimenta i nostri dati e flussi di lavoro ML. Si occuperà dell'archiviazione e della movimentazione dei dati, del versioning dei set di dati, dell'automazione delle pipeline di ML, della tracciabilità degli esperimenti e della garanzia di riproducibilità dei nostri carichi di lavoro di ricostruzione e formazione 3D.
Questo ruolo a tempo pieno si svolge presso la nostra sede di Bressanone, in Italia.
Principali responsabilità
- Progettare e gestire sistemi di archiviazione dei dati per grandi insiemi di dati (dati di immagini multi-TB, asset 3D, dati di formazione)
- Costruire modelli di accesso ai dati e strategie di movimento efficienti per l'addestramento e la sperimentazione distribuiti
- Implementare la gestione delle versioni dei dati e la tracciabilità del percorso per la riproducibilità
- Impostare e mantenere il tracciamento degli esperimenti e l'infrastruttura di registro dei modelli (MLflow, Weights & Biases)
- Costruire pipeline di ML per la preelaborazione dei dati, l'addestramento, la validazione e la registrazione dei modelli (Kubeflow, Airflow, Prefect)
- Supportare flussi di lavoro di addestramento distribuiti su cluster multi-GPU (PyTorch Distributed, Horovod, Ray)
- Profilare e ottimizzare le pipeline di addestramento: colli di bottiglia nel caricamento dei dati, dimensionamento dei batch, utilizzo della memoria delle GPU
- Garantire la riproducibilità degli esperimenti: pinning dell'ambiente, versioning dei dati, gestione degli artefatti
- Gestire l'archiviazione e la distribuzione degli artefatti (registri Docker, registri dei modelli, repository dei pacchetti)
- Creare strumenti per migliorare la produttività degli sviluppatori per i flussi di lavoro ML
Qualifiche richieste
- Forte conoscenza di Linux
- Esperienza con i sistemi di archiviazione dei dati e la gestione di file di grandi dimensioni (object storage, NFS, filesystem distribuiti)
- Conoscenza degli strumenti di versionamento dei dataset (DVC, Delta Lake o simili)
- Esperienza con l'orchestrazione di pipeline ML (Airflow, Prefect, Kubeflow)
- familiarità con gli strumenti di tracciamento degli esperimenti (MLflow, Weights & Biases, Neptune)
- Comprensione dei framework e dei modelli di formazione distribuita
- Esperienza con la containerizzazione (Docker) e le pipeline CI/CD
- Conoscenza della gestione delle dipendenze e dell'ambiente in Python
- Lingua inglese, tedesco o italiano come requisito preferenziale
Nice to Have
- Esperienza con i registri dei modelli e i flussi di lavoro di distribuzione
- Familiarità con i framework di validazione della qualità dei dati
- Conoscenza dell'elaborazione grafica 3D o dei flussi di lavoro di computer vision
Benefici
- Pacchetto retributivo competitivo
- Stock option
- Orario di lavoro flessibile, lavoro da remoto
- Buono pasto per i giorni lavorativi
- Piccolo team, gerarchia piatta
- Opportunità di crescita personale e professionale: Assumere il controllo e la proprietà di parti importanti dello sviluppo dell'infrastruttura e aiutarci a scalare in maniera repentina
- Assistenza per il trasferimento
- Sponsorizzazione del visto
- Accesso al bar e alla palestra di Durst AG
Non deve spuntare tutte le caselle per candidarsi, la Sua passione conta di più! Se è curioso, motivato e pronto a imparare, inviaci la Sua candidatura.
Imperfezione. perfezionata. ALLSIDES
A Bressanone, ALLSIDES sviluppa una tecnologia di scansione 3D all'avanguardia, utilizzata in tutto il mondo. I nostri scanner sono utilizzati da aziende come Adidas, Meta, Amazon e Zalando per creare contenuti 3D fotorealistici. Gli scanner 3D di ALLSIDES sono così precisi da catturare anche le imperfezioni della realtà.
Ma ALLSIDES non si limita a costruire gli strumenti: li usiamo noi stessi. Gestiamo impianti di produzione che catturano il mondo fisico in scala, creando uno dei più grandi set di dati al mondo di risorse 3D fotorealistiche e rileggibili. Questi dati addestrano modelli di intelligenza artificiale in grado di comprendere i materiali, l'illuminazione e la geometria, alimentando applicazioni nel settore dell'e-commerce, dei giochi, degli ambienti virtuali e dell'intelligenza artificiale generativa proprio da Bressanone.
Stiamo costruendo qualcosa di concreto
ALLSIDES sta scalando velocemente e abbiamo bisogno di te. Forse sei un ingegnere che ama costruire sistemi. Un ricercatore alla ricerca della prossima scoperta. Uno specialista della produzione che porta a termine le cose. Un professionista delle operazioni che trasforma il caos in ordine. Qualunque cosa facciate, se l'intelligenza artificiale 3D vi entusiasma e volete che il vostro lavoro sia davvero importante, parlate con noi.