Raccogli dati
I dati vengono raccolti da oltre 100 fonti web validate. Le fonti web includono bacheche del lavoro, social network e sondaggi disponibili pubblicamente. Tutti i dati raccolti vengono consolidati in un unico database. Questa è la nostra fonte di dati.
Normalizza dati
I dati vengono standardizzati per l'analisi. Le informazioni si trovano in diverse lingue, campi e possono essere presentate in modi diversi. In questo passaggio trasformiamo i dati in formati standard in preparazione per ulteriori analisi.
Deduplicare i dati
I dati duplicati vengono rimossi incrociando le fonti. Le offerte di lavoro possono essere pubblicate su più siti web o ripetute ogni poche settimane. Per questo motivo, includiamo solo dati unici nel database. Dopo l'estrazione dei dati, l'algoritmo di TalentUp è responsabile della validazione di questi dati.
Validare i dati
I dati vengono validati confrontando i modelli tra le fonti. Dopo la normalizzazione dei dati, nel passo successivo i dati vengono validati per garantire l'accuratezza. Ad esempio, per capire se lo stipendio è accurato, abbiamo bisogno di più contesto: livello di anzianità, anni di esperienza, competenze richieste, ecc.
