HackerRank öppnar sin ATS – mitt CV fick 90, 74 och 88 poäng
HackerRank har öppnat sin ATS (Applicant Tracking System) som öppen källkod, vilket väckt stort intresse i utvecklarvärlden. En skribent testade systemet på sitt eget CV och fick förvånansvärt instabila resultat – poängen varierade mellan 74 och 90 vid olika körningar. Artikeln ifrågasätter tillförlitligheten hos AI-drivna rekryteringsverktyg.
HackerRank, den populära plattformen för kodningsutmaningar och tekniska intervjuer, har nyligen öppnat sin ATS (Applicant Tracking System) som öppen källkod. Det är ett djärvt drag som ger utvecklare och rekryterare en ovanlig möjlighet att se exakt hur ett modernt rekryteringssystem utvärderar kandidater under huven.
En nyfiken skribent bestämde sig för att testa systemet direkt på sitt eget CV. Resultaten var minst sagt förvånande – inte på grund av den absoluta poängen, utan på grund av dess inkonsistens. Vid olika körningar med exakt samma CV varierade poängen dramatiskt: 90 vid ett tillfälle, sedan 74, och därefter 88. Det väcker en viktig fråga: hur kan ett system som påstår sig objektivt bedöma kandidater ge så olika resultat för samma indata?
Denna typ av variation är ett välkänt problem inom AI-drivna system, särskilt de som bygger på stora språkmodeller (LLM). Icke-deterministiska modeller kan ge olika svar varje gång de körs, vilket gör dem potentiellt opålitliga för kritiska beslut som anställningar. Diskussionen på Hacker News med 195 poäng och 39 kommentarer visar att många i branschen känner igen problemet och delar liknande erfarenheter.
Frågan som återstår är: om ett öppet ATS-system visar sådan instabilitet, hur ser det då ut med de slutna, proprietära systemen som används av stora företag världen över varje dag? Artikeln är en påminnelse om att transparens är ett första steg, men det löser inte de grundläggande tekniska och etiska utmaningarna med automatiserad rekrytering.