I en dataflod försöker företag fylla en ny roll

Arbetsbeskrivningen datavetare fanns inte för fem år sedan. Ingen annonserade efter en expert inom datavetenskap, och du kunde inte gå i skolan för att specialisera dig inom området. Idag kämpar företag för att rekrytera dessa specialister, kurser om hur man blir det dyker upp på många universitet, och affärsrecension från Harvard till och med utropat att dataforskare är den sexigaste 2000-talets jobb.

Dataforskare tar enorma mängder data och försöker ta fram användbar information. Jobbet kombinerar statistik och programmering för att identifiera ibland subtila faktorer som kan ha stor inverkan på ett företags resultat, från huruvida en person kommer att klicka på en viss typ av annons till om en ny kemikalie kommer att vara giftig i människokroppen.

Medan Wall Street, Madison Avenue och Detroit alltid har anlitat datajockeys för att förstå företagsstatistik, speglar uppkomsten av denna specialitet den massiva expansionen av omfattningen och variationen av data som nu finns tillgänglig i vissa branscher, som de som samlar in data om kunder på webben. Det finns mer data än vad enskilda chefer kan omsluta – för mycket av det, som förändras för snabbt, för att kunna analyseras med traditionella metoder.

Eftersom smartphones lovar att bli en ny källa till värdefull data för återförsäljare, tävlar Walmart till exempel om att få fler dataforskare ombord och annonserar nu för dussintals lediga tjänster, inklusive Big Fast Data Engineer. Sensorer i fabriker och på industriell utrustning levererar också berg av ny data, vilket leder till att General Electric anlitar dataforskare för att analysera dessa flöden.

Termen datavetenskap myntades i Silicon Valley 2008 av två dataanalytiker som då arbetade på LinkedIn och Facebook (se What Facebook Knows ). Nu baserar många startups sina företag på sin förmåga att analysera stora mängder data – ofta från olika källor. ZestFinance , till exempel, har en prediktiv modell som använder hundratals variabler för att avgöra om en långivare ska erbjuda högriskkrediter. Den försäkringsrisk som den uppnår är 40 procent lägre än den som bärs av traditionella långivare, säger ZestFinance-dataforskaren John Candido. All data är kreditupplysningar till oss, säger han.

Data scientist har blivit en populär jobbtitel delvis för att den har hjälpt till att få ihop ett växande antal slumpmässigt definierade och överlappande jobbroller, säger Jake Klamka, som driver en sexveckorsperiod gemenskap att placera doktorer från områden som matematik, astrofysik och till och med neurovetenskap i sådana jobb. Vi har alla som jobbar med mycket data i sin forskning, säger Klamka. De måste veta hur man programmerar, men de måste också ha starka kommunikationsförmåga och nyfikenhet.

De bästa dataforskarna definieras lika mycket av sin kreativitet som av sin förmåga att skriva kod. Företaget Kuggla organiserar tävlingar där dataforskare tävlar om att hitta det bästa sättet att förstå massiva datamängder (se Startup Turns Data Crunching into a High-stakes Sport ). Många av de bästa Kagglers (det finns 88 000 registrerade på webbplatsen) kommer från områden som astrofysik eller elektroteknik, säger vd Anthony Goldbloom. Den högst rankade deltagaren är en aktuarie i Singapore .

Universiteten börjar svara på arbetsmarknadens behov. Stanford University planerar att lansera ett datavetenskapligt masterspår på sin statistikavdelning, säger avdelningsordförande Günther Walther . Ett dussintal andra program har redan startats på skolor inklusive Columbia University och University of California, San Francisco. Cloudera , ett företag som säljer mjukvara för att bearbeta och organisera stora datamängder, tillkännagav i april att det skulle samarbeta med sju universitet för att erbjuda studenter yrkesutbildning om hur man arbetar med stordatateknik.

Clouderas utbildningsprogramchef, Mark Morissey, säger att en kompetensbrist är överhängande och att marknaden inte kommer att växa i den takt den för närvarande vill. Det har drivit upp lönerna. I Silicon Valley är lönerna för dataforskare på nybörjarnivå runt $110 000 till $120 000.

Andra tror att trenden kan skapa ett nytt område för outsourcing. Shashi Godbole, en dataforskare i Mumbai, Indien, som är rankad på 20:e plats på Kaggles resultattavla, genomförde nyligen en Kaggle-arrangerad konsultspelning varje timme, en ny verksamhet som plattformen håller på att börja med. Han arbetade för en liten ideell hälsofrämjande organisation i Chicago och bjuder nu på fler jobb (han tjänar 200 USD per timme och Kaggle samlar in 300 USD i timmen). Hans Kaggle-arbete är deltid för tillfället, men han säger att det är möjligt att det kan bli hans stora inkomstkälla en dag.

För dataforskarna själva är jobbet verkligen mindre sexigt än det framstår som. Josh Wills, senior chef för datavetenskap på Cloudera, säger att det för det mesta handlar om att städa upp rörig data – till exempel genom att placera den i rätt kolumner och sortera den.

Jag är datavaktmästare. Det är 2000-talets sexigaste jobb, säger han. Det är väldigt smickrande, men det är också lite förbryllande.

Dölj