zoeken Nieuwsbrief
      Linkedin    Twitter   
  
nieuws
 

Data scientists besteden 80 procent van hun tijd aan opschonen en structuren data

'Dirty data' grootste uitdaging voor professionals

14 mei 2019 - De meeste data professionals geven aan dat het opschonen en structureren van data nog steeds de grootste uitdaging is op hun vakgebied. Data scientists geven zelfs aan dat zij maar liefst 80 procent van hun tijd hieraan besteden.

Dit blijkt uit onderzoek van Dataiku. Het onderzoek bevestigt hiermee dat de markt voor op machine learning gebaseerde intelligentie, nog steeds in de kinderschoenen staat.


Het feit dat data professionals ‘dirty data’ als hun grootste uitdaging zien is helaas niet nieuw. Alle functies die deelnamen aan het onderzoek, van data scientists, data analisten, team managers tot andere data professionals, gaven aan dat ze hier nog dagelijks mee worstelen. Als tweede grootste uitdaging werd genoemd toegang tot databronnen, ook een fundamentele vereiste.  
 
Beperken in productiviteit
Het is niet verrassend dat data professionals zoals data scientists en analisten het verbinden van databronnen vaker als een uitdaging beschouwen dan leidinggevenden van datateams. Ditzelfde geldt voor het in productie brengen van modellen. Voor hen zijn dit immers zaken die zij dagelijks tegenkomen en die hen beperken in hun productiviteit. Dit betekent ook dat de belangrijkste dataproblemen niet gaan over welk model gebruikt moet worden of zelfs hoe er het best samengewerkt kan worden door het datateam en de stakeholders. 
"Voor data professionals zijn deze onderzoeksresultaten wellicht niet bijzonder, ze bevestigen alleen de uitdagingen waarmee zij iedere dag te maken hebben," zegt Hylke Visser, Director Sales & Business Development bij Dataiku. "Toch vinden we het belangrijk hier aandacht aan te schenken. Niet alleen omdat de spaarzame tijd van data scientists en andere data professionals slimmer gebruikt kan worden, maar ook omdat data de basis is van succesvolle toepassing van AI en machine learning. Organisaties moeten zich realiseren dat het essentieel is dit snel op orde te krijgen. Alleen zo kunnen zij echt profiteren van de kansen die AI en machine learning bieden."  
 
Wie is verantwoordelijk voor data?
Dataiku ging tijdens het onderzoek ook in op de vraag waar de verantwoordelijkheid voor de data ligt. Slechts zestien procent van de respondenten geeft aan dat iedereen verantwoordelijk is. Dit is deels zorgwekkend aangezien de regels rond de bescherming en het gebruik van data steeds strikter worden en data juist vaker een gedeelde verantwoordelijkheid wordt. Onderwerpen als vertrouwen, transparantie en ethiek worden veel gebruikt als het gaat om machine learning en AI. Het belang van een gezamenlijk verantwoordelijkheidsgevoel voor de data van de organisatie wordt daarmee ook duidelijker. Als er te weinig mensen verantwoordelijk worden gehouden, dan werkt dit verkeerd gebruik en fouten juist in de hand.  
Als het gaat om de verantwoordelijkheid voor data science (analytics) in organisaties, werd door de meeste respondenten aangegeven dat iedereen hier op een bepaalde manier verantwoordelijk voor is. Dit is een positief teken voor de toekomst. Het betekent dat men zich realiseert dat voor de transformatie naar een datagedreven organisatie meer nodig is dan alleen data beschikbaar stellen voor bestaande activiteiten. Het gaat om een fundamentele organisatieverandering waarbij data in alle processen van het bedrijf moet zijn verweven.  
 

 
 Doorsturen   Reageer  

 

Laatste nieuws

 Autovakantie: spannendste situaties en grootste irritaties
 Financiële dienstverleners kwetsbaarder voor storingen door certificaten
 Vier tips voor een relaxte (digitale) zomer
 

Gerelateerde nieuwsitems

 Data science essentieel voor toekomstvaste verzekeraar
 Data Science: bestaande discipline in nieuw jasje
 Developer: Nederland wereldleider in Data Science
 Developer ambieert baan als Data Scientist
 
 
reacties
 
Er zijn nog geen reacties.

REAGEREN

Naam:
Emailadres:
URL: (niet verplicht) http:// 
 
Reactie/Opmerking:
Ik wil bericht per e-mail ontvangen als er meer reacties op dit artikel verschijnen.
 
Als extra controle, om er zeker van te zijn dat dit een handmatige reactie is, typ onderstaande code over in het tekstveld ernaast. Is het niet te lezen? Klik hier om de code te wijzigen.
advertorial
Leer in 2 dagen ontspannen en overtuigend te presenteren
Spreekangst wordt ontrafeld en geëlimineerd. Ruim 14.000 professionals volgden eerder de 'Sneltraining ‘Spreken in het openbaar’ van Pieter Frijters. Rebels, open en ‘out of the box’. Kijk op Spreek.nl of bel 0182 631 232.
Lees verder
Meer dan 100 gratis checklists voor ondernemers. Op Brisk Magazine, internetmagazine voor ondernemers.
Een zakelijke lening afsluiten bij de bank? Bereid u goed voor
Last van ongedierte in en rondom het bedrijfspand? Deze maatregelen kun je treffen!
reacties
Autovakantie: spannendste situaties en grootste irritaties (1) 
Wat leert Maarten van der Weijden ons over doelen stellen? (1) 
Tien excuses bij het aanhoren van klachten (2) 
Hoog tijd om aan de slag te gaan met het Klimaatakkoord (1) 
Vijf tips om customer feedback van vijfsterrenkwaliteit te krijgen (1) 
De kracht van stilte (1) 
Kan IT de populariteit van Virtual Reality bijhouden?  (2) 
top10
De top tien meest schaarse beroepen in Europa
Drie manieren om ‘bad hires’ te voorkomen
Nederlandse bedrijven minst flexibel in werktijden werknemer
De twintig populairste steden deze zomervakantie het populairste
Aantal nieuwe cao’s zeer laag
1,2 miljoen Nederlandse huizen slim beveiligd
De veranderingen op het werk van de afgelopen tien jaar
Te weinig loon voor één op de vijf werkenden
Explosieve toename Emotet malware
Kwaliteit bestuursverslag laat te wensen over
meer top 10