Nieuw Von Neumann-knelpunt bedreigt IT

Data is overal present en vormt daarvoor voor de aankomende O'Reilly Strata Conference reden om samen met bezoekers naar revolutionaire manieren te kijken waarop data praktisch alles kan voeden. De winter-editie van de conferentie gaat daarom voornamelijk over big data en data-analisten. Maar zijn er wel genoeg data-analisten beschikbaar?

Big data heeft afgelopen jaar niet over een gebrek aan aandacht te klagen gehad. Hadoop, Cassandra, MapReduce en andere open-source technologieën hebben organisaties in staat gesteld om data op ongekende manieren in te zetten - manieren die met relationele databases niet mogelijk zijn.

De Strata-conferentie kent drie thema's, zegt Founding Chair Edd Dumbill. "De toename van data en de groei van alomvertegenwoordigde computing zijn er twee van. Zij vormen samen de opmaat naar het derde aspect."

Miljarden dataverzamelende nodes

Het gevolg van twee genoemde ontwikkelingen is een enorm hoge mate van interconnectiviteit, het zogenaamde 'Internet of Things', wat de miljarden objecten beschrijft die verbonden zijn met het internet en ieder data verzamelen en verwerken.

Maar wie gaat die verwerking regelen? En hoe worden die data opgeslagen? Op welke manier worden de data gebruikt? Dit zijn de vragen waarop Strata antwoorden hoopt te geven. Vooral de derde pijler, hoe de data wordt gebruikt, is enorm belangrijk, zegt Dumbill. Hij beschrijft deze laatste ontwikkeling als "data en the last mile".

'The last mile' is geen onbekende term voor netwerkengineers: het refereert naar de belangrijkste connectiviteit: deze tussen de eindgebruiker en de rest van het internet.

"Ditzelfde is van toepassing binnen het bedrijfsleven", zegt Dumbill. Voor data verwijst the last mile naar de capaciteit om data fatsoenlijk te verwerken en eruit te halen wat werkelijk van belang is: informatie.

Brug tussen data, informatie en kennis

De data-analist vormt de spil tussen het opslaan van data en het omzetten van data in informatie (dat uiteindelijk weer leidt tot kennis). De personen die over deze vaardigheden dienen te beschikken zijn dun bezaaid.

De datawetenschappers waar de Strata-organisatoren over spreken zijn getalenteerd in engineering, datamanagement, wiskunde en schrijven. "De kunst van het verhalen kunnen vertellen en visualiseren is ook belangrijk", licht Dumbill toe.

Dumbill bevestigt dat zijn beeld van datawetenschappers overeenkomt met dat van informatiewetenschapper Hans Rosling, die zijn informatie in fantastische grafieken presenteert, al haastte de informatiearchitect om erbij te zeggen dat Rosling niet werkt met gigantische datasets. Data-analisten die met big data moeten werken, zullen dat moeten doen met modellen die veel verder gaan dan het bekende werk van Rosling.

'Nieuw mondiaal probleem voor IT'

"Het punt is dat er veel te weinig datawetenschappers rondlopen. Dit gebrek is echt onze nieuwe Von Neumann-bottleneck"

Dumbell wist daarbij te melden dat we niet van deze data-analisten hoeven te verwachten dat het supergenieën zullen zijn. Teams waarvan de leden complementerende talenten hebben op gebied van datawetenschappen kunnen net zo effectief werken.