Mogens Nørgaard: Big data er fantastisk, magisk – og komplet kaotisk

Da jeg blev fyret fra Miracle midt i juni sidste år, spredte rygtet sig til nogle nørder i forskellige netværk, blandt andet The OakTable Network, som jeg i sin tid var med til at grundlægge rundt om, ja, mit egetræsbord i mit hjem i 2760 Målløs.

Én af superdupernørderne i OakTable er Jeff Needham (tænk at hedde “behøver skinke” – fantastisk …), og han skrev en mail til mig dagen efter fyringen, som fik mig til at rette mig op i stolen:

Sir,
Your timing is perfect. Time to abandon the Oracle ecosystem and do big data. Go build a new company. This is Oracle’s future, but they are in serious denial about it. Europe is about 3 years behind right now, so you can lead them ALL into the future.
The work is interesting again (it is all about platform engineering, PRICE/performance and scalability). The projects are global in scope and it IS bigger than the switch to RDBMS.
You (and I) have been waiting 30 years for this and it will be the last big tech shift of our lifetimes and we are only three years into a multi-decade ecosystem where no rules and no franchise strength exists for any company.
I’m starting to sound like you, aren’t I .-)
We should talk (if you want) …

I don’t know if you have a free download of my book, but it is here:

http://www.amazon.com/Disruptive-Possibilities-Changes-Everything-ebook/sim/B00CLH387W/2

Se, dét var jo klar tale, og jeg downloadede straks hans bog (som er gratis i den elektriske udgave) og læste og læste – og forstod, at vi simpelthen er tilbage i begyndelsen af 80′erne, hvor alt er nyt og sjovt igen.

Skaber de vildeste muligheder
Jeff gør det meget klart, at Big Data er en computing platform, som kommer til at feje rigtigt mange gamle ting og sager (og bikse) af vejen, mens nyt halløj kommer til og skaber de vildeste muligheder, og selvfølgelig også de vildeste problemer og destabiliseringer. Alt sammen noget, der kan få edb- og it-hjerter til at banke igen.

“Now I get it – it’s fun again!”, sagde min ven James Morle for nylig til mig…

“De startede forfra på den helt fede måde: Ved at stikke nogle ingeniører/dataloger nogle håbløse mål og helt frie hænder”

Denne nye platform blev opfundet af bitter nød af Yahoo i 1996, fordi de ikke kunne købe sig til noget, der var hurtigt nok og sikkert nok fra Oracle, EMC, Microsoft og så videre.

De startede forfra på den helt fede måde: Ved at stikke nogle ingeniører/dataloger nogle håbløse mål og helt frie hænder.

Så hundredvis og tusindvis af de billigste servere blev bundet sammen af Hadoop-cluster-software og dusinvis af nye, vanvittige “NoSQL”-databaser og meget andet…

Det største Hadoop-cluster i dag består af 4.500 servere og håndterer let 25 petabyte …

Fortsættes …