Dataworks Summit München 2017

/ Blog / Dataworks Summit München 2017
Dataworks Summit München 2017


Marcel-Jan Krijgsman

Afgelopen week is Open Circle Solutions met een aantal collega’s afgereisd naar München voor de Dataworks Summit. Voor onze Data Engineer Marcel-Jan was dit zijn eerste open source / big data summit. Op zijn eigen blog vind je de uitgebreide beschrijvingen van de dagen en alle sessies waar we aanwezig waren:
Dag 1
Dag 2
Een korte samenvatting van de dagen en de verschillende onderwerpen die voorbij kwamen:

Dag 1

Na een aantal keynotes was het tijd voor de breakout sessies. Een aantal topics van deze dag:

  • De snelheid en mogelijkheden van Apache Hive (data warehouse infrastructuur gebouwd op Hadoop)
  • Het big data avontuur en de optimalisatie van Klarna (Zweedse aanbieder van betalingsoplossingen voor de e-commerce)
  • De aankomende Hadoop 3.0 release, wat kunnen we hiervan verwachten?
  • De updates van YARN (een platform voor het beheren van resources)
  • Een live demo van Apache Ranger (securitymanagement tool)

Aan het eind van dag 1 kwamen wij tot onder andere de volgende conclusies:

  • Het waren vooral de ontwikkelaars aan het woord waardoor inhoudelijke vragen gesteld konden worden en duidelijk naar voren kwam dat input van gebruikers meegenomen is in de nieuwe updates.
  • We hebben vertrouwen in de mogelijkheden die zorgen dat Hadoop en je data ook in de toekomst veilig gehouden kan worden.
  • De argumenten van critici tegenover Hadoop zullen weggenomen worden door de nieuwe ontwikkelingen.

De dag werd traditioneel afgesloten met Beer Garten party als prettige afsluiting en ontspanningsmoment na een intensieve dag.

Dag 2

Na een aantal keynotes (waarin onder andere de droom geschetst werd dat Artificial Intelligence ons ooit het gevoel kan geven dat we de hele dag op het strand zitten) was het wederom tijd voor de breakout sessies. Een aantal topics van dag 2:

  • Marcel-Jan woonde een crash course Apache NiFi bij, een nog jong software project dat de data flow tussen o.a. apparaten, gebruikers, servers en systemen mogelijk maakt en de mogelijkheid biedt om de data te volgen.
  • Real-time analytics van security-events en machine learning voor een bank.
  • Best practices voor architectuur en deployment

De summit bevatte veel technische onderwerpen, teveel om allemaal bij elkaar in 1 blog te beschrijven. We zullen daarom in latere blogs dieper ingaan op een aantal van deze onderwerpen!

×