Think Big breidt mogelijkheden uit om data lakes te bouwen met Apache Spark
Teradata, het big data analytics en marketing-applicaties bedrijf, kondigt aan dat Think Big, een internationaal consulting-bedrijf van Teradata, zijn data lake- en managed service-diensten op basis van Apache Spark uitbreidt. Think Big heeft veel expertise bij het implementeren van Apache Spark en andere big data technologieën. Spark is een open source cluster computing platform, dat wordt gebruikt voor productaanbeveling, predictive analytics, sensordata-analyse, grafiekanalyse en meer.
Klanten kunnen met Apache Spark een data lake in the cloud inzetten op standaard Hadoop-omgevingen, of met Teradata’s Hadoop Appliance, het meest krachtige, gebruiksklare enterprise platform, voorgeconfigureerd en geoptimaliseerd om enterprise big data workloads te kunnen verwerken.
De interesse in Spark blijft groeien, maar veel bedrijven hebben nog moeite om de snelle verandering en de frequente nieuwe versies van het open source platform bij te houden. Think Big heeft Spark succesvol geïntegreerd in zijn frameworks voor het bouwen van enterprise data lakes en analytische applicaties.
“Veel organisaties experimenteren met Apache Spark in de hoop de mogelijkheden te benutten voor de streaming van data, query en analytics – vaak in combinatie met een data lake,” zegt Philip Russom, Ph.D., director of data management research van The Data Warehousing Institute (TDWI). “Maar gebruikers zullen zich snel realiseren dat Spark niet eenvoudig te gebruiken is en dat data lakes meer planning en ontwerp nodig hebben dan ze in de eerste instantie hadden verwacht. Gebruikers in deze situatie zullen dan hulp van buitenaf moeten inschakelen in de vorm van consultants en managed service providers die al veel succesvolle projecten met Apache Spark en data lakes hebben gedaan voor een brede klantengroep. Think Big heeft die ervaring.”
Think Big bouwt reproduceerbare service packages voor Spark-implementaties, inclusief het toevoegen van Spark als een execution engine voor zijn Data Lake en Managed Services-diensten. Via zijn trainingstak – de Think Big Academy – lanceert het consultancy-bedrijf nu ook een serie van nieuwe Spark-trainingen voor grootzakelijke klanten. Geleid door ervaren instructeurs, helpen deze trainingen om managers, developers, en administrators te trainen om Spark te gebruiken, inclusief de vele modules, machine learning, graph, streaming en query.
Verder zal het Think Big Data Science team routines voor distributed K-Modes clustering met Spark’s Python API open source maken. Deze routines verbeteren de clustering van categorical data voor klantsegmentatie en churn-analyse. Deze code zal samen met andere open source projecten beschikbaar komen op de Think Big GitHub page.
“Onze Think Big consulting-praktijk breidt snel uit van Amerika naar Europa en China, omdat de vraag groeit naar expertise, ervaring en methoden die klanten helpen om een data lake op basis van Spark en Hadoop in een keer goed op te zetten,” zegt Ron Bodkin, directeur van Think Big. “De implementatie van Spark zou onderdeel moeten zijn van een informatie- en analytics-strategie. We weten uit ervaring welke gebruiksscenario’s relevant zijn, wat de juiste vragen zijn, en waar we implementatievalkuilen kunnen verwachten. De verwachtingen van zakelijke gebruikers, evenals de technologische eisen zijn bekend. We kunnen helpen om tastbare business-value te genereren. Onze Spark-klanten brengen dit nu al in de praktijk in domeinen variërend van omni-channel consumentenpersonalisatie tot real-time foutdetectie in de high-tech maakindustrie.”
Lang voordat big data een trend werd, was Think Big al ‘s werelds eerste en leidende big data services-bedrijf, dat analytische oplossingen leverde, gebaseerd op opkomende technologieën. Tegenwoordig levert Think Big managed services voor Hadoop op het vlak van platform- en applicatie-ondersteuning met goed gedefinieerde processen, robuuste tools, en ervaren big data experts om op een kostenefficiënte manier het Hadoop-platform te beheren, monitoren, en onderhouden. Elke samenwerking wordt begonnen met een goed getest transitieproces, waarbij Think Big de productie-, ontwikkel- en onderhoudsteams van de klant verbetert – voor een efficiënte, effectieve implementatie.