Uber heeft zijn zeer schaalbare en betrouwbare Shuffle as a Service voor Apache Spark open source

Uber Engineering heeft onlangs zijn zeer schaalbare en betrouwbare shuffle als een service voor Apache Spark open source gemaakt. Apache Spark is een van de belangrijkste tools en platforms op het gebied van data-engineering en -analyse. Toepassingen in Spark worden taken genoemd en Spark-taken hebben meerdere fasen. Shuffelen is een bekende techniek om gegevens over … Read more