Performance characterization of in-memory data analytics on a modern cloud server
Visualitza/Obre
07310708.pdf (648,2Kb) (Accés restringit)
Sol·licita una còpia a l'autor
Què és aquest botó?
Aquest botó permet demanar una còpia d'un document restringit a l'autor. Es mostra quan:
- Disposem del correu electrònic de l'autor
- El document té una mida inferior a 20 Mb
- Es tracta d'un document d'accés restringit per decisió de l'autor o d'un document d'accés restringit per política de l'editorial
Cita com:
hdl:2117/100172
Tipus de documentText en actes de congrés
Data publicació2015
EditorInstitute of Electrical and Electronics Engineers (IEEE)
Condicions d'accésAccés restringit per política de l'editorial
Llevat que s'hi indiqui el contrari, els
continguts d'aquesta obra estan subjectes a la llicència de Creative Commons
:
Reconeixement-NoComercial-SenseObraDerivada 3.0 Espanya
Abstract
In last decade, data analytics have rapidly progressed from traditional disk-based processing to modern in-memory processing. However, little effort has been devoted at enhancing performance at micro-architecture level. This paper characterizes the performance of in-memory data analytics using Apache Spark framework. We use a single node NUMA machine and identify the bottlenecks hampering the scalability of workloads. We also quantify the inefficiencies at micro-architecture level for various data analysis workloads. Through empirical evaluation, we show that spark workloads do not scale linearly beyond twelve threads, due to work time inflation and thread level load imbalance. Further, at the micro-architecture level, we observe memory bound latency to be the major cause of work time inflation.
CitacióAwan, A., Brorsson, M., Vlassov, V., Ayguade, E. Performance characterization of in-memory data analytics on a modern cloud server. A: International Conference on Big Data and Cloud Computing. "2015 IEEE Fifth International Conference on Big Data and Cloud Computing (BDCloud 2015): Dalian, China: 26-28 August 2015". Dalian: Institute of Electrical and Electronics Engineers (IEEE), 2015, p. 1-8.
ISBN9781467371841
Versió de l'editorhttp://ieeexplore.ieee.org/document/7310708/
Fitxers | Descripció | Mida | Format | Visualitza |
---|---|---|---|---|
07310708.pdf | 648,2Kb | Accés restringit |