机读格式显示(MARC)
- 000 01435nam0 2200253 450
- 010 __ |a 978-7-302-55509-4 |d CNY69.90
- 092 __ |a CN |b 人天949-2782
- 100 __ |a 20201120d2020 em y0chiy50 ea
- 200 1_ |a Spark性能调优与原理分析 |9 Spark xing neng tiao you yu yuan li fen xi |b 专著 |f 吕云翔,郭宇光编著
- 210 __ |a 北京 |c 清华大学出版社 |d 2020
- 330 __ |a 本书主要介绍了Spark运行原理及性能调优的相关实践,从Spark框架内部及外部运行环境等不同角度分析Spark性能调优的过程。第1章介绍了Linux系统中各种监控工具的使用,对CPU、内存、网络、I/O等方面进行介绍,并提供了集群监控报警的解决方案。第2章介绍了Java虚拟机(JVM)的基本知识、垃极回收机制,以及对JVM运行状态的监控。第3章和第4章介绍了Spark内核架构、任务运行的流程,对各个组件的实现进行了深入的剖析。尤其在Spark内存管理、存储原理、Shuffle阶段,详细介绍了每个实现的细节,这些实现的细节为后期Spark性能调优提供了参数调节的理论依据。第5章介绍了Spark性能调优的详细实践过程,首先介绍了SparkUI和Spark日志的使用,通过这两项可以迅速定位瓶颈问题;然后根据定位的问题,分别从程序调优、资源调优、Shuffle过程调优等不同角度介绍了调优的实践过程。
- 701 _0 |a 吕云翔 |9 lü yun xiang |f (1963-) |4 编著
- 701 _0 |a 郭宇光 |9 guo yu guang |4 编著
- 801 _0 |a CN |b GDPTC |c 20210628
- 905 __ |a GDPTC |d TP274/189