sincosmos's blog

所赖君子见机，达人知命。穷且益坚，不坠青云之志；老当益壮，宁移白首之心

博客迁移声明

博客迁移声明过去若干年间，一直在 CSDN 写博客，但由于近一段时间来，登录 CSDN 有诸多限制（例如无法使用账号登录，要求关注各种公众号等），故将博客迁移到 github 上。发现使用 github 真是太好了，可以将博客所有的文章同步到本地，更改或者新增都通过 git 上传至 github 就可以了。以前的博客地址 Live and Learn。以前的博客内容暂时留存在 CSD...

Posted by sincosmos on June 10, 2019

Spark 基础概念解读

spark 程序的执行过程概览

原文刊自作者博客Spark 基础概念解读，有更新本文介绍 Spark 中涉及到的几个基础概念相关名词及其在 Spark 程序（即用户程序, Application）运行过程中的作用，初探 Spark 程序的运行原理。上图是源自 Spark 官方文档对 Spark 程序运行架构的高度抽象，下文将围绕该图示进行阐述。概念解读 Cluster Manager Spark 程序在集群上运行时...

Posted by sincosmos on July 27, 2018

ABOUT ME

勿意，勿必，勿固，勿我

✉️ kleguan@hotmail.com