Spark
什么是 Spark?
容易使用。Spark 支持使用 Scala、Java、Python 和 R 语言进行编程，简洁的 API 设计有助于用户轻松构建并行程序，并且可以通过 Spark Shell 进...
spark是什么?
RDD 是一种抽象，是Spark 对于分布式数据集的抽象，它用于囊括所有内存中和磁盘中的分布式数据实体它的 4 大属性 partitions：数据分片 partitione...
常见的Spark的性能瓶颈有哪些?
spark.memory.fraction将M的大小表示为(JVM堆空间 - 300MB)的一个分数（默认值为0.6）。剩余的空间（40%）用于用户数据结构、Spark内部元数...
spark该怎么学习?
【Spark ML系列】Spark PipelineStage pipeline transformer estimator不能别再‘傻傻’分不清 【Spark ML系列】Spark ML 和 Spark MLlib 中vect...
关于Spark 的面试题你应该知道哪些?
SparkContext}objectRDDDemo{defmain(args:Array[String]):Unit={// 创建SparkConf对象并设置应用程序名称valconf=newSparkConf().setAppName("...
Spark到底是什么?有什么特点?
SparkML：Spark ML、原理、床头书、调优、Graphx、pyspark、sparkSQL、yarn集群、源码解析等系列专栏目录 》【持续更新中，收藏关注楼主就不会...
企业中spark如何进行数据分析?
Spark是伯克利大学2009年开始研发的一个项目，它是大数据时代下的一个快速处理数据分析工作的框架。spark发展十分迅速，2014年，Hadoop的四大商业...
spark常用版本?
SparkML：Spark生产版本选择说明 版本控制策略 Spark版本 Alpha组件 API兼容性 破坏API时的考虑因素 破坏API的成本 维护API的成本 破坏API的替代...
Spark特点及缺点?
有的时候，我们可能会遇到大数据计算中一个最棘手的问题——数据倾斜，此时Spark作业的性能会比期望差很多。数据倾斜调优，就是使用各种技术方案...
Spark的整体架构是什么样的?
Spark 是一种与 Hadoop 相似的开源集群计算环境，但是两者之间还存在一些不同之处，这些有用的不同之处使 Spark 在某些工作负载方面表现得更加...