240 发简信
IP属地:江西
  • 120
    eclipse在线安装Fat jar插件

    该插件是将项目中引用的第三方的jar包同时打入jar文件 步骤: 1. Eclipse在线更新方法 Help > Install New Software > Add, na...

  • 120
    spark job, stage ,task介绍

    1. spark 如何执行程序? 首先看下spark 的部署图: 节点类型有: 1. master 节点: 常驻master进程,负责管理全部worker节点。 2. wor...

  • Spark运行原理

    前两篇我们讲了spark的基础知识,包括spark的体系结构、执行框架、spark的基本数据类型以及spark中stage的划分等等。本篇要介绍spark运行的原理。包括sp...

  • 120
  • 120
    Spark内核源码深度剖析:基于Yarn的两种提交模式深度剖析

    Spark的三种提交模式 1、Spark内核架构,其实就是第一种模式,standalone模式,基于Spark自己的Master-Worker集群。 2、第二种,是基于YAR...

  • 120
    Spark内核构架图解

    http://blog.csdn.net/qq_39532946/article/details/78213944

  • Hive数据管理

    Hive是建立在Hadoop上的数据仓库基础架构。它提供了一系列的工具,用来进行数据提取、转换、加载,这是一种可以存储、查询和分析存储在Hadoop中的大规模数据机制。可以把...

  • Hbase数据管理

    Hbase就是Hadoop database。与传统的mysql、oracle究竟有什么差别。即列式数据与行式数据由什么区别。NoSql数据库与传统关系型数据由什么区别: H...

  • 120
    hadoop核心架构

    通过对Hadoop分布式计算平台最核心的分布式文件系统HDFS、MapReduce处理过程,以及数据仓库工具Hive和分布式数据库Hbase的介绍,基本涵盖了Hadoop分布...

  • Scala学习笔记:Actor & Future

    关于scala的Actor和经常配合使用的Future Actor Creating Actor & best practice 步骤一:实现traitakka.actor....

  • 120
    深入Java源码解析容器类List、Set、Map

    本篇文章带你从Java源码深入解析关于Java容器的概念。 参考文献: Java容器相关知识全面总结 Java官方API文档 1 常用容器继承关系图 先上一张网上的继承关系图...