240 发简信
IP属地:广东
  • sqoop2部署与使用

    下载sqoop2 注意:一定要下载相对应Hadoop版本的sqoop,不然会出各种错误(亲身体会) 版本:sqoop2-1.99.5-cdh5....

  • Resize,w 360,h 240
    Spark-on-yarn

    cp conf/spark-env.sh.template conf/spark-env.sh 2.png 启动3.png 通过8088可以查...

  • Resize,w 360,h 240
    Pycharm配置Spark开发

    前提:安装与远端服务器相同的Python版本,并将spark目录放置到本地 配置Pycharm 1.1.png 22.png 本地测试结果: 远...

  • Resize,w 360,h 240
    spark源码编译过程

    1.下载源码1.png 原因:1.spark对应不同的hadoop版本有不同的支持2.方便后期对源码的更改,并进行编译 需要注意 2.png s...

  • Resize,w 360,h 240
    基于华为云搭建Hadoop集群

    环境说明:3台华为云服务器 Distributor ID: UbuntuDescription: Ubuntu 16.04.3 LT...

  • Resize,w 360,h 240
    云服务器centos部署anaconda/jupyter notebook/xgboost

    最近在弄kaggle竞赛,然而自己8G的MAC调参实在太费劲,因此考虑捣鼓下阿里云服务器(centos 7,学生价优惠也就120左右)。下面是我...

  • Mac SSH免登录到云服务器ECT(centos7)

    其实很简单,看这篇就够了!!! MAC端(SSH客户端) 1.查看是否存在密钥: ls ~/.ssh 2.生成密钥(会生成公钥.pub和私钥) ...

  • Mac搭建Hadoop2.7.3

    看了很多文档搭建、期间遇到很多坑。因此记录下来,希望对入门的小伙伴有所帮助: 百度云分享地址: 链接: https://pan.baidu.co...

个人介绍
但行好事、学习与分享