240 发简信
IP属地:上海
  • Hadoop 跨集群复制文件

    hadoop distcp hdfs://源集群活跃NameNodeIP:8020/文件目录 hdfs://目标集群活跃NameNodeIP:8...

  • Mac OS megahit安装

    mkdir megahitcd megahit/git clone https://github.com/voutcn/megahit.git ...

  • MemSQL 版本升级

    MemSQL 从5.8升级到6.5升级需要准备两个安装包:memsql-ops-6.5.8.tar.gzmemsql_amd64.tar.gz升...

  • 双网卡上网

    公司用为保证数据安全,需要在公司内网环境下登陆生产/开发环境 但是日常的上网谷歌等行为又需要连接外网进行 在资源有限的情况下,可以安装一个USB...

  • HDFS shell

    判断是否存在 hdfs dfs -test -e /tmp 判断是否目录 hdfs dfs -test -d /tmp 判断是否文件 hdfs ...

  • matplotlib pyplot

    将txt文件数据用python 包画成箱型图 import matplotlib.pyplot as pltimport pandas as p...

  • Hadoop 常用信息

    查看block数量,文件数量等集群信息 hadoop fsck / block 元数据大小计算 Object size estimate (by...

  • 重启 cloudera-scm-agent 失败

    # 因为CM出现故障,需要重启CM服务,重启过程中,发现重启cloudera-scm-agent 失败,查找原因后发现是重启用户和权限不符合预期...