安装Linux时全部走的默认,导致home路径过大,由于安装CDH对home没有要求,现将home减小,增大根目录的大小,步骤如下: 1.查看分区空间和格式 由此可以看到根目...
一、CDH6要求和支持的版本 官方指导:https://docs.cloudera.com/documentation/enterprise/6/release-notes/...
一、什么是swappiness swappines是Linux的一个内核参数,控制系统在进行swap时,内存使用相对权重。那么系统在进行swap时,系统做了什么? 系统swa...
在命令行启动spark-shell时,发生报错 查看日志可以发现是因为org.apache.hadoop.security.AccessControlException: P...
安装HDFS后,报了一个隐患 9 DataNodes are required for the erasure coding policies: RS-6-3-1024k. ...
一、ntp时钟同步服务是什么? NTP是网络时间协议(Network Time Protocol),它是用来同步网络中各个计算机的时间的协议。它的用途是把计算机的时钟同步到世...
基本的命令 1、创建topic replication-factor,为副本数;partitions,为分片数,分片数量最好为kafka数据路径总和的整数倍; 2、查看都有哪...
一、什么是纠错码 提起纠错码就有必要提起HDFS中多副本策略。在多副本策略下,HDFS中储存文件,要存储三份相同文件,如果当前文件出现丢失,可以通过其他副本进行复制,恢复回来...
Cloudera Manager管理页面中是无法查看kafka的 版本号,这样我们在写程序的时候无法知道对应的kafka包的版本。登陆一台安装有kafka节点的服务器执行一下...
一、HDFS是什么? Hadoop分布式文件系统[https://baike.baidu.com/item/%E5%88%86%E5%B8%83%E5%BC%8F%E6%96...