https://mp.weixin.qq.com/s/7JQPxZJbzXHwpgW7L-ASdQ https://www.ibm.com/developerworks/cn...
ping通常是用来检查网络是否通畅或者网络连接速度的命令。 telnet是用来探测指定ip是否开放指定端口的。 ping 可以测试到目标机器的连通性。Ping域名还可以得出解...
/etc/host IP地址 主机名/域名 别名 主机名通常在局域网内使用,通过hosts文件,主机名就被解析到对应ip; 域名通常在internet上使用,但如果本机不想使...
Linux网络访问黑/白名单服务 编辑/etc/hosts.deny和/etc/hosts.allow文件配合使用完成网络IP的屏蔽. sshd:10.1.5.*:allow...
serLinux下网卡命名规律:eth0,eth1。 第一块以太网卡,Link encap:Ethernet 第二块,lo为环回接口,它的IP地址固定为127.0.0.1,掩...
HTTPS(Hypertext Transfer Protocol Secure):超文本传输安全协议。 HTTP+加密+认证+完整性保护 = HTTPS HTTPS并非应用...
MapReduce是一种基于java的分布式计算的处理技术和程序模型. MapReduce是一个框架,我们可以使用它来编写应用程序,以可靠的方式并行地处理大量商品硬件群集上的...
https://www.w3cschool.cn/hadoop/hadoop_hdfs_operations.html https://www.w3cschool.cn/ha...
https://mp.weixin.qq.com/s?__biz=MzIxODM4MjA5MA==&mid=2247488573&idx=3&sn=927f9458e2f0a...
Spark Core: 包含Spark的基本功能,包含任务调度,内存管理,容错机制等,内部定义了RDDs(弹性分布式数据集),提供了很多APIs来创建和操作这些RDDs。为其...
job、stage、task Worker Node:物理节点,上面执行executor进程 Executor:Worker Node为某应用启动的一个进程,执行多个task...
spark 分区与性能。 RDD 的分区并行运行1个并发的任务,达到CPU的数量或者2-3倍。 比较好的分区是excutors的数量。 可以设置默认的分区数,并行度:sc.d...
业务场景:数据排序
终极算法 关注微信号每天收听我们的消息终极算法为您推送精品阅读 前言 Hadoop 在大数据技术体系中的地位至关重要,Hadoop 是大数据技术的基础,对Hadoop基础知...
假设将HDFS中的t1表通过sqoop导入到Mysql中的consumer表(事先必须存在) $sqoop export --connect jdbc:mysql://had...