一、ZooKeeper概念和基础 1、ZooKeeper的使命就是在分布系统中协作多个任务。一个协作任务就是指一个包含多个进程的任务；这个任务可以是为了协作，也可以是为了管...
发简信
IP属地：天津
-
ZooKeeper学习笔记
-
安装VMWare增强工具失败
错误：VBoxClient: VBoxClient (seamless): failed to start. Stage...... 解决： sudo apt-get ins...
-
小白也可以轻松搭建一套 Kafka 集群
资源准备 准备 Linux 服务器 3 台 192.168.9.1192.168.9.2192.168.9.3 安装配置 JDK1.7+（详细操作） 下载 kafka-0.1...
-
spark streaming + kafka +python(编程)初探一、环境部署 hadoop集群2.7.1zookeerper集群kafka集群：kafka_2.11-0.10.0.0spark集群：spark-2.0.1-bin-hado...
-
雅虎开源的TensorFlowOnSpark环境配置
--------"道路是曲折的,前途是光明的。"此笔记旨在做备份和记录，也希望为和我一样迷茫的你偶尔点一下睛。欢迎各位深度君一起交流学习：） 参考资料在开始之前，应该已经熟悉...
-
Spark Mongodb集成 - Python版Spark是最近比较火的数据处理平台，相对于Hadoop的Mapreduce(MR)，既具有运行速度的优势，又打破的Hadoop MR交互性差的局限，同时，其机器学习组件ML...
-
TensorFlowOnSpark 源码解析
前言 这两天琢磨了下spark-deep-learning和spark-sklearn两个项目，但是感觉都不尽人如意。在training时，都需要把数据broadcast到各...
-
Windows上的PyCharm 远程连接调试pyspark在实验室配置了一个Spark集群，传统的方法就是在Windows本地开发项目，完了后打包，然后上传到Linux服务器上，最后执行spark-submit 。但是在实际开发用还...
-
java操作kafka【准备】1 : zookeeper集群 搭建在224, 225, 2262 : kafka使用3个节点224, 225, 226 修改配置文件config/server...
-
四、ZooKeeper技术内幕本文将从系统模型、序列化与协议、客户端工作原理、会话、服务端工作原理以及数据存储等方面来揭示ZooKeeper的技术内幕。 一、系统模型 1.1 数据模型 ZooKeeper...
-
Spark Streaming 编程指南（2.x）
Spark Streaming 编程指南1.概述Spark Streaming 是 Spark Core API 的扩展, 它支持弹性的, 高吞吐的, 容错的实时数据流的处理...
-
Spark初体验(步骤超详细)一乡二里共三夫子不识四书五经六义竟敢教七八九子十分大胆！十室九贫 凑得八两七钱六分五毫四厘 尚且三心二意 一等下流 前言 这里，不谈spark原理，作用，使用场景等，只是一个...
