240 发简信
IP属地:广东
  • 团购标签案例

    数据提取 排序比较器 生成标签

  • Hadoop-2.7下搭建Zookeeper集群

    配置Zookeeper环境变量 创建文件夹每台机器都得建 编辑/opt/zookeeper-3.4/data/myid文件 hserver-1上...

  • Hadoop-2.7集群安装Hive-2.2

    驱动包--mysql-connector-java.jar 安装mysql 进入mysql,执行下面的代码 创建hive用户和hive_meta...

  • CentOS7搭建Spark-2.3集群

    spark 2.3-hadoop-2.7 1.配置环境变量 2.修改spark-env.sh cp /opt/spark-2.3-hadoop-...

  • CentOS7修改静态IP

    1.修改 /etc/sysconfig/network-scripts/ifcfg-enp0s3文件该文件根据自己机器情况而定,名字不一定相同,...

  • Window滑动窗口

    Spark Streaming提供了滑动窗口操作的支持,从而让我们可以对一个滑动窗口内的数据执行计算操作。每次掉落在窗口内的RDD的数据,会被聚...

  • 使用滑动窗口进行实时的热词统计

    开发环境: kafka 1.1.1 spark 2.3 Java代码:

  • Kafka+Spark Streaming进行网站黑名单实时过滤

    开发环境: spark 2.3 kafka 1.1.1 黑名单数据是从mysql中获取的。源数据是从kafka中获取的,数据格式就是简单的姓名,...