发简信
IP属地：安徽
-
Spark之本地部署，编译打包以及远程提交Spark之本地部署，编译打包以及远程提交的条件和可行性： 1.条件：个人电脑主机（设为A）与集群服务器是处于同一个局域网内（比如校园网）。集群中各个主机形成一个分布式计算环...
-
ValueError: Input X must be non-negative
这是使用word2vector + MultinomialNB训练时会出现的一个问题。由于word2vector对文本数据集进行处理后，向量中出现了负值，而Multinomi...
-
MMLSpark+Spark：pyspark+lightGBM应用实践MMLSpark[https://gitee.com/mirrors/MMLSpark/tree/master] ，即Microsoft Machine Learning f...
-
Kylin分布式分析型数据仓库-集群部署步骤总结
集群部署Kylin分布式分析型数据仓库步骤[https://blog.csdn.net/bensonrachel/article/details/115862767] 地址 ...
-
关于Spark的机器学习库Smile的应用及记录Smile官方地址[https://github.com/haifengl/smile]、需要VPN才能访问的官方文档[https://haifengl.github.io/...
-
* coalesce 算子： 将N个分区 合并为 N-M个分区
* 分区合并(减少)，在filter后使用效果更佳，可以有效避免数据倾斜问题Spark+smile项目（一）：各种初探，包括文件读写，Bug解决等。
在IDEA构建了一个spark+smile的maven项目，用起来还是有各种bug[https://www.jianshu.com/p/9ae8abb6145e]。继续记录。...
-
//本机可以读hdfs上的文件:hdfs://ares02:8020/user/XXXX/XXXX
Spark+smile项目（一）：各种初探，包括文件读写，Bug解决等。
在IDEA构建了一个spark+smile的maven项目，用起来还是有各种bug[https://www.jianshu.com/p/9ae8abb6145e]。继续记录。...
-
创建SparkSession之后，还是可以通过 spark.conf.set 来设置运行参数。spark.conf.set("spark.jars", "path/XXX.jar,")
Spark+smile项目（一）：各种初探，包括文件读写，Bug解决等。
在IDEA构建了一个spark+smile的maven项目，用起来还是有各种bug[https://www.jianshu.com/p/9ae8abb6145e]。继续记录。...
-
Spark+smile项目（一）：各种初探，包括文件读写，Bug解决等。在IDEA构建了一个spark+smile的maven项目，用起来还是有各种bug[https://www.jianshu.com/p/9ae8abb6145e]。继续记录。...
-
IDEA-scala：java.lang.NoClassDefFoundError：org / apache / commons / csv / CSVFormat and Static met...在IDEA构建了一个spark+smile的maven项目，用起来还是有各种bug。 因为要读文件，抛出了一个这样的异常：java.lang.NoClassDefFoundE...
-
建立一个搜索引擎（信息检索系统）的点点滴滴建立一个简单搜索引擎的点点滴滴。 数据只作测试用，markdown一些细节和坑吧。记录点点滴滴。 IDE平台：eclipse；lucene3.6；jdk1.8；tomcat7...
-
我是三只小熊熊熊，一个币圈的小韭菜，希望大家多多关照。
-
斜杠青年/伪医生/伪专栏作家/伪摄影爱好者/伪古典音乐爱好者/伪旅行家/假装文艺青年/客居英伦15年/精游43国家与地区/千万博主/千万小心加我好友/千万。。。
-
-
-
Java架构想进阶的加QQ：2954948836免费获取一份架构学习视频和架构学习体系进阶图。<br>感谢大家对我的关注！
-
你我同行，让前行的路上更精彩，微信：fan5159922
