发简信
IP属地：台湾
-
redis学习[toc] redis 数据结构 字符串 setnx可以作为分布式锁的实现方法； 内部编码 哈希表 内部编码 ziplistimage.png ...
-
摘要
1、站在书脊之上，我可以飞跃眼前的围墙，借文字之翼，我可以抵达世界之巅，这是自由，只有阅读时的人生后无追兵，阅读时，是我在追寻上帝的脚步。2、成...
-
hadoop生态搭建（包括hbase,hive,hue等）
重要tip 项目git地址 hadoop搭建部分，使用了kiwenlau的hadoop dockefile。 注意，hadoop的分布式是基于多...
-
搜索词推荐
使用golang开发，借助字典树结构+堆的数据结构，实现了us级别的搜索前缀词和热门搜索词的获取。 相关链接demo相关github 返回样例
-
数据平台实践②——Logstash+Elasticsearch+Kibana简介 在上一次的数据平台实践①中，对基于Flume，Kafka和Spark Streaming的数据平台组合做了介绍，这一次对业界流行的ELK组...
-
Tip：Hadoop+Idea（本地测试+远程调试）
MapReduce调试常见情况 Idea是一款很赞的IDE，结合Hadoop可以做本地测试+远程调试。首先，我们知道针对MapReduce有以下...
-
数据平台实践①——Flume+Kafka+SparkStreaming(pyspark)蜻蜓点水 Flume——数据采集 如果说，爬虫是采集外部数据的常用手段的话，那么，Flume就是采集内部数据的常用手段之一（logstash也是...
-
爬虫之scrapy-splash——scrapy+js渲染容器
简介 scrapy作为爬虫利器，我就不多说了。常见的结合js的爬虫，一般用来扒取网页动态内容，就是通过操作js获取渲染的内容。现在大部分网站都是...
-
keystonejs试手简介 keystonejs是一款数据库驱动的基于Express和MongoDB开发的node框架。keystonejs可以被理解成是一款cms。...