[toc] redis 数据结构 字符串 setnx可以作为分布式锁的实现方法; 内部编码 哈希表 内部编码 ziplistimage.png ...
1、站在书脊之上,我可以飞跃眼前的围墙,借文字之翼,我可以抵达世界之巅,这是自由,只有阅读时的人生后无追兵,阅读时,是我在追寻上帝的脚步。2、成...
重要tip 项目git地址 hadoop搭建部分,使用了kiwenlau的hadoop dockefile。 注意,hadoop的分布式是基于多...
使用golang开发,借助字典树结构+堆的数据结构,实现了us级别的搜索前缀词和热门搜索词的获取。 相关链接demo相关github 返回样例
简介 在上一次的数据平台实践①中,对基于Flume,Kafka和Spark Streaming的数据平台组合做了介绍,这一次对业界流行的ELK组...
MapReduce调试常见情况 Idea是一款很赞的IDE,结合Hadoop可以做本地测试+远程调试。首先,我们知道针对MapReduce有以下...
蜻蜓点水 Flume——数据采集 如果说,爬虫是采集外部数据的常用手段的话,那么,Flume就是采集内部数据的常用手段之一(logstash也是...
简介 scrapy作为爬虫利器,我就不多说了。常见的结合js的爬虫,一般用来扒取网页动态内容,就是通过操作js获取渲染的内容。现在大部分网站都是...
简介 keystonejs是一款数据库驱动的基于Express和MongoDB开发的node框架。keystonejs可以被理解成是一款cms。...