240 发简信
IP属地:陕西
  • Resize,w 360,h 240
    redis学习

    [toc] redis 数据结构 字符串 setnx可以作为分布式锁的实现方法; 内部编码 哈希表 内部编码 ziplistimage.png ...

  • 摘要

    1、站在书脊之上,我可以飞跃眼前的围墙,借文字之翼,我可以抵达世界之巅,这是自由,只有阅读时的人生后无追兵,阅读时,是我在追寻上帝的脚步。2、成...

  • hadoop生态搭建(包括hbase,hive,hue等)

    重要tip 项目git地址 hadoop搭建部分,使用了kiwenlau的hadoop dockefile。 注意,hadoop的分布式是基于多...

  • 搜索词推荐

    使用golang开发,借助字典树结构+堆的数据结构,实现了us级别的搜索前缀词和热门搜索词的获取。 相关链接demo相关github 返回样例

  • Resize,w 360,h 240
    数据平台实践②——Logstash+Elasticsearch+Kibana

    简介 在上一次的数据平台实践①中,对基于Flume,Kafka和Spark Streaming的数据平台组合做了介绍,这一次对业界流行的ELK组...

  • Tip:Hadoop+Idea(本地测试+远程调试)

    MapReduce调试常见情况 Idea是一款很赞的IDE,结合Hadoop可以做本地测试+远程调试。首先,我们知道针对MapReduce有以下...

  • Resize,w 360,h 240
    数据平台实践①——Flume+Kafka+SparkStreaming(pyspark)

    蜻蜓点水 Flume——数据采集 如果说,爬虫是采集外部数据的常用手段的话,那么,Flume就是采集内部数据的常用手段之一(logstash也是...

    0.2 4927 1 26
  • 爬虫之scrapy-splash——scrapy+js渲染容器

    简介 scrapy作为爬虫利器,我就不多说了。常见的结合js的爬虫,一般用来扒取网页动态内容,就是通过操作js获取渲染的内容。现在大部分网站都是...

  • Resize,w 360,h 240
    keystonejs试手

    简介 keystonejs是一款数据库驱动的基于Express和MongoDB开发的node框架。keystonejs可以被理解成是一款cms。...

个人介绍
Don't hate the player. Hate the game.