有几个问题请教下
1. 日志是同时写入es和hbase,还是先写入es,然后再从es导入hbase
2. 使用hbase的时候,数据的schema是如何管理的?es的数据是json的,对于多级的json,如何把数据导入hbase?
谢谢
“淘宝京东”构建流式计算卖家日志系统架构的应用实践引言 本文给大家讲述的是我们如何去构建一个日志系统,用到了那些技术,为什么用这些技术,并且讲述了遇到的问题及优化的过程,希望给大家在实践中能够提供一些参考。 最近在维护一个有...
有几个问题请教下
1. 日志是同时写入es和hbase,还是先写入es,然后再从es导入hbase
2. 使用hbase的时候,数据的schema是如何管理的?es的数据是json的,对于多级的json,如何把数据导入hbase?
谢谢
“淘宝京东”构建流式计算卖家日志系统架构的应用实践引言 本文给大家讲述的是我们如何去构建一个日志系统,用到了那些技术,为什么用这些技术,并且讲述了遇到的问题及优化的过程,希望给大家在实践中能够提供一些参考。 最近在维护一个有...
本来应该先有这篇文章,后有如何提高ElasticSearch 索引速度才对。不过当时觉得后面一篇文章会更有实际意义一些,所以先写了后面那篇文章。结果现在这篇文章晚了20多天。...
B站的日志系统(Billions)从2017年5月份开始建设,基于elastic stack,面向全站提供统一的日志采集、检索、监控服务。目前集群规模20台机器,接入业务20...
毕业10年了,终于下了决定换了个新公司。初来乍到新公司,kick off一个新的ES项目,打算借此机会去研究一下ES代码。一边网上搜了大量的源码分析的blog,顺着这些作者的...