专注最优秀技术人的成长。<br>
发简信
IP属地：澳门
-
-
-
(转)数据架构-主数据&元数据管理
主数据管理 主数据是指描述核心业务实体的数据，如客户、机构、员工、产品等。这些数据变化相对缓慢并通常在企业内跨业务重复使用。主数据管理适用于管理、协调、监控与企业主要业务实体...
-
一文读懂企业级数据架构规划闲话少说，先上图。由于版主在银行工作，所以此篇文章base金融系统数据架构，但是企业级数据架构应该都大同小异，可供参考。 FIRST 先来了解一下基础数据架构流程以及设计思想...
-
16年数据科学教育专业品牌，更多精彩内容或试听课程，可前往<a href="https://links.jianshu.com/go?to=https%3A%2F%2Fwww.cda.cn%2F%3Fseo" target="_blank">https://www.cda.cn/?seo</a><br>CDA微信公众号：CDA数据分析师（ID:cdacdacda)<br>微信小程序：CDA数据分析培训<br>微信服务号：CDA微课学院（ID:cdacourse）
-
(转)数据架构实践简介
数据架构实践简介 数据架构应该是面向业务的数据定义、数据生产、数据分析、数据使用的整体架构。 从数据生命周期来看，目前主要涉及到三种角色： 开发DBA：负责研发项目的数据库支...
-
个人学习记录以及问题追踪
-
我是简诗评论员葡萄，我用打油诗写评论<br><br>--------<br>【我正在发起《简友百分百》活动，每期100人爱心传递简书贝💎】<br><a href="https://www.jianshu.com/p/ac18f0c18027" rel="nofollow" target="_blank">https://www.jianshu.com/p/ac18f0c18027</a><br><br>--------<br>【坐标上海，程序员一枚，已婚/已育/已生白头发，赚钻/攒钱/买简书合伙人喽......】
-
数仓分层模型|简练实用（推荐收藏）通过阅读本文，可以让你快速了解数仓如何分层，合理，实用。笔者坚持原创，根据实践总结，希望对新手有所帮助。 分层案例 1.电信通讯stage层 ->bdl层 ->analysi...
-
数据仓库概念
数据仓库概念汇总 目录 一、术语..........................................................................
-
基于Hadoop的大数据平台实施——整体架构设计
大数据的热度在持续的升温，继云计算之后大数据成为又一大众所追捧的新星。我们暂不去讨论大数据到底是否适用于您的公司或组织，至少在互联网上已经被吹嘘成无所不能的超级战舰。好像一夜...
-
利用HCatalog管理元数据
在HDFS和HBase之间，Hadoop提供了许多保存数据的方法，使得数据可以被多个应用程序访问。但将数据集中存储并提供给多个应用程序访问，这样做产生了一系列新的挑战，包括以...
-
Hbase rowKey 设计与预分区建表
Hbase RowKey 设计 使用Spark或通过REST/API 方式存取Hbase，性能影响最大的因素在于Hbase 的结构设计。Hbase 结构设计包括两个方面 ro...
-
Hive知识归纳——详解 hive 各个知识点有点标题党了，但是大部分常用知识点也算是涉及到了，希望对你有帮助 Hive是什么？ 概念 从概念上讲：由Facebook开源的一款基于hadoop的用于统计海量结构化数据的...
-
Hive实践分享：存储和压缩的坑
码代码，写程序，总是麻烦一大堆。Hive在存储和压缩的时候，总是避免不了踩进坑里面。今天，我们一起来看看一位大神Hive实践分享：存储和压缩的坑。 这位大神最近在阿里云跑数据...
-
实时数仓建设随着近些年大数据相关技术的飞速发展，数据的在助力业务的发展方面越发重要；数据仓库为企业的决策提供所有数据类型支持的战略集合。它是单个数据存储，出于分析性报告和决策支持目的而创...
-
Apache Kylin在美团数十亿数据OLAP场景下的实践美团各业务线存在大量的OLAP分析场景，需要基于Hadoop数十亿级别的数据进行分析，直接响应分析师和城市BD等数千人的交互式访问请求，对OLAP服务的扩展性、稳定性、数据精...
-
Spark Streaming 重启后Kafka数据堆积调优问题： 当应用由于各种其它因素需要暂停消费时，下一次再次启动后就会有大量积压消息需要进行处理，此时为了保证应用能够正常处理积压数据，需要进行相关调优。 另外对于某个时刻，某个...
