在CSDN、简书看了很多解答,并没有解决问题,浪费了宝贵的学习时间。 本着知其然,也要知其所以然的精神,研究了各位前辈们的方法,终于找到了问题所在,下面开始复盘。 一、问题发...
在CSDN、简书看了很多解答,并没有解决问题,浪费了宝贵的学习时间。 本着知其然,也要知其所以然的精神,研究了各位前辈们的方法,终于找到了问题所在,下面开始复盘。 一、问题发...
背景 Kafka原本集群磁盘扩容后,新建topic的业务量较大,存在数据积压。一段时间后收到集群节点报警,部分磁盘使用率到达90%警戒值。经过检查发现问题节点各磁盘使用率不均...
最近在看一些在学习一些源码,在源码中经常会看到一些位移运算符的使用,比如在看HashMap源码的时候,在计算hashMap容量的阈值的时候,就使用到了位移运算符,代码如下: ...
本篇主要介绍使用linux自带的相关配置方法限制sftp用户的用户权限与限制某特定端口的上传下载速度。 参考文档: 限制ssh用户只能用于SFTP登录且只能访问指定目录, 只...
白天没事儿刷微博,偶然看到了这个消息 会SQL就能搞AI?这么溜吗前几年一窝蜂的到处都是大数据,然后大家都去搞大数据;这几年一窝蜂的到处都是数据分析,然后大家都去搞数据分析,...
前言 遇到开发环境是内网,项目第一次搭建的时候需要安装许多的python三方模块除了手动一个个安装,有时候还要处理相互依赖的模块,费时费力能不能像在 外网 环境一样,在 内网...
前言 这是一篇科普性质的文章,希望能过用一个通俗易懂的例子给非计算机专业背景的朋友讲清楚大数据分布式计算技术。大数据技术虽然包含存储、计算和分析等一系列庞杂的技术,但分布式计...
我发现TBLPROPERTIES ("EXTERNAL"="TRUE")里面true要大写
Hive的内部表和外部表之间相互转换1,内部表转换为外部表,EXTERNAL大写 ALTER TABLE tablename SET TBLPROPERTIES ('EXTERNAL' = 'true');修...
什么是JMM内存模型 内存模型可以理解为在特定的操作协议下,对特定的内存或高速缓存进行读写访问的过程抽象描述,不同架构下的物理机拥有不一样的内存模型。 JMM(Java内存模...
allowed_networks: ["172.0.0.0/8"] 后面的那个8代表什么意思?
clickhouse + chproxy 集群搭建集群规划 集群架构 其中 Distribute 是指创建分布式表的机器,在此文章中是将 Distribute 单独部署的,也可以将 Distribute 角色划分到每个 Re...
数据类型 基础类型 基础类型只有三种 数值、字符串、时间 数值1.1 数值类型 int (用int8 int16 int32 int64 代表tinyint smallint...
背景 集群切换服务器IP地址,重启网络提示空间不足,经排查发现Oracle数据库数据存储在系统路径下,将空间占满,应是安装时配置错误导致,需修改路径腾出空间。 1. 修改系统...
简介:公司实时项目组处理的业务数据以前是由业务团队把数据push到rabbit mq,然后我们通过flink转运到kafka,然后再做实时计算的,由于新业务逻辑变化会较大,导...
kafka部署的问题 1. 连接zookeeper超时 kafka.zookeeper.ZooKeeperClientTimeoutException: Timed out ...
* 更新说明 2015.11.14更新 在区段元素的强调栏增加删除线和空格的标记方法将表格、流程图和时序图等不常用的语法移至Markdown进阶语法整理 关于Markdown...
摘要 本文将介绍常用parquet文件读写的几种方式1.用spark的hadoopFile api读取hive中的parquet格式2.用sparkSql读写hive中的pa...
/boot/config.txt增加hdmi_force_hotplug=1后,开机画面一闪就黑屏了,还好vnc连接上去是正常的, 再增加hdmi_drive=2又正常显示桌面了.
树莓派 设置HDMI分辨率设置分辨率为 1920*1080 60Hz 修改如下: 之后重启树莓派 参考 CEA分辨率 以下是CEA规定的电视规格分辨率。这些分辨率的hdmi_group=1。 DMT分...
设置分辨率为 1920*1080 60Hz 修改如下: 之后重启树莓派 参考 CEA分辨率 以下是CEA规定的电视规格分辨率。这些分辨率的hdmi_group=1。 DMT分...