第十五次早课

第十五次早课

1、shuffle 聊聊你们的理解
洗牌
2、mr的执行流程,大概分为两大步,简述
1.第一个阶段是启动ApplicationMaster
2.第二个阶段是由ApplicationMaster创建应用程序,为它申请资源,并监控它的整个运行过程,直到运行完成
3、hdfs的报告的命令
hdfs dfsadmin -report
4、检查的命令
hdfs fsck /
5、多台机器数据不均衡,该怎么办
hdfs balancer 
6、多个磁盘 不均衡,该怎么办
详情请看整个: https://hadoop.apache.org/docs/r3.0.0-alpha2/hadoop-project-dist/hadoop-hdfs/HDFSDiskbalancer.html
7、hadoop fs和什么一样
hdfs dfs
8、默认开启回收站?
不是
9、删除时,想要跳过回收站,加什么参数
-skipTrash
10、hdfs的写流程是input还是output
output
11、NameNode是干什么的,存储什么
NameNode是文件系统的命名空间,存储:维护文件系统树及整个树内的所有文件和目录,这些信息以两种文件形式永久保存在本地磁盘
12、260M文件,多少块,存储规格多少?
9块,存储规格是1152M
13、snn多久干活一次
3600秒
14、启动顺序 nn dn snn?
对的
15、hdfs yarn都属于什么架构设计
主从架构设计
16、提交一个文件到hdfs上,假如本节点是DN,请问第一个块写在哪
本地
17、补充: 在企业里,正常是把dn nm这两个进程部署同一台机器,那么请问为什么这样做
因为计算时假如数据和计算在同一个节点,那么必然效率高
18、bin和sbin文件夹是干什么的
bin:操作命令
sbin:启动服务
19、现在的hadoop版本,我们要启动jobtracker,tasktracker吗
不用
20、谈谈你们对容器container的理解
21、MySQL的SQL语句,group by后面一般还有什么
having
22、假如分组和排序结合,那么这个sql怎么写?
select 字段1,字段2 from 表名 group by 分组条件 order by 排序条件
23、按班级分组,然后按语文成绩由大到小排序的
select * from student group by grade order by chinesescorce;
24、按班级分组,然后按语文,数学,英语总成绩由大到小排序的,只取每个班级的前五名
SELECT * FROM (
SELECT name,class,sum(chinese+math+english) cengji 
from aaa GROUP BY name,class
) a 
WHERE 5>(
SELECT COUNT(*) FROM (
SELECT name,class,SUM(english+chinese+math) cengji 
FROM aaa GROUP BY name,class) b 
WHERE b.class=a.class and b.cengji>a.cengji) 
ORDER BY a.class,a.cengji DESC;
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,772评论 6 477
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,458评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,610评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,640评论 1 276
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,657评论 5 365
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,590评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,962评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,631评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,870评论 1 297
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,611评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,704评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,386评论 4 319
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,969评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,944评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,179评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 44,742评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,440评论 2 342

推荐阅读更多精彩内容