kubeasz 部署 kubernetes集群

image

项目致力于提供快速部署高可用k8s集群的工具, 同时也努力成为k8s实践、使用的参考书;基于二进制方式部署和利用ansible-playbook实现自动化;既提供一键安装脚本, 也可以根据安装指南分步执行安装各个组件, 详细查看文档

部署结构

image

注意事项:

  • 所有集群中都需要安装python(看版本而定,目前是Python27)
  • 管理节点需要安装ansible
  • 管理节点需要对所有的master节点,node节点,etcd集群互通
  • 对配置上镜像地址尽可能都测试下是否可以正常拉取
  • 已安装harbor集群的话,目前不支持自助在所有集群上自助配置harbor证书,需要(1、在docker的配置文件上加上信任host列表;2、修改原role脚本支持harbor证书的颁发)
  • 默认flannel上directing为false, 建议改为true

00-集群规划和基础参数设定

认真查看各组件版本支持, 不要盲目选取最高版本。后续如果有个别组件升级则需要安装完基本集群后才能升级
# 下载工具脚本easzup,举例使用kubeasz版本2.0.2
export release=2.0.2
curl -C- -fLO --retry 3 https://github.com/easzlab/kubeasz/releases/download/${release}/easzup
chmod +x ./easzup
# 使用工具脚本下载
# 举例使用 k8s 版本 v1.18.2,docker 19.03.5
./easzup -D -d 19.03.5 -k v1.18.2

如果上述没有报错则可以进行下一步安装,默认会把配置文件都放在/etc/ansible上
一般情况下需要修改easzup脚本内容,如加速域名的添加,image地址的修改

01-创建证书和环境准备


此项是配置kuberbetes证书的,在配置前需要配置好hosts文件,在example下有hosts文件样例
如果执行了playbook,后续又要需要修改证书,则需要删除.cluster目录才能重新执行playbook

root@K8S-Master1:ansible# cat roles/deploy/defaults/main.yml 
# CA 证书相关参数
CA_EXPIRY: "876000h"
CERT_EXPIRY: "438000h"

# apiserver 默认第一个master节点
KUBE_APISERVER: "https://{{ groups['kube-master'][0] }}:6443"

# kubeconfig 配置参数,注意权限根据‘USER_NAME’设置:
# 'admin' 表示创建集群管理员(所有)权限的 kubeconfig 
# 'read' 表示创建只读权限的 kubeconfig
CLUSTER_NAME: "cluster1"
USER_NAME: "admin"
CONTEXT_NAME: "context-{{ CLUSTER_NAME }}-{{ USER_NAME }}"

02-安装etcd集群


此项安装Etcd集群,如果需要修改service文件就修改执行playbook就好了,问题不大

03-安装docker服务


此步骤有两个playbook03.containerd.yml03.docker.yml
执行docker的playbook时需要配置harbor的域名到docker的配置文件下才进行分发到各节点,还有加速域名,不然就要后续手动配置了。

04-安装kube-master节点


此项安装master集群,如果需要修改service文件就修改执行playbook就好了,问题不大

05-安装kube-node节点


此项安装node集群,如果需要修改service文件就修改执行playbook就好了,问题也不大

06-安装网络组件


注意网络组件的镜像地址,建议使用fannel+directrouting

到了这步骤结束后,就可以使用k8s集群了,可以自由添加deployment/service/RC/daemonSet,可以加入busybox容器测试可否正常使用。

07-CoreDns


core-dns不在kubeasz的安装内容,不过他会制作镜像。

core-dns安装非常复杂,因为我们不会默认安装kube-dns,下载后进入kubernetes目录

# dnsIp 最好使用写死,通过安装的k8s集群dnsip为SERVICE_CIDR的第二个ip, 如192.168.0.0/16, dnsIp就是192.168.0.2
# CLUSTER_DNS_DOMAIN 配置k8s的域名
# CLUSTER_CIDR node集群ip范围
./deploy.sh -i ${dnsIp} -d ${CLUSTER_DNS_DOMAIN} -r ${CLUSTER_CIDR} > coredns.yaml
kubectl apply -f coredns.yaml

测试,下载busybox容器加入k8s集群,启动busybox

域名组装格式SvcName.NameSpace.Svc.CLUSTER_DNS_DOMAIN

kubectl exec -it ${podName} sh
# 查看域名解析时候成功
nslookup kubenetes.kube-system.svc.${CLUSTER_DNS_DOMAIN}

如果测试不通过进入测试容器,查看/etc/resovle.conf看看配置的dns地址与coredns开启的service ClusterIP是否一样

通过以下命令查看

kubectl get svc -n kube-system
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,456评论 5 477
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,370评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,337评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,583评论 1 273
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,596评论 5 365
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,572评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,936评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,595评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,850评论 1 297
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,601评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,685评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,371评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,951评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,934评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,167评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 43,636评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,411评论 2 342