AI 助理
文档备案控制台
开发者社区 云原生 容器服务 文章 正文

通过kubeadm安装kubernetes 1.7文档记录[docker容器方式]

2017-07-24 3485
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： 参照了网上N多文档，不一一列表，共享精神永存！！！！ ================================================== 获取所有安装包 安装包分为两类，rpm安装包和docker镜像 rpm安装包 rpm为以下四个 kubeadm-1.

参照了网上N多文档，不一一列表，共享精神永存！！！！

==================================================

获取所有安装包

安装包分为两类，rpm安装包和docker镜像

rpm安装包

rpm为以下四个

kubeadm-1.7.0-0.x86_64.rpm
kubectl-1.7.0-0.x86_64.rpm
kubelet-1.7.0-0.x86_64.rpm
kubernetes-cni-0.5.1-0.x86_64.rpm

 

A, 从github上clone以下项目：

https://github.com/kubernetes/release

B，进入rpm目录，执行docker-build.sh脚本，会在output目录下生成那4个rpm安装包。

      *如果只生成amd-64的包，修改一下脚本，把其它几个构架的去掉。

      *这些安装包的生成，需要fedora:24镜像，最好提前准备。

核心docker镜像

A， 下载kubernetes 1.7.0 release软件包kubernetes-server-linux-amd64.tar.gz

https://github.com/kubernetes/kubernetes/blob/master/CHANGELOG.md

B， 解压kubernetes-server-linux-amd64.tar.gz文件，在server/bin目录下，以下几个文件为kubernetes的核心docker镜像:

kube-apiserver.tar

kube-controller-manager.tar

kube-scheduler.tar

kube-proxy.tar

kube-aggregator.tar

将这些镜像导入harbor仓库便以后备用。

*因为k8s的官方镜像都放在google上，不FQ一般不能直接下载，附录会写一个如何结合github,dockerhub,daocloud来获取指定镜像的办法。

扩展docker镜像

扩展的docker镜像，涉及etcd,flannel,traefik,nginx,tomcat等，后面结合场景写清楚。

所有节点初始化

主要是确认服务器的各项系统指标满足安装kubernetes的要求。

*RedHat发行版本为: 7.3 (Maipo)

*Linux内核版本为：3.10.0-514.el7.x86_64

docker安装

这个安装我们没有涉及，原本已安装好，版本为17.05.0-ce, build 89658be

注意新增/etc/systemd/system/docker.service.d/docker.conf文件:

[Service]
ExecStart=
ExecStart=/usr/bin/dockerd  --graph=/dockerVolume  --storage-driver=overlay --insecure-registry habor-ip-address


它改写了docker的存储目录，且定义了harbor仓库地址。

禁用selinux

确认/usr/sbin/sestatus命令输出为：disabled

禁用ipv6

确认以下两条命令均无显示

lsmod | grep -i ipv6

ifconfig | grep -i inet6

开启路由转发

echo 1 > /proc/sys/net/ipv4/ip_forward

echo 1 > /proc/sys/net/bridge/bridge-nf-call-iptables

Iptables清空及禁用

iptables -X

iptables -Z

iptables -P INPUT ACCEPT

iptables -F

 

*默认禁用，通过硬防来控制规则。

主节点安装

上传rpm文件

将所有涉及的rpm包上传到服务器的一个安装目录(e.g：/root/k8s/)

上传docker镜像

将前节提到的docker images上传到harbor仓库(harbor-ip-address)

运行初始化前脚本

生成并运行以下脚本，进行master初始化前安装。(k8s-master-setup_before.sh)

 

#!/bin/bash


HARBORPRE="1.2.3.4/kubernets/"
DOCKERS=(
    ${HARBORPRE}/gcr.io/google_containers/k8s-dns-sidecar-amd64:1.14.4 
    ${HARBORPRE}/gcr.io/google_containers/k8s-dns-kube-dns-amd64:1.14.4 
    ${HARBORPRE}/gcr.io/google_containers/k8s-dns-dnsmasq-nanny-amd64:1.14.4   
    ${HARBORPRE}/gcr.io/google_containers/pause-amd64:3.0  
    ${HARBORPRE}/quay.io/coreos/flannel-amd64:v0.8.0
    ${HARBORPRE}/gcr.io/google_containers/etcd-amd64:3.0.17 
    ${HARBORPRE}/gcr.io/google_containers/kube-proxy-amd64:v1.7.0  
    ${HARBORPRE}/gcr.io/google_containers/kube-apiserver-amd64:v1.7.0 
    ${HARBORPRE}/gcr.io/google_containers/kube-controller-manager-amd64:v1.7.0  
    ${HARBORPRE}/gcr.io/google_containers/kube-scheduler-amd64:v1.7.0 
    ${HARBORPRE}/gcr.io/google_containers/kubernetes-dashboard-amd64:v1.6.1
)


#登陆harbor，拉取镜像，更改名称
docker  login -u USER -p PASSWORD http://1.2.3.4
echo '====docker login====='

for DOCKER in ${DOCKERS[@]}; do
    docker pull ${DOCKER}
    docker tag ${DOCKER} ${DOCKER/${HARBORPRE}/}
    docker rmi ${DOCKER}
done

echo '====docker pull image and change tag====='
#安装rpm包
rpm -ivh ./*.rpm --nodeps --force

echo '====kubelet, kubeadm, kubectl install====='
# 有的脚本读取执行文件路径不一样
\cp -f  /usr/bin/kube* /usr/local/bin/

echo '====cp exe file from /usr/bin to /usr/local/bin====='
#将docker文件驱动从systemd更改为cgroupfs，安装不对，会报错
sed -i 's/systemd/cgroupfs/g' /etc/systemd/system/kubelet.service.d/10-kubeadm.conf

echo '====change kubeadm file from systemd to cgroupfs====='

systemctl daemon-reload

echo '====daemon-reload====='
#启动kubelet服务
systemctl start kubelet.service

echo '====start kubelet====='
#以防万一，初始化kubeadm并清除以前安装可能留下的痕迹
kubeadm reset

ifconfig cni0 down
ip link delete cni0
ifconfig flannel.1 down
ip link delete flannel.1
rm -rf /var/lib/cni/


iptables -X
iptables -Z
iptables -P INPUT ACCEPT
iptables -F



echo '====kubeadm reset====='
echo '====kube master setup finished====='

 

初始化kubernetes集群

kubeadm init --apiserver-advertise-address=k8s-master-ip-address  --pod-network-cidr=10.244.0.0/16 --kubernetes-version=v1.7.0

 

*一定要指定version,k8s才不会去网上拉docker，指定pod的cidr，因为后面我们是用flannel作vxlan网络支撑.

*一般等待1分钟左右，初始化即可完成。如有问题，可及时查看/var/log/message进行排错。

运行初始化后脚本

生成并运行以下脚本，进行master初始化后安装。(k8s-master-setup_after.sh)

*以下几个文件都是github里的标准文件

 

#!/bin/bash

mkdir -p $HOME/.kube
\cp -f /etc/kubernetes/admin.conf $HOME/.kube/config
chown $(id -u):$(id -g) $HOME/.kube/config

kubectl apply -f ./kube-flannel-rbac.yaml
kubectl apply -f ./kube-flannel.yaml
kubectl apply -f ./kube-dashboard-rbac.yaml
kubectl apply -f ./kube-dashboard.yaml

 

确认安装

运行kubectl get命令，确认所有pod及svc状态正常.

kubectl get pods --all-namespaces

kubectl get svc --all-namespaces

从节点安装

上传rpm文件

将所有涉及的rpm包上传到服务器的一个安装目录(e.g：/root/k8s/)

运行从节点前置脚本

生成并运行以下脚本，进行从节点加入前安装。(k8s-node-setup.sh)

#!/bin/bash


HARBORPRE="1.2.3.4/kubernets/"
DOCKERS=(
    ${HARBORPRE}/gcr.io/google_containers/pause-amd64:3.0  
    ${HARBORPRE}/quay.io/coreos/flannel-amd64:v0.8.0
    ${HARBORPRE}/gcr.io/google_containers/kube-proxy-amd64:v1.7.0  

)


#登陆harbor，拉取镜像，更改名称
docker  login -u USER -p PASSWORD http://1.2.3.4
echo '====docker login====='

for DOCKER in ${DOCKERS[@]}; do
    docker pull ${DOCKER}
    docker tag ${DOCKER} ${DOCKER/${HARBORPRE}/}
    docker rmi ${DOCKER}
done

echo '====docker pull image and change tag====='
#安装rpm包
rpm -ivh ./*.rpm --nodeps --force

echo '====kubelet, kubeadm, kubectl install====='
# 有的脚本读取执行文件路径不一样
\cp -f  /usr/bin/kube* /usr/local/bin/

echo '====cp exe file from /usr/bin to /usr/local/bin====='
#将docker文件驱动从systemd更改为cgroupfs，安装不对，会报错
sed -i 's/systemd/cgroupfs/g' /etc/systemd/system/kubelet.service.d/10-kubeadm.conf

echo '====change kubeadm file from systemd to cgroupfs====='

systemctl daemon-reload

echo '====daemon-reload====='
#启动kubelet服务
systemctl start kubelet.service

echo '====start kubelet====='
#以防万一，初始化kubeadm并清除以前安装可能留下的痕迹
kubeadm reset

ifconfig cni0 down
ip link delete cni0
ifconfig flannel.1 down
ip link delete flannel.1
rm -rf /var/lib/cni/


iptables -X
iptables -Z
iptables -P INPUT ACCEPT
iptables -F



echo '====kubeadm reset====='
echo '====kube master setup finished====='

 

从节点加入

kubeadm join --token TOKEN MASTER-IP-ADDRESS:6443

 

*这个token可通过在主节点上运行kubeadm token list获得

从节点加入确认

在主节点上运行kubectl get nodes(从节点上也可以运行，但要先获取认证文件)

 

扩展功能安装

基于traefik的ingress功能安装

A， 下载traefik最新版本(略)

B， 写traefik-ds.yaml配置文件

apiVersion: extensions/v1beta1
kind: DaemonSet
metadata:
  name: traefik-ingress-lb
  namespace: kube-system
  labels:
    k8s-app: traefik-ingress-lb
spec:
  template:
    metadata:
      labels:
        k8s-app: traefik-ingress-lb
        name: traefik-ingress-lb
    spec:
      terminationGracePeriodSeconds: 60
      hostNetwork: true
      restartPolicy: Always
      containers:
      - image: traefik:latest
        imagePullPolicy: IfNotPresent
        name: traefik-ingress-lb
        resources:
          limits:
            cpu: 200m
            memory: 30Mi
          requests:
            cpu: 100m
            memory: 20Mi
        ports:
        - name: http
          containerPort: 80
          hostPort: 80
        - name: admin
          containerPort: 8580
        args:
        - --web
        - --web.address=:8580
        - --kubernetes

 

C， 写traefik-ing.yaml配置文件

apiVersion: extensions/v1beta1
kind: Ingress
metadata:
  name: traefik-ingress
  namespace: kube-system
spec:
  rules:
  - host: cb.exmaple.com
    http:
      paths:
      - path: /
        backend:
          serviceName: tomcat-dm
          servicePort: 8087
  - host: cn.example.cn
    http:
      paths:
      - path: /
        backend:
          serviceName: nginx-dm
          servicePort: 8088

 

D， 应用这两个配置文件

Kubectl apply –f traefik-ds.yaml

Kubectl apply –f traefik- ing.yaml

 

E，  测试,访问从节点8580端口。

 

附录

如何曲线获取google上的docker镜像

*见本blog以前的帖子

Kubernetes大版本与各个组件版本的对应关系

 

Not end

文章标签：
容器服务Kubernetes版
云解析DNS
负载均衡
容器
Docker
Kubernetes
Perl
Shell
应用服务中间件
Linux
网络协议
nginx
存储
关键词：
Docker容器
容器安装
Docker安装
kubernetes Docker容器
kubernetes Docker
相关实践学习
深入解析Docker容器化技术
Docker是一个开源的应用容器引擎，让开发者可以打包他们的应用以及依赖包到一个可移植的容器中，然后发布到任何流行的Linux机器上，也可以实现虚拟化，容器是完全使用沙箱机制，相互之间不会有任何接口。Docker是世界领先的软件容器平台。开发人员利用Docker可以消除协作编码时“在我的机器上可正常工作”的问题。运维人员利用Docker可以在隔离容器中并行运行和管理应用，获得更好的计算密度。企业利用Docker可以构建敏捷的软件交付管道，以更快的速度、更高的安全性和可靠的信誉为Linux和Windows Server应用发布新功能。 在本套课程中，我们将全面的讲解Docker技术栈，从环境安装到容器、镜像操作以及生产环境如何部署开发的微服务应用。本课程由黑马程序员提供。     相关的阿里云产品：容器服务 ACK 容器服务 Kubernetes 版（简称 ACK）提供高性能可伸缩的容器应用管理能力，支持企业级容器化应用的全生命周期管理。整合阿里云虚拟化、存储、网络和安全能力，打造云端最佳容器化应用运行环境。 了解产品详情: https://www.aliyun.com/product/kubernetes
天飞
目录
相关文章
蒋星熠Jaxonic
|
4月前
|
监控 Kubernetes 安全
还没搞懂Docker? Docker容器技术实战指南 ! 从入门到企业级应用 !
蒋星熠Jaxonic，技术探索者，以代码为笔，在二进制星河中书写极客诗篇。专注Docker与容器化实践，分享从入门到企业级应用的深度经验，助力开发者乘风破浪，驶向云原生新世界。
蒋星熠Jaxonic
563 3
还没搞懂Docker? Docker容器技术实战指南 ! 从入门到企业级应用 !
赵渝强老师
|
4月前
|
监控 Linux 调度
【赵渝强老师】Docker容器的资源管理机制
本文介绍了Linux CGroup技术及其在Docker资源管理中的应用。通过实例演示了如何利用CGroup限制应用程序的CPU、内存和I/O带宽使用，实现系统资源的精细化控制，帮助理解Docker底层资源限制机制。
赵渝强老师
455 6
凉凉心.
|
4月前
|
NoSQL 算法 Redis
【Docker】（3）学习Docker中 镜像与容器数据卷、映射关系！手把手带你安装 MySql主从同步 和 Redis三主三从集群！并且进行主从切换与扩容操作，还有分析 哈希分区 等知识点！
Union文件系统（UnionFS）是一种**分层、轻量级并且高性能的文件系统**，它支持对文件系统的修改作为一次提交来一层层的叠加，同时可以将不同目录挂载到同一个虚拟文件系统下(unite several directories into a single virtual filesystem) Union 文件系统是 Docker 镜像的基础。 镜像可以通过分层来进行继承，基于基础镜像（没有父镜像），可以制作各种具体的应用镜像。
凉凉心.
636 5
javaercn
|
4月前
|
存储 关系型数据库 MySQL
MySQL Docker 容器化部署全指南
MySQL是一款开源关系型数据库，广泛用于Web及企业应用。Docker容器化部署可解决环境不一致、依赖冲突问题，实现高效、隔离、轻量的MySQL服务运行，支持数据持久化与快速迁移，适用于开发、测试及生产环境。
javaercn
773 5
请看我回答~
|
Kubernetes Devops 持续交付
DevOps实践：使用Docker和Kubernetes实现持续集成和部署网络安全的守护盾：加密技术与安全意识的重要性
【8月更文挑战第27天】本文将引导读者理解并应用DevOps的核心理念，通过Docker和Kubernetes的实战案例，深入探讨如何在现代软件开发中实现自动化的持续集成和部署。文章不仅提供理论知识，还结合真实示例，旨在帮助开发者提升效率，优化工作流程。
请看我回答~
290 1
一缕微风绕指柔
|
Kubernetes 持续交付 Docker
利用 Docker 和 Kubernetes 实现微服务部署
【10月更文挑战第2天】利用 Docker 和 Kubernetes 实现微服务部署
一缕微风绕指柔
442 0
痴者工良
|
开发框架 Kubernetes 负载均衡
宝塔面板+Rancher+阿里云镜像仓库+Docker + Kubernete s，添加集群、部署 web 应用
前言： 本文使用 Centos 7.x 进行操作，Rancher 官方推荐使用 Ubuntu。 Docker 对内核要求 大于 3.10，你可以使用 uname -r 检测系统内容版本。 通过 Rancher，可以很方便地对多个主机进行管理，实现负载均匀、集群、分布式构架、故障转移、状态监控等。
痴者工良
4335 0
宝塔面板+Rancher+阿里云镜像仓库+Docker + Kubernete s，添加集群、部署 web 应用
云原生

容器服务

热门文章

最新文章

  • 1
    Docker CE 镜像源站
  • 2
    Minikube - Kubernetes本地实验环境
  • 3
    Docker的Windows容器初体验
  • 4
    Docker学习路线图 (持续更新中)
  • 5
    当 Kubernetes 遇到阿里云
  • 6
    基于Docker容器的，Jenkins、GitLab构建持续集成CI
  • 7
    谈谈 Docker Volume 之权限管理（一）
  • 8
    容器镜像服务 Docker镜像的基本使用
  • 9
    使用阿里云容器服务Jenkins 2.0实现持续集成之Pipeline篇(updated on 2016.12.23)
  • 10
    理解Docker容器的进程管理
  • 1
    最全的docker命令参数解释及命令用法
    271
  • 2
    最全的kubectl命令用法
    118
  • 3
    一文讲解kubernetes的gateway Api的功能、架构、部署、管理及使用
    230
  • 4
    xkube v4.0发布，完全开发源代码并新增k8s网关、亲和性很多k8s实用功能
    100
  • 5
    Docker教程
    192
  • 6
    一文掌握pod亲和性及调度策略
    149
  • 7
    一文掌握k8s容器的资源限制
    206
  • 8
    一文掌握k8s容器的生命周期
    179
  • 9
    在 Kubernetes 中实现 NFS 动态存储供应：生产级实践指南
    311
  • 10
    一文掌握k8s的升级更新策略
    117

    • 相关产品

  • 容器服务Kubernetes版
    文档详情 产品详情

    • 相关课程

    更多
  • 容器服务混沌工程实践
  • 5分钟玩转阿里云容器服务
  • 容器持久化储存训练营
  • 阿里云 EMR on ACK 实战
  • 现代应用容器技术快速入门
  • 云计算、容器和云原生基础课程

    • 相关电子书

    更多
  • ACK集群类型选择最佳实践
  • 容器服务重磅升级，打造高效安全、智能无界新平台
  • 《拥抱容器存储，使用阿里云容器服务 ACK +文件存储 NAS 构建现代化企业应用》

    • 推荐镜像

    更多
  • docker-ce
  • docker-toolbox
    • 下一篇
    第五届伏魔挑战赛如约来袭，诚邀各路高手来战！