游客tehculasawvxq_个人页

2022年12月

• 12.18 09:01:39
  发表了文章 2022-12-18 09:01:39

  devops-在jenkins-slave(k8s)中集成Jmeter使用

  devops-在jenkins-slave(k8s)中集成maven使用

  
• 12.17 17:54:59
  发表了文章 2022-12-17 17:54:59

  devops-在jenkins-slave(k8s)中集成maven使用

  在jenkins-slave(k8s)中集成maven使用

  
• 12.16 15:21:02
  发表了文章 2022-12-16 15:21:02

  devops-在jenkins-slave(k8s)中集成pytest + allure使用

  在k8s集群中， allure 在 jenkins-slave 中集成使用

  
• 12.13 18:42:58
  发表了文章 2022-12-13 18:42:58

  devops-k8s部署jenkins和动态创建slave节点

  1. K8S部署jenkins 2. 动态创建slave集群节点 3. 使用PodTemplate构建流水线

  
• 12.11 23:01:42
  发表了文章 2022-12-11 23:01:42

  devOps-jenkins流水线使用(docker in docker)

  1. 容器安装jenkins （docker in docker） 2. jenkins 流水线使用 3. jenkins Generic Webhook Trigger 使用 4. jenkins 集成 allure 5. jenkins docker in dcoker 镜像构建

  

2022年11月

• 11.26 23:18:36
  发表了文章 2022-11-26 23:18:36

  devOps-harbor 安装和使用

  harbor 安装和使用

  
• 11.26 22:22:18
  发表了文章 2022-11-26 22:22:18

  devOps-gitlab和gitlab-runner 安装和使用

  gitlab-ce安装

  
• 11.26 15:49:27
  发表了文章 2022-11-26 15:49:27

  Cpolar内网穿墙使用

  Cpolar内网穿墙使用

  
• 11.15 22:28:03
  发表了文章 2022-11-15 22:28:03

  k8s集群监控（2）-部署kube-state-metrics对资源对象监控

  kube-state-metrics对k8s集群中的资源对象监控，包括 pod 、 deployment， service

  
• 11.15 22:13:03
  发表了文章 2022-11-15 22:13:03

  k8s集群监控（4）-部署node-exporter

  部署node-export ，监控节点基础监控，比如内存，IO，磁盘，CPU等

  
• 11.15 21:42:06
  发表了文章 2022-11-15 21:42:06

  k8s集群监控（1）-部署prometheus

  prometheus 部署

  

2022年08月

• 08.31 15:18:23
  发表了文章 2022-08-31 15:18:23

  k8s-部署jenkins

  jenkins部署 jenkins和k8s集成 jenkins基于k8s，执行pipline

  
• 08.23 20:03:44
  发表了文章 2022-08-23 20:03:44

  k8s-部署实例(mysql+wordpress)

  安装mysql 安装wordpress 部署ingress 进行流量负载控制

  
• 08.22 20:21:14
  发表了文章 2022-08-22 20:21:14

  k8s-对Pod自动弹性伸缩(HPA)

  HPA介绍 部署metrics-server 案例自动缩容

  
• 08.22 18:04:17
  发表了文章 2022-08-22 18:04:17

  k8s-configmap 和 secrets

  configmap 使用场景 configmap的定义 configmap的使用 secrets的使用场景 secrets的定义 secrets的使用
• 08.22 17:31:24
  发表了文章 2022-08-22 17:31:24

  k8s-存储(pv/pvc)

  pv 介绍 pvc 介绍 存储基本组件 PV 类型 PV 卷阶段状态 插件实现方法 NFS 实现存储 NFS 静态存储 NFS-CSI 动态存储

  
• 08.21 13:21:06
  发表了文章 2022-08-21 13:21:06

  k8s-负载均衡流量(ingress-nginx)

  ingress 介绍 ingress 安装 ingress 案例

  
• 08.21 11:58:34
  发表了文章 2022-08-21 11:58:34

  k8s-服务注册和域名发现-coreDNS

  DNS解析

  
• 08.21 11:02:15
  发表了文章 2022-08-21 11:02:15

  k8s-服务(clusterIP/NodePort/LoadBanlance)

  clusterIP 类型的服务 NodePort 类型的服务 LoadBanlance 类型的服务

  
• 08.21 00:11:13
  发表了文章 2022-08-21 00:11:13

  k8s-Pod的控制器(工作负载)

  deployment 无状态控制器 statefulset有状态副本集 daemonset守护进程集 job/cronJob任务/定时任务

  
• 08.16 23:06:25
  发表了文章 2022-08-16 23:06:25

  centos7安装k8s集群

  centos7安装k8s集群

2022年07月

• 07.26 23:26:49
  发表了文章 2022-07-26 23:26:49

  pyspark提交作业到yarn集群一些问题总结

  pyspark提交job到yarn集群一些问题总结
• 07.25 23:45:58
  发表了文章 2022-07-25 23:45:58

  Airflow容器化安装

  1. 下载容器配置文件 2. 创建用户和用户组(airflow) 3.设置用户airflow为管理员 4. 在airflow用户下，pip 安装celery 和 apache-airflow (python3.8) 5. 初始化镜像 6. 启动容器

  
• 07.23 19:17:28
  发表了文章 2022-07-23 19:17:28

  大数据运维常用命令

  sar 命令 top命令 ps命令 du和df命令 free命令 iostat命令 iotop命令 netstat命令
• 07.10 13:23:06
  发表了文章 2022-07-10 13:23:06

  Flink CDC使用(数据采集CDC方案比较)

  cdc 使用场景 场景cdc方案对比 flink cdc 的基本使用

  
• 07.10 12:09:51
  发表了文章 2022-07-10 12:09:51

  FlinkSQL Client 集成Hive

  FlinkSQL Client 集成Hive flink sql cli 启动模式 重要命令和配置 sql client 集成hive 执行hive 查询
• 07.10 11:44:08
  发表了文章 2022-07-10 11:44:08

  FlinkSQL 元数据管理(使用hive的catalog)

  catalog 分类 flink sql 使用hive的catalog 集成hive 读取hive
• 07.10 11:29:42
  发表了文章 2022-07-10 11:29:42

  FlinkSQL Window TOP N 实现

  group windows 实现 window TVF 实现
• 07.10 11:09:32
  发表了文章 2022-07-10 11:09:32

  FlinkSQL窗口新特性（Window TVF）

  理解Window TVF Window TVF使用

  
• 07.10 10:19:28
  发表了文章 2022-07-10 10:19:28

  FlinkSQL 双流Join

  流处理模式下，双流join
• 07.10 10:09:42
  发表了文章 2022-07-10 10:09:42

  FlinkSQL函数

  自定义函数分类 函数基本使用 UDF实现要点 UDTF, UDAF, UDATF 实现要点

  
• 07.09 17:11:43
  发表了文章 2022-07-09 17:11:43

  FlinkSQL窗口操作

  group windows over windows 滑动窗口 滚动窗口 会话窗口

  
• 07.09 15:23:55
  发表了文章 2022-07-09 15:23:55

  Flink SQL 使用时间属性

  事件时间 处理时间
• 07.09 15:10:05
  发表了文章 2022-07-09 15:10:05

  FlinkSQL编程

  查询已注册表 查询未注册表 Flink sql 标准代码结果 Flink sql读写kafka Flink sql去kafka写mysql

2022年06月

• 06.30 22:39:15
  发表了文章 2022-06-30 22:39:15

  flink-sql(table api 编程)

  table api 基本使用 tableEnvironment 和 streamTableEnvironment 注册表，临时表，持久表 Table api 和 table sql 混用 table api 和 datastream 混用 table api 的输入和输出(kafka) kafka的高级特性option

  
• 06.30 21:21:21
  发表了文章 2022-06-30 21:21:21

  flink-sql(流批统一)

  流体统一架构演进 理解动态表和连续查询 动态表转换为数据流 三种数据流：仅追加流append-only，撤回流Retract，更新插入流 upsert

  
• 06.27 22:57:53
  发表了文章 2022-06-27 22:57:53

  数仓(Lambda/Kappa)架构

  1. 数仓相关概念 2. 数据处理系统OLTP和OLAP 3. OLAP分类 4. 数仓分层(ODS, DWD,DWM,DWS, ADS) 5. 离线数仓架构 6. 实时数仓架构 Lambda和Kappa架构