分布式系列一: 概述

简介: 分布式系统的特点高并发,大流量(qps,tps)海量数据什么是分布式分布式系统是由很多计算机组成, 他们之间的通信通过网络连接完成, 对外表现为一个整体.分布式技术上需要解决两个问题, 一个是业务拆解, 一个是节点通信.

分布式系统的特点

  • 高并发,大流量(qps,tps)
  • 海量数据

什么是分布式

分布式系统是由很多计算机组成, 他们之间的通信通过网络连接完成, 对外表现为一个整体.

分布式技术上需要解决两个问题, 一个是业务拆解, 一个是节点通信.

分布式和集群的关系

分布式是指一个系统由多个业务模块组成,他们分别部署到不同服务器;
集群是指一个业务部署到多个服务器;

分布式发展历史

  • 1964年IBM发布大型机之后, 引领系统向集中式方向发展;
  • PC机发展起来后, 它的性能和计算能力得到迅猛发展, 同时集中式发展出现瓶颈; 标志性的事件是淘宝的去IOE运动

    IOE 是指IBM服务器, Oracle数据库集群, EMC存储

    lamp: linux+apache+mysql+php

  1. 单服务器: 应用+DB
  2. 应用和DB分离
  3. 应用集群, DB (问题? session, 集群请求转发, 集群方案:f5硬件, lvs软件)

    会话方案: 1.session sticky; 2. session replication; 3. 集中式session; 4. cookie

  4. DB集群, 读写分离 (问题? 同步,数据库路由(mycat))
  5. 搜索引擎 (问题? 实时或定时同步)
  6. Nosql缓存
  7. DB的水平/垂直拆分
  8. 业务服务拆分
  9. 各业务做集群

分布式系统的监控

调用跟踪和调用链, 服务器状态监控

zipkin, zabbix等

相关文章
|
3月前
|
SQL 存储 网络协议
分布式的概述
分布式的概述
|
6月前
|
存储 关系型数据库 MySQL
深入OceanBase内部机制:高性能分布式(实时HTAP)关系数据库概述
深入OceanBase内部机制:高性能分布式(实时HTAP)关系数据库概述
|
7月前
|
存储 运维 分布式计算
分布式云容器平台ACK One概述
分布式云容器平台ACK One概述
110 2
|
存储 算法 网络协议
分布式组件 ZooKeeper 介绍、术语概述以及集群搭建篇
分布式组件 ZooKeeper 介绍、术语概述以及集群搭建篇
120 0
|
7月前
|
Java API
分布式锁【分布式锁概述、业务介绍、创建SpringBoot项目】(一)-全面详解(学习总结---从入门到深化)
分布式锁【分布式锁概述、业务介绍、创建SpringBoot项目】(一)-全面详解(学习总结---从入门到深化)
54 0
|
分布式计算 数据挖掘 大数据
分布式计算概述
分布式计算概述
109 0
|
存储 分布式计算 Hadoop
05 分布式系统概述
05 分布式系统概述
48 0
|
应用服务中间件 nginx
65分布式电商项目 - nginx配置虚拟主机概述
65分布式电商项目 - nginx配置虚拟主机概述
70 0
|
机器学习/深度学习 并行计算 算法
PyTorch并行与分布式(一)概述
PyTorch并行与分布式(一)概述
206 0
|
存储 运维 Kubernetes
分布式开源存储架构Ceph概述
k8s的后端存储中ceph应用较为广泛,当前的存储市场仍然是由一些行业巨头垄断,但在开源市场还是有一些不错的分布式存储,其中包括了Ceph、Swift、sheepdog、glusterfs等
973 0