开发者学堂课程【分布式计算入门:分析型数据库服务ADS 】学习笔记,与课程紧密联系,让用户快速学习知识。
课程地址:https://developer.aliyun.com/learning/course/375/detail/4701
分析型数据库服务 ADS
目录:
一、分析型数据库服务 ADS
一、分析型数据库服务 ADS
阿里巴巴推出了一款分析数据库服务,名字叫做分析型数据库,已经在阿里云官网上正式售卖,他的计算形态与其他一些典型的计算系统,在响应时间和数据规模上,如图所示
像 hadoop,HIVE 这种系统,事实上在计算规模上,有相当大的拓展性,那么 Impala,Spark,他的计算规模上和响应时间上,都有了长足的进步,当然 Hadoop 的延时也非常大,而传统的数据库,他的数据规模扩展性上面,比较受限,但在延时上表现出色,而开放的 ADS,是处于一个折中的地位,它的延时在800毫秒左右,而他的整个数据规模,却可以支持到千亿级,而她在整个灵活性方面,他也无需提前预建模,那么,它的产品形态,跟传统的 hadoop,Impala 有明显区别,简单来说它的使用成本,不随着调用次数线性增加,因为无论是 hadoop,还是 Impala,运行多次任务所启动的资源,需要重新加载,ADS 的产品模型,预先根据计算,将频繁关联操作的数据,尽量摆放在一台机器上,所以他要做数据的预处理和预加载,所以当使用 ADS 很少的时候,实际上,他的单一启动成本或者 build 成本非常高,但是使用成千上万次的时候,他的单一成本就很低。它跟传统模型是很不一样的,目前它完全兼容―SQL92,build 大量的所以,支持选择操作,他有丰富的源数据,支持跳过无用数据,在所有的所以,和源数据 miss 掉的情况下,可以扫描数据,完成计算,支持完整的 crud 操作,是一个服务化的云产品,支持多租户的隔离,认证,审计,健全。
如图是 ADS 的基础架构,分成计算集群和管控集群两大板块,同时有 WebConsole 和底下架设在飞天的基础上,具备独立完整的 SLB体系,同时,前端机接受 MySQL 和 REST 的访问,计算节点承载计算存储和计算,度节点负责将数据合理的摆放和组合。