Serverless 架构怎么进行离线数据处理？
已解决Serverless 架构怎么进行离线数据处理？
展开
收起
1
条回答
写回答
写回答
-
推荐回答离线数据处理通常要对大数据进行处理，需要搭建 Hadoop 或者 Spark 等相关大数据的框架，同时要有一个 处理数据的集群。通过 Serverless 技术，只需要将获得到的数据不断的存储到对象存储，并且通过对象存储相关触发器触发数据拆分函数进行相关数据或者任务的拆分，然后再调用相关处 理函数，处理完成之后，存储到云数据库中。例如：某证券公司每 12 小时统计一次该时段的交 易情况并整理出该时段交易量 top 5；每天处理一遍秒杀网站的交易流日志获取因售罄而导致 的错误从而分析商品热度和趋势等。函数计算近乎无限扩容的能力可以使用户轻松地进行大容 量数据的计算。利用 Serverless 架构可以对源数据并发执行多个 mapper 和 reducer 函数， 在短时间内完成工作；相比传统的工作方式，使用 Serverless 架构更能避免资源的闲置浪费从 而节省成本，整个流程可以简化为：
答复内容摘自《Serverless 开发速查手册》，这本电子书收录开发者藏经阁 下载连接：https://developer.aliyun.com/ebook/download/7490
2022-04-09 15:20:26赞同 展开评论 打赏
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
热门讨论
热门文章
按照函数计算FC的comfyUI部署的，comfyUI界面上没有显示Manager 按钮，是为什么？
2593
sd界面里为啥没有lora模块选项呀？
80562
哪位大佬知道stable diffusion生成的图片存在哪个文件夹?
11947
请问主域名备案了，子域名还要备案吗？
8921
求助下大家，sd云端跑的时候报这个错误
16263
在终端怎么升级python？
7211
GPU实例中T4和A10两款性能差别多大？另外如何在s.yaml中指定GPU型号呢？
8503
stable-diffusion部署好了但是访问网页打不开
48380
sd从网址安装插件报错：AssertionError: extension access disab
13610
遇到 libGL.so.1: cannot open shared object file: No
1051
展开全部
大道至简 - 基于Docker的Serverless探索之旅
17781
初识 Knative: 跨平台的 Serverless 编排框架
12287
函数计算中使用 puppeteer 的过程分析
10812
使用函数计算打包下载OSS文件
10906
开发函数计算的正确姿势 —— 安装第三方依赖
9395
函数计算-建立一个简单的数学计算函数场景
4229
如何利用函数计算获取临时token访问其他阿里云资源
4450
利用函数计算实现网络游戏或视频直播中的敏感词检测
3648
10月30日云栖精选夜读：云栖大会Serverless场分享：日志处理挑战与展望
3062
Serverless For Frontend 前世今生
2811
展开全部
