云计算作为当今信息技术领域的关键驱动力，正在不断演进和创新。从多云模式到边缘计算，从商业到医疗，云计算在多个行业中展现了巨大的应用潜力。未来，随着技术的不断发展，云计算将继续引领着数字化转型的浪潮，为各个行业带来更多的创新和机遇。

HTTP代理是一种充当客户端和服务器之间的中间人的服务器。当客户端发起请求时，HTTP代理会拦截请求并将其转发给目标服务器。一旦目标服务器响应，HTTP代理会拦截响应并将其转发回客户端。HTTP代理可以被用于多种场景，例如加强安全、缓存内容以加速访问、访问受限资源等等。在这篇文章中，我们将会讨论HTTP代理的作用、类型以及如何设置它。

在传统的网络爬虫中，静态网页内容很容易抓取，但对于通过JavaScript加载的动态内容，通常需要借助浏览器进行模拟访问。Scrapy-Selenium是一款结合了Scrapy和Selenium功能的库，可以实现模拟浏览器行为，从而实现抓取动态内容的目的。

猿辅导大数据平台团队负责人申阳分享了猿辅导基于EMR StarRocks 的 OLAP 演进之路。

阿里云EMR Serverless StarRocks 免费公测已开启，向所有用户开放！您可通过EMR控制台直接创建实例，轻松体验全托管、免运维的服务。

本文内容介绍了银行业常见的实时场景和解决方案，然后针对银行业报表依赖维度表计算的特点，提出了基于 Flink Table Store 作为数据存储，进而构建流式数仓的解决方案。

阿里云ODPS全新升级，存储、调度、元数据一体化融合 ，从 Processing 升级为 Platform，即 Open Data Platform and Service。本次峰会，同步发布了新的产品能力，即MaxCompute 引擎新功能发布及Hologres 引擎新功能发布。

当前对“数字孪生城市”没有一个严格界定的标准，本质上“数字孪生城市”是在传统三维GIS应用的基础上演化而来；随着技术创新和行业需求的发展，两者的差异也越来越大；本文梳理了两者的异同，同时比较了两者的适用场景。

三维模型是一个很宽泛的概念，大部分三维模型是无法直接应用于数字孪生项目的；三维建模需要找专业的供应商进行制作，需要有标准规范和质量检验；建模、模型数据加工都需要制定规范，才能支持好数据融合；需要使用合适的数字孪生引擎才能发挥三维模型的效果；

Elasticsearch：Elasticsearch 中的慢日志

本文是Hologres阿里妈妈用户根据实际业务总结的经验贴，希望通过本文内容，能帮助大家更好的理解在Hologres中如何做性能调优，从而帮助业务实现更优的性能。

2021云栖大会，阿里云与Elastic生态合作再次升级，Elastic作为阿里云战略合作伙伴，携手Elastic社区，出席了开源引力峰会、产品生态合作峰会、源力SHOW场等论坛，针对全球开源发展合作之道、开源技术与商业模式创新等热点话题进行深度探讨。并基于阿里云Elasticsearch，携手SaaS生态伙伴擎创科技，发布了智能运维联合解决方案。

DataWorks作为一站式大数据开发治理平台，构建了从数据集成、数据开发、数据服务到应用开发的全链路解决方案。在整个大数据链路中，数据服务将数仓、数据库和数据应用进行串联，形成了一座数据与应用之间的桥梁。数据服务通过将数据封装成数据API的方式，可以为个人、团队及企业提供全面的数据开放及共享能力。借助这个平台，用户能够统一管理面向内外部的API服务。数据服务提供了向下对接数据源、向上支撑业务应用的有效连接。

DataWorks运维中心是对任务进行测试和监控的模块，用户在DataStudio中进行代码开发和调试，将调试的任务经过提交发布操作后，就可以让任务按照调度配置来定时运行。也就是这个时候，任务就从开发环境进入到了生产环境。 对于生产环境中任务的测试、运维、监控等都是在运维中心完成的。运维中心包括三部分：运维大屏、任务运维和智能监控；根据任务运维的触发方式不同，又可以分为：实时任务运维、周期任务运维和手动任务运维。

本系列文章为DataWorks钉钉大群内熟能生巧系列直播的文字版，基本涵盖了直播中讲解到的大部分内容，大家可以学习或者Mark一下，有需要的时候再来回顾。本系列直播内容由DataWorks技术支持团队出品，运营团队整理，大部分是DataWorks用户实际使用中遇到的频率较高的问题，希望对大家有一定帮助。

淘宝每次的搜索行为在后端都会有大量的数据计算和处理才会召回符合用户需求的搜索结果，当面对的业务越来越多如何在工程体系上不断演化满足不同业务的需求？特邀阿里巴巴技术专家介绍统一召回引擎，带你了解如何应对~

本篇内容主要分三个部分，在第一部分讲一下实时计算在推荐业务中的使用场景。第二部分讲一下小红书是怎么使用Flink的一些新的功能。第三部分主要是讲一些OLAP的实时分析的场景，以及和阿里云MC-Hologres的合作。

数据集成日志分析及常见报错情况（rds至odps版）

《Apache Spark 中文实战攻略》上下两册电子书重磅来袭，本书集结国内外顶级大厂技术专家，汇集多年实战经验，带你走进全球顶级开源社区之一 Apache Spark，探秘时下最流行的开源分布式内存式大数据处理引擎。

本文将讲述如何运用Elasticsearch的 ingest 节点实现数据结构化，并对数据进行处理。

Flink 1.11 版本即将正式宣告发布！为满足大家的好奇与期待，我们邀请 Flink 核心开发者对 1.11 版本的功能特性进行解读与分享。Flink 1.11 在 1.10 的基础上对许多方面进行了完善和改进，并致力于进一步提高 Flink 的可用性及性能。

为了充分利用阿里云 Elasticsearch 提供的强大搜索功能，很多公司都会在关系型数据库的基础上，部署 Elasticsearch。这种情况下，则需要确保 Elasticsearch 与所关联关系型数据库中的数据保持同步。 在本篇博文中，我会演示如何使用 Logstash 高效复制数据，将关系型数据库阿里云 RDS 中的数据更新同步到 Elasticsearch 中。

索引生命周期管理（ILM）是指：ES数据索引从设置，创建，打开，关闭，删除的全生命周期过程的管理；为了降低索引存储成本，提升集群性能和执行效率，我们可以通过对存储在阿里云 Elasticsearch 的数据做生命周期管理。

DataWorks作为飞天大数据平台操作系统，是阿里巴巴自主研发的全域智能大数据研发平台，支撑阿里巴巴经济体99%数据业务建设和治理，每天数万名数据开发和算法开发工程师在使用。

本系列直播介绍阿里云Elasticsearch，基于用户场景打造的“特有功能”，包括针对日志场景的增强版实例、应用于图像/语音检索的向量检索、Kibana可视化打标和数据查询插件，以及Logstash&Beats云上数据管道。

2019杭州云栖大会大数据企业级服务专场，由斗鱼大数据高级专家张龙带来以 “混合云模式下 MaxCompute+Hadoop 混搭大数据架构实践” 为题的演讲。本文讲述了从 Apache Hadoop 阶段到 Cloudera CDH 阶段斗鱼大数据架构的发展历程。提出了上云过程中斗鱼遇到的问题和跳战，包括数据安全、数据同步以及迁移任务。概括了混合云模式给斗鱼带来资源效率更高和资源成本更低的变化。