# 云原生大数据计算服务 MaxCompute #
0
关注
37940内容
震撼！通过双重异步，Excel 10万行数据导入从191秒优化到2秒！
通过合理设计线程池和利用异步编程模型，本文展示了如何将 Excel 10万行数据的导入时间从191秒优化到2秒。文章详细介绍了使用 Spring Boot 的 `@Async` 注解、自定义线程池和 EasyExcel 进行大数据量的 Excel 解析和异步写入数据库的方法。通过分而治之的策略，减少了系统的响应时间，提高了并发处理能力。同时，还分析了如何根据 CPU 和 IO 密集型任务的特性，合理设置线程池的参数，以充分发挥硬件资源的性能。
存算分离与计算向数据移动：深度解析与Java实现
【11月更文挑战第10天】随着大数据时代的到来，数据量的激增给传统的数据处理架构带来了巨大的挑战。传统的“存算一体”架构，即计算资源与存储资源紧密耦合，在处理海量数据时逐渐显露出其局限性。为了应对这些挑战，存算分离（Disaggregated Storage and Compute Architecture）和计算向数据移动（Compute Moves to Data）两种架构应运而生，成为大数据处理领域的热门技术。
京东面试：亿级黑名单 如何设计？亿级查重 呢？（答案含：布隆过滤器、布谷鸟过滤器）
尼恩，40岁的老架构师，近期在读者交流群中分享了几个大厂面试题及其解决方案。这些问题包括亿级数据查重、黑名单存储、电话号码判断、安全网址判断等。尼恩给出了三种解决方案：使用BitMap位图、BloomFilter布隆过滤器和CuckooFilter布谷鸟过滤器。这些方法不仅高效，还能显著提升面试表现。尼恩还建议大家系统化学习，刷题《尼恩Java面试宝典PDF》，并提供简历修改和面试辅导，帮助大家实现“offer自由”。更多技术资料和PDF可在公众号【技术自由圈】获取。
数据为王：大数据处理与分析技术在企业决策中的力量
【10月更文挑战第29天】在信息爆炸的时代，大数据处理与分析技术为企业提供了前所未有的洞察力和决策支持。本文探讨了大数据技术在企业决策中的重要性和实际应用，包括数据的力量、实时分析、数据驱动的决策以及数据安全与隐私保护。通过这些技术，企业能够从海量数据中提取有价值的信息，预测市场趋势，优化业务流程，从而在竞争中占据优势。
阿里云服务器c7/c8a/c8y/c8i/g7/g8a/g8y/g8i/r7/r8a/r8y/r8i实例区别及选择参考
在阿里云目前的活动中，除了特价的轻量应用服务器和经济型e及通用算力型u1实例之外，属于计算型实例的实例有计算型c7/c8a/c8y/c8i，属于通用型实例的有通用型g7/g8a/g8y/g8i，属于内存型实例的有内存型r7/r8a/r8y/r8i。本文将详细介绍阿里云服务器中的c7、c8a、c8y、c8i、g7、g8a、g8y、g8i、r7、r8a、r8y、r8i等实例规格的性能、适用场景及选择参考，帮助用户更好地选择合适的云服务器实例。
SQL Server 数据太多如何优化
11种优化方案供你参考，优化 SQL Server 数据库性能得从多个方面着手，包括硬件配置、数据库结构、查询优化、索引管理、分区分表、并行处理等。通过合理的索引、查询优化、数据分区等技术，可以在数据量增大时保持较好的性能。同时，定期进行数据库维护和清理，保证数据库高效运行。
究竟什么是大数据，大数据具体应该怎么定义
【10月更文挑战第29天】大数据是指那些传统资料处理技术无法应对的海量数字信息，包括文本、音视频、电子邮件等多类型数据。它涉及数据的获取、分析、存储与传输，需借助专门的技术手段。大数据分析能够帮助企业洞察消费者行为、预测市场趋势，从而实现业务增长。随着数字化进程加快，高效管理与利用大数据成为企业面临的重大挑战。
免费试用