|
8月前
|
存储 算法 调度
|

基于和声搜索优化算法的机器工作调度matlab仿真,输出甘特图

本程序基于和声搜索优化算法(Harmony Search, HS),实现机器工作调度的MATLAB仿真,输出甘特图展示调度结果。算法通过模拟音乐家即兴演奏寻找最佳和声的过程,优化任务在不同机器上的执行顺序,以最小化完成时间和最大化资源利用率为目标。程序适用于MATLAB 2022A版本,运行后无水印。核心参数包括和声记忆大小(HMS)等,适应度函数用于建模优化目标。附带完整代码与运行结果展示。

246 24
|
8月前
|
数据采集 机器学习/深度学习 数据挖掘
|

Python爬虫生成CSV文件的完整流程

Python爬虫生成CSV文件的完整流程

263 4
|
8月前
|
机器学习/深度学习 人工智能 大数据
|

《爆不爆,数据说了算:大数据预测电影票房的门道》

《爆不爆,数据说了算:大数据预测电影票房的门道》

397 7
|
8月前
|
人工智能 分布式计算 大数据
|

大数据& AI 产品月刊【2025年3月】

大数据& AI 产品技术月刊【2025年3月】,涵盖3月技术速递、产品和功能发布、市场和客户应用实践等内容,帮助您快速了解阿里云大数据& AI 方面最新动态。

624 57
来自: 人工智能平台PAI  版块
|
9月前
|
SQL 存储 分布式计算
|

查询队列(Query Queue)快速入门

本文由钟昌宏(大宏)分享,主题为Hologres 3.0新功能——Hologres查询队列(Query Queue)的使用场景、基本用法及入门实践。内容涵盖四个部分:查询队列的基本介绍、并发控制与排队能力、查询隔离与熔断,以及如何在管控台观察计算组或实例使用查询队列的情况。通过分类器管理、匹配规则等机制,实现对不同类型Query的灵活控制,并结合Serverless Computing提升系统稳定性与成功率。适用于数据写入与查询任务的优化场景。

433 0
来自: 实时数仓 Hologres  版块
|
9月前
|
SQL 存储 监控
|

Hologres诊断与优化快速入门

本文由赵红梅(Hologres PD)撰写,分享如何利用诊断与调优工具提升SQL和数据库异常的全方位诊断能力,增强实例稳定性。内容涵盖五个部分:事前通过监控指标实时监控;事中通过活跃日志发现并处理问题;事后通过慢Query日志与Query洞察诊断性能瓶颈;成本治理借助表管理工具优化资源;以及利用诊断工具实现长期稳定性治理。具体包括CPU、内存、I/O等监控指标设置,慢Query优化,错Query治理,SQL诊断报告生成,表Meta问题修复及表索引诊断报告的应用,全面覆盖实例监控、问题定位、性能优化和成本控制等方面。

281 0
来自: 实时数仓 Hologres  版块
|
9月前
|
SQL 弹性计算 运维
|

Hologres计算组实例&分时弹性入门实践

本文由骆撷冬(Hologres PD)撰写,围绕Hologres计算组实例与分时弹性的入门实践展开。内容分为三部分:第一部分介绍Hologres计算组实例的原理与架构,解决负载隔离、资源浪费、大任务和运维难题;第二部分演示计算组实例的入门实践,包括管理、授权、连接及监控等操作;第三部分讲解分时弹性的使用,涵盖配置方法、成本优化及监控告警。通过具体案例与操作步骤,帮助用户更好地理解和应用Hologres的弹性计算能力。

284 2
来自: 实时数仓 Hologres  版块
|
9月前
|
传感器 人工智能 搜索推荐
|

腕上的未来——智能手表的演变与市场蓝图

腕上的未来——智能手表的演变与市场蓝图

265 3
|
9月前
|
数据采集 机器学习/深度学习 数据挖掘
|

数据分析入门:从数据探索到洞察真相

数据分析入门:从数据探索到洞察真相

251 19
|
9月前
|
算法 数据可视化 量子技术
|

量子世界的钥匙:量子计算机的编程语言与工具

量子世界的钥匙:量子计算机的编程语言与工具

294 16
|
9月前
|
机器学习/深度学习 人工智能 边缘计算
|

DistilQwen2.5蒸馏小模型在PAI-ModelGallery的训练、评测、压缩及部署实践

DistilQwen2.5 是阿里云人工智能平台 PAI 推出的全新蒸馏大语言模型系列。通过黑盒化和白盒化蒸馏结合的自研蒸馏链路,DistilQwen2.5各个尺寸的模型在多个基准测试数据集上比原始 Qwen2.5 模型有明显效果提升。这一系列模型在移动设备、边缘计算等资源受限的环境中具有更高的性能,在较小参数规模下,显著降低了所需的计算资源和推理时长。阿里云的人工智能平台 PAI,作为一站式的机器学习和深度学习平台,对 DistilQwen2.5 模型系列提供了全面的技术支持。本文详细介绍在 PAI 平台使用 DistilQwen2.5 蒸馏小模型的全链路最佳实践。

462 3
来自: 人工智能平台PAI  版块
|
9月前
|
安全 算法 区块链
|

当量子计算遇上区块链:未来技术的双刃剑

当量子计算遇上区块链:未来技术的双刃剑

435 16
|
9月前
|
消息中间件 大数据 Kafka
|

掌握大数据时代的心跳:实时数据处理的崛起

掌握大数据时代的心跳:实时数据处理的崛起

350 4
|
9月前
|
JSON 搜索推荐 API
|

淘宝商品详情优惠券API接口全攻略

淘宝商品详情优惠券API接口助力电商精准营销。通过商品ID,开发者可精准检索与特定商品相关的优惠券信息,包括面额、使用门槛、领取条件、有效期等详细数据,并实时监测优惠券状态。此接口支持个性化筛选参数,如优惠券面额范围和类型,返回JSON格式的优惠券列表及状态信息,满足数据整合、营销活动策划等需求,提升用户体验和运营效率。示例代码展示了Python调用方法,帮助快速集成。 供稿者:Taobaoapi2014

387 3
|
9月前
|
人工智能 数据可视化 数据挖掘
|

工业零件不良率、残次率的智能数据分析和数字化管理

在传统工业领域,我们通过引入DataV-Note平台,成功实现了企业智能数据分析与数字化管理的初步目标。这一平台不仅显著提升了数据处理的效率和准确性,还为我们的日常运营提供了更加科学、直观的决策支持。然而,这只是智能化转型的第一步。展望未来,我们期望能够进一步深化技术应用,推动企业管理向更高层次的智能化方向迈进。通过持续优化数据分析能力、完善数字化管理体系,我们致力于将企业的运营模式从传统的经验驱动转变为数据驱动,从而全面提升管理效能和市场竞争力,为企业创造更大的长期价值

497 129
|
9月前
|
机器学习/深度学习 算法 Python
|

机器学习特征筛选:向后淘汰法原理与Python实现

向后淘汰法(Backward Elimination)是机器学习中一种重要的特征选择技术,通过系统性地移除对模型贡献较小的特征,以提高模型性能和可解释性。该方法从完整特征集出发,逐步剔除不重要的特征,最终保留最具影响力的变量子集。其优势包括提升模型简洁性和性能,减少过拟合,降低计算复杂度。然而,该方法在高维特征空间中计算成本较高,且可能陷入局部最优解。适用于线性回归、逻辑回归等统计学习模型。

374 7
|
10月前
|
存储 缓存 网络协议
|

静态代理IP对SEO优化工作的效率提升研究

随着互联网发展,静态代理IP的应用日益广泛。通过优化网络设置(如调整TCP参数)、使用缓存技术减少网络访问次数、压缩传输数据(如gzip),静态代理IP可显著提高网络性能,提升工作效率和生产力。合理选择服务商及注重安全隐私保护也是关键。

156 1
来自: 大数据计算 MaxCompute  版块
|
10月前
|
算法 量子技术 决策智能
|

探索量子计算:从历史到现状

探索量子计算:从历史到现状

422 6
|
10月前
|
数据采集 存储 调度
|

BeautifulSoup VS Scrapy:如何选择适合的HTML解析工具?

在Python网页抓取领域,BeautifulSoup和Scrapy是两款备受推崇的工具。BeautifulSoup易于上手、灵活性高,适合初学者和简单任务;Scrapy则是一个高效的爬虫框架,内置请求调度、数据存储等功能,适合大规模数据抓取和复杂逻辑处理。两者结合使用可以发挥各自优势,例如用Scrapy进行请求调度,用BeautifulSoup解析HTML。示例代码展示了如何在Scrapy中设置代理IP、User-Agent和Cookies,并使用BeautifulSoup解析响应内容。选择工具应根据项目需求,简单任务选BeautifulSoup,复杂任务选Scrapy。

232 1
|
10月前
|
人工智能 自然语言处理 搜索推荐
|

阿里云 AI 搜索开放平台集成 DeepSeek 模型

阿里云 AI 搜索开放平台最新上线 DeepSeek -R1系列模型。

507 2
|
10月前
|
数据采集 存储 关系型数据库
|

数据采集:从何开始?

数据采集:从何开始?

474 65
|
10月前
|
人工智能 并行计算 算法
|

量子计算如何颠覆药物研发?

量子计算如何颠覆药物研发?

352 68
|
10月前
|
人工智能 DataWorks 大数据
|

大数据AI一体化开发再加速:DataWorks 支持GPU类型资源

大数据开发治理平台 DataWorks 的Serverless资源组支持GPU资源类型,以免运维、按需付费、弹性伸缩的Serverless架构,将大数据处理与AI开发能力无缝融合。面向大数据&AI协同开发场景,DataWorks提供了交互式开发和分析工具Notebook。开发者在创建个人开发环境时,可以选择GPU类型的资源作为Notebook运行环境,以支持进行高性能的计算工作。本教程将基于开源多模态大模型Qwen2-VL-2B-Instruct,介绍如何使用 DataWorks Notebook及LLaMA Factory训练框架完成文旅领域大模型的构建。

681 24
|
10月前
|
供应链 搜索推荐 数据可视化
|

产品经理类型 - AxureMost

B端产品经理根据其负责的产品类型和业务领域,细分为多个类别,如核心业务系统、通用服务系统、业务支撑系统、行业解决方案、商业产品、后台产品、数据产品和战略规划产品经理。每个类别有特定的职责和挑战,涵盖从构建企业核心流程系统到设计数据驱动工具,以及制定长期战略规划等不同方面。这些分类反映了他们在企业级产品开发中的独特角色和专业要求。

160 0
|
10月前
|
人工智能 自然语言处理 数据可视化
|

ElasticSearch AI Assistant 系列 1 —— AI 助手配置教程

本视频介绍了如何在Elastic平台上配置AI助手以兼容并连接阿里巴巴的通义千问的第一部分——AI 助手配置。 帮助大家更直观的体验阿里云 ElasticSearch 企业级的功能——AI助手带来的可观测帮助。

266 0
|
10月前
|
存储 分布式计算 物联网
|

美的楼宇科技基于阿里云 EMR Serverless Spark 构建 LakeHouse 湖仓数据平台

美的楼宇科技基于阿里云 EMR Serverless Spark 建设 IoT 数据平台,实现了数据与 AI 技术的有效融合,解决了美的楼宇科技设备数据量庞大且持续增长、数据半结构化、数据价值缺乏深度挖掘的痛点问题。并结合 EMR Serverless StarRocks 搭建了 Lakehouse 平台,最终实现不同场景下整体性能提升50%以上,同时综合成本下降30%。

806 58
|
10月前
|
存储 分布式计算 大数据
|

大数据与云计算:无缝结合,开启数据新纪元

大数据与云计算:无缝结合,开启数据新纪元

724 11
|
10月前
|
存储 安全 区块链
|

去中心化存储:数据存储的新范式

去中心化存储:数据存储的新范式

541 91
|
10月前
|
机器学习/深度学习 分布式计算 大数据
|

阿里云 EMR Serverless Spark 在微财机器学习场景下的应用

面对机器学习场景下的训练瓶颈,微财选择基于阿里云 EMR Serverless Spark 建立数据平台。通过 EMR Serverless Spark,微财突破了单机训练使用的数据规模瓶颈,大幅提升了训练效率,解决了存算分离架构下 Shuffle 稳定性和性能困扰,为智能风控等业务提供了强有力的技术支撑。

499 15
|
10月前
|
网络安全 数据安全/隐私保护 网络架构
|

为何使用长效静态IP会出现高延迟现象?

在使用长效静态IP时,出现高延迟的原因主要包括:1. 网络距离远、网络拥堵和网络质量差等环境因素;2. 服务器负载高、性能低等服务器相关问题;3. 代理协议加密、网络配置不当等配置因素;4. 目标服务器响应慢。这些因素都会影响数据传输速度,导致延迟增加。希望以上分析能帮助解决您的问题。

376 8
来自: 大数据计算 MaxCompute  版块
|
10月前
|
人工智能 算法 Cloud Native
|

华为、埃森哲都在用的培训法则:3大战场拆解与8家破局者图谱

但当企业竞争进入“深水区”,当AI技术以周为单位迭代时,堆砌知识量 → 标准化课件 → 单向灌输这套模式注定失效。真正的破局者在哪里?那些能将培训嵌入业务毛细血管,用真实项目倒逼能力跃迁,靠前沿技术直击行业痛点的机构,正在改写游戏规则。

359 40
|
11月前
|
传感器 分布式计算 算法
|

解码大数据的四个V:体积、速度、种类与真实性

解码大数据的四个V:体积、速度、种类与真实性

593 21
|
11月前
|
分布式计算 资源调度 大数据
|

Spark 如何保证宕机迅速恢复?

Spark 通过多种机制确保节点宕机时迅速恢复,主要包括:1. RDD 的 Lineage 机制,记录数据生成路径以便重计算;2. 检查点机制,持久化中间结果减少重算开销;3. 任务调度和资源管理,自动重新调度失败任务;4. 数据本地性,优先调度到数据所在节点;5. 持久化机制,将 RDD 持久化到内存或磁盘。这些机制共同保证了大数据处理的高可用性和可靠性。

317 9
|
11月前
|
算法 搜索推荐 UED
|

C 端试用期考核指标

本文详细介绍了C端产品经理试用期的考核指标,涵盖产品成功、开发效率、用户体验、市场研究、团队协作和创新能力等方面。考核方式包括自评、上级评估、同事评估、用户评估和项目评估。通过定量与定性相结合的方法,确保全面客观地评估产品经理的工作表现,并附有实际案例供参考。

420 0
|
11月前
|
定位技术
|

探秘站点检测访问中代理 IP 的实用技巧

随着互联网发展,使用代理IP的需求增加。站点检测代理IP的方法包括:1. IP地址黑名单;2. HTTP头部检查(如X-Forwarded-For);3. 行为分析;4. 地理位置检测;5. CAPTCHA验证;6. 连接特征分析。这些技术帮助网站判断访问是否来自代理。

404 6
来自: 大数据计算 MaxCompute  版块
|
11月前
|
自然语言处理 调度 决策智能
|

Coconut:基于连续潜在空间推理,提升大语言模型推理能力的新方法

Coconut提出了一种新的大语言模型推理范式,通过在潜在空间中运算,利用隐藏层生成的连续思维状态取代传统文本推理。该方法采用广度优先搜索探索多条路径,避免单一路径局限,显著提升逻辑任务性能并减少token消耗。 Coconut结合“语言模式”和“潜在模式”动态切换,通过多阶段课程学习优化推理能力,在复杂规划任务中表现卓越,尤其在GSM8k和ProsQA等任务中优于传统模型。实验表明,Coconut能有效捕获中间变量,减少幻觉错误,具备更强的推理规划能力。

476 2
|
11月前
|
消息中间件 关系型数据库 MySQL
|

Flink CDC 在阿里云实时计算Flink版的云上实践

本文整理自阿里云高级开发工程师阮航在Flink Forward Asia 2024的分享,重点介绍了Flink CDC与实时计算Flink的集成、CDC YAML的核心功能及应用场景。主要内容包括:Flink CDC的发展及其在流批数据处理中的作用;CDC YAML支持的同步链路、Transform和Route功能、丰富的监控指标;典型应用场景如整库同步、Binlog原始数据同步、分库分表同步等;并通过两个Demo展示了MySQL整库同步到Paimon和Binlog同步到Kafka的过程。最后,介绍了未来规划,如脏数据处理、数据限流及扩展数据源支持。

712 0
来自: 实时计算 Flink  版块
|
11月前
|
JSON 数据挖掘 API
|

京东商品视频 API 接口系列(京东 API)

京东商品视频API用于获取商品视频的URL、时长、分辨率等信息,适用于电商平台开发、数据分析、商品推荐优化及竞品分析。需安装`requests`库并使用Python内置`json`库解析数据。请求时需提供`productId`等参数,返回JSON格式数据。示例代码展示了如何通过签名验证和参数构建进行API调用。

274 1
|
11月前
|
前端开发 UED SEO
|

PM 常见名词(B端)

PM 常见名词(B端)简介 本文档整理了产品经理(PM)在B端产品开发中常用的术语及其释义

316 10
|
11月前
|
机器学习/深度学习 人工智能 自然语言处理
|

RoBERTa-Large的IA3微调

本文介绍了在ModelArts平台上使用MindSpore NLP组件对Roberta-Large模型进行IA3微调训练的过程。具体要求包括使用GLUE-MRPC数据集,加载Roberta-Large模型并配置IA3算法进行微调。训练过程中遇到了参数更新问题,通过官方修复后得以解决。最终,模型在验证集上进行了评估,并输出了准确率和F1值。此外,还详细描述了数据集GLUE-MRPC的特征、RoBERTa-Large模型的结构以及IA3微调的具体配置。

420 18
|
11月前
|
机器学习/深度学习 资源调度 算法
|

机器学习领域必知数学符号与概念(一)

本文介绍了一些数学符号以及这些符号的含义。

897 65
|
11月前
|
存储 分布式计算 算法
|

企业级推荐开发平台 PAI-Rec

本文介绍了企业推荐系统的关键技术和解决方案。主要内容分为四部分:1) 推荐系统面临的挑战,如数据治理和算法优化;2) 提高开发效率的解决方案,通过配置化和自动化减少重复工作;3) 高性能推荐算法和推理服务,包括GPU优化和特征组合;4) 高效特征管理平台PAI FeatureStore,支持离线和实时特征处理。文中还提到了EasyRecTorch框架,用于加速训练和推理,并分享了如何通过这些工具提升推荐系统的性能和降低成本。

368 2
来自: 人工智能平台PAI  版块
|
11月前
|
数据采集 人工智能 运维
|

从企业级 RAG 到 AI Assistant,阿里云Elasticsearch AI 搜索技术实践

本文介绍了阿里云 Elasticsearch 推出的创新型 AI 搜索方案。

863 5
|
11月前
|
人工智能 供应链 安全
|

面向高效大模型推理的软硬协同加速技术 多元化 AI 硬件引入评测体系

本文介绍了AI硬件评测体系的三大核心方面:统一评测标准、平台化与工具化、多维度数据消费链路。通过标准化评测流程,涵盖硬件性能、模型推理和训练性能,确保评测结果客观透明。平台化实现资源管理与任务调度,支持大规模周期性评测;工具化则应对紧急场景,快速适配并生成报告。最后,多维度数据消费链路将评测数据结构化保存,服务于综合通用、特定业务及专业性能分析等场景,帮助用户更好地理解和使用AI硬件。

474 1
|
12月前
|
SQL 存储 人工智能
|

化整为零:湖仓数据平台一站式迁移

本文介绍了湖仓平台迁移的概况、痛点及解决方案。首先概述了数据湖和数据仓库迁移的现状与背景,强调其重要性及挑战。接着分析了迁移过程中的主要痛点,如数据量大、业务变更频繁等。最后提出了一种化整为零的新范式,通过精细化设计和自动化工具提升迁移效率,并展示了一站式湖仓迁移中心的关键阶段和产品大图,旨在加速迁移过程并减少人工成本。

386 6
|
12月前
|
人工智能 安全 算法
|

PAI负责任的AI解决方案: 安全、可信、隐私增强的企业级AI

在《PAI可信AI解决方案》会议中,分享了安全、可信、隐私增强的企业级AI。会议围绕三方面展开:首先通过三个案例介绍生活和技术层面的挑战;其次阐述构建AI的关键要素;最后介绍阿里云PAI的安全功能及未来展望,确保数据、算法和模型的安全与合规,提供全方位的可信AI解决方案。

420 5
来自: 人工智能平台PAI  版块
|
12月前
|
JSON API 开发者
|

速卖通获得AliExpress商品详情API接口文章

速卖通(AliExpress)是阿里巴巴旗下的全球跨境电商平台,提供便捷的在线购物渠道。为帮助开发者和商家高效管理商品信息,速卖通提供了商品详情API接口。本文介绍如何使用aliexpress.item_get API获取商品详情,包括获取API密钥、调用API接口及处理响应数据,帮助用户提升商品管理和营销效率。注意API调用限制和合法合规使用。

458 2
|
12月前
|
机器学习/深度学习 PyTorch 测试技术
|

TurboAttention:基于多项式近似和渐进式量化的高效注意力机制优化方案,降低LLM计算成本70%

**TurboAttention**提出了一种全新的LLM信息处理方法。该方法通过一系列优化手段替代了传统的二次复杂度注意力机制,包括稀疏多项式软最大值近似和高效量化技术。

508 5
|
22天前
|
人工智能 自然语言处理 人机交互
|

《智能语》:十进制驱动的多模态人工语言系统构建与协同机制研究

《智能语》是全球首个融合十进制逻辑、多模态表达与东方哲学的人工语言系统,实现文字、语音、词汇、语法全链条协同。通过笔画-音素-数字三重绑定,构建“形音义理”统一的创新架构,具备语义精准、无限扩展、跨文化普适等优势,为语言学习、人机交互与文化传播提供全新范式。(238字)

136 4
|
1月前
|
JavaScript 前端开发 关系型数据库
|

基于python的高校后勤报修系统

本研究针对高校后勤报修管理效率低下的问题,设计并实现基于Django、Vue.js和MySQL的B/S架构智能报修系统。通过信息化手段优化传统人工流程,提升维修响应速度与服务透明度,增强师生满意度,推动高校后勤管理向智能化、高效化发展。

118 9

大数据与机器学习

大数据领域前沿技术分享与交流,这里不止有技术干货、学习心得、企业实践、社区活动,还有未来。

4
今日
67717
内容
128
活动
439501
关注
你好!
登录掌握更多精彩内容

活跃用户

相关产品

  • 大数据开发治理平台 DataWorks
  • 检索分析服务 Elasticsearch版
  • 日志服务