|
10月前
|
机器学习/深度学习 编解码 PyTorch
|

从零实现基于扩散模型的文本到视频生成系统:技术详解与Pytorch代码实现

本文介绍了一种基于扩散模型的文本到视频生成系统,详细展示了模型架构、训练流程及生成效果。通过3D U-Net结构和多头注意力机制,模型能够根据文本提示生成高质量视频。

459 1
|
10月前
|
自然语言处理 运维 DataWorks
|

智能体Agent解析:用自然语言重构数据开发工作方式

大数据开发治理平台DataWorks基于MCP协议,正式发布了DataWorks Agent,内置DataWorks MCP Server V1.0。该功能支持在DataWorks Data Studio中通过自然语言交互完成数据开发任务,实现了需求即代码的开发体验。本文将详细介绍如何通过配置使用DataWorks MCP Server进行任务的开发和运维管理。

794 3
|
10月前
|
机器学习/深度学习 人工智能 JSON
|

【解决方案】DistilQwen2.5-R1蒸馏小模型在PAI-ModelGallery的训练、评测、压缩及部署实践

阿里云的人工智能平台 PAI,作为一站式的机器学习和深度学习平台,对DistilQwen2.5-R1模型系列提供了全面的技术支持。无论是开发者还是企业客户,都可以通过 PAI-ModelGallery 轻松实现 Qwen2.5 系列模型的训练、评测、压缩和快速部署。本文详细介绍在 PAI 平台使用 DistilQwen2.5-R1 蒸馏模型的全链路最佳实践。

537 63
来自: 人工智能平台PAI  版块
|
10月前
|
数据采集 存储 NoSQL
|

如何避免Python爬虫重复抓取相同页面?

如何避免Python爬虫重复抓取相同页面?

430 1
|
10月前
|
机器学习/深度学习 人工智能 前端开发
|

Explore AI Ghibli: Creating Enchanting Ghibli Style Images with Artificial Intelligence

探索AI吉卜力:用人工智能创造迷人的吉卜力风格图像。吉卜力工作室以独特的动画风格著称,每一部作品都充满宁静的魔力。近年来,随着AI技术的发展,“AI吉卜力”现象兴起,通过OpenAI等技术生成模仿宫崎骏经典艺术风格的图像。尽管AI能复制吉卜力的视觉美学,但是否能捕捉其灵魂仍存争议。宫崎骏曾批评AI动画“是对生命的侮辱”。本文探讨了AI吉卜力的技术原理、工具应用及伦理问题,同时展示了其在个人创作、游戏开发和营销等领域的潜力。在享受AI带来的便利时,我们也需尊重原创艺术的价值。

412 6
|
10月前
|
传感器 机器学习/深度学习 人工智能
|

从“手环”到“健康顾问”:可穿戴设备背后的数据魔法

从“手环”到“健康顾问”:可穿戴设备背后的数据魔法

913 10
|
10月前
|
安全 物联网 定位技术
|

贴身守护还是隐私威胁?可穿戴设备的安全隐忧

贴身守护还是隐私威胁?可穿戴设备的安全隐忧

308 15
|
10月前
|
JSON 数据挖掘 API
|

京东API接口最新指南:店铺所有商品接口的接入与使用

本文介绍京东店铺商品数据接口的应用与功能。通过该接口,商家可自动化获取店铺内所有商品的详细信息,包括基本信息、销售数据及库存状态等,为营销策略制定提供数据支持。此接口采用HTTP请求(GET/POST),需携带店铺ID和授权令牌等参数,返回JSON格式数据,便于解析处理。这对于电商运营、数据分析及竞品研究具有重要价值。

579 4
|
11月前
|
人工智能 数据挖掘 物联网
|

智能穿戴设备市场竞争的内卷与突围

智能穿戴设备市场竞争的内卷与突围

285 19
|
11月前
|
传感器 人工智能 定位技术
|

智能手表续航太短?聊聊可穿戴设备的能耗管理黑科技

智能手表续航太短?聊聊可穿戴设备的能耗管理黑科技

591 11
|
11月前
|
机器学习/深度学习 算法 调度
|

【强化学习】基于深度强化学习的微能源网能量管理与优化策略研究【Python】

本项目基于深度Q网络(DQN)算法,通过学习预测负荷、可再生能源输出及分时电价等信息,实现微能源网的能量管理与优化。程序以能量总线模型为基础,结合强化学习理论,采用Python编写,注释清晰,复现效果佳。内容涵盖微能源网系统组成、Q学习算法原理及其实现,并提供训练奖励曲线、发电单元功率、电网交互功率和蓄电池调度等运行结果图表,便于对照文献学习与应用。

417 6
|
11月前
|
机器学习/深度学习 人工智能 算法
|

SWEET-RL:基于训练时信息的多轮LLM代理强化学习框架

SWEET-RL是一种基于训练时信息的逐步评估算法,显著提升了多轮大型语言模型(LLM)代理在强化学习中的成功率。相比现有方法,SWEET-RL将成功率提高6%,使小型开源模型如Llama-3.1-8B达到甚至超越GPT-4O等大型专有模型性能。通过非对称Actor-Critic结构、创新优势函数参数化及两阶段训练流程,SWEET-RL优化了信用分配机制与泛化能力,降低了计算成本。ColBench基准测试显示,SWEET-RL在后端编程和前端设计任务中表现卓越,为AI代理训练技术带来突破性进展。

438 2
|
11月前
|
人工智能 搜索推荐 算法
|

谁是AI搜索先锋? Elastic先锋者招募令正式启动!

阿里云 x Elastic 携手推出“Elastic Pioneer”先锋者计划,开发者们可以通过贡献内容获取积分,赢取月度和年度奖励,包括 ElasticON 新加坡站门票及与技术大咖交流机会。

542 2
|
11月前
|
监控 数据挖掘 开发工具
|

淘宝天猫商品详情数据接口采集攻略

本文详细介绍如何通过淘宝天猫商品详情数据接口采集商品信息。首先概述了常用接口(如taobao.item.get、tmall.item.get)的功能,可获取商品基础信息、描述及评价等。接着说明接入准备,包括注册认证、创建应用与申请权限,以及开发环境配置。最后提供采集流程指引,如通过商品链接或搜索接口获取ID,并以Python示例展示接口调用方法,助力开发者高效挖掘电商数据价值。

1061 1
|
11月前
|
运维 监控 算法
|

时间序列异常检测:MSET-SPRT组合方法的原理和Python代码实现

MSET-SPRT是一种结合多元状态估计技术(MSET)与序贯概率比检验(SPRT)的混合框架,专为高维度、强关联数据流的异常检测设计。MSET通过历史数据建模估计系统预期状态,SPRT基于统计推断判定偏差显著性,二者协同实现精准高效的异常识别。本文以Python为例,展示其在模拟数据中的应用,证明其在工业监控、设备健康管理及网络安全等领域的可靠性与有效性。

1164 13
|
11月前
|
存储 人工智能 自然语言处理
|

RAL-Writer Agent:基于检索与复述机制,让长文创作不再丢失关键信息

RAL-Writer Agent是一种专业的人工智能写作辅助技术,旨在解决生成高质量、内容丰富的长篇文章时所面临的技术挑战,确保全文保持连贯性和相关性。本研究将系统分析RAL-Writer的核心技术架构、功能特点及其在内容创作、学术研究和专业交流领域的应用前景。

266 4
|
11月前
|
传感器 数据采集 物联网
|

智能互联,未来在手:解读可穿戴设备与物联网的深度融合

智能互联,未来在手:解读可穿戴设备与物联网的深度融合

963 85
|
11月前
|
机器学习/深度学习 人工智能 算法
|

分位数回归+共形预测:Conformalized Quantile Regression实现更可靠的预测区间

预测不确定性量化在数据驱动决策中至关重要,分位数回归(QR)虽能生成自适应预测区间,但缺乏严格覆盖保证;共形预测(CP)则提供覆盖保证但缺乏强自适应性。Conformalized Quantile Regression (CQR)融合两者优势,通过校准分位数回归模型,生成既适应数据特性又具备统计保证的预测区间。本文深入探讨CQR理论、实现与应用,展示其在医疗、金融等领域提升预测可靠性的潜力,为高风险决策提供更精确和可信的支持。

441 0
|
11月前
|
数据采集 JavaScript Python
|

如何根据目标网站调整Python爬虫的延迟时间?

如何根据目标网站调整Python爬虫的延迟时间?

256 3
|
11月前
|
数据采集 机器学习/深度学习 存储
|

可穿戴设备如何重塑医疗健康:技术解析与应用实战

可穿戴设备如何重塑医疗健康:技术解析与应用实战

433 4
|
11月前
|
传感器 机器学习/深度学习 人工智能
|

数据让农业更聪明——用大数据激活田间地头

数据让农业更聪明——用大数据激活田间地头

187 2
|
11月前
|
API Kotlin
|

动态URL构建与HTTP请求的Kotlin实现

动态URL构建与HTTP请求的Kotlin实现

356 4
|
11月前
|
数据采集 存储 机器学习/深度学习
|

最新AI大模型数据集解决方案:分享两种AI高质量代码数据集生产方案

本文分享了两种构建高质量AI代码数据集的解决方案。第一种是传统方式,结合动态住宅代理与手动处理,通过分页读取和数据清洗生成结构化数据;第二种是利用Web Scraper API工具,实现自定义配置、自动化抓取及云端存储。两种方法各具优势,适合不同需求和技术水平的团队。同时,文章还提供了专属优惠福利,助力提升数据采集效率,为AI大模型训练提供支持。

389 5
|
11月前
|
存储 JSON 分布式计算
|

StarRocks + Paimon 在阿里集团 Lakehouse 的探索与实践

阿里集团在推进湖仓一体化建设过程中,依托 StarRocks 强大的 OLAP 查询能力与 Paimon 的高效数据入湖特性,实现了流批一体、存储成本大幅下降、查询性能数倍提升的显著成效: A+ 业务借助 Paimon 的准实时入湖,显著降低了存储成本,并引入 StarRocks 提升查询性能。升级后,数据时效提前60分钟,开发效率提升50%;JSON列化存储减少50%,查询性能提升最高达10倍;OLAP分析中,非JOIN查询快1倍,JOIN查询快5倍。 饿了么升级为准实时Lakehouse架构后,在时效性仅损失1-5分钟的前提下,实现Flink资源缩减、StarRocks查询性能提升(仅5%

1007 60
|
11月前
|
机器学习/深度学习 物联网 PyTorch
|

小白避坑指南:国内用Colossal-AI微调DeepSeek 1.5B的完整踩坑记录(附镜像加速方案)

本文详细记录了使用Colossal-Ai对DeepSeek-Qwen模型进行微调的过程,包括模型下载、环境部署、数据集处理及代码实现等环节。重点介绍了LoRA低秩适配方法和Colossal-Ai分布式训练框架的使用技巧,解决了模型封装后函数调用冲突、梯度检查点配置等问题。通过命令行参数灵活调整训练配置,最终在两块A100 GPU上完成训练,单卡显存占用约11GB,利用率达85%。文章总结了常见问题及解决方法,为后续研究提供参考。

903 15
来自: 人工智能平台PAI  版块
|
11月前
|
JSON 数据管理 Java
|

淘宝买家订单列表、订单详情、订单物流 API 接口全攻略

淘宝订单相关API接口是电商自动化的核心工具,提供订单数据管理和物流追踪功能。开发者可通过HTTP协议调用,支持Python、Java等语言,响应JSON格式数据。主要功能包括:订单列表查询、订单详情获取和物流轨迹追踪。申请流程:注册账号(c0b.cc/R4rbK2),创建应用并生成App Key,申请所需接口权限如taobao.trades.sold.get、taobao.trade.fullinfo.get等。

1690 7
|
11月前
|
SQL 大数据 数据挖掘
|

玩转大数据:从零开始掌握SQL查询基础

玩转大数据:从零开始掌握SQL查询基础

402 35
|
11月前
|
网络安全
|

window系统下安装elk

本文介绍了Elasticsearch、Logstash和Kibana(统称ELK栈)8.17.3版本的安装与配置流程。主要内容包括: - **Elasticsearch**:详细描述了从下载到启动服务的步骤,以及`elasticsearch.yml`的关键配置项,并提供了Postman操作示例及常见问题解决方案。 - **Logstash**:涵盖了插件安装、配置文件`logstash.conf`编写及其启动命令。 - **Kibana**:讲解了下载、配置`kibana.yml`和启动过程,确保与Elasticsearch正确连接。

717 16
|
11月前
|
设计模式 SQL Java
|

【再谈设计模式】解释器模式~语法的解析执行者

解释器模式定义了一种语言的语法表示,并定义一个解释器来解释该语言中的句子。它使用类来表示每个语法规则,并且通过递归调用这些类的方法来解释表达式。本质上,它将一个复杂的表达式分解为一系列简单的部分,然后按照特定的语法规则进行解析和执行。

308 8
|
11月前
|
并行计算 算法 量子技术
|

量子计算在金融模型中的应用:未来金融的“黑科技”

量子计算在金融模型中的应用:未来金融的“黑科技”

517 1
|
12月前
|
JSON API 数据格式
|

淘宝商品列表API接口(淘宝API系列)

在电商时代,淘宝作为国内最大的电商平台之一,其商品数据对从业者极具价值。直接抓取网页数据效率低且违法,使用淘宝商品列表API接口是合法、高效的方式。通过淘宝开放平台注册账号并申请API权限,开发者可获取商品标题、价格等信息,支持关键词搜索、类目筛选等功能。接口采用HTTP GET/POST请求,返回JSON或XML格式数据,并设有调用频率和权限限制。示例代码展示了如何使用Python的requests库调用该API,包括生成签名和处理响应。

400 2
|
12月前
|
机器学习/深度学习 人工智能 并行计算
|

量子计算机揭秘:从结构到工作原理的深入探索

量子计算机揭秘:从结构到工作原理的深入探索

352 23
|
12月前
|
XML JSON 算法
|

智能冰箱食材识别

本案例设计了一个囤菜系统原型,主要方法是利用冰箱内安装的摄像头,通过目标检测算法识别食材类别,判断存取动作,增加或者减少相应的食材的数量,并记录存取时间等相关数据,设计出了具备提示清理和补货等功能的智能化囤菜系统原型。

720 7
|
12月前
|
机器学习/深度学习 存储 缓存
|

LLM高效推理:KV缓存与分页注意力机制深度解析

随着大型语言模型(LLM)规模和复杂性的增长,高效推理变得至关重要。KV缓存和分页注意力是优化LLM推理的两项关键技术。KV缓存通过存储键值对减少重复计算,而分页注意力则通过将序列分割成小块来降低内存消耗,从而有效处理长序列。本文深入剖析这些技术的工作原理及其在仅解码器模型中的应用,探讨其优势与挑战,并展示其实现示例。

829 16
|
12月前
|
并行计算 安全 算法
|

量子计算在密码学中的应用与挑战:解密未来的安全

量子计算在密码学中的应用与挑战:解密未来的安全

573 6
|
12月前
|

DataWorks X DeepSeek : 用AI实现数据开发治理!

DataWorks Copilot × DeepSeek-R1产品演示:以2025年春节杭州的旅游热点分析为例,通过DataWorks Copilot使用DeepSeek-R1满血版模型,进行SQL代码的自动生成、改写和测试操作,实现高效的数据开发流程。

356 0
|
12月前
|
存储 分布式计算 大数据
|

大数据与云计算:无缝结合,开启数据新纪元

大数据与云计算:无缝结合,开启数据新纪元

781 11
|
27天前
|
安全 网络安全 数据安全/隐私保护
|

用好代理 IP:加密付费拒绝免费陷阱

代理IP兼具隐私保护与安全风险,合规使用可防追踪、保障跨境业务,但非正规服务易致信息泄露、账号风控,甚至被用于违法活动。用户应选择加密付费代理,避开免费陷阱,遵守法规,强化安全防护,让技术真正服务于合法需求。

125 4
|
1月前
|
人工智能 运维 算法
|

区块链 + AI:一个负责“信任”,一个负责“聪明”,能不能真结婚?

区块链 + AI:一个负责“信任”,一个负责“聪明”,能不能真结婚?

169 12
|
1月前
|
数据采集 人工智能 算法
|

AI数字人技术厂商市场格局观察

AI数字人技术正从娱乐迈向多元实用场景,2024年市场规模达41.2亿元,增速超85%。世优科技深耕全栈技术,拥60余项专利,服务千余家品牌,助力政企智能化升级,推动行业向标准化、生态化发展。

163 1
来自: 人工智能平台PAI  版块
|
1月前
|
安全 区块链 决策智能
|

Layer 2 的进化之路:Rollup 到底在“卷”什么?

Layer 2 的进化之路:Rollup 到底在“卷”什么?

120 10
|
1月前
|
机器学习/深度学习 传感器 算法
|

Python | K折交叉验证的参数优化的KNN(k近邻)预测及可视化算法

本教程介绍基于Python的KNN回归预测及四种参数优化方法(网格/随机/贝叶斯搜索、K折交叉验证),涵盖地球科学、医学、工程等多领域应用,附完整代码与数据可视化,助你快速掌握机器学习建模流程。

109 0
|
1月前
|
Java Go 开发者
|

IDEA开发常用的快捷键

IntelliJ IDEA常用快捷键汇总:涵盖代码生成(如main、sout)、编辑(复制、删除、重命名)、导航(跳转、查找)、格式化、代码阅读及版本控制等高频操作,提升开发效率。熟练掌握可显著优化编码体验,是Java开发者必备技能。

218 1
|
1月前
|
存储 机器学习/深度学习 人工智能
|

构建AI智能体:八十一、SVD模型压缩的艺术:如何科学选择K值实现最佳性能

本文探讨了SVD(奇异值分解)在深度学习模型压缩中的应用。随着模型规模不断扩大,面临的存储、计算和能耗问题日益突出。SVD通过将大型矩阵分解为三个特殊矩阵(U、Σ、Vᵀ),并根据奇异值大小进行截断,实现模型的高效压缩。文章详细分析了SVD的数学原理、压缩机制和参数选择策略,重点讨论了如何通过能量保留、目标压缩率和拐点检测等方法确定最佳截断秩k。以一个500×300的用户-物品矩阵为例,实证显示k=32时能实现82.93%的压缩率,99.97%的能量保留和5.86倍计算加速,达到了精度损失与压缩收益的最佳平衡

186 5
|
1月前
|
机器学习/深度学习 算法 自动驾驶
|

基于深度学习YOLOv8的车辆汽车速度检测系统

本研究聚焦基于YOLOv8的车辆速度检测系统,针对传统交通管理效率低、成本高问题,提出融合计算机视觉与深度学习的智能解决方案。利用YOLOv8高精度、实时性优势,结合DeepSORT实现多目标跟踪与速度估算,提升复杂场景下的检测鲁棒性。系统具备低成本、易部署特点,适用于边缘计算,可广泛应用于交通监控、事故预警与自动驾驶,助力智慧城市建设。

163 2
|
2月前
|
存储 Java 编译器
|

Java泛型类型擦除以及类型擦除带来的问题

本文详解Java泛型的类型擦除机制及其带来的问题。介绍泛型擦除后保留的原始类型、编译时类型检查原理、自动类型转换、与多态的冲突、静态成员限制等核心问题,并结合代码示例说明其底层实现和解决方案,帮助深入理解Java泛型的本质与局限性。(238字)

100 0
|
2月前
|
负载均衡 Java 数据安全/隐私保护
|

Gateway服务网关

网关是微服务架构的统一入口,核心功能包括请求路由、权限控制、限流及负载均衡。通过Spring Cloud Gateway可实现高效路由转发与过滤器处理,支持跨域配置,提升系统安全与性能。

139 0
|
2月前
|
C++
|

C++变量作用域

C++变量作用域分为局部、全局、块和类作用域。局部变量在函数内定义,仅内部可用;全局变量在所有函数外定义,整个程序可访问;块作用域变量存在于代码块内;类作用域变量属于类成员。同名时,内层作用域覆盖外层。全局变量自动初始化,局部变量需手动初始化。

114 1

大数据与机器学习

大数据领域前沿技术分享与交流,这里不止有技术干货、学习心得、企业实践、社区活动,还有未来。

0
今日
69094
内容
128
活动
439688
关注
你好!
登录掌握更多精彩内容

相关产品

  • 大数据开发治理平台 DataWorks
  • 检索分析服务 Elasticsearch版
  • 日志服务