|
5月前
|
数据采集 数据可视化 大数据
|

客户行为到底咋分析?别拍脑袋,用大数据才靠谱!

客户行为到底咋分析?别拍脑袋,用大数据才靠谱!

154 4
|
6月前
|
机器学习/深度学习 数据采集 编解码
|

卫星拍下的地球真相:用机器学习预测气候未来

卫星拍下的地球真相:用机器学习预测气候未来

120 0
|
6月前
|
机器学习/深度学习 自然语言处理 搜索推荐
|

爆款背后的秘密:大数据如何让你买得更准、更快、更爽?

爆款背后的秘密:大数据如何让你买得更准、更快、更爽?

152 6
|
6月前
|
数据采集 数据挖掘 API
|

跨境卖家必看:1688店铺订单列表,订单详情,订单物流接口详解

1688平台提供丰富的API接口,涵盖商品、订单、物流等核心业务场景。主要接口包括:**order.list**(查询订单列表)、**order.get**(获取订单详情)及**logistics.track**(查询物流信息),均支持GET请求方式,广泛应用于跨境寻源、数据采集、ERP系统等场景。

215 0
|
6月前
|
算法
|

基于BigBangBigCrunch优化(BBBC)的目标函数求解算法matlab仿真

本程序基于BigBang-BigCrunch优化算法(BBBC)实现目标函数求解的MATLAB仿真,具备良好的全局搜索与局部收敛能力。程序输出适应度收敛曲线及多变量变化曲线,展示算法迭代过程中的优化趋势。使用MATLAB 2022A运行,通过图形界面直观呈现“大爆炸”与“大坍缩”阶段在解空间中的演化过程,适用于启发式优化问题研究与教学演示。

122 12
|
6月前
|
XML JSON 供应链
|

跨境卖家必看!2025年1688店铺所有商品接口新功能解锁全球供应链

1688店铺所有商品接口是1688开放平台提供的API,用于获取店铺商品信息,支持HTTP/GET或POST请求,返回JSON或XML格式数据。主要功能包括商品信息获取(如ID、标题、价格等)、筛选与排序(关键词、价格区间等)、分页查询等,适用于商品管理、竞品监控和数据分析。调用时需构造参数(如method、app_key、session等)并处理响应数据。

151 1
|
6月前
|
消息中间件 机器学习/深度学习 Java
|

java 最新技术驱动的智能教育在线实验室设备管理与实验资源优化实操指南

这是一份基于最新技术的智能教育在线实验室设备管理与实验资源优化的实操指南,涵盖系统搭建、核心功能实现及优化策略。采用Flink实时处理、Kafka消息队列、Elasticsearch搜索分析和Redis缓存等技术栈,结合强化学习动态优化资源调度。指南详细描述了开发环境准备、基础组件部署、数据采集与处理、模型训练、API服务集成及性能调优步骤,支持高并发设备接入与低延迟处理,满足教育机构数字化转型需求。代码已提供下载链接,助力快速构建智能化实验室管理系统。

182 44
|
6月前
|
存储 自然语言处理 算法
|

Adaptive-k 检索:RAG 系统中自适应上下文长度选择的新方法

本文介绍 Adaptive-k 检索技术,这是一种通过相似性分布分析动态确定最优上下文规模的即插即用方法,该技术在显著降低 token 消耗的同时实现了检索增强生成系统的性能提升。

123 1
|
6月前
|
算法 数据可视化
|

基于自混合干涉测量系统的线展宽因子估计算法matlab仿真

本程序基于自混合干涉测量系统,使用MATLAB2022A实现线展宽因子(a因子)估计算法仿真。通过对比分析自由载流子效应、带间跃迁、带隙收缩等因素对a因子的影响,揭示其物理机制。核心代码分别计算了不同效应对a因子的贡献,并绘制相应曲线进行可视化展示。自混合干涉测量技术利用激光反馈效应实现物体物理量测量,而线展宽因子描述了激光输出频率随功率变化的敏感程度,是研究半导体激光器特性的重要参数。该算法为光学测量和激光器研究提供了有效工具。

104 2
|
6月前
|
数据采集 消息中间件 人工智能
|

赛事比分怎么实现实时更新?从采集到推送的“毫秒级“科技揭秘!

实时比分更新背后的技术奥秘,远比你想象的复杂!从数据采集、传输、处理到用户推送,每个环节都充满挑战。情报来源包括官方接口、AI视觉识别和人工录入;传输方式从HTTP轮询到WebSocket,追求毫秒级延迟;数据清洗确保准确性,用户推送注重适配与优先级。开发者还需规避常见坑点,如消息队列、时区转换等。未来,AI预测、边缘计算甚至量子通信将让零延迟成为可能。想了解如何打造像顶级中场般精准、快速且可靠的比分系统吗?本文为你深度拆解!

153 0
|
6月前
|
算法 数据安全/隐私保护
|

基于混沌序列和小波变换层次化编码的遥感图像加密算法matlab仿真

本项目实现了一种基于小波变换层次化编码的遥感图像加密算法,并通过MATLAB2022A进行仿真测试。算法对遥感图像进行小波变换后,利用Logistic混沌映射分别对LL、LH、HL和HH子带加密,完成图像的置乱与扩散处理。核心程序展示了图像灰度化、加密及直方图分析过程,最终验证加密图像的相关性、熵和解密后图像质量等性能指标。通过实验结果(附图展示),证明了该算法在图像安全性与可恢复性方面的有效性。

121 4
|
6月前
|
机器学习/深度学习 存储 算法
|

印刷字体识别系统

一个基于Python的印刷字体识别系统,遵循 GNU_GPL_v3 许可,具备字体倾斜校正、行与字符分割及字符识别功能。采用HOG算法训练SVM模型,使用Chars74K数据集。系统包含简单UI,支持动态加载和结果展示。核心算法包括自适应扩展+连通域辅助的行分割,以及垂直投影+连通域+极小值法细分粘连字符的字符分割。项目文件结构清晰,涵盖图像处理、模型训练与加载等功能模块。

198 6
|
6月前
|
存储 分布式计算 DataWorks
|

从MaxCompute到Milvus:通过DataWorks进行数据同步,实现海量数据高效相似性检索

如果您需要将存储在MaxCompute中的大规模结构化数据导入Milvus,以支持高效的向量检索和相似性分析,可以通过DataWorks的数据集成服务实现无缝同步。本文介绍如何利用DataWorks,快速完成从MaxCompute到Milvus的离线数据同步。

200 3
|
6月前
|
算法 安全 Java
|

大学四年学好 Java 拿到 offer 的过来人生成长尾关键词 Java 学习路线分享

这是一篇针对大一学生学习Java的指南,帮助你在大学四年中系统掌握Java,最终成功拿到offer。文章详细介绍了Java的学习路线,包括Java基础(JavaSE)、异常处理、并发多线程(可选)和JVM基础知识。同时提供了具体的学习方法,如观看视频教程、阅读经典书籍和刷技术博客。此外,还给出了简单计算器和多线程打印等应用实例,帮助巩固所学知识。按照此路线认真学习,为未来深入研究和求职打下坚实基础。资源地址:[点击下载](https://pan.quark.cn/s/14fcf913bae6)。

108 1
|
6月前
|
机器学习/深度学习 传感器 大数据
|

农业也玩儿大数据?农民伯伯的“智慧田”才是真高科技!

农业也玩儿大数据?农民伯伯的“智慧田”才是真高科技!

135 3
|
6月前
|
数据采集 消息中间件 监控
|

搭建一个好的体育比分直播平台,有哪些板块

如何打造一款让用户爱不释手的体育比分平台?本文从核心功能到细节优化,全面解析关键要素。核心板块包括实时比分系统(毫秒级更新、多赛事覆盖)、比赛详情页(阵容、技术统计、事件时间轴)和多语言支持。增强体验方面,通过数据可视化(热图、传球网络图)、个性化订阅(关注球队/联赛)及社交互动提升用户参与感。技术后台需解决数据采集与清洗、高并发架构以及监控报警问题,同时注重多端一致性和法律合规。成功秘诀:50%技术实力+50%用户体验!

165 3
|
6月前
|
数据采集 缓存 自然语言处理
|

NLP驱动网页数据分类与抽取实战

本文探讨了使用NLP技术进行网页商品数据抽取时遇到的三大瓶颈:请求延迟高、结构解析慢和分类精度低,并以目标站点goofish.com为例,展示了传统方法在采集商品信息时的性能问题。通过引入爬虫代理降低封禁概率、模拟真实用户行为优化请求,以及利用关键词提取提升分类准确性,实现了请求成功率从65%提升至98%,平均请求耗时减少72.7%,NLP分类错误率下降73.6%的显著优化效果。最终,代码实现快速抓取并解析商品数据,支持价格统计与关键词分析,为构建智能推荐模型奠定了基础。

138 0
|
6月前
|
Java API 开发工具
|

1688寻原通API接口攻略

1688寻原通API接口攻略涵盖注册申请、开发准备、系统对接、测试调试及上线维护等步骤。开发前需阅读API文档,明确请求参数与响应格式,并选择合适语言(如Python、Java)和工具。对接系统时,注重调用方式与数据格式,确保稳定可靠。其核心功能包括商品采集上传、订单处理及数据同步,助力卖家高效管理跨境电商店铺,实现与1688平台的无缝连接。

147 0
|
6月前
|

阿里云产品五月刊来啦

阿里云发布混合思考模型 Qwen3 全系列 ,通义灵码新增Inline Chat能力,,详情请点击阿里云产品五月刊

206 52
|
6月前
|
数据采集 人工智能 算法
|

“脏数据不清,分析徒劳”——聊聊数据分析里最容易被忽视的苦差事

“脏数据不清,分析徒劳”——聊聊数据分析里最容易被忽视的苦差事

228 34
|
7月前
|
搜索推荐 API UED
|

淘宝/天猫获得淘宝app商品详情原数据 API 返回值的应用

该API专注于商品信息整合与展示,提供基础信息抓取、多媒体内容整合等功能,助力实时同步商品数据,构建丰富的详情页。同时支持数据分析与市场洞察,包括销售趋势分析和竞品对比,优化库存与定价策略。此外,动态促销管理和个性化推荐系统可提升营销效果,而实时库存预警和评价数据可视化则显著增强用户体验,为用户决策提供透明依据,全面提升平台竞争力与用户满意度。

175 3
来自: 大数据计算 MaxCompute  版块
|
7月前
|
存储 数据采集 安全
|

数据治理:别让你的数据成为“垃圾堆”!

数据治理:别让你的数据成为“垃圾堆”!

182 3
|
7月前
|
运维 监控 物联网
|

增强现实在制造业的奇妙应用——生产线上的科技革命

增强现实在制造业的奇妙应用——生产线上的科技革命

157 10
|
7月前
|
数据采集 消息中间件 Kubernetes
|

Kubernetes上的爬虫排队术——任务调度与弹性扩缩容实战

本教程介绍如何在 Kubernetes 上构建可扩展的爬虫系统,解决传统单机爬虫瓶颈。核心内容包括:使用 Docker 打包爬虫任务、RabbitMQ 实现任务队列、爬虫代理防限制、随机 User-Agent 模拟请求,以及通过 Horizontal Pod Autoscaler (HPA) 实现根据任务压力自动扩缩容。适合需要处理大规模网页采集的开发者学习与实践。

130 1
|
7月前
|
分布式计算 Java Scala
|

【赵渝强老师】Scala编程语言

Scala 是一种集成面向对象与函数式编程特性的多范式语言,运行于 Java 平台并兼容 Java 程序。学习 Scala 为掌握 Spark 和 Flink 打下基础。本文通过视频讲解及代码示例,展示如何用 Scala 在 Spark 和 Flink 中实现 WordCount 程序,包括环境配置、数据处理及输出操作,帮助理解其实际应用。

147 19
|
7月前
|

Apache Doris 的智能管理工具--Doris Manager v24.3 功能演示

作为 Apache Doris 的智能管理工具,Doris Manager 提供一键部署、实时监控、弹性扩缩容、升级重启等核心功能,并支持告警、日志、审计、巡检等高级运维能力。历经千家企业验证,24.3 版本更稳定高效,让集群管理更简单!在新的版本中,Doris Manager 丰富了集群巡检,监控等能力。

213 1
|
7月前
|
SQL 数据可视化 数据挖掘
|

别再“拍脑袋”决策了,学点数据分析,从零起步也不晚!

别再“拍脑袋”决策了,学点数据分析,从零起步也不晚!

180 40
|
7月前
|
监控 API 开发者
|

1688API接口终极宝典:列表、详情全掌握,图片搜索攻略助你一臂之力

1688为开发者提供涵盖商品、交易、物流和会员等核心业务的丰富API接口。商品类接口支持搜索、详情查询及图片搜索;交易类接口实现订单创建与支付;物流类接口提供报价与轨迹查询;会员类接口获取用户信息与认证。示例代码展示如何用Python通过图片搜索商品,并打印关键信息如价格、起订量和供应商详情。建议先在沙箱环境测试,确保稳定后再投入生产,以实现选品分析与价格监控等功能。

188 7
|
7月前
|
数据采集 存储 监控
|

实战案例:采集 51job 企业招聘信息

本文基于Feapder框架,从零开始搭建企业级招聘信息爬虫管道。内容涵盖基础概念(数据管道与Feapder特点)、生动比喻(快递系统类比爬虫流程)、技术场景(代理IP、Cookie管理)及实战案例(采集51job岗位信息并分类存储)。通过完整代码示例,展示如何配置代理、自定义中间件及Pipeline。无论产品经理还是学生,均可轻松上手,构建高效稳定的爬虫系统。

189 10
|
7月前
|
传感器 监控 大数据
|

别让“数据”白跑!大数据也能拯救地球

别让“数据”白跑!大数据也能拯救地球

160 15
|
7月前
|
分布式计算 运维 大数据
|

5G+大数据:这不是“快上加快”,而是“聪明加聪明”

5G+大数据:这不是“快上加快”,而是“聪明加聪明”

142 13
|
8月前
|
人工智能 边缘计算 5G
|

“工厂不再靠喊,靠5G调度!”——5G如何点燃智能制造的引擎

“工厂不再靠喊,靠5G调度!”——5G如何点燃智能制造的引擎

182 17
|
8月前
|
人工智能 边缘计算 搜索推荐
|

5G+教育=未来课堂?一文讲透5G如何颠覆教学现场

5G+教育=未来课堂?一文讲透5G如何颠覆教学现场

228 5
|
8月前
|
人工智能 大数据
|

阿里云产品四月刊来啦

阿里云百炼推出首个全生命周期MCP服务,通义万相2.1首尾帧模型开源,大数据 AI 产品升级发布,详情请点击阿里云产品四月刊

206 12
|
8月前
|
安全 搜索推荐 大数据
|

隐私守护者的觉醒——大数据时代,我们如何对抗“透明人”危机?

隐私守护者的觉醒——大数据时代,我们如何对抗“透明人”危机?

269 62
|
8月前
|
API 开发者 Python
|

深入研究:1688商品跨境属性API接口详解

本文介绍了如何通过 1688 商品跨境属性 API 获取商品的跨境相关数据,助力企业开展电商业务。文章分为三部分:引言阐述了接口的重要性及应用场景;接口概述详细说明了调用步骤,包括参数准备、签名生成、请求发送和响应处理;Python 请求示例提供了一个完整的代码实现,帮助开发者快速上手。示例代码涵盖了请求参数配置、签名生成逻辑以及使用 requests 库发送请求的过程,为实际应用提供了参考。

207 13
|
8月前
|
存储 数据采集 分布式计算
|

别光堆数据,架构才是大数据的灵魂!

别光堆数据,架构才是大数据的灵魂!

304 13
|
8月前
|
搜索推荐 算法 测试技术
|

为你的健康和时尚量身定制:可穿戴设备个性化定制的技术探索

为你的健康和时尚量身定制:可穿戴设备个性化定制的技术探索

247 21
|
8月前
|

DataWorks X MCP:数据开发治理Agent发布!

DataWorks X MCP产品演示:使用DataWorks MCP Server和Hologres MCP Server来自动化完成数据集成实时数据同步任务开发和Hologres数据分析。

456 0
|
8月前
|
机器学习/深度学习 人工智能 搜索推荐
|

用大数据重塑客户关系管理:聪明企业的秘密武器

用大数据重塑客户关系管理:聪明企业的秘密武器

196 9
|
8月前
|
数据采集 存储 消息中间件
|

数据应用:从采集到分析 —— 构建端到端数据管道

本文分享了一个针对亚洲航空官网的爬虫项目实践,从需求提出到最终优化,详细记录了故障解决与架构改进的过程。初期因频繁访问被限制后,通过引入代理IP、伪装User-Agent和Cookie等技术突破反爬机制。随后采用分布式爬虫架构、智能代理切换及容错重试机制提升系统稳定性。示例代码展示了如何配置代理并解析航班信息,为类似项目提供了完整的技术参考与经验总结。

190 9
|
8月前
|
数据采集 人工智能 监控
|

探讨 AI 驱动自适应数据采集技术

在当今互联网环境下,网页结构动态变化日益复杂,传统数据采集技术面临巨大挑战。本文探讨了基于AI算法的自适应数据采集方法,结合爬虫代理、Cookie与User-Agent设置等关键技术,应对动态页面变更。通过Python示例代码,展示如何稳定抓取目标网站数据,并分析该技术的优势、挑战及实际应用注意事项,为未来数据采集提供了新思路。

417 44
|
8月前
|
搜索推荐 数据挖掘 数据安全/隐私保护
|

频率派与贝叶斯统计在营销组合建模中的应用比较:隐私优先时代的方法选择

营销组合建模(MMM)是量化营销渠道贡献的核心工具,在数字营销进入隐私优先时代后焕发新生。文章探讨了频率派与贝叶斯统计学在MMM中的应用,前者实现简单、结果直观,适合数据充足场景;后者能整合先验知识、量化不确定性,适应复杂和数据稀缺情况。两者各有优劣,选择需结合业务需求与数据条件。贝叶斯方法在隐私保护趋势下尤为重要,为未来营销分析提供新思路。

242 47
|
8月前
|
数据采集 数据可视化 大数据
|

Python入门修炼:开启你在大数据世界的第一个脚本

Python入门修炼:开启你在大数据世界的第一个脚本

176 6
|
8月前
|
自然语言处理 并行计算 C++
|

FlashTokenizer: 基于C++的高性能分词引擎,速度可以提升8-15倍

FlashTokenizer是一款高性能CPU分词引擎,专为BERT等Transformer架构优化。基于高效C++实现与多线程并行处理,性能较传统分词器提升8-15倍,显著加速文本预处理。支持跨平台安装,适用于大规模文本处理、实时NLP应用及资源受限场景,助力开发者提升模型推理效率、降低硬件成本。

272 13
|
9月前
|
存储 人工智能 自然语言处理
|

RAL-Writer Agent:基于检索与复述机制,让长文创作不再丢失关键信息

RAL-Writer Agent是一种专业的人工智能写作辅助技术,旨在解决生成高质量、内容丰富的长篇文章时所面临的技术挑战,确保全文保持连贯性和相关性。本研究将系统分析RAL-Writer的核心技术架构、功能特点及其在内容创作、学术研究和专业交流领域的应用前景。

169 4
|
9月前
|
机器学习/深度学习 搜索推荐 大数据
|

数据驱动的教育革命:让学习更智能、更个性化

数据驱动的教育革命:让学习更智能、更个性化

315 76

大数据与机器学习

大数据领域前沿技术分享与交流,这里不止有技术干货、学习心得、企业实践、社区活动,还有未来。

5
今日
67666
内容
128
活动
439482
关注
你好!
登录掌握更多精彩内容

相关产品

  • 大数据开发治理平台 DataWorks
  • 检索分析服务 Elasticsearch版
  • 日志服务