明略科技HAO图谱Open API:开放企业级知识图谱构建能力

简介: 首个语音实时生成图谱的企业级知识图谱开发工具包。

由深度学习掀起的这波 AI 浪潮极度依赖数据,经过 10 年的发展,深度学习在一些场景应用上已经面临瓶颈。业内有一种声音得到了大量认同:人工智能的进一步发展与突破,需要从感知智能向认知智能的突破,知识图谱能有效从数据中挖掘出知识,以更具可解释性的 AI 指导人类在更多复杂场景中的智能决策和行动。


7 月 11 日,在 2020 WAIC 世界人工智能大会上,明略科技 HAO 图谱,作为目前世界上第一个语音实时生成图谱的企业级知识图谱开发工具包,首次公开亮相,成功入围了大会最高奖项 SAIL 奖(Super AI Leader)TOP30 的项目及 2020 年度 SAIL 榜单。


明略科技首席科学家、明略科学院院长吴信东在开发者日:开发 · 开源 · 社区主题论坛上正式宣布 HAO 图谱依托国家新一代人工智能开放创新平台开放 Text2KG API 接口,赋能开发者和企业级用户。


负责 HAO 图谱具体研发工作的是明略科学院知识工程实验室,我们与实验室主任张杰博士进行了交流,他向我们介绍了明略科技的 HAO 图谱技术及应用落地。


HAO 图谱,源自于 2018 年明略科技提出的 HAO 智能理论框架。HAO 智能旨在集成人类智能(HI)、人工智能(AI)和组织智能(OI),打通感知、认知和行动系统,帮助企业和组织实现智能化发展。其中,HAO 图谱属于认知系统的范畴。


HAO 图谱,可以独立运行,也可交付给企业技术团队进行二次开发,核心模块包括语音流监听,语音转文本,标点预测,口语顺滑,文本补全,实体关系抽取,实体对齐,以及图谱话题切换。


微信图片_20211204005034.png


具体来说,HAO 图谱的输入为一维的文字序列或语音流,系统工作时分为如下几步:

  1. 逐句翻译,形成大图:首先将输入序列逐句的做实体识别和关系抽取,绘制成图结构,每新增一句,就在原有的图结构上增加新节点和新边;
  2. 篇章摘要,找到重点:当整段文本或语音输入结束后,再在篇章级大图谱上,根据节点的语义、图结构、位置等特征识别出重点节点和边;
  3. 关联背景知识:将重点节点和关系映射到后台的领域知识图谱上,利用领域知识图谱扩展其语义信息。领域图谱包括:由大量实例组成的数据图谱、由因果关系组成的因果图谱、由领域本体结构和领域词表组成的语义工具;
  4. 图谱增强的应用:针对领域内的特定场景需求,基于图谱做可视化交互、分类、检索、推荐、文本生成等特定任务。


目前 HAO 图谱开放的 Text2KG API 接口,提供了文本转图谱的能力,但后台还做了一些面对 PDF、PPT、word 等半结构化文档的信息抽取接 


知识图谱技术在产业界正经历着应用的高速增长,学术领域前沿成果与实际落地应用场景间依然存在着巨大的鸿沟,设计、开发、部署一套知识图谱系统,会面临数据标注、模型训练调优、高并发高可用等一系列问题。「目前业内仍缺少一个工业级的稳定工具,HAO 图谱是第一个语音实时生成图谱的企业级知识图谱开发工具包。」张杰表示。


在实际的知识图谱构建流程中,标注数据、训练模型需要花费大量时间。而 HAO 图谱很大程度上解决了上述问题,让数据分析师或者是建模人员集中精力在业务层,而底层的收集数据、标注数据、训练模型、数据抽取以及与后台关联可以通过调用 HAO 图谱 Text2KG API 完成,避免了大量的重复工作。「根据实际的企业用户使用情况来看,可以帮助开发者节约 60% 左右的时间。」张杰介绍。

HAO 图谱所提供的模型,既包含通用模型,也包含特定领域的模型,如汽车、奶粉、美妆等。通过 API 接口,使用已经训练好的开放域模型和特定领域模型,开发者可以集中精力在使用知识图谱解决实际的业务问题上。


知识图谱的应用涉及可视化、分类、检索、推荐和生成。目前,HAO 图谱已经被广泛应用在社交舆情分析、销售技能培训、金融交易反欺诈、案情研判、设备维护、城市及园区管理等不同场景。


在推荐领域,将领域知识有效融入算法,提高推断准确率一直是研究的难点之一。知识图谱,可将人类专家经验和规则,以及大量来自互联网、各个产业生产中获得的数据,有机结合,通过对不同实体(节点)之间关系的进行分析,获得洞察。「知识图谱蕴含一定的可解释性,因果关系相对比较明确,这一特点让它在金融、轨交、电力、公共安全等行业中得以较快落地。」


在社交媒体舆情分析场景中,基于知识图谱,可以把用户产生的评论,与后台已有的品牌数据结合,对产品特性进行观察,分析特定维度的用户舆情走势,随后把这些结果整合到 BI 系统,为运营人员提供用户需求洞察。在此基础之上,实现千人千面的个性化广告。


在智能导购场景中,比如,销售人员通过佩戴明略的智能工牌,在保障用户隐私和数据安全的前提下,将销售对话转为文字,进行话题分类,形成一个话题转移的知识图谱,计算出话题之间转移的概率,帮助销售人员复盘,分析流单的主要环节,改善话题转移和引导,提高成单率。


总之,HAO 图谱可以把企业数据按照业务逻辑抽象为陈述性知识或过程性知识,生成数据洞察以更易使用的方式为业务服务。「通过历史数据的分析和行业专家先验知识的输入,知识图谱可以很大程度上把行业知识复现出来,并实现能力的复用,明略科技能够在历史数据达到 10PB 级、日均增量数据超过 10TB 的环境下进行数据价值的挖掘,实现毫秒级的预测性分析,结合行业知识图谱形成决策和行动。」


目前,在企业智能化服务领域,明略科技已成长为一家明星公司。去年 8 月,明略科技成为第二批「国家新一代人工智能开放创新平台」建设单位,以开放、创新、共享为基本原则,持续建设软件与硬件平台、开源社区平台、培训平台,构建人工智能众创平台和标准验证实验室,设立人工智能产业基金,全面打造平台生态体系。HAO 图谱 Text2KG API 已在明略科技国家新一代人工智能开放创新平台官网上线。

文为机器之心报道,转载请联系本公众号获得授权

✄------------------------------------------------

相关文章
|
4月前
|
运维 NoSQL Serverless
|
2月前
|
人工智能 API 开发工具
构建AI智能体:一、初识AI大模型与API调用
本文介绍大模型基础知识及API调用方法,涵盖阿里云百炼平台密钥申请、DashScope SDK使用、Python调用示例(如文本情感分析、图像文字识别),助力开发者快速上手大模型应用开发。
1302 16
构建AI智能体:一、初识AI大模型与API调用
|
5月前
|
机器学习/深度学习 JSON 监控
如何通过API技术提升电商客户忠诚度:构建智能化客户关系引擎
在电商竞争激烈的当下,客户忠诚度成为核心壁垒。通过API技术构建智能化客户关系系统,整合全渠道数据,实现个性化推荐与自动化运营,提升用户黏性与复购率。结合实时行为分析、差异化定价、积分系统等手段,打造高效忠诚度管理体系,助力企业实现长期增长。
106 1
|
5月前
|
机器学习/深度学习 人工智能 弹性计算
基于OpenAPI和AI coding的上云智能体构建实践
本文探讨了基于LLM和AI编程技术构建上云智能体的实践,提出通过人在回路中设计整体流程、LLM自主决策与执行的方式,有效减少幻觉并提升任务正确率。方案在多轮迭代中逐步生成代码,解决了API参数依赖等问题,并验证了三大核心设计理念的可行性。
基于OpenAPI和AI coding的上云智能体构建实践
|
6月前
|
数据采集 机器学习/深度学习 搜索推荐
利用通义大模型构建个性化推荐系统——从数据预处理到实时API部署
本文详细介绍了基于通义大模型构建个性化推荐系统的全流程,涵盖数据预处理、模型微调、实时部署及效果优化。通过采用Qwen-72B结合LoRA技术,实现电商场景下CTR提升58%,GMV增长12.7%。文章分析了特征工程、多任务学习和性能调优的关键步骤,并探讨内存优化与蒸馏实践。最后总结了大模型在推荐系统中的适用场景与局限性,提出未来向MoE架构和因果推断方向演进的建议。
1096 11
|
6月前
|
监控 安全 API
电商API行业标准与规范体系构建:推动电商行业规范化前行
电商API行业标准与规范是推动电商高效发展的核心。通过数据格式标准化、接口设计一致性及严格的安全措施,可提升数据交互效率、保障安全并促进系统兼容性。淘宝、京东、拼多多等平台的实践展示了其重要性。未来,智能化、隐私保护强化和跨平台集成将成为主要趋势,助力电商生态持续繁荣。
|
4月前
|
前端开发 测试技术 API
企业级API工具的选择:Apipost和Apifox哪个好
Apifox相比Apipost在企业级API协作方面表现更出色,其一体化平台设计有效提升团队协作效率,功能整合度高,支持标准化接口管理,更适合规模化团队和技术协作需求。
370 120
|
5月前
|
监控 安全 数据挖掘
构建自定义电商数据分析API
在电商业务中,构建自定义数据分析API可实现销售、用户行为等指标的实时分析。本文介绍如何设计并搭建高效、可扩展的API,助力企业快速响应市场变化,提升决策效率。
166 0
|
3月前
|
安全 Java API
使用 Java 构建强大的 REST API 的四个基本技巧
本文结合探险领域案例,分享Java构建REST API的四大核心策略:统一资源命名、版本控制与自动化文档、安全防护及标准化异常处理,助力开发者打造易用、可维护、安全可靠的稳健API服务。
236 2
|
4月前
|
运维 NoSQL Serverless
《第四纪元》玩得轻松,构建也轻松 | 阿里云云原生 API 网关、函数计算助力 IGame 快速构建轻休闲游戏
在轻休闲游戏流量波动大、生命周期短的背景下,传统架构难以应对成本与扩展挑战。本文介绍了基于阿里云函数计算 FC 和 Redis 构建的新一代服务器架构,实现弹性伸缩、成本优化与高效运维,助力轻休闲游戏快速迭代与稳定运营,提升开发效率并降低运维复杂度。
《第四纪元》玩得轻松,构建也轻松 | 阿里云云原生 API 网关、函数计算助力 IGame 快速构建轻休闲游戏