微软亚研20周年,微软ResNet等AI技术突破盘点

本文涉及的产品
图片翻译,图片翻译 100张
文档翻译,文档翻译 1千页
语种识别,语种识别 100万字符
简介: ResNet、r-Net,在人工智能迅猛发展的今天,微软研究之花可独表一枝

2016 年,《财富》杂志在文章《Why deep learning is suddenly changing your life》曾如此描述这波 AI 浪潮的兴起,「最初的革命火花开始于 2009 年。那年夏天微软的邓力邀请神经网络先驱、多伦多大学的 Geoffrey Hinton 来参观并合作... 邓力的团队用神经网络做了大量语言识别方面的实验。」


作为世界顶尖的研究中心之一,成立于 1991 年的微软研究院经过数十年的积累,成为了这波深度学习浪潮中的主力军。而微软亚研作为微软在美国本土以外最大的基础研究机构,作出了 ResNet、r-Net 这样的顶级研究成果,也培养了何恺明、孙剑这样一批优秀的后继力量。


11 月 5 日,是微软亚洲研究院(MSRA) 成立 20 周年。在「21 世纪的计算」学术研讨会以及后续的 20 周年庆典上,微软回顾了他们为全球 AI 技术发展贡献的重要研究成果,特别是在 AI 领域的突破性研究。机器之心对这些突破性研究进行了盘点,很荣幸的是我们从 2015 年初就已经开始关注、报道微软在 AI 领域的技术突破。


微信图片_20211130141801.jpg图:来自「21 世纪的计算」学术研讨会上洪小文演讲


计算机视觉 ResNet、Faster R-CNN


计算机视觉是人工智能核心领域之一,过去数年因深度学习得以快速发展。在 2015 年微软研究院的研究者们提出 ResNet 之前,卷积网络的深度有非常大的限制,最深的网络受限于梯度传播也只有十几二十层。而微软的研究者创新地提出了残差连接,从而使得训练数百甚至数千层成为可能,并在这种情况下能展现出大大超越以往的性能。


在 ImageNet 比赛分类任务中,ResNet 获得第一名,ResNet 的作者何恺明也因此摘得 CVPR2016 最佳论文奖,其他作者包括张祥雨(Xiangyu Zhang)、任少卿(Shaoqing Ren)和孙剑(Jiangxi Sun)


微信图片_20211130141834.jpg


现在,ResNet 已经成为了计算机视觉领域的一大经典技术,很多 CV 任务都将预训练的 ResNet 作为基础网络,可以说大多数 CV 模型都离不开 ResNet。除了 ResNet,在计算机视觉领域微软还提出了用于实时物体检测的 Faster R-CNN,用于立体视觉的置信度传播算法,用于图像分割的 Lazy Snapping 算法以及暗通道去雾法等。


参见:



「超人」语音识别


除了计算机视觉,语音识别也因深度学习取得极大的突破。2016 年,微软在语音识别次错率上不断刷新记录:2016 年 9 月份,微软的单个系统在产业标准 Switchboard 语音识别任务的基准评估取得了 6.3% 的词错率(WER);2016 年 10 月份,微软语音识别系统实现了和专业速录员相当甚至更低的词错率(WER),达到了 5.9%;2017 年 8 月,微软语音识别研究团队在黄学东的带领下,将去年 10 月刷新的 5.9% 词错率降至 5.1%。


微信图片_20211130141910.jpg


在 2017 年 9 月份,机器之心对黄学东的专访中他曾表示,「在技术研究的「最后一英里」,每 0.1 个百分点的进步都异常艰难。」但他也表示,「真正的语音识别有口音、噪音、远场、语速等等问题,在这些方面,人的鲁棒性还是不同一般的。所以我们在这个任务上达到了『超人』的水平只是一个小小的里程碑。」在这个领域,还有大量的工作需要完成。


参见:



机器阅读理解打破人类记录


2018 年 1 月初,AI 社区为微软、阿里所引爆。几乎在同一时间,微软和阿里巴巴的机器阅读理解系统在最新的 SQuAD 数据集测评结果中取得了并列第一的成绩,历史上第一次打破了人类记录。


在此比赛中,微软使用的是 MSRA 于 2017 年发布的论文《R-NET: MACHINE READING COMPREHENSION WITH SELF-MATCHING NETWORKS》中提出的 R-Net。R-NET 模型在 SQuAD 文本理解挑战赛中,EM 值(表示预测答案和真实答案完全匹配)达到 82.650 分。此后,微软亚洲研究院升级后的 NL-NET 模型在 EM 值和 F1 值(表示预测答案和真实答案近似匹配)两个维度上,分别获得了 85.954、91.677 的高分。


微信图片_20211130141939.jpg虽然此成绩经过媒体的夸大传播引起了 NLP 社区的反感,但我们确实在机器阅读理解领域不断进步。除此之外,过去几年,微软研究院一直在「让机器理解人类上」压以重注,如 2016 年微软发布数据集 MS MARCO,有意打造阅读理解领域的「ImageNet」;2017 年微软收购 NLP 明星公司 Maluuba。


参见:



机器翻译媲美人类


2016 年,自谷歌宣布谷歌翻译整合神经网络实现颠覆性突破之后,机器翻译成为了深度学习社区的热门研究领域。2018 年 3 月,微软研究团队表示,微软和微软亚研创造了首个在质量与准确率上匹配人类水平的中英新闻机器翻译系统。



微信图片_20211130142008.jpg


在接受机器之心专访时,微软语音、自然语言与机器翻译的技术负责人黄学东表示,他们采用专业人类标注与盲测评分代替 BLEU 分值而具有更高的准确性,且新系统相比于现存的机器翻译系统有非常大的提升。因此,根据人类盲测评分,微软机器翻译取得了至少和专业翻译人员相媲美的效果。

相关文章
|
8天前
|
人工智能 搜索推荐 安全
AI技术在医疗领域的应用与挑战
【10月更文挑战第27天】 本文探讨了人工智能(AI)在医疗领域的应用,包括疾病诊断、药物研发和患者管理等方面。同时,也分析了AI在医疗领域面临的挑战,如数据隐私、伦理问题和技术局限性等。通过对这些方面的深入分析,我们可以更好地理解AI在医疗领域的潜力和发展方向。
108 59
|
6天前
|
机器学习/深度学习 人工智能 自然语言处理
思通数科AI平台在尽职调查中的技术解析与应用
思通数科AI多模态能力平台结合OCR、NLP和深度学习技术,为IPO尽职调查、融资等重要交易环节提供智能化解决方案。平台自动识别、提取并分类海量文档,实现高效数据核验与合规性检查,显著提升审查速度和精准度,同时保障敏感信息管理和数据安全。
40 11
|
1天前
|
人工智能 自然语言处理 算法
企业内训|AI/大模型/智能体的测评/评估技术-某电信运营商互联网研发中心
本课程是TsingtaoAI专为某电信运营商的互联网研发中心的AI算法工程师设计,已于近日在广州对客户团队完成交付。课程聚焦AI算法工程师在AI、大模型和智能体的测评/评估技术中的关键能力建设,深入探讨如何基于当前先进的AI、大模型与智能体技术,构建符合实际场景需求的科学测评体系。课程内容涵盖大模型及智能体的基础理论、测评集构建、评分标准、自动化与人工测评方法,以及特定垂直场景下的测评实战等方面。
18 4
|
1天前
|
机器学习/深度学习 人工智能 算法
基于AI的性能优化技术研究
基于AI的性能优化技术研究
|
5天前
|
机器学习/深度学习 人工智能 算法
AI技术在医疗健康领域的应用与挑战####
本文旨在探讨人工智能(AI)技术在医疗健康领域的创新应用及其面临的主要挑战。通过深入分析AI如何助力疾病诊断、治疗方案优化、患者管理及药物研发,本文揭示了AI技术在提升医疗服务质量、效率和可及性方面的巨大潜力。同时,文章也指出了数据隐私、伦理道德、技术局限性等关键问题,并提出了相应的解决策略和未来发展方向。本文为医疗从业者、研究者及政策制定者提供了对AI医疗技术的全面理解,促进了跨学科合作与创新。 ####
|
4天前
|
人工智能 算法
AI技术在医疗领域的应用及其挑战
【10月更文挑战第31天】本文将探讨AI技术在医疗领域的应用及其面临的挑战。我们将从AI技术的基本概念开始,然后详细介绍其在医疗领域的应用,包括疾病诊断、药物研发、患者护理等方面。最后,我们将讨论AI技术在医疗领域面临的挑战,如数据隐私、算法偏见等问题。
|
4天前
|
存储 人工智能 文字识别
AI与OCR:数字档案馆图像扫描与文字识别技术实现与项目案例
本文介绍了纸质档案数字化的技术流程,包括高精度扫描、图像预处理、自动边界检测与切割、文字与图片分离抽取、档案识别与文本提取,以及识别结果的自动保存。通过去噪、增强对比度、校正倾斜等预处理技术,提高图像质量,确保OCR识别的准确性。平台还支持多字体识别、批量处理和结构化存储,实现了高效、准确的档案数字化。具体应用案例显示,该技术在江西省某地质资料档案馆中显著提升了档案管理的效率和质量。
|
6天前
|
机器学习/深度学习 人工智能 自然语言处理
医疗行业的语音识别技术解析:AI多模态能力平台的应用与架构
AI多模态能力平台通过语音识别技术,实现实时转录医患对话,自动生成结构化数据,提高医疗效率。平台具备强大的环境降噪、语音分离及自然语言处理能力,支持与医院系统无缝集成,广泛应用于门诊记录、多学科会诊和急诊场景,显著提升工作效率和数据准确性。
|
6天前
|
人工智能 运维 数据挖掘
跨界融合:AI与5G技术如何共同推动数字化转型
【10月更文挑战第29天】本文探讨了人工智能(AI)与第五代移动通信技术(5G)的结合如何推动数字化转型。通过高速、低延迟的5G网络和AI的数据分析能力,两者相辅相成,实现了智能化网络运维、增强网络功能和多行业的实际应用。文中提供了网络流量预测和故障预测的示例代码,展示了技术的实际应用潜力。
19 1
|
13天前
|
机器学习/深度学习 人工智能 供应链
AI技术在医疗领域的应用与未来展望###
本文深入探讨了人工智能(AI)技术在医疗领域的多种应用及其带来的革命性变化,从疾病诊断、治疗方案优化到患者管理等方面进行了详细阐述。通过具体案例和数据分析,展示了AI如何提高医疗服务效率、降低成本并改善患者体验。同时,文章也讨论了AI技术在医疗领域面临的挑战和未来发展趋势,为行业从业者和研究人员提供参考。 ###

热门文章

最新文章

下一篇
无影云桌面