Mpeg-21 | 学习笔记

简介: 快速学习 Mpeg-21,介绍了 Mpeg-21系统机制, 以及在实际应用过程中如何使用。

开发者学堂课程【高校精品课-华中科技大学 -智能媒体计算Mpeg-21】学习笔记,与课程紧密联系,让用户快速学习知识。

课程地址:https://developer.aliyun.com/learning/course/811/detail/15721


Mpeg-21


内容介绍

一、概念

二、原因

三、具体内容


一、概念

1、mpeg-21是多媒体框架,英文 multimedia framework。标准号是 iso/iec 21000,2007年发布。mpeg-7是一个多媒体内容的描述结构,2001年发布。

mpeg-21与 mpeg-7不同,它是框架,是一个愿景。mpeg-21是一个开放的标准,是多媒体的 Delivery,例如传输传递,主要是交易的环节,以及消费规定的框架。

原来的多媒体信息是以硬拷贝的方式。如今购买和传输的方式有了很大的转变。早期可以买录像带看视频,买 CD 听歌,如今这种方式越来越少,都是从网络上获取相应的视频内容或是音频内容。

原来买书去书店买硬拷贝,现在可以通过电子书,在客户端里阅读。

这样的多媒体内容如何进行传输,如何进行表示,如何进行版权的保护等就成为很大的挑战。专家们设计了一个标准,目标就是使得多媒体的资源在互联网上能够便捷地使用。

2、标准的内容其实很丰富。

它是一个多媒体的框架,主要是为整个多媒体从创作发行交易各个环节一直到消费者,就是从创作者到消费者之间的所有原来传统的传输链条上的每一个环节都涉及。不同的是全改成了电子化,在互联网上进行。

因此,关注的两个焦点就是内容创作者和内容消费者。写书的人原来写完书后是出版社出版,给发行商然后给零售商,或者是从批发商再到零售商,然后再去书店购买。现在只是在互联网上采用订阅的方式或者购买拷贝的方式。


二、原因

1、为什么需要标准

通过这几十年的发展,很多基础设施都具备了,例如多媒体内容的压缩标准。内容描述有各种安排的期许各种特点。传输方面也有各种各样的协议,都对不同的环节做了相应的规定。

但是缺少 big picture,一个大的蓝图,把这不同的组件组合起来,形成一个完整的处理框架,而 mpeg-21希望能够把 Big picture 描绘出来。

好处它使得现有的存在的组件能够相互结合在一起,从而把彼此之间的GEp就是间隙有机融合在一起。

2、为什么现在才做,原来不做

原来的技术不够成熟,压缩标准还没有,不可能在互联网上传输,互联网的技术没发展到一定程度,也不可能在互联网上看视频。三十年前基础设施太差,无论是软件还是硬件,不可能看高清的视频。

但是现在终端设备,技术协议,标准,足以保证可以在互联网上做很多事,甚至可以做任何事情,因此现在提出来标准是具备条件的,例如压缩,传输,描述等等,这些标准已经准备好了。


三、具体内容

21的标准的主要内容有十二部分。其他辅助的东西还有很多。第一部分,做视觉,多媒体研究的,应该好好地把这个标准看一看,可以在网上下载相应的草案。

1、Vision technologies and strategy,就是目标是什么,用了哪些技术,策略是什么。

2、digital item declaration 。第二部分定义是多媒体内容里的任何一个单元,一个内容,都可以成为一个 digital item。

例如一首歌,一本书,一部电视剧,或者一个电视剧第一集,或者是写的一段歌词或是文本,一篇文章,都是一个 digital item。就是如何来定义或者声明这个 digital item。用了生理语言,也用了 xml。讲 mpeg-7的时候,描述语言也是 xml。

3、Digital item identification,就是数字项或多媒体内容如何进行识别。

DIi,例如一首歌曲有歌曲的唯一标示,一本书有书号,期刊有期刊号,电视剧也有相应的编码。在21之前,每一个商品都有编码。在这里统一起来提供识别的服务。

4、知识产权的管理和保护,叫 IPMP。知识产权的就是水印,是一种版权保护。我们的编码,访问,控制等等。

5、特定的内容,不同的订阅有不同的权利,例如花钱买了一本书的版权,就可以卖给别人,已经买断了。如果买的是看的权限,那就只能在线阅读。有的PDF文件里有编辑的功能。

所以不同的订阅,权限不一样,怎么来适用多个权限的表达,这里面专门有一部分就是这个权限的表达,叫 rel。

6、RDD

7、Digital item Adaptation,是指数字项的自适应。以视频为例,如何适应不同的网络,适应不同的终端。这个领域里有很多的研究价值。有的视频为了适应在小的平板上或者手机上观看,可能要进行降裁或者进行裁剪,把感兴趣的内容裁剪出来。还可以进行分层的编码,前面讲传输时讲过。

8、参考的软件

9、文件的格式

10、Processing 处理

11、评价方法和一致性的关联技术

12、21的测试平台。

如果不研究标准,仅仅想在未来的研究中使用 mpeg-21的话,重点看第一部分。

如果想建一个系统利用 mpeg-21的话,重点看第二三部分的声明,识别。

如果是做知识产权保护的,做水印也好,其他的版权保护算法也好,例如拷贝检测等等,第四五部分是阅读的重点。

如果是做传输,网络,多媒体内容的自适应传输的,第七部分就是研究重点。

这里面给出了视频传输的整个框架和不同的算法。全世界为了这个标准,集成了最优秀的一批多媒体领域专家。

相关文章
|
机器学习/深度学习 编解码 人工智能
麻省理工AI新研究可将马赛克变视频
【2月更文挑战第30天】麻省理工学院等机构的研究团队推出AI新技术FeatUp,可将低分辨率图像提升为高清视频,该技术在2024年ICLR会议上引起关注。FeatUp基于深度特征提取,通过多视角一致性损失恢复空间信息,提高视频清晰度。模型通用性强,适用于多种任务和现有应用。实验显示,它在图像超分辨率和端到端学习模型性能提升上超越其他方法。然而,尚存在对某些内容处理不完善和计算资源需求高的局限性。
305 2
麻省理工AI新研究可将马赛克变视频
什么是阻抗匹配?如何在设计中使用阻抗匹配变压器
如果你是一名 RF 设计工程师或任何使用过无线电的人,那么“阻抗匹配”一词应该不止一次让你印象深刻。该术语至关重要,因为它直接影响传输功率,从而影响我们无线电模块的范围。本文旨在帮助您从基础了解什么是阻抗匹配,并帮助您使用最常用的阻抗匹配变压器设计自己的阻抗匹配电路。所以,一起来了解下吧。
5906 1
什么是阻抗匹配?如何在设计中使用阻抗匹配变压器
|
存储 负载均衡 NoSQL
|
5月前
|
人工智能 自然语言处理 文字识别
快手封号多久能恢复正常?
快手账号封禁恢复全流程技术解析
|
机器学习/深度学习 TensorFlow 算法框架/工具
【大作业-04】手把手教你构建垃圾分类系统-基于tensorflow2.3
本文介绍了基于TensorFlow 2.3的垃圾分类系统,通过B站视频和博客详细讲解了系统的构建过程。系统使用了包含8万张图片、245个类别的数据集,训练了LeNet和MobileNet两个卷积神经网络模型,并通过PyQt5构建了图形化界面,用户上传图片后,系统能识别垃圾的具体种类。此外,还提供了模型和数据集的下载链接,方便读者复现实验。垃圾分类对于提高资源利用率、减少环境污染具有重要意义。
712 0
【大作业-04】手把手教你构建垃圾分类系统-基于tensorflow2.3
|
10月前
|
人工智能 自然语言处理 数据可视化
《当传统遇上AI:Tableau与PowerBI的华丽转身》
在数据可视化与分析领域,Tableau和PowerBI长期占据重要地位。随着AI技术的融入,这两款工具实现了全方位升级,极大提升了用户体验。 Tableau新增自然语言交互、智能洞察挖掘和可视化智能推荐功能,降低了数据分析门槛,帮助用户轻松发现隐藏规律并高效制作图表。PowerBI则通过DAX公式智能编写、移动端智能交互和报表智能订阅等功能,简化了复杂计算,实现了随时随地的数据洞察。两者共同开启了数据处理的新时代,为企业决策提供有力支持。
405 12
|
搜索推荐 定位技术 vr&ar
科技助力医疗:医院AR导航系统的实际应用与效益分析
在快节奏的现代医疗环境中,患者与医护人员对高效、便捷的院内导航需求日益增长。随着科技的飞速发展,传统的纸质地图已难以满足复杂多变的医疗空间需求。在此背景下,集成AR(增强现实)技术的院内导航系统应运而生,以其独特的优势和创新功能,正逐步成为智慧医院建设的重要组成部分。
437 0
科技助力医疗:医院AR导航系统的实际应用与效益分析
|
机器学习/深度学习 人工智能 自然语言处理
|
弹性计算 Kubernetes 测试技术
一文掌握弹性与成本的完美平衡 选择正确上云“姿势”,正确实例选型,平滑应对流量高峰
2023云栖大会,阿里云弹性计算弹性计算产品专家王曦、阿里云弹性计算高级技术专家王渊平、阿里云弹性计算高级技术专家田政雄3位嘉宾出席分享,云上付费方式、各规格实例比较应用、ECS如何保障客户满足流量峰值弹性需求等话题。
|
前端开发 Java 应用服务中间件
Spring Boot自动配置详解
Spring Boot自动配置详解