开发者学习笔记【阿里云人工智能工程师ACA认证(2023版):实验:计算机视觉技术简单实现】
课程地址:https://edu.aliyun.com/course/3112108/lesson/19277
实验:计算机视觉技术简单实现
内容介绍:
一、阿里巴巴视觉智能开放平台介绍
二、快速分割图像中的服饰轮廓
三、本章小结
一、阿里巴巴视觉智能开放平台介绍
视觉智能开放平台是基于阿里巴巴公司视觉技术的实践经验开发出的一个开放性平台。
面向对象是视觉智能技术体验者和开发商,为其提供了高医用的、普惠性的 KPI 服务,使用视觉智能开放平台能够帮助使用者快速建立视觉智能应用的生活能力。
视觉智能开放平台覆盖多个行业,例如:交通、新媒体、互联网、医疗等多个行业,视觉智能开放平台也产生了许多应用场景,例如车辆进出管理,视觉智能开放平台在其中为其提供了车牌识别、驾驶证识别、行驶证识别、 VIN 码识别等能力。
在新媒体领域中视频质量增强这个应用场景中,视觉智能平台提供了视频超分辨、视频插帧、 SDR 转 HDR 的能力。在互联网领域中互动娱乐这个应用场景中,视觉智能开放平台提供了图像人脸融合、视频人脸融合、视频人像分割的能力。基于视觉智能开放平台的诸多能力也产生了许多的应用,例如在互动娱乐时利用视频人像分割来更换背景。
在医疗领域中卫生防疫这个应用场景中,视觉智能平台提供了人脸口罩检测、口罩人脸对比的能力。基于视觉智能平台人脸口罩检测的能力来检测来往人员是否佩戴口罩并对其进行报警和提示。利用口罩人脸对比在疫情期间为医疗、卫生防疫提供巨大支持。阿里云智能开放平台的能力不仅仅只有上述这些,其牵涉方向有十多个大方向,包括人脸人体装置识别、商品理解内容审核、图像识别、分割抠图、图像生产、视觉输送、视觉理解、视频分割、视频生产、视频搜索、目标检测、 3D 视觉、 VR 等能力牵涉方向。智能开放平台的这些能力都可以通过 VPI 方式透出其接入方式的多元化,可以快速接入使用,省心省力。
二、快速分割图像中的服饰轮廓
1、服饰分割-实验背景
在电商领域,经常需要随着不同的营销节日,有大规模批量化海报生产和投放的需求
从头进行海报的设计费时费力,而图像分割技术能够帮助设计人员快速搭配产出各类风格的电商
营销图片
利用抠图+模版方式,降低商家设计成本、提高设计效率。
下面来做一个实验,快速的分割图像里面的服饰轮廓,首先是实验背景,服饰分割的作用,在电商这个领域里经常会遇到这种需求,随着不同的营销节日,有大规模的批量化海报生产和投放的需求,比如母亲节,对妈妈的衣服有大量的海报要制作,因为衣服有很多款,如果从头设计海报会费时费力,这个时候可以用图像分割技术来帮助设计人员快速的搭成各种风格的电商营销图片,简单来说可以抠图,抠图后再合成新的图片,用抠图的模板的方式降低设计成本,提高设计效率。
上图这种服装,如果想换一个模特,可能要找模特、找服装、拍摄、再修图等等,现在用抠图的方式把衣服从模特身上提取出来,希望得到的照片是右边这个结果,就成为一个模板,可以在新的设计里面用不同的模特换衣服,大大的提高了效率,这是企业的背景,服饰分割的作用。
2、服饰分割-实验步骤
首先进入阿里云达摩院视觉智能开放平台网站
登录阿里云账号
能力广场-分割抠图-商品分割-服饰分割
点击开通服饰分割功能
进入 PAI-DSW 平台
根据要求输入请求代码
接下来是服饰分割的实验步骤,首先要进入阿里云达摩院视觉智能开放平台网站,通过阿里云账号进入,在能力广场找分割抠图、商品分割、服饰分割专门用来做服饰分割,点击开通服饰分割功能,此时可以调用API,开通之后可以进入 PAI-DSW 平台,进入平台之后,根据要求输入请求,具体请求可以查询API的说明文档,会提示如何调用,打开PAI-DSW平台,调用很简单,几行代码
上图是如何调用,看到打开的平台之后。先录入常用的术语,建立一个client,需要填上IP的信息等等。开通功能之后client可以来调用API,调用通过发一个request请求,接收一个格式,发送请求时,request要提交图片,可以看到上图方框中提交图片的链接地址,相当告诉图像分割功能的API,将哪个图片进行处理,图片的地址传送,写好之后点击运行,等待接收回复
回复的内容像上图一样,得到一个json格式的结果,结果中有一个图片的链接,是服饰分割后的结果,打开查看是否为满意的结果
经过调用API获得处理后的图像
处理前后的效果对比如下:
左边是没有分割的,右边是服饰分割后的结果,大家是否服这个结果满意,调用API需要注意输入的限制,输入的限制包括图像的格式,能处理各种如PNG、JPG等的格式,图像的大小不能超过三兆,就图像的分辨率应该大于50*50,分辨率太小不好分割,小于3000*3000的像素,比较特殊的是地址里面的不能包含中文的字符,调用时请求的参数上文已经介绍,返回可以是json格式,还可以返回其他格式。阿里云的视觉智能开放平台其他的功能同服饰分割一样,功能上容易实现,代码简单容易操作,只需要几行代码。
三、本章小结
通过本章节的学习,我们学到了:
计算机视觉的定义、工作原理、关键技术、与人类视觉的关系和在行业中的典型应用
图像分类的定义、 类别和典型应用
目标检测的定义、评估指标和典型应用
图像分割的定义、类别和典型应用
阿里云视觉智能开放平台功能、 API调用方法
最后整体来做一个小结,通过学习,学到了计算机视觉的定义、工作原理、关键技术、与人类视觉的关系和在行业中的典型应用,重点讲了几个知识点,分别是图像分类,目标检测和图像分割,图像分类包括定义、类别以及典型类型用,目标检测包括定义、评估指标和典型应用,图像分割有定义、类别和典型应用,最后介绍了阿里云视觉智能开发平台有哪些功能,通过实验调用了平台提供的服饰分割的API。