AIGC背后的技术分析 | 机器学习?机器如何学习?

简介: 通过Julia的语法、函数、编译器使机器学习技术变得更加简单。

640.jpg


# 1、机器学习如何工作



通过机器学习,研究人员可以构造算法,使计算机自身能够在大量的数据中找到数学模式,而这是人类不可能做到的。想想看: 如果我问你,你怎么知道一张照片中的动物是猫还是狗,你会怎么说?你可能会看看动物的胡须、脸形和耳朵。但是,你要如何从数学模式上判断这个动物是否有胡须呢?你能写出一个数学公式获取图像的像素值,并将其转换为动物物种的分类器吗?

当然不能,因为人类几乎不可能这样做,我们以前尝试过。事实上,有一个叫作特征工程(feature engineering)的研究领域,但对于稍微复杂的任务,它完成得从来都不理想。

这就是机器学习存在的原因,它可以使计算机为我们找到这些数学公式。

就像人类从经验中学习一样,机器学习算法也是如此。你可以在一个数据集上“训练”一个机器学习算法,它将尝试“建模”该数据集,并理解从输入到输出映射的数据集中的复杂性和模式。但是,训练人类和训练机器有一个关键区别: 人类可以从少数几个样本中学习,但是机器却需要从成百上千,甚至数百万个样本中学习。

如果你要向那些从来没见过吹雪机和割草机的人口头描述它们的区别,他们一定能很好地区分它们。但是,如果你希望计算机将图像分为这两类,那么你至少需要提供数百个视觉样本,才能得到可接受的结果。

此外,训练这些算法需要很强大的计算能力,而Julia恰好比较擅长这件事。
# 2、使用Flux的样式传递



Julia提供了一个叫作Flux的包,它可以帮助你解决许多问题!Flux包的一部分被称为Metalhead project,它可以使你在计算机上使用预先训练过的机器学习算法,而不必自己训练它们。让我们来看一个例子。

首先,请打开REPL并添加以下软件包:
① Flux

② Metalhead

③ Images

④ PyCall>
以下是使用的命令:
js using Pkg Pkg.add("Flux") Pkg.add("Metalhead") Pkg.add("Images") Pkg.add("PyCall")
现在,打开一个新的Julia文件,并输入以下代码:
js Code Listing 9.1, ImageClassifier.jl using Metalhead: VGG19, preprocess, load, labels using Flux: onecold model =VGG19() class_labels =labels(model) print("Enter the name of your file: ") user_image =preprocess(load(readline())) model_prediction =model(user_image) top_class =onecold(model_prediction)\[1\] class_name =labels\[top_class\] println("I think this image contains: $(class_name)")
从数学和机器学习的角度来看,这是比较简单的工作,但因为你对此还比较陌生,所以我不会深入讲解模型本身的工作原理。然而,Julia代码非常简单,你应该可以理解此文件中的大部分代码。这就是Julia和Flux的优雅之处,你不需要编写非常复杂的代码以使用机器学习模型。

现在你可以拍一些照片,可以是你的宠物、电脑、电视或你自己,或者你可以从网上下载一张照片,将它们放在与你刚刚编写的Julia代码文件相同的目录中,然后运行该代码。

当你第一次运行该代码时,它将会从网上下载名为VGG19的机器学习模型(VGG19表示Oxford Visual Geometry Group’s 19-layer model)。根据你的网络环境,这可能需要几分钟的时间。

然而,无论你运行了多少次代码,它都会继续初始化模型。一旦模型加载后,你将看到一个请求图像文件的提示。输入文件的名称和扩展名,然后按Enter键。几秒后,代码应该会输出它在图像中看到的内容。例如,假设有一张如图1所示的称为cat.jpg的图像。

640.png


■ 图1 测试图像分类器程序的猫图像

这是我与程序之间的交互:

Enter the name of your file: cat.jpg
I think this image contains: Egyptian cat

结果非常接近,应用程序在图像中看到一只Egyptian cat。这真的很棒,但这并不是什么新鲜事,这种技术已经存在很多年了,如果你使用Apple Photos或Google Photos,你的图像会被自动分类。事实上,这些平台甚至可以自动进行面部识别,使你的生活更便捷。

那么如何用机器学习生成一些艺术作品呢?我们将使用一种称为梯度上升(gradient ascent)的技术生成DeepDream艺术作品。你可能还记得几年前的DeepDream,当时Google的研究人员可视化了“神经网络的激活”。我知道这听起来很复杂,在大多数语言中,即使是实现算法的一个简单版本也需要相当多的代码。

但在Julia中,这几乎是微不足道的。下面让我们实现一个可以获取图像并对其添加“艺术风格”的应用程序。打开一个新文件,输入以下代码:

Code Listing 9.2 DeepDream.jl
using Metalhead: VGG19,preprocess,load
using Flux: @epochs
using Statistics, PyCall, Flux.Tracker
using Images: RGB
np= pyimport("numpy")
Image = pyimport("PIL.Image")
function deprocess and pillow(img)([0.4850.4560.406][0.2290.2240.225])队,=rgb = cat(collect(map(x-> (img[::,x,1].* [x]) .+[x]1:3))..., dims= 3)rgb = np.uint8(np.interp(np.clip(rgb ./ 255-11), (-11)(0255)))
returnImage.fromarray(rgb).transpose(Image.FLIP LEFT RIGHT).Crotate(90)
end
model = VGG19().layers[1:11]
loss(x) = mean(model(x))
dloss(x) = Tracker.gradient(loss,x)[1]function calc gradient(x)g = Tracker.data(dloss(x))
return g * (mean(1.5 ./ abs.(g)) + 1e- 7)
end
print("Enter the name of your file: ")img = preprocess(load(readline()))
epochs 20 global img += calc gradient(img)deprocess and pillow(img).show()

在本例中,我不会深入讲解这段代码的工作原理,关键是让你看到使用Julia能够做些什么。

更多需要了解的内容:

从本质上说,这不是训练一个神经网络的权重,而是通过一个损失函数(loss function)找到对权重的梯度,我们通过使用一个可以使卷积神经网络中某层滤波器的均值最大化的函数找到了相对于输入的梯度。
现在,如果你再次运行该应用程序,它将加载该模型并请求你输入一个文件。这次我输入了一张自己的图像(见图2)。

640.png

■ 图2 输入DeepDream.jl的图片

我得到了如图3所示的输出。

640.png


■ 图3 DeepDream.jl生成的第一张艺术作品



哇!这是一张很棒的艺术作品。如果你将代码
js model =VGG19().layers[1:11]
改为
js model =VGG19().layers[1:end-10]
你应该会得到一张令人毛骨悚然的艺术作品

640.png


■ 图 DeepDream.jl生成的第二张艺术作品

好吧,这也太奇怪了。让我们将代码更改为

model =VGG19().layers[1:7]

现在,你应该会看到图中的图像。

640.png


■ 图 DeepDream.jl生成的第三张艺术作品

很好!关于这种艺术作品还有一些需要讲解的地方: 它不是计算机在画布上的基本图像上随机画出来的,事实上,该系统是在世界上最大的图像数据集上进行训练的,它包含超过1000个类别的100多万张图像。所以,如果你仔细观察,你可能会发现动物或其他类似于图像中描绘的物体的一些特征。例如,在生成的第二张图像中,你可能会在我的眼睛和嘴巴周围看到一些类似狗或其他动物的特征,这是因为在生成本艺术作品之前,这个系统的数据集中有很多动物。

你刚刚实现的一切都是由机器学习技术支持的,并且通过Julia的语法、函数和编译器使其变得非常简单。

目录
相关文章
|
29天前
|
搜索推荐
师资培训|AIGC在高校教学中的应用场景与案例分析-某产教科技公司
北京新大陆时代科技有限公司举办新一代信息技术名家大讲坛系列培训,旨在提升教师专业素质,加强“双师型”教师队伍建设。TsingtaoAI作为培训伙伴,提供全面支持。培训涵盖AIGC在高校教学的应用场景、教案生成及个性化教学资源定制等内容,助力提升教学质量与人才培养。
57 0
|
13天前
|
机器学习/深度学习 人工智能 自然语言处理
人工智能与机器学习:探索未来的技术边界
【10月更文挑战第18天】 在这篇文章中,我们将深入探讨人工智能(AI)和机器学习(ML)的基础知识、应用领域以及未来趋势。通过对比分析,我们将揭示这些技术如何改变我们的生活和工作方式,并预测它们在未来可能带来的影响。文章旨在为读者提供一个全面而深入的理解,帮助他们更好地把握这一领域的发展趋势。
|
1天前
|
机器学习/深度学习 人工智能 自然语言处理
思通数科AI平台在尽职调查中的技术解析与应用
思通数科AI多模态能力平台结合OCR、NLP和深度学习技术,为IPO尽职调查、融资等重要交易环节提供智能化解决方案。平台自动识别、提取并分类海量文档,实现高效数据核验与合规性检查,显著提升审查速度和精准度,同时保障敏感信息管理和数据安全。
27 11
|
2月前
|
机器学习/深度学习 数据可视化 JavaScript
探索机器学习模型的可视化技术
【9月更文挑战第23天】在数据科学中,理解和解释机器学习模型的决策过程是至关重要的。本文将介绍几种流行的可视化工具和库,如TensorBoard、D3.js等,帮助读者更好地理解模型内部工作原理及其预测结果。通过实例演示如何使用这些工具进行模型可视化,增强模型的可解释性。
|
3月前
|
人工智能 Anolis
展示全栈式AI平台,探讨软硬件技术!英特尔分论坛议程来啦 | 2024 龙蜥大会
英特尔分论坛将依托英特尔云到端的全面产品组合,围绕至强可扩展处理器、AI 加速器、以及 oneAPI、OpenVINO 等软硬件技术展开探讨。
展示全栈式AI平台,探讨软硬件技术!英特尔分论坛议程来啦 | 2024 龙蜥大会
|
29天前
|
机器学习/深度学习 算法
【机器学习】迅速了解什么是集成学习
【机器学习】迅速了解什么是集成学习
|
30天前
|
机器学习/深度学习 自然语言处理 Go
Python与Go在AIGC领域的应用:比较与分析
Python与Go在AIGC领域的应用:比较与分析
33 0
|
3月前
|
人工智能 编解码 算法
使用PAI-DSW x Free Prompt Editing开发个人AIGC绘图小助理
本文介绍如何借助阿里云PAI-DSW及Free Prompt Editing算法开发个性化AIGC绘图助手,实现图像智能编辑与生成。首先需领取PAI-DSW免费试用资源并创建实例;随后通过运行教程文件完成环境搭建。WebUI界面预设了多种参数供调整,如图像分辨率、编辑层数量等,支持更改图像背景与风格等功能演示。完成实验后应及时清理资源以避免额外费用。此外,参与阿里云开发者社区的“AIGC绘图小助手”活动,不仅可获得免费云资源试用,还有机会赢得桌面折叠风扇、小度智能屏X9等礼品。
|
3月前
|
图形学 机器学习/深度学习 人工智能
颠覆传统游戏开发,解锁未来娱乐新纪元:深度解析如何运用Unity引擎结合机器学习技术,打造具备自我进化能力的智能游戏角色,彻底改变你的游戏体验——从基础设置到高级应用全面指南
【8月更文挑战第31天】本文探讨了如何在Unity中利用机器学习增强游戏智能。作为领先的游戏开发引擎,Unity通过ML-Agents Toolkit等工具支持AI代理的强化学习训练,使游戏角色能自主学习完成任务。文章提供了一个迷宫游戏示例及其C#脚本,展示了环境观察、动作响应及奖励机制的设计,并介绍了如何设置训练流程。此外,还提到了Unity与其他机器学习框架(如TensorFlow和PyTorch)的集成,以实现更复杂的游戏玩法。通过这些技术,游戏的智能化程度得以显著提升,为玩家带来更丰富的体验。
60 1
|
3月前
|
机器学习/深度学习 人工智能 自然语言处理
【机器学习】python之人工智能应用篇--代码生成技术
代码生成技术是人工智能与软件工程交叉领域的一项重要技术,它利用机器学习、自然语言处理和其他AI算法自动编写或辅助编写计算机程序代码。这一技术旨在提高编程效率、降低错误率,并帮助非专业开发者快速实现功能。以下是代码生成技术的概述及其典型应用场景。
48 6

热门文章

最新文章