数学菜鸟的AI学习攻略 | 数学符号轻松入门

简介:


你是否跟我一样,自幼恨透数学。

现在,我终于发现了我对数学绝缘的最主要原因:我的老师从来不去回答最重要的问题:我为什么要学数学?学数学有什么用

他们只是在黑板上写下一大堆方程,并让我记下来。 

现在,如果你对AI这个激动人心的领域感兴趣,那么它将是回答这个问题最好的答案!那就是,我想要写一个更好的图像识别程序,或者一个可以理解自然语言的交互界面!也许甚至想有一天写出自己的算法?

如果你想从阅读 arXiv(https://arxiv.org/list/cs.AI/recent) 上的几篇论文开启自学AI之路?那么首先,你需要知道怎样理解这些有意思的数学小符号。

也许,学习数学符号最重要的原因,就是它可以让你用一种非常简洁的方式来表达一个复杂的想法。

没有它,解释每个方程,都需要花上很多页的篇幅。

而这篇文章要告诉你的是,学习这些符号不像你想象的那么难。

让很多人对数学失去信息的第二个原因是,很多解释写得太可怕了。

事实上,大部分人并不擅长解释东西。人们一般要定义一个数学术语,会使用更多的数学术语。这就造成了不理解的一个无限循环。好比定义“大象”这个词,说,“大象就是大象一类的东西。”

这篇文章会将数学符号和现实世界关联起来,并使用你已知的东西来类比。这样你可以脚踏实地地学习。

但是,这篇文章无法覆盖到你读一篇论文需要的所有数学符号。所以你会需要一本超级凝练的数学符号指南,Edward R. Scheinerman的Mathematical Notation: A Guide for Engineers and Scientists 。(它是我数学菜鸟的AI学习攻略 文章的一个后继补充,但它是我使用最频繁的一本书。它现在满是高亮和折页。随着数学知识的不断扩充,我一遍又一遍地回头翻阅这本书。)

让我们开始吧。


首先,什么是算法?

它真的只是解决一个特定的问题的一系列步骤。无论你是否意识到,你都在使用算法。如果你需要给孩子们打包午饭,送他们上学,取走干洗的衣服,然后去上班,你已经无意识地构造了一系列步骤,从厨房到办公室。这就是一个算法。

如果你的老板同时给你安排了六项工作,你需要找到在一天内完成它们的最好的方式。你需要选择哪些事先做,哪些事后做,哪些事一起做等等。这就是一个算法。

这个概念为什么很重要呢?因为一个方程也不过是解决问题的一系列步骤而已。

我们从一些简单的符号开始,写一些方程。数学就是对事物的翻译。我们有一个输入和一个输出。我们将一些东西代入到我们方程的变量中,遍历所有的步骤,然后得到输出。计算机也是同样的道理。

目前,神经网络背后的大部分黑魔法来自于数学的三个分支:

  • 线性代数

  • 集论

  • 微积分

集合是什么?它就是一堆东西。一般使用花括号{ }或方括号括起来。(搞数学的家伙对所有东西都很难在最佳符号表达上达成一致。)


一个集合

还记得我们在第4部分看到的张量?那就是一个集合。

一个集合通常由大写字母表示,例如A、B、V或W。只要你前后一致,字母本身是什么并不重要。

但是,一些特定的大写字母和符号被保留下来,用来表示重要的、常用的数字集,例如:

∅ = 空集(集合里什么都没有)。这个符号是一个希腊字母,“phi”。数学里常常会用到希腊字母。此处可以查阅大小写希腊字母的写法https://en.wikipedia.org/wiki/Greek_letters_used_in_mathematics,_science,_and_engineering)。

R =所有实数。(几乎所有存在的数都是实数,包括整数、分数、超越数如Pi (π)(3.14159265…)。但是不包括虚数,一种为了求无解方程的解而构造的数,也不包括无穷)

Z =所有整数。(除了分数之外的数字,比如-1,-2, 0, 1, 2, 3)

大部分保留字母表可以在趣味数学http://www.mathsisfun.com/sets/number-types.html)里查到。

所有这些都是集合,其中一部分是子集,也就是他们被更大的一个集合完全包含,就像这样:

去查查看Q和N是什么意思吧!

在这个例子中,我们可以说,Z(整数集)是R(实数集)的子集。

我们可以这么写:

A是B的子集(A包含于B):相反的,B是A的超集(B包含A)

我为什么要在乎一个集合B是不是包含了A的全部内容呢?好问题。

假如有一个集合,包括了所有生活在美国的人,有他们的年龄、地址等等信息。现在假设有另一个集合,包括了心脏病发病率更高的人。那么这两个集合重合的地方,可以告诉我们哪个地区的人更可能患有心脏病。

每个集合里都有元素。元素是什么?就是大集合的一部分。我们再看一下我们的张量。

我们将集合中的元素记作小写斜体字母,例如x.我们用一个看起来很奇怪的E一样的符号(其实不是E),来表示一个元素是集合的一部分。我们可以这么写:

这表示x是集合A中的一个元素。

我们也可以说x不是集合A中的一个元素:

你越能理解这些符号,你就越能在头脑中通过这些字符串来沟通。当你看到上面这个,你可以说,“x不是集合A中的元素。”你越能明确地讲出符号的含义,你就越能理解它们。

当然,写出一个集合的所有元素是不现实的,我们可以使用一种特殊的方式来写出一个元素的序列。假如我们有一个数字序列,以1为步长递增。我们可以这样写:

x = {1,2,3,4…n}

这些点表示这个序列到n结束,n代表“序列的末尾”。所以如果n = 10,这个集合包括从1到10的数字范围。如果n = 100,这个集合包括从1到100的数字范围。


疯狂的方程

当我们将集合转化为线性代数的时候,它们就十分有意思了。你已经认识了一些代数符号比如加号+,减号-。现在我们看两个新的符号和一个方程。首先是符号:

Σ = 一系列数字的和

Π = 一系列数字的积

和是什么?是序列中所有数字做加法。比如我们有一个向量集A(记住向量是一行或一列数字)包括: {1,2,3,4,5}.

序列的和为:

1 + 2 + 3 + 4 + 5 = 15

积是所有数字做乘法。所以对于同样的集合A我们有:

1 x 2 x 3 x 4 x 5 =120

我们可以将序列的和精简地写作:

那么我们怎样理解它呢?简单,看这个。

我们从底部的j开始,j是一个变量。然后将j代入到右边的表达式中。最后,我们将序列的结束数字写在顶部。看一个例子:

如果你是一个程序员,你会立刻认出这是一个循环!

我们给这个方程写一个Python函数:

def sum_x_range(x):
    j = 1
    output = []   # 创建一个空list
    for k in range(0,5):  # 开始循环
         z = x**j      # 计算x的j次方
         j = j + 1     # j增加1,知道到达n,也就是5

         output.append[z]   # 将z添加到list中
    return sum(output)  # 返回list中所有数字的和

print (sum_x_range(2))   # 令x=2,调用方程

原谅我糟糕的Python风格,但是我希望代码清晰,而不是简洁。

**符号表示x的j次幂。方程输入参数x,我令它为2。从0到5循环,取x的1,2,3,4, 5次幂,然后将这些数字添加到一个列表中。它得出列表数字之和为:62。


走进矩阵

记住,2D张量也被称为矩阵。它基本上是一个表格,有行和列。首先,你需要知道如何引用矩阵的不同部分。 这张图讲得很清楚:

首先我们有矩阵A。用大写字母表示。

矩阵有m行和n列,所以我们叫它m X n 矩阵,用小写斜体字母表示。

行是水平的,也就是从左到右。 (不要被图中箭头迷惑,箭头指向的i和j不是行的方向,行是水平的!)

列是垂直的,也就是从上到下。

在这个例子中我们有一个4 x 5 矩阵,(也就是2D张量),因为我们有4行5列。

每个方格是矩阵中的一个元素。元素的位置使用小写斜体a和行序号i和列序号j来表示。

所以第1行第2列的4,用a1,2表示。第2行第1列的3,用a2,1表示。

我们不会讲解所有的矩阵数学运算,我们选择其中一种来小试牛刀。

点乘在神经网络中是一种非常常用的运算,所以一起看看它。


点,点,点

点乘是我们用一个矩阵乘以另一个矩阵的方法。

点乘的符号表示,你应该猜到了,是一个点。

a . b

这是两个标量(也就是单独的数)的点乘。标量也是我们的矩阵里的独立的元素。

我们将同样大小和形状的矩阵对应的元素相乘,再把所有的乘积作和。

那么一个向量和另一个向量乘积的公式是什么样的呢?

深吸一口气。你成功了!

我们现在认识了所有的符号。

这是两个等长向量的乘积公式。记住在数学菜鸟的AI学习攻略第四部分-张量表示(有猫) 中讲到,一个向量就是一行或者一列数字。我们的矩阵的每一行或者每一列都是一个向量。

首先我们用矩阵A的第一个元素乘以矩阵B的第一个元素。然后我们用元素A2 乘以元素B2.我们对于每一个元素做相同的操作,直到达到末尾,“n”。然后对它们作和。

让我们看一下这个操作的图示。

现在我们可以把这些数字代入我们的公式。

这里是输出矩阵下一个数字的例子

这是我们处理完所有运算得到的最终结果:

这些例子来自于神奇的趣味数学网站(Math is Fun website)。这个网站里有大量超赞的例子,完全无法超越。

我增加了一些公式,以助于你的理解。因为他们一般都会跳过这些,因为一般这些步骤并不会令人感到困惑。但是你现在再也不会困惑了。

原文发布时间为:2017-04-05

本文来自云栖社区合作伙伴“大数据文摘”,了解相关信息可以关注“BigDataDigest”微信公众号


相关文章
|
2月前
|
人工智能 缓存 并行计算
用数学重构 AI的设想:流形注意力 + 自然梯度优化的最小可行落地
本文提出两个数学驱动的AI模块:流形感知注意力(D-Attention)与自然梯度优化器(NGD-Opt)。前者基于热核偏置,在局部邻域引入流形结构,降低计算开销;后者在黎曼流形上进行二阶优化,仅对线性层低频更新前置条件。二者均提供可复现代码与验证路径,兼顾性能与工程可行性,助力几何感知的模型设计与训练。
272 1
|
3月前
|
存储 人工智能 测试技术
手把手带你入门AI智能体:从核心概念到第一个能跑的Agent
AI智能体是一种能感知环境、自主决策并执行任务的人工智能系统。它不仅能生成回应,还可通过工具使用、计划制定和记忆管理完成复杂工作,如自动化测试、脚本编写、缺陷分析等。核心包括大语言模型(LLM)、任务规划、工具调用和记忆系统。通过实践可逐步构建高效智能体,提升软件测试效率与质量。
|
4月前
|
人工智能 自然语言处理 搜索推荐
上下文学习的神奇魔法:轻松理解AI如何无师自通
你有没有想过,为什么给GPT几个例子,它就能学会新任务?这就像魔法一样!本文用轻松幽默的方式解密上下文学习的原理,通过「智能客服训练」场景,带你理解AI如何像人类一样从示例中学习,无需额外训练就能掌握新技能。
184 28
|
3月前
|
存储 人工智能 搜索推荐
一种专为AI代理设计的内存层,能够在交互过程中记忆、学习和进化
Mem0 是专为 AI 代理设计的内存层,支持记忆、学习与进化。提供多种记忆类型,可快速集成,适用于开源与托管场景,助力 AI 代理高效交互与成长。
559 123
一种专为AI代理设计的内存层,能够在交互过程中记忆、学习和进化
|
3月前
|
机器学习/深度学习 人工智能 自然语言处理
迁移学习:让小数据也能驱动AI大模型
迁移学习:让小数据也能驱动AI大模型
334 99
|
4月前
|
数据采集 人工智能 前端开发
AI智能体如何从错误中学习:反思机制详解
探索AI智能体的反思能力:从哲学思考到技术实现,看AI如何像人类一样从错误中学习和成长。通过轻松有趣的方式,深入了解Reflexion和ReAct等前沿框架,掌握让AI更智能的核心秘密。
|
2月前
|
存储 人工智能 JSON
揭秘 Claude Code:AI 编程入门、原理和实现,以及免费替代 iFlow CLI
本文面向对 AI Coding 感兴趣的朋友介绍 Claude Code。通过此次分享,可以让没有体验过的快速体验,体验过的稍微理解其原理,以便后续更好地使用。
997 18
揭秘 Claude Code:AI 编程入门、原理和实现,以及免费替代 iFlow CLI
|
4月前
|
人工智能 数据可视化 安全
Dify入门系列(1)| Dify 是什么?真能开启低代码 AI 应用开发?
Dify 是一个融合 BaaS 与 LLMOps 的开源平台,通过可视化编排、预置组件与企业级引擎,帮助企业快速、安全、低成本地构建 AI 应用。无论是客服机器人还是复杂业务流程,Dify 都能将开发周期从数周缩短至分钟级,推动低代码 AI 开发进入实用阶段。
|
2月前
|
人工智能 JavaScript 前端开发
GenSX (不一样的AI应用框架)架构学习指南
GenSX 是一个基于 TypeScript 的函数式 AI 工作流框架,以“函数组合替代图编排”为核心理念。它通过纯函数组件、自动追踪与断点恢复等特性,让开发者用自然代码构建可追溯、易测试的 LLM 应用。支持多模型集成与插件化扩展,兼具灵活性与工程化优势。
274 6

热门文章

最新文章