百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术资源 > 正文

傻傻分不清楚的点积与矩阵乘法 Part1

off999 2024-10-14 12:13 30 浏览 0 评论

作者:Minkyung Kang

译者:知源觅流

原文链接:https://github.com/mkang32/python-basics/blob/master/numpy/dot_vs_multiply_vs_matmul_vs_at.ipynb

写在前面的话

当我第一次从头实现梯度下降(gradient descent)时,我对在点积(dot product)和矩阵乘法(matrix multiplications)中使用哪种方法感到非常困惑 :是用np.multiplynp.dot还是np.matmul呢?我应该将权重数组(weight array)保留为1D数组还是2D数组?我应该将其保留为行向量还是列向量?因此,我决定调查所有的选择,并提出最佳的方法。

在这个笔记中,我将回顾点积和矩阵乘法是什么,并比较Python和NumPy中的5个不同选项(*np.multiplynp.dotnp.matmul@),以了解它们之间的差异。

目录

1.什么是点积?

2.什么是矩阵乘法?

3.NumPy 数组提供哪些功能?
(1) 逐元素乘法:* 和 sum

(2) 逐元素乘法:np.multiply 和 sum

(3) 点积:np.dot

(4) 矩阵乘法:np.matmul

(5) 矩阵乘法:@

4.np.not 和 np.matmul (@) 有什么区别?

5.总结

6.参考文献

1. 什么是点积?

点积是一种代数运算(algebraic operation),它取两个相同大小的向量,并返回一个数字。

代数定义

点积是两个数列中对应项的乘积之和(The dot product is the sum of the products of the corresponding entries of the two sequences of numbers.)。参见Wikipedia(https://en.wikipedia.org/wiki/Dot_product)。


如果 ab 是行矩阵(row matrices),则点积可以写成矩阵积(matrix product)。

例如,如果 , 那么它们的点积是

几何定义

在几何上,点积是两个向量的欧几里得幅度和两者之间夹角的余弦的乘积。 从几何角度来说,点积是两个向量的欧几里得模的乘积和两个向量之间的夹角的余弦的乘积(Geometrically, the dot product is the product of the Euclidean magnitudes of two vectors and the cosine of the angle between two. )。参见Wikipedia (https://en.wikipedia.org/wiki/Dot_product)。

请注意,它是基于一个向量在另一个向量方向上的投影的大小。例如,在下图中,AB 方向上的分量是 ∣A∣cosθ。这里,如果 A=(x,y) 并且起始点是原点,则 A 的大小可以由∣ 计算。

(图片来源:https://en.wikipedia.org/wiki/Dot_product)

还要注意,如果两个向量在同一个方向上,,那么它就简单地变成了两个向量大小的乘积:。另一方面,如果两个向量垂直,,则整个点积变为0。

真实世界的例子

那么点积对我们来说到底意味着什么呢?我们如何在现实生活中使用它? 想象一下你在一家杂货店。你想买一个苹果,两个桔子和三个香蕉。单价分别为$1、$2和$0.5。

(图片来源:https://www.thestar.com/life/food_wine/2013/11/04/apples_oranges_or_bananas_which_fruit_is_nutritionally_the_best.html)

您可以定义项目数量向量(a)和单价向量(b)。


总成本将是两个向量量的点积:





荟萃知识,滋养你我。

相关推荐

戴尔官网保修查询入口(戴尔售后保质期查询)

可以按照以下步骤查询戴尔笔记本电脑的保修期:1.打开戴尔官网:https://www.戴尔.com/zh-cn/售后服务/保修政策.html2.点击页面上方的“服务与支持”按钮,进入戴尔的服务支持...

手机号邮箱登录入口(手机号邮箱官网)

手机163邮箱登录入口如下:163邮箱官网入口:https://smart.mail.163.com/login.htm点击进入登录或者注册邮箱即可。手机浏览器访问进入官网http://www.123...

sd卡(sd卡无法读取怎么修复)

  SD卡是大卡,相机用的;普通的手机内存卡,是小卡,正规的名称是macrosd卡,也就是微型SD卡。可以通过卡套转为普通的SD卡的大小。  其实就是大小不同。但手机上的内存卡,人们经常也俗称为SD...

路由器连接图(网络路由器连接图)
  • 路由器连接图(网络路由器连接图)
  • 路由器连接图(网络路由器连接图)
  • 路由器连接图(网络路由器连接图)
  • 路由器连接图(网络路由器连接图)
windows7蓝牙功能在哪里打开

点击搜索框在windows7系统主界面点击开始菜单,点击打开搜索框。输入命令输入services.msc后回车,在列表中找到并右击BluetoothSupportS...点击属性选择进入属性菜单,...

2010激活密钥(microsoft2010激活密钥)
2010激活密钥(microsoft2010激活密钥)

步骤/方式1officeprofessionalplus2010:(office专业版)6QFdx-pYH2G-ppYFd-C7RJM-BBKQ8Bdd3G-xM7FB-Bd2HM-YK63V-VQFdKVYBBJ-TRJpB-QFQ...

2025-11-19 04:03 off999

联想官方刷新bios工具(联想电脑刷新bios)

刷新BIOS需要使用联想的官方网站或授权维修中心来进行操作。以下是一些基本步骤:1.访问联想的官方网站,找到BIOS更新程序并下载。在下载过程中,请确保选择与您计算机型号匹配的版本。2.将下载的B...

苹果ios14系统下载(苹果ios14.1下载)
苹果ios14系统下载(苹果ios14.1下载)

1方法一步骤/方式一打开Appstore。步骤/方式二在搜索栏点击搜索框。步骤/方式三搜索并点击需要下载的软件。步骤/方式四点击获取。步骤/方式五最后验证ID密码即可。1.在应用商店搜索你要下载的应用名称。2.点击下载按钮,如果要求登...

2025-11-19 03:03 off999

office2010怎么免费永久激活密钥

用这个试试,一个KMS激活工具可以激活2010到2019的Office自家的目前用的就是这个microsoft6477.moe/1716.html直接使用这个Microsoftoffice2010...

类似爱加速的国内ip(类似爱加速的app)
类似爱加速的国内ip(类似爱加速的app)

推荐“V8盒子”。这一款免费无广告的模拟器,不同于其它软件盒子,而是类似于X8沙箱,满足游戏多开,画中画,悬浮球操作,熄屏后台运行等多功能的沙箱盒子.支持一键root,一键安装xposed框架,能在安卓/苹果手机上运行多个安卓/ios虚拟系...

2025-11-19 02:03 off999

阿里旺旺手机客户端(阿里旺旺手机app)

手机淘宝的旺旺在打开商品后,会看到左下角有个旺旺的图标,点击就可以联系了。  阿里旺旺是将原先的淘宝旺旺与阿里巴巴贸易通整合在一起的一个新品牌。它是淘宝和阿里巴巴为商人量身定做的免费网上商务沟通软件,...

最纯净的pe装机工具(pe工具哪个纯净)

U盘装系统步骤:1.制作U盘启动盘。这里推荐大白菜U盘启动盘制作工具,在网上一搜便是。2.U盘启动盘做好了,我们还需要一个GHOST文件,可以从网上下载一个ghost版的XP/WIN7/WIN8系统,...

装一个erp系统多少钱(wms仓库管理软件)

现在主流有客户端ERP和云端ERP两种客户端通常一次买断,价格在万元左右,但是还有隐性费用,你需要支付服务器、数据管理员,此外如果系统需要更新维护,你还需要支付另外一笔不菲的费用。云端ERP:优势...

cad2014序列号和密钥永久(autocad2014序列号和密钥)

1在cad2014中修改标注样式后,需要将其保存2单击“样式管理器”按钮,在弹出的窗口中选择修改后的标注样式,然后单击“设置为当前”按钮,再单击“保存当前样式”按钮,将其保存为新的样式名称3为了...

qq修改密保手机号(qq修改密保手机号是什么意思)

QQ更改绑定的手机号码操作步骤如下:1、打开手机主界面,找到“QQ”软件点击打开。2、输入正确的QQ账户和密码登录到qq主界面。3、点击左上角的头像“图片”,进入到个人中心界面。4、进入到个人中心界面...

取消回复欢迎 发表评论: