向量范数和矩阵范数

范数

  范数(norm)是数学中的一种基本概念。在泛函分析中,它定义在赋范线性空间中,并满足一定的条件,即 ①非负性;②齐次性;③三角不等式。它常常被用来度量某个向量空间(或矩阵)中的每个向量的长度或大小。范数,是具有“长度”概念的函数。在线性代数、泛函分析及相关的数学领域,范数是一个函数,是矢量空间内的所有矢量赋予非零的正长度大小。半范数可以为非零的矢量赋予零长度。

总的来说,范数的定义就是一种具有“长度”概念的函数

一、向量范数

总体公式

\LARGE \left \| \vec{v} \right \|^{p}=( \left | v_{1} \right |^{p}+ \left | v_{2} \right |^{p} +...+ \left | v_{n} \right |^{p} )^{\frac{1}{p}}

举例 先定义一个向量为: \LARGE v=[-1,2,3,-4].

1.1 向量的1范数

即 p=1   也就是向量的各个元素的绝对值之和。

\LARGE \left \| \vec{v} \right \|= \left | v_{1} \right |+ \left | v_{2} \right |+...+ \left | v_{n} \right |

那么上述向量 \LARGE v=1+2+3+4=10.

1.2 向量的2范数

即 p=2 向量的每个元素的平方和再开平方根,也就是欧氏距离。

\LARGE \left \| \vec{v} \right \|^{2}=\sqrt { \left | v_{1} \right |^{2}+ \left | v_{2} \right |^{2} +...+ \left | v_{n} \right |^{2} }

那么上述向量 \LARGE v=1+4+9+16=30.

1.3 向量的无穷范数

即 p= \infty , 向量的所有元素的绝对值中最大的。

\LARGE \begin{equation} \begin{aligned}\left \| \vec{v} \right \| & =( \left | v_{1} \right |^{\infty }+ \left | v_{2} \right |^{\infty} +...+ \left | v_{n} \right |^{\infty} )^{\frac{1}{\infty}} \\ & =( (\frac{\left | v_{1} \right |^{\infty }}{max|v_{i}|^{\infty }}+ \frac{\left | v_{2} \right |^{\infty}}{​{max|v_{i}|^{\infty }}} +...+ \frac{\left | v_{n} \right |^{\infty}}{​{max|v_{i}|^{\infty }}})max|v_{i}|^{\infty } )^{\frac{1}{\infty}} \\ & = (\frac{\left | v_{1} \right |^{\infty }}{max|v_{i}|^{\infty }}+ \frac{\left | v_{2} \right |^{\infty}}{​{max|v_{i}|^{\infty }}} +...+ \frac{\left | v_{n} \right |^{\infty}}{​{max|v_{i}|^{\infty }}})^{\frac{1}{\infty}}max|v_{i}| \\ & =max|v_{i}| \end{aligned} \end{equation}

 

那么上述向量 \LARGE \LARGE v=4.

二、矩阵范数

举例 矩阵

                      \LARGE A= \begin{bmatrix} -1 & 2 \\ 4 & -6 \end{bmatrix}

2.1  矩阵的L0范数

         矩阵的L0范数即:矩阵的非0元素的个数,通常用它来表示稀疏,L0范数越小0元素越多,也就越稀疏,上述矩阵A最终结果就是4.

2.2 矩阵的L1范数

        矩阵的L1范数即:矩阵中的每个元素绝对值之和,它是L0范数的最优凸近似,因此它也可以表示稀疏,上述矩阵A最终结果就是13.

2.3 矩阵的F范数

         矩阵的F范数即:矩阵的各个元素平方之和再开平方根,它通常也叫做矩阵的L2范数,它的有点在它是一个凸函数,可以求导求解,易于计算,上述矩阵A最终结果就是:\LARGE \sqrt{57}.

2.4 矩阵的1范数(列和范数)

        矩阵的1范数(列和范数,列模)() ,即:矩阵的每一列上的元素绝对值先求和,再从中取个最大的,(列和最大),上述矩阵A的1范数先得到[5,8],再取最大的最终结果就是8.

2.5 矩阵的2范数(谱范数)

        矩阵的2范数(谱范数,谱模), 即:矩阵\LARGE A^{T}A^{}的最大特征值开平方根,上述矩阵A的2范数得到的最终结果是:7.545179782593587.

2.6 矩阵的无穷范数(行和范数)

        矩阵的1范数(行和范数,行模),即:矩阵的每一行上的元素绝对值先求和,再从中取个最大的,(行和最大),上述矩阵A的1范数先得到[3,10],再取最大的最终结果就是10.

2.7 矩阵的核范数

        矩阵的核范数即:矩阵的奇异值(将矩阵svd分解)之和,这个范数可以用来低秩表示(因为最小化核范数,相当于最小化矩阵的秩——低秩),上述矩阵A最终结果就是:7.810249675906655.

2.8 矩阵的L21范数

        矩阵的L21范数即:矩阵先以每一列为单位,求每一列的F范数(也可认为是向量的2范数),然后再将得到的结果求L1范数(也可认为是向量的1范数),很容易看出它是介于L1和L2之间的一种范数,上述矩阵A最终结果就是:10.4476609.

参考博客

https://blog.csdn.net/Michael__Corleone/article/details/75213123

https://blog.csdn.net/qq_35154529/article/details/82754157

https://blog.csdn.net/tinkle2015/article/details/85106003

### 向量范数矩阵范数作为评估标准的优缺点 #### 向量范数的优点 向量范数能够简洁有效地衡量单个向量的长度或大小,这使得它在处理低维度数据时非常直观易于理解。对于线性代数中的许多基本运算来说,向量范数提供了重要的几何解释支持[^2]。 #### 向量范数的缺点 然而,在面对高维复杂结构的数据集时,仅依靠向量范数可能无法全面反映整个系统的特性。此外,当涉及到多个变量之间的相互作用时,单独考虑各个分量并不能很好地捕捉这些关系的影响。 #### 矩阵范数的优点 相比之下,矩阵范数不仅考量了构成矩阵的所有元素的整体效应,还特别关注于不同列间以及行间的交互情况。这种全局视角有助于更精确地描述变换过程中的伸缩平移行为;特别是某些类型的矩阵范数(如诱导范数),可以直接关联到特定应用场景下的稳定性分析等问题上[^1]。 #### 矩阵范数的缺点 尽管如此,计算复杂的大型稀疏矩阵范数值可能会遇到效率瓶颈,并且并非所有的实际问题都能找到合适的矩阵范数来表达其内在规律。另外,由于矩阵本身具有更高的抽象层次,因此理解解释由矩阵范数得出的结果往往更加困难一些。 ```python import numpy as np # 计算向量的L2范数 vector = np.array([3, 4]) l2_norm_vector = np.linalg.norm(vector) print(f"L2 norm of vector {vector} is {l2_norm_vector}") # 计算矩阵的最大奇异值即为2-范数 matrix = np.random.rand(3, 3) singular_values = np.linalg.svd(matrix)[1] max_singular_value = singular_values.max() print(f"The largest singular value (which represents the matrix's 2-norm) of \n{matrix}\nis approximately {max_singular_value}") ```
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值