前言

在吳恩達老師的深度學習專項課程中，老師有提到NumPy中的廣播機制，同時那一周的測驗也有涉及到廣播機制的題目。那么，到底什么是NumPy中的廣播機制？

官方文檔

接下來到了看官方文檔的時間。

Array Broadcasting in Numpy

廣播機制概述

讓我們探索numpy中一個更高級的概念，這個概念被稱為廣播。 廣播展現了NumPy在算術運算期間是如何處理具有不同形狀的數組的。 受到某些約束，較小的陣列將在較大的陣列上“廣播”，以使它們具有相同形狀。 廣播提供了一種數組矢量化操作，從而使得循環在C而不是Python中發生。 它無需復制不必要的數據即可完成，并且通常算法的效率還挺高。 當然在某些情況下，廣播并不是一個好辦法，因為它會導致內存使用效率低，從而減慢計算速度。 本文通過示例，對廣播進行了詳盡的介紹。 它還提供何時使用廣播的提示。

numpy操作通常是逐個元素完成的，這就需要兩個數組具有完全相同的形狀

Example 1

>>> from numpy import array
>>> a = array([1.0, 2.0, 3.0])
>>> b = array([2.0, 2.0, 2.0])
>>> a * b
array([ 2.,  4.,  6.])

當數組的形狀滿足某些條件時，numpy的廣播規則將放寬這種數組限制。 將數組和標量值在一起運算時，會出現最簡單的廣播示例：

Example 2

>>> from numpy import array
>>> a = array([1.0,2.0,3.0])
>>> b = 2.0
>>> a * b
array([ 2.,  4.,  6.])

盡管只有一個變量是數組，但是結果和之前的一個代碼例子是一樣的。 我們可以認為其中的標量在算術運算中被拓展成與數組a變量形狀相同的數組。 例如下圖中顯示的中拓展的新元素只是原始標量的副本。這種拓展只是概念上的。 numpy的明智之處在于使用原始標量值而不必要創建副本，從而使廣播操作盡可能地節省內存提高計算效率。 由于上面的代碼例子中，乘法過程中標量移動的內存較少，所以在具有一百萬個元素數組的Windows 2000上，廣播機制與之前的兩個數組相加相比大概快10%。

在最簡單的廣播示例中，標量b被拉伸為與a相同形狀的數組，使得這些形狀適用于逐元素乘法。

下面的規則決定了兩個具有兼容形狀的數組是否可以在單個代碼段中進行廣播。

廣播機制規則

廣播規則

為了廣播，操作中兩個陣列的尾軸的大小必須相同，或者其中一個必須是一個。

問題來了，尾軸是什么？

為此我找到了python - numpy broadcasting - explanation of trailing axes - Stack Overflow這篇解答。

If you have two arrays with different dimensions number, say one 1x2x3 and other 2x3, then you compare only the trailing common dimensions, in this case 2x3. But if both your arrays are two-dimensional, then their corresponding sizes have to be either equal or one of them has to be 1.

In your case you have a 2x2 and 4x2 and 4 != 2 and neither 4 or 2 equals 1, so this doesn't work.

假設你有兩個不同維度的數組。一個是1x2x3，另一個是2x3，那么只需要比較后面的公共尺寸，在這種情況下為2x3。 但是，**如果兩個數組都是二維的，則它們的對應大小必須相等或其中之一必須為1 **。

在兩個二維數組中2x2和4x2，4！= 2，并且4或2都不等于1，所以廣播行不通的。

這個解釋應該比較清楚了。

如果不滿足此條件，則會引發異常，提示數組的形狀不兼容。 廣播操作創建的結果數組的大小是兩個數組中每個維度的最大大小。 請注意，該規則并未說明需要具有相同維數的兩個數組。 如果有一個256 x 256 x 3的RGB值數組，想要按不同的值縮放圖像中的每種顏色，則可以將圖像乘以具有3個值的一維數組。