一、Adam概述 Adam是一種基於梯度下降的優化演算法，融合了梯度的一階矩估計和二階矩估計。它被廣泛應用於深度學習中的神經網路的訓練，以及自然語言處理和計算機視覺等領域。 在深度學…