一、掩碼語言模型(mlm) 掩碼語言模型是一種基於神經網路的語言模型，它可以在預訓練階段使用海量的未標註語料庫進行訓練，然後在有監督的任務中進行微調，如文本分類、序列標註等。 掩碼…