**批再標準化** 對普通批標準化的最新改進是**批再標準化** （batch renormalization），由 Ioffe 于 2017 年提出7 。與批標準化相比，它具有明顯的優勢，且代價沒有明顯增加。 **自標準化神經網絡** （self-normalizing neural network）： * 它使用特殊的激活函數（`selu` ）和特殊的初始化器（`lecun_normal` ），能夠讓數據通過任何 `Dense` 層之后保持數據標準化。這種方案雖然非常有趣，但目前僅限于密集連接網絡，其有效性尚未得到大規模重復。