2020-12-24から1日間の記事一覧

深層学習 Day2

動画講義の要約 Section1: 勾配消失問題について 勾配消失問題とは、逆伝搬でどんどん下位層(出力層に近づく)に行くに連れて、微分値 が、どんどん0になっていく事がある。そうなると、 による重みの更新がされず、学習が行われなくなることを言う。 活性化…