A Universal Law of Robustness via Isoperimetry

読んだ論文
https://arxiv.org/pdf/2105.12806.pdf

  • どんなもの?
    • 従来の機械学習では、学習データ数よりもパラメータ数の方が多いとき過学習が発生する。
    • 一方、ディープラーニングではパラメータ数の方が多いにも関わらず過学習が発生しない。
      • d次元の学習データがn個あるとき、パラメータがnd個以上であれば過学習は発生しない。
    • この理由を理論的に説明した。
よかったらシェアしてね!

この記事を書いた人

自然言語処理と推薦システムに興味があります。

コメント

コメント一覧 (20件)

buy cheap fildena purchase usa へ返信する コメントをキャンセル

目次
閉じる