NN
2022/3/24 6:11:00
ニューラルネットワークの「創発」現象は相転移？Autoencoder『Xユーザーの／さん: 「fp8の表現力が思ってたよりかなり低いな... あと、こうやって見ると、NNの重みや勾配の絶対値の平均が1.0付近で安定するよう初期化/スケール/正則化すれば低精度でも安定するんじゃないの？という感じがする」 / X』STNN対角線形ネット無限幅深層モデル無数のNN単語ごとにNNを作る格子の中のNNWebNN『WebNN | Web Machine Learning』『Weightless: Lossy Weight Encoding For Deep Neural Network Compression | OpenReview』あれNNの重みを離散コサイン変換で圧縮した状態で学習するCNNNNのトポロジーNeuroevolutionニューラルネットワークのトポロジー最適化wasi-nnRNN
STNN
2025/1/1 12:16:00