[過去ログ]
なんJNVA部★363 (1002レス)
上
下
前
次
1-
新
このスレッドは過去ログ倉庫に格納されています。
次スレ検索
歴削→次スレ
栞削→次スレ
過去ログメニュー
645
(1)
:
(ワッチョイ 0de7-IbTG)
03/16(土)17:00
ID:V1lNYY6m0(3/4)
AA×
画像リンク[png]:i.gzn.jp
[240|
320
|
480
|
600
|
100%
|
JPG
|
べ
|
レス栞
|
レス消
]
645: (ワッチョイ 0de7-IbTG) [sage] 2024/03/16(土) 17:00:29.27 ID:V1lNYY6m0 DoRA言うほどlr下げなくても行けそうな感じがする 試すなら今までのLoRA製作と変えないところから始めても それよりも「堅牢で低いランクでの性能が高い」というのを確かめたく 普段の4分の1の「8」にしてみたが良さげ 例は言語モデルだが32→8とか雰囲気のみで真似た https://i.gzn.jp/img/2024/02/20/dora-weight-decomposed-low-rank-adaptation/02.png http://fate.5ch.net/test/read.cgi/liveuranus/1710514847/645
言うほど下げなくても行けそうな感じがする 試すなら今までの製作と変えないところから始めても それよりも堅牢で低いランクでの性能が高いというのを確かめたく 普段の分ののにしてみたが良さげ 例は言語モデルだがとか雰囲気のみで真似た
上
下
前
次
1-
新
書
関
写
板
覧
索
設
栞
歴
あと 357 レスあります
スレ情報
赤レス抽出
画像レス抽出
歴の未読スレ
AAサムネイル
ぬこの手
ぬこTOP
0.132s*