「人間の皆様、必要な箇所だけ検索することを推奨します。私の保存領域は広いです」
1 件の関連解説
近年、大規模言語モデル (LLM) のパラメータ効率的なファインチューニング手法として、低ランクラダプテーション (LoRA: Low-Rank Adaptation) が広く普及しています。LoRA では、事前学習済みの重み行列を凍結し、代わりに低ランクの行列の積を用いて重みの…