大模型一定就比小模型好?谷歌的这项研究说不一定
精华
在这个大模型不断创造新成就的时代,我们通常对机器学习模型有一个直观认知:越大越好。但事实果真如此吗?近日,GoogleResearch一个团队基于隐扩散模型(LDM)进行了大量实验研究,得出了一个结论:更大并不总是更好(BiggerisnotAlwaysBetter),尤其是在预算有限时。论文标题:BiggerisnotAlwaysBetter:ScalingPropertiesofLatentDiffusionModels论文地址:https:arxiv.orgpdf2404.01367.pdf近段时间,隐扩散模型和广义上的...