AGI Hunt· anshulkundaje·· 3 小时前AI 评分35
Google 研究者指出:scaling law 争议早已被 NeurIPS 2022 论文点破
Google 研究者指出 scaling law 争议早已被 NeurIPS 2022 论文点破
AI 导读
Google 研究者指出,近期 scaling law 争议的核心论点已由 NeurIPS 2022 论文点明。《Revisiting Neural Scaling Laws in Language and Vision》主张用外推损失而非最佳拟合参数评估 scaling law,因为拟合最好的参数未必外推最准。论文还发布了包含 90 个评测任务的基准数据集。
来源:AGI Hunt · agihunt.info