铭鸿体育资讯网

字节跳动内部严禁蒸馏开源模型知识蒸馏虽能低成本快速拉高模型表现、刷出亮眼榜单排名

字节跳动内部严禁蒸馏开源模型知识蒸馏虽能低成本快速拉高模型表现、刷出亮眼榜单排名,但本质是复刻现有模型的能力,很难催生出原创性的底层创新。张一鸣的判断十分清醒,过度依赖蒸馏会让研发团队陷入路径依赖,丧失独立探索技术边界的动力,从长远看会阻碍核心技术的跨越式突破。