世良情感网

OpenAI宣称DeepSeek违规蒸馏 咱来讲讲机器学习里的知识蒸馏哈。这就好

OpenAI宣称DeepSeek违规蒸馏

咱来讲讲机器学习里的知识蒸馏哈。这就好比是让一个厉害的学霸(教师模型),把自己脑子里的知识传给一个“小菜鸟”(学生模型)。

学霸模型又大又强,学富五车,在大量知识里摸爬滚打,啥都懂。小菜鸟模型个头小、能力弱些,但是它有个“偷师”的本事,就照着学霸做题(输出)的样子去学。

这样一来,小菜鸟在完成一些学习任务的时候,就能花更少的精力,达到和学霸差不多的水平,成功逆袭,厉害吧!

不过说了半天,OpenAi你倒是提供证据吧[doge]

评论列表

用户10xxx71
用户10xxx71 3
2025-01-30 14:42
蒸就蒸吧,不蒸傻瓜。
大为
大为 1
2025-02-01 23:42
现在OPEN增加权限了,它只能蒸馏奶头乐垃圾低级数据了,无法蒸馏到深度思考高级功能性数据,很快原形毕露了!