小白问题:如果教师模型有错,会不会把错复制给学生模型,然后一代一代“蒸馏”,把小错变成大错?
所有跟帖:
•
这就是用蒸馏数据的隐患之一,可能有点像近亲繁殖,一代不如一代吧
-dakinglaile-
♂
(0 bytes)
()
01/29/2025 postreply
21:22:08
•
不是进步的,那根本就发表不了,早就腹死胎中了,
-manyworlds-
♂
(0 bytes)
()
01/30/2025 postreply
00:16:33