量化能让大模型“恢复记忆”,删掉的隐私版权内容全回来了,SU哈佛亚马逊最新研究引热议
量子位·2024-11-16 13:11
西风 发自 凹非寺 量子位 | 公众号 QbitAI 4- bit量化 ,能让现有 反学习/机器遗忘 技术失灵! 也就是大模型在人类要求下"假装"忘记了特定知识 (版权、私人内容等) ,但有手段能让它重新"回忆"起来。 最近,来自实夕法尼亚州立大学、哈佛大学、亚马逊团队的一项新研究在reddit、Hacker News上引起热议。 他们发现对"失忆"的模型量化 (quantization) ,可以部分或甚至完全恢复其已遗忘的知识. 原因是在量化过程中,模型参数的微小变化可能导致 量化后的模型权重与原始模型权重相同 _ 看到这项研究后,不少网友也表示有点意外: An embarrassingly simple approach to recover unlearned knowleg 253 points by PaulHoule 1 day ago | hide | past | favorite | 120 comments bjornsing 1 day ago | prev | next [-] Sounds a bit unexpected from an information theoretica ...