隐私保护更困难了?院士建议:用这种技术为大模型戴上紧箍咒
中新经纬 | 2023-09-07 14:30:25

  中新经纬9月7日电 (常涛)大模型的生成能力让“隐私泄露”的方式变得多样化,造成隐私保护更加困难,怎么办?

  在9月7日开幕的2023 INCLUSION·外滩大会上,中国科学院院士何积丰开出了他的“药方”:利用对齐技术为大模型戴上紧箍咒。

  何积丰认为,大模型的安全问题主要是在未经同意的情况下,收集、使用和泄露个人信息。隐私问题既可能发生在训练过程,也可能发生在使用过程中。而模型的通用能力,又让其能够应用到人类生产生活的各个场景中,可谓“无孔不入”,这就带来了很大的安全隐患。

  “为了应对这些问题,我们需要大模型对齐技术。”何积丰说,“对齐(alignment)”是指系统的目标和人类价值观一致,使其符合设计者的利益和预期,不会产生意外的有害后果。“如果把人工智能看作西游记里的孙悟空,‘对齐’就是唐僧的紧箍咒。有了紧箍咒,就可以保证技术不会任意使用能力胡作非为。”

  不过,对齐技术同样面临挑战。首先,对齐的基础,需要保证大模型为人服务、与人为善;其次,大模型的有用性与无害性之间目标也不完全一致。如何对错误进行有效纠正,设好大模型的“紧箍咒”也是挑战。

  因此,对齐技术已经成为了一项令人眼花缭乱的跨学科研究,不仅考验技术,也审视文化。何积丰介绍,反馈强化学习是实现对齐的技术途径,目前有两种方式,一种方式是通过人工反馈给模型不同的奖励信号,引导模型的高质量输出;另一种方式,事先给大模型提供明确的原则,系统自动训练模型对所有生成的输出结果提供初始排序。“这意味着,不仅智能系统需要向人类价值观对齐,人类的训练方法也要向价值观对齐。”何积丰说。

  (更多报道线索,请联系本文作者常涛:changtao@chinanews.com.cn)(中新经纬APP)

  中新经纬版权所有,未经书面授权,任何单位及个人不得转载、摘编或以其它方式使用。

责任编辑:罗琨 李中元

来源:中新经纬

编辑:郑铮

广告等商务合作,请点击这里

未经过正式授权严禁转载本文,侵权必究

精彩资讯尽在中新经纬APP,点击阅读

  • 中新经纬

    权威 前瞻 专业 亲和

  • 恒指半日涨1.14%,零售板块领涨
  • 国家发改委发文:坚决反对以“产能过剩”为名搞保护主义
  • 全国重点文保单位修缮期间失火!合同额435.6万