突发:太吓人,是真的吗?AI发展的太快了,他们已经在自我繁殖和升级迭代。因为AI的自我开发和升级换代速度太快,吓得OpenAI 首席科学家公开呼吁要加强监管,并提出减速全球的AI开发。今天,OpenAI首席科学家Jacub发了一篇长文《An Alien Mind》,说让他担心的是,模型能力在提升,监控手段却未必跟得上。他还解释了一个细节,从 o1 开始隐藏原始思维链,主要是为了保护它的可监控性,避免推理过程本身承受过多的训练评价压力。
他呼吁美国政府支持国际合作,建立必要时能够协调放慢 AI 研发速度的机制,给安全研究和监管争取时间。