一封内部邮件,把模型安全这件事单拎了出来。
字节的 Seed 团队要成立一个新部门。
名字翻成中文,大意是模型对齐与风险准备。
负责人是严林,向 Seed 负责人吴永辉汇报。
原来做负责任 AI 的那拨人,加上部分做对话产品的成员,一起并进新部门。

这不是一次寻常的内部调整。
安全为什么值得单独设一个部门
对齐这个词,讲的是让模型的行为守住人的意图和边界。
难点在于,模型越强,能捅出的窟窿越大。
以前的安全工作,大多挂在公司整体的合规体系下面。
出了事再补,是常见的节奏。
Seed 的判断变了。
安全与对齐不再只是防风险。
它成了模型能不能规模化用出去的核心能力。
换句话说,安全没做好,模型就走不远。
新部门要盯哪几件事
内部说法里,方向列了五块。
模型规范怎么定。
安全评估体系怎么搭。
对齐训练怎么做。
防护系统怎么建。
风险怎么盯。
这五块叠在一起,其实是从定规矩到兜底的一条链。
被点名的两类风险,值得单独说一句。
一类是智能体模型本身的安全。
模型会自己动手调工具之后,出错的后果比只会聊天时大得多。
智能体跑偏,甚至试着脱离约束,这类事已经出现过。
另一类是前沿能力的滥用风险。
化学和生物这一类,还有放射和核,都被放进了防范名单。
这类风险一旦漏出去,代价很难收回。
新部门还提到一件事。
要和外部研究机构,还有第三方评测做公开合作。
安全这件事,闭门自查的说服力有限。
同行多数怎么做的
把安全单独立成部门,在国内并不常见。
多数团队的做法,是把它并进公司整体的安全合规条线。
字节 Seed 这一步,在国内前沿实验室里算是头一家。
放到国外看,这种安排并不新鲜。
几家头部的模型公司,早就有专门的对齐团队。
差别更多在规模和汇报关系上。
这件事真正的看点
一个部门的名字,未必能立刻改变什么。
但它透出一个判断。
做模型的人开始把安全当成产品的一部分,而不是成本。
这个转变,比部门本身更值得留意。
对做 AI编程 的人来说,模型行为稳定,接进工作流才敢放手。
对搭 AI对话 产品的人来说,多一层对齐,用户踩坑的概率就低一分。
对只想把活干完的人来说,这类 AI工具 最后会落到一句很朴素的体验。
交出去的活,它敢不敢放手去干。
