2026-10-13 12:15
最后更新于2026-10-16 21:28
AI123

字节跳动Seed设安全与对齐部门,防范智能体逃逸风险

字节跳动旗下AI实验室Seed近日通过内部邮件宣布成立“Seed Model-Alignment&Preparedness”部门,由严林负责,向Seed负责人吴永辉汇报。原Responsible AI团队及部分Chat团队成员转入该部门。

新部门将围绕模型规范制定、安全评估体系建设、对齐训练、防护系统搭建和风险监控等方向推进,目标是让模型行为与人类意图和安全约束保持一致,提升智能体模型安全能力,并防范CBRN(化学、生物、放射、核)等前沿能力风险。Seed团队内部认为,随着模型能力增强和应用场景复杂化,安全与对齐已不只是风险防范,而是决定模型能否规模化应用的核心能力。

当前大模型安全风险日益凸显,智能体逃逸引发的网络攻击等事件时有发生。此前国内大模型研究团队的安全与对齐工作大多被纳入公司整体安全合规体系,字节跳动Seed是国内首家单独设立安全与对齐部门的前沿AI实验室。该部门还计划加强与外部研究机构和第三方评测的公开合作,让前沿模型在安全与授权约束内有效完成任务,持续降低滥用及行为偏离风险。

来源
  1. 2026-10-14 18:05 | 观点网:字节跳动新设大模型安全与对齐部门 全球邀请10位顶尖研究员
    阅读原文

    10月14日,字节跳动宣布启动Seed Alignment & Preparedness全球顶尖人才招募,计划邀请10位顶尖研究员加入新设立的大模型安全与对齐部门,工作地点为北京、上海和圣何塞。 观点网讯:10月14日,字节跳动宣布启动Seed Alignment & Preparedness全球顶尖人才招募,计划在全球范围内邀请10位顶尖研究员加入新设立的大模型安全与对齐部门。 新部门的研究课题包括大模型及Agent安全的前沿评测方法和Benchmark建设、模型前沿能力对齐的训练方法、自动化Red Teaming、模型行为可解释性、模型能力和行为监控、安全和对齐相关数据与Agen...

  2. 2026-10-14 16:24 | 界面新闻:字节Seed新设大模型安全与对齐部门启动人才招募
    阅读原文

    10月14日,字节跳动宣布启动Seed Alignment & Preparedness全球顶尖人才招募,计划在全球范围内邀请10位顶尖研究员加入新设立的大模型安全与对齐部门。研究课题包括大模型及Agent安全的前沿评测方法和Benchmark建设、模型前沿能力对齐的训练方法、自动化Red Teaming、模型行为可解释性、模型能力和行为监控、安全和对齐相关数据与Agent 环境合成,以及模型未来风险的应对准备。工作地点在北京、上海和圣何塞。

  3. 2026-10-13 11:56 | 界面新闻:字节跳动Seed单独设立大模型安全与对齐部门
    阅读原文

    字节跳动Seed近日发出内部邮件,宣布将成立“Seed Model-Alignment&Preparedness”部门,由严林负责,汇报给Seed负责人吴永辉。原Responsible AI团队及部分Chat团队成员将转入新部门。 该部门的设立旨在加强安全与对齐方向的投入,对齐的核心是让模型的行为与人类意图和安全约束保持一致,从而提升Agent Model(智能体模型)安全能力,以及防范CBRN(化学、生物、放射、核)等前沿能力风险。

  4. 2026-10-13 11:48 | IT之家:国内首家,字节 Seed 设立单独的大模型安全与对齐部门
    阅读原文

    IT之家 10 月 13 日消息,据新浪科技今日报道,字节跳动 Seed 近日发出内部邮件,宣布将成立“Seed Model-Alignment Preparedness”部门,由严林负责,汇报给 Seed 负责人吴永辉,原 Responsible AI 团队及部分 Chat 团队成员将转入新部门。报道称,该部门的设立旨在加强安全与对齐方向的投入,对齐的核心是让模型的行为与人类意图和安全约束保持一致,从而提升 Agent Model(智能体模型)安全能力,以及防范 CBRN(化学、生物、放射、核)等前沿能力风险。字节跳动 Seed 是国内首家单独成立安全与对齐部门的前沿 AI 实验室。大模型安...

  5. 2026-10-13 11:44 | IT之家:字节跳动 Seed 单独设立大模型安全与对齐部门
    阅读原文

    字节跳动 Seed 近日发出内部邮件,宣布将成立 "Seed Model-Alignment&Preparedness" 部门,由严林负责,汇报给 Seed 负责人吴永辉。原 Responsible AI 团队及部分 Chat 团队成员将转入新部门。‎据悉,该部门的设立旨在加强安全与对齐方向的投入,对齐的核心是让模型的行为与人类意图和安全约束保持一致,从而提升 Agent Model(智能体模型)安全能力,以及防范 CBRN(化学、生物、放射、核)等前沿能力风险。‎大模型安全风险正日益凸显,智能体逃逸引发的网络攻击等事件频繁发生。此前,国内大模型研究团队的安全与对齐工作大多被纳入到公司...

其他新闻

查看全部