A- A+

《大陸產業》字節跳動設獨立「安全與對齊」部門 防AI代理失控

時報新聞   2026/10/13 13:15

【時報-台北電】AI飛速發展,隨之而來的風險成為熱門議題。大陸科技巨頭字節跳動Seed近日發出內部郵件,宣布將成立「Seed Model-Alignment & Preparedness」部門,加強安全與對齊方向的投入,對齊的核心是讓模型的行為與人類意圖和安全約束保持一致。

澎湃新聞13日報導,該部門由嚴林負責,彙報給Seed負責人吳永輝。原Responsible AI團隊及部分Chat團隊成員將轉入新部門,尋求提升Agent Model(AI代理模型)安全能力,以及防範CBRN(化學、生物、放射、核)等前沿能力風險。

大模型安全風險正日益凸顯,AI代理逃逸引發的網路攻擊等事件頻繁發生。此前,大陸大模型研究團隊的安全與對齊工作大多被納入到公司整體的安全合規體系中,據瞭解,字節跳動Seed是大陸首家單獨成立安全與對齊部門的前沿AI實驗室。

Seed團隊內部判斷,隨著模型能力越來越強、應用場景越來越複雜,安全與對齊已不只是風險防範,而是決定模型能否規模化應用的核心能力。

Seed安全與對齊部門將圍繞模型規範制定、安全評估體系建設、對齊訓練、防護系統搭建和風險監控等方向持續投入,並加強與外部研究機構和協力廠商評測的公開合作,最終使前沿模型在安全與授權約束內有效完成任務,隨著模型能力和自主性增強,持續降低濫用及行為偏離風險,建立面對未知風險的全面安全體系。(新聞來源:中時即時 楊晴安)

注目焦點

推薦排行

點閱排行

你的新聞