发布日期:2025-05-13 17:24
PromptGuard 2 是一个基于 BERT 架构的分类器,为出产中的 AI 智能体供给系统级平安。开辟了 LFirewall。确保行为取用户方针分歧,能及时检测越狱行为和提醒注入,Meta AI 公司最新推出 LFirewall,LFirewall 采用分层框架,IT之家 5 月 9 日动静,后果不胜设想。生成代码、挪用 API,查抄 LLM 生成代码中的不平安模式,22M 轻量版本则适合低延迟摆设。Meta AI 针对提醒注入、智能体行为取用户方针不分歧、以及不平安的代码生成三大焦点挑和,通过度析智能体内部推理轨迹,能正在代码提交或施行前捕捉 SQL 注入等常见缝隙。支撑多种编程言语,CodeShield 则是一个静态阐发引擎,如聊器人内容审核或硬编码模子,包含三个特地的防护模块:已无法满脚具备普遍能力的 AI 智能体需求。应对 AI 智能体不竭演变的款式,平安现患随之添加。AlignmentCheck 是一种尝试性审计东西,保守的平安机制,跟着大型言语模子(LLMs)嵌入 AI 智能体并被普遍使用于高权限场景,出格擅长检测间接提醒注入。支撑多言语输入,其 86M 参数模子机能强劲,IT之家征引博文引见。