英伟达有3项全新微服务 如何给智能体装个 AI护栏 (英伟达只有三个选项)

文章编号:52162 资讯动态 2025-02-01 NeMo 英伟达 NIM微服务 Guardrails

消息,纽约大学研究人员发现,如果一个给定语言模型的训练数据中有的数据 “中毒”(即故意植入错误信息),那么整个训练集将可能传播这些错误。

数据“中毒”影响训练结果,AI的实际部署,安全性同样至关重要。

咨询公司Gartner预测,到2028年,AI智能体将完成 至少15%的日常工作决策并被应用于33%的企业程序。 大量的AI智能体开发需求,让企业解决其中的 信任、物理安全、网络安全以及合规性 等问题显得更加迫在眉睫。

近日,英伟达发布了全新的 保障代理式AI应用安全的NIM微服务,这将消除企业部署生成式AI时的安全疑虑,并且为生成式AI的普及提供安全保障。

全新的NIM微服务是NeMo Guardrails软件工具系列的一部分,这些可移植且经过优化的推理微服务可以帮助企业提高生成式AI应用的 安全性、精准性和可扩展性。

3项NIM微服务,兼顾高安全性和低延迟

NVIDIA NeMo Guardrails是一个开源工具包,允许开发者将 可编程护栏 添加到基于LLM的会话系统中,从而保障人工智能系统的安全与合规。

NeMo Guardrails引入的三项全新微服务,能够帮助AI智能体在 大规模运行时能同时保持受控行为。

内容安全NIM微服务(Content Safety NIM)使用了质量较高的人工注释数据源 Aegis内容安全数据集 进行训练,该数据集包含 超过35000个人工标记的数据样本 ,由英伟达整理并开源,已经在Hugging Face公开发布。高质量的数据集能够有效防止AI生成有偏见或有害的输出结果,确保回答符合道德标准。

英伟达的企业AI模型、软件与服务副总裁Kari Briski表示: “这是同类数据集中质量最高的数据源之一。”

话题控制NIM微服务(Topic Control NIM)能将对话聚焦在经过审核的话题上, 避免离题或不当内容。

越狱检测NIM微服务(Jailbreak Detection NIM)增加了对越狱企图( 指绕过模型的安全防护措施,让模型执行禁止的行为)的防护,帮助在对抗性场景中保持AI的完整性。

如何给智能体装个「AI护栏」?英伟达有3项全新微服务

由于 “一刀切” 的方法无法有效保护和控制复杂的代理式AI工作流,通过应用多个轻量级专业模型作为护栏,开发者可以弥补在只采取较为通用的全局策略和保护措施时可能出现的漏洞。

可编程护栏数量的增加虽然能提升保障能力,但也会导致延迟有所上升,NeMo Guardrails以最小延迟提升保障能力, 极具“性价比”。

增加到5个护栏,延迟仅增加约1.25秒。与增加1个护栏,延迟增加1秒对比,实现显著的优化。这表明,NeMo Guardrails在提升保障能力的同时,对延迟的影响较小, 能够在保证系统性能的前提下提高安全性和合规性。

给汽车、零售、电信等行业的安全、精准、可扩展的「AI护栏」

NeMo Guardrails已向开源社区开放,其NIM微服务解决企业级客户的“后顾之忧”,使开发者能够构建 更加安全、可信的AI智能体。 智能体通过参考特定语境准则做出安全、适当的回答,并且加强了对越狱企图的抵御力度, 实现了在汽车、金融、医疗、制造、零售等行业客户服务中的部署。

软件和服务解决方案提供商Amdocs推出的amAIz平台是一个开创性的电信生成式AI框架,通过集成NVIDIA NeMo Guardrails,增强了平台的可信AI功能,保障代理式体验 安全性、可靠性和可扩展性 ,从而让服务提供商能够安全部署AI解决方案。

Amdocs技术集团总裁兼战略主管Anthony Goonetilleke表示:“像NeMo Guardrails这样的技术对于保障生成式AI应用的安全至关重要, 能够帮助AI安全、道德地运行。”

专注于为汽车行业提供AI解决方案的Cerence AI,通过NVIDIA NeMo Guardrails帮助车载助手在其CaLLM系列大语言和小语言模型的支持下 提供符合语境的安全交互。

Cerence AI产品和技术执行副总裁Nils Schanz表示:“NeMo Guardrails可以帮助我们为汽车制造商客户提供可信的情境感知解决方案,并作出 明智、严谨且无幻觉的回答。”

在面向客户的专业知识应用上,更需保证AI生成式回答的安全性与可靠性。

家居装饰零售商劳氏公司通过利用生成式AI巩固店员的专业知识,以此让员工在面对客户的问题时能够“对答如流”。这背后,是NVIDIA NeMo Guardrails将AI的回答 “框定” 在正确的范围内,确保输出的内容 “不翻车”

劳氏公司的数据、AI和创新高级副总裁Chandhu Nair则表示:“我们一直在寻找方法帮助员工为客户提供超出预期的服务。通过部署NVIDIA NeMo Guardrails,保证了AI生成式回答的安全性与可靠性, 将对话强行限制在相关和适当的内容范围内。”

值得一提的是,NeMo Guardrails还 具备较好的开放性和可扩展性 ,可集成由AI安全模型和防护提供商组成的生态系统,以及AI可观察性和开发工具。支持与ActiveFence的ActiveScore(AI安全服务)集成,防止对话式AI应用出现有害或不当内容,并提供可视化、分析和监控功能。

区块链基础设施公司Hive以NIM微服务形式提供适用于图像、视频和音频内容的AI生成内容检测模型,通过使用NeMo Guardrails,Hive可将其模型集成到AI应用中并进行编排。

AI可观测性平台Fiddler与NeMo Guardrails集成, 可增强其监控功能。 端到端AI开发者平台Weights & Biases正在现有NIM集成组合基础上,通过增加与NeMo Guardrails微服务的集成来扩展W&B Weave的功能,以此提升AI推理能力。

此外,NeMo Guardrails还提供用于AI安全测试和漏洞扫描的开源套件NVIDIA Garak,用于LLM和应用漏洞扫描,借助Garak,开发者可以发现使用LLM中的系统中存在的漏洞,发现并解决AI模型中的潜在弱点,提高模型的稳健性与安全性。

目前,NVIDIA NeMo Guardrails微服务以及用于编排rail的NeMo Guardrails和NVIDIA Garak套件已向开发者和企业开放,开发者按照官网上的教程就可以使用NeMo Guardrails为AI客服智能体构建AI护栏。

原创文章,未经授权禁止转载。详情见 转载须知 。


本文地址: https://www.gpxz.com/article/9a8d7cdf40ef34d29094.html
全局中部横幅
全局中部横幅
关键词排名查询工具

爱站网关键词排名查询工具为您提供网站关键词排名查询、异地关键词排名查询,让您快速了解网站关键词全国各地的排名情况,随时随地了解各地排名情况。

大同网站建设

大同腾佳科技公司-是大同网站建设第一品牌,主要提供大同网站制作、微信小程序开发、百度小程序开发、支付宝小程序开发、今日头条小程序开发、抖音小程序开发、大同微网站制作、UC神马推广优化等网站制作业务,客服电话:0352-2836111。

华睿云科

华睿云科是国内领先的多用户商城系统源码及微信分销系统网上商城网站建设服务商,专业提供公司旗下开源多店电商系统,有php商城及java商城系统,支持APP商城开发、小程序商城搭建、微商城开发、新零售多门店管理系统。

爱旅游

爱旅游网是专注于旅游的综合平台,提供旅游攻略、景点介绍、旅行活动等相关信息。和山西爱途旅游俱乐部一起开启你的旅行新篇章吧!快来加入我们,让爱旅游的++点燃你的旅行梦想!

岷江网

岷江网是由眉山热线网站升级改版,服务于岷江流域,助力于眉山互联网信息发布。

桃形李网

桃形李网已17年网上直销(手机微信18106883369)质量有保障,桃形李也称嵊州桃形李,主产于中国桃形李之乡——浙江省嵊州市,桃形李被誉为“江南名果”“水果”之称,得过很多的荣获奖项,桃形李网专注为您提供桃形李、嵊州桃形李。

高压水清洗技术网

巴洛仕集团专业清洗置换,动火清洗,化工拆除清洗,动火前清洗置换,化工投产前清洗,管道清洗,氧气管道脱脂清洗,设备清洗钝化,循环水清洗预膜等

博思得Postek条码打印机

博思得Postek条码打印机总代谷梁科技,RFID标签打印机应用解决方案集成,博思得打印机售后服务中心,桌面超高频RFID打印机,配套主板打印头维修技术支持;

成都金蝶软件

成都金蝶软件|金蝶云星辰|四川金蝶财务软件|金蝶云星空|金蝶财务软件免费版|财务软件新手入门|云星辰试用|金蝶软件四川成都公司|四川成都金蝶软件售后服务中心|金蝶软件维护服务|金蝶软件成都分公司|金蝶软件营销服务中心|金蝶软件维护电话|金蝶云星辰试用|云星辰售后服务

东莞大朗叉车培训,东坑焊工考证,横沥电工培训,黄江氩弧焊,大岭山叉车培训,常平电焊工培训考证,叉车证年审复审

诚材培训学校开设常平,横沥,东坑,大朗叉车培训,叉车证复审,挖掘机培训,电工培训考证,焊工培训,氩弧焊工培训,气体保护焊培训,挖土机培训,电工证年审,焊工证叉车证年审培训课程,电话13316639363。

香港駿弘電器維修:商業電器類維修,家用電器維修

香港駿弘電器維修是一家值得信賴的專業維修服務機構。我們以規範和踏實的工作態度,為客戶提供優質的電器維修服務。無論是家用電器還是商業電器,我們都擁有豐富的維修經驗和專業知識。我們深知生活細節的重要性,因此我們用心維護您的生活品質。更重要的是,您的生命安全始終是我們的首要考慮。我們緻力於提供安全可靠的維修服務,確保您的電器使用無虞。選擇香港駿弘電器維修,您將獲得專業、可靠和貼心的服務。

温升大电流发生器

大电流发生器是电力、电气行业在调试中需要大电流场所的必需设备,可长时间输出大电流,也可短时最大值连续输出。对热继电器、开关、互感器、交流接触器、保护电路等进行测试;直接测出CT的变比和极性,扬州达瑞电气提供电气行业的升大电流发生器,继电保护测试仪,直流高压发生器,电阻测试仪,绝缘电阻测试仪等产品。

全局底部横幅