中国信息协会教育培训平台

大語言模型防火墻是 AI 安全的未來嗎?

發布于:2025-04-11 點擊量:366 來源:至頂網

隨著大語言模型 (LLM) 在各行業得到更廣泛的應用,確保這些強大 AI 工具的安全性已成為一個日益增長的關切。本周在新加坡舉行的 Black Hat Asia 2025 大會上,一組專家深入探討了 LLM 防火墻是否是 AI 安全的解決方案,還是僅僅是整個安全體系中的一部分。

網絡安全公司 CloudsineAI 的創始人 Matthias Chin 首先指出了防護機制和防火墻之間的區別:"防護機制是一種保護機制,而防火墻是一個具有更多功能的安全概念 - 例如,它是一個控制點,包含防護機制,擁有威脅向量數據庫,并可以與 SIEM (安全信息和事件管理) 工作流程集成。"

新加坡內政團隊科技局 (HTX) 首席創新官兼首席云工程師 Pan Yong Ng 指出,將 AI 安全整合到組織 IT 基礎設施的基礎中非常重要,盡管對于安全控制應該放在哪里仍存在不確定性。他建議在各個層面實施組合控制,從推理服務模型到 Web 應用程序安全,甚至擴展到 AI 代理。

AI Singapore 的 AI 創新總監 Laurence Liew 表示,開發人員對 AI 代理和大語言模型的使用日益增加,這將需要使用 LLM 防火墻來執行防護機制和企業政策。他說:"我們告訴年輕工程師要確保設置某些防護機制,他們會去做,但他們經常忙于編碼,以至于防護機制可能沒有得到更新。"

新加坡南洋理工大學研究員 Xiaojun Jia 指出了傳統防火墻在解決 LLM 特定安全問題方面的局限性。他說:"傳統防火墻專注于網絡安全,這使得它們在防御利用 LLM 邏輯流程的越獄攻擊方面效果不佳。"

Chin 補充說,LLM 防火墻不僅僅是為了確保 AI 安全 - 它們也用于 AI 安全性,以防止模型幻覺和產生有偏見和有害的輸出。它們還可以防范通過人類語言和提示而不是代碼執行的新一代攻擊。

專家組還探討了通用 LLM 防火墻是否能夠在所有行業中有效運作,還是需要定制化的問題。

Liew 特別提到了 AI Singapore 與政府機構的轉錄項目,其中語音轉文本引擎根據每個機構的需求進行了微調。他說,同樣地,LLM 防火墻應該經過精心設計,以處理醫療保健和金融服務等特定場景。

在實施 LLM 防火墻方面,Jia 提倡采用包括輸入檢測、模型調優和輸出過濾的多層次方法。

"輸入檢測在提示輸入模型之前檢測惡意輸入,模型調優確保輸出與人類價值觀一致,輸出過濾檢測有害輸出,"Jia 說,同時他也承認在安全性和可用性之間取得平衡是一個挑戰,呼吁采用能夠應對不斷演變的攻擊的自適應防御措施。

測試和基準測試對于確保 LLM 及其防火墻按預期工作至關重要。Chin 表示這個領域仍在發展中,需要完成的工作將取決于測試用例,并與防火墻將部署的行業(無論是銀行還是醫療保健)保持一致。他指出 Meta 的 CyberSecEval 和新加坡的 AI Verify 是可以幫助支持測試和基準測試工作的示例。

Liew 強調了在構建和測試 LLM 時擁有多元化團隊的重要性。他說:"擁有跨不同學科的人才非常重要。確保團隊中有了解領域的人。你會驚訝地發現,他們提出的問題是網絡安全工程師從未想到的。"

關于 LLM 防火墻是否會阻礙 AI 創新,Chin 表示,隨著模型上下文協議 (MCP) 等新興技術的采用 - 這是 Anthropic 開發的一個開放標準,允許 AI 代理與其他應用程序和數據源通信 - AI 代理可能會繞過 LLM 防火墻并開始與其他代理通信。他補充說:"我們必須讓創新蓬勃發展,并繼續建立應對挑戰的敏捷性。"

Chin 表示,LLM 防火墻將繼續發展,這是由代理式 AI 框架的興起推動的,組織,特別是大型企業和政府,將需要某種形式的防護機制或防火墻。就像網絡防火墻現在包括 Web 應用防火墻和終端防火墻一樣,他指出 LLM 防火墻可以采用部署在安全控制點和終端的硬件或軟件形式。

【版權聲明】:本站內容來自于與互聯網(注明原創稿件除外),如文章或圖像侵犯到您的權益,請及時告知,我們第一時間刪除處理!
主站蜘蛛池模板: 聊城钢管厂,无缝钢管厂家-山东旺耀金属制品有限公司 | 新乡市大成数控机械有限公司 | 滤布_PP滤芯_过滤芯_线绕滤芯_碳纤维滤芯 - 东莞市三比过滤器材有限公司 | 十树品牌策划—品牌战略、品牌策划、品牌定位、品牌设计、包装设计、品牌营销-上海十树品牌管理咨询有限公司官网 | 厦门公司注册-提供工商登记记账代理服务和营业执照代办地址与注册流程及费用 | 智能一体化蒸馏仪_氨氮蒸馏仪_全自动智能蒸馏仪器厂家-那艾 | 生物除臭_废气处理_玻璃钢风机_布袋除尘_脱硫脱硝_催化燃烧_生物滤池_广东正州环保科技股份有限公司 | 室内儿童乐园定制_淘气堡订做_蹦床公园订制厂家-乐奇多 | 河南反渗透设备,河南纯净水设备,河南软化水设备,郑州EDI超纯水设备,郑州水处理设备厂家_河南江宇环保科技有限公司 | 在线腐蚀率仪,在线污垢热阻仪,靶式光源仪-北京同德创业科技有限公司 | 烟气在线监测系统_VOCs在线监测_分析仪「杭州世驰科技」 | 上海宽带安装-上海宽带办理-400电话-包月电话-靓号 | 进销存软件|仓库管理软件|库存物资出入库|ERP生产|MRP|易特软件官方网站 | 精密机械加工_零件加工_机械零部件加工厂_高精密零件加工定制—深圳精密机械加工厂 | 铸造厂_铸造厂家_硅溶胶熔模铸造-盐城市春秋精密机械有限公司 | 木业信息网[www.wood186.com]全国木业建材服务平台 | 塑料振动筛-防腐蚀振动筛-聚丙烯振动筛-塑料振动筛厂家河南迈能机械设备有限公司 | 展馆展厅设计_数字多媒体展厅_3D全息投影_三维动画制作_企业宣传片|深圳市华南数字科技有限公司 斩天手游网_高质量手机游戏下载中心 | 自动烘干线,工业烘箱生产厂家-湖南耐美特智能装备有限公司官方网站 | 可可英语-年轻人的英语听说训练平台 | 上海钧尚电器有限公司 - Faulhaber电机 AMETEK pittman电机 AMETEK ROTRON军用航空风机 Exlar电动缸 MAE电机 MCG电机 CP电动工具 马头工具 AMCI驱动器 直流电机 减速箱 直流伺服电机,无刷电机,直线电机 直流防爆电机 防爆电机 汽车助力转向电机 EPS电机 faulhaber motor faulhaber gearbox NANOTEC电机 ELWOOD电机 PHYTRON电机 EXLAR伺服电动缸 高力矩、高性能直流电机,音圈电机,风机,直流风机,航空风机 | 兰舍硅藻泥 -- 深圳硅藻泥|深圳兰舍硅藻泥|深圳硅藻泥品牌|深圳硅藻泥价格|深圳硅藻泥厂家|深圳硅藻泥施工| | 上海浩斌信息科技有限公司RFID读写器,IC卡读卡器,手持机,数据采集终端,电力仓库管理软件开发,固定资产软件,纱管标签,试剂管理,RFID试剂柜,档案管理,档案柜,智能货架 | 延吉新闻网 - 未来之选·就是延吉 [YanJinews.com] | 培训桌-培训椅-会议椅-洽谈桌-培训桌椅生产厂家-【鼎优家具】 | 日职联直播_日职联免费视频直播_日职联直播在线观看无插件-24直播网 | 柔性测斜仪|滑动式测斜仪-华思(广州)测控科技有限公司 | 无尘车间_洁净车间_净化车间_洁净室工程一站式净化服务商-深圳市美克威尔环境科技有限公司 | 江苏吉宏特专用汽车制造有限公司_联合吸污车-下水道管道清洗疏通车-综合养护吸排车 | 山东优科机械设备有限公司,养鸡设备,湿帘设备,通风降温加湿设备,山东养鸡设备,山东湿帘设备 | 清关公司_进口报关公司【恒邦】进口报关流程及费用 | 萍乡市耀天化工有限公司| 精密铸造,精密铸件,不锈钢铸造,不锈钢铸件-常州鸿雁行机械科技有限公司 | 无锡新源润不锈钢官网|304不锈钢平板|316L冷轧宽幅|2米卷分条开平 | 深山工作室提供网络投票系统|微信公众号投票|微信公众号小程序|抖音小程序|百度小程序|微信公众号开发|企业网站建设 | 医用手摇病床,医用电动病床,康养手摇病床,康养电动病床-河北丁丁医疗器械有限公司 | 铅板-济南鑫玉防辐射材料有限公司 | 扫路车_洗扫车_清扫车_道路清扫车_天锦洗扫车-程力专用汽车股份有限公司 | 金属网帘|金属帘|装饰网帘|金属环网|金属幕墙网|金属垂帘|金属扣帘-安平县名图金属丝网制品有限公司 | 联系我们果博东方公司福布斯客服电话| 湖北大洋塑胶有限公司|AGR|PPR|RTP|HDPE|e-PSP钢塑复合压力管道生产厂家 |