TestMu AI 推出 Agent Assurance,驗證 AI 智能體能否安全上線

Date:

新產品同時驗證與客戶互動及在系統中執行操作的 AI 智能體,直接從程式碼產生測試情境,根據實際證據評核每項操作,並將所有未能驗證的部分量化為「驗證缺口」

三藩市及印度諾伊達2026年8月19日 /美通社/ — 全球首個 Agentic AI 原生品質工程平台 TestMu AI(前稱 LambdaTest)今日宣佈推出 Agent Assurance,旨在回答所有準備將 AI 智能體上線的工程團隊都要面對的一個問題:這個智能體是否已達到安全上線的要求?Agent Assurance 以單一產品涵蓋兩類智能體:對話式智能體類別可評估透過聊天、語音、電話、視像及圖像與人互動的智能體;全新的自主智能體類別則驗證在系統中執行操作的智能體:包括調用工具、寫入檔案、呼叫 API 及建立 pull request。

目前,大多數團隊在測試自主智能體時,只會參考智能體對自身行動的描述:文字記錄,或評審器根據其最終訊息給出的評分。Agent Assurance 則評核智能體實際造成的結果。只要連接至程式碼庫,Agent Assurance 便會分析智能體的功能,產生一套端到端智能體測試套件,涵蓋功能測試、非功能檢查及對抗性情境。系統會實際調用智能體,並根據觀察所得的證據評核每項準則。相關證據包括:磁碟上實際被修改的檔案、所產生的成果檔案,以及按照智能體自行聲明的可用工具範圍核實的工具調用記錄。

除了「通過」和「不通過」外,Agent Assurance 還會作出第三種判定——無法驗證。這類結果不會計入通過率,而會另行量化為:驗證缺口。報告中的每項結果均建基於實際觀察所得的證據。由於驗證缺口反映智能體對自身行動的記錄完整程度,團隊可透過提高智能體的可觀察性,逐步收窄該缺口。

「工程團隊目前正於風險最高的環節累積驗證債務。智能體對自身行為的描述,是判斷其實際行為時最薄弱的證據——因為在所有相關方之中,它本身最有可能作出錯誤陳述。」TestMu AI 集團工程高級副總裁 Vipul Verma 表示。「這個領域的每項工具都會報告通過率。Agent Assurance 不但報告通過率,亦會顯示自身盲點有多大。唯有同時交代盲點,團隊才能信賴這個數字,並據此決定是否推進發佈。」

藉助 Agent Assurance,團隊可以:

  • 毋須編寫測試即可進行測試——測試套件直接從程式碼庫衍生,實現智能體自動化測試。團隊只需提供調用智能體的方法,無論是指令、HTTP 端點、MCP 伺服器,還是建基於 n8n 等平台的工作流程。
  • 預設涵蓋各類對抗性風險——系統會將提示詞注入、工具誤用及指令覆寫情境納入核心測試類別,而非視為附加功能。
  • 透過 CI 把關發佈——在每條 CI 流程中持續測試智能體,由每次提交程式碼時的智能體冒煙測試,到發佈前的完整測試;可在無介面模式執行的指令及退出碼,能夠區分「智能體執行錯誤」與「測試框架未能進行測試」。
  • 可靠追蹤變更——智能體回歸測試會比較每次運行的差異,分辨新出現的失敗、新近修復及不穩定結果,因為不穩定問題與回歸問題需要截然不同的處理方式。

對話式智能體類別亦正擴展至軟件與人互動的最新介面:出現在鏡頭前的智能體。透過平台全新的 Video Agent Testing(Link)功能,一名擁有逼真面容及聲音的模擬真人會加入視像智能體的即時會話,與其進行自然對話,並按照團隊自訂的成功準則評核智能體。每項判定均可追溯至錄影中支持該判定的確切時刻。任何無法從錄影中核實的項目,均會被明確判定為未達標。對這個以錄影作為證據的類別而言,這是一項嚴格標準:凡評估者未能觀察到的表現,視像智能體一律不獲計分。

對話式智能體類別現已於 TestMu AI 平台正式推出。自主智能體類別現以搶先體驗形式開放,並可透過終端機以 rook 運行。模型會在 TestMu AI 控制器中執行,因此本機毋須配置供應商的 API 金鑰。如欲開始使用,請瀏覽 Link。

TestMu AI 簡介

TestMu AI 是全球首個 Agentic AI 原生品質工程平台,旨在以智能技術為核心,協助機構實現測試自動化並擴展測試規模。TestMu AI 結合自主運作能力,並與現代開發工作流程無縫整合,協助團隊在 AI 優先的世界中,更快交付更可靠、更安全的軟件。

如欲了解更多資訊,請瀏覽 TestMu AI

Share post:

spot_imgspot_img

熱門

相關新聞
Related

台中男情緒激動徒手推倒騎樓機車 警方調監視器鎖定對象追查

【Lai傳媒、記者爆料網/張哲維/台中報導】台中市西區臺灣大道與中興街口25日晚間發生毀損案件,一名民眾疑似情緒激動,竟徒手將停放在騎樓的機車推倒後離去。警方獲報到場時人已離開,目前已透過監視器畫面鎖定涉案對象,正積極追查到案。 台中市警第一分局表示,警方於25日晚間10時許接獲報案,指臺灣大道與中興街口發生毀損案件。員警趕抵現場時,涉案民眾已經離去。從網友上傳至 Threads 的現場影片可見,一名男子在騎樓附近情緒相當激動,沿路對停放的機車做出推倒等動作,拍攝民眾見狀也直呼「太可怕了」。相關畫面曝光後,引發網友討論。警方檢視相關影像後確認,該名民眾徒手推倒騎樓上停放的機車後步行離去。警方進一步調閱周邊監視器,目前已鎖定涉案對象,正積極查緝到案,同時持續聯繫遭毀損車輛的車主,後續將依相關規定辦理。第一分局表示,對於毀損他人財物等行為將依法查辦,也呼籲民眾遇到糾紛或情緒激動時應保持冷靜,切勿以破壞他人財物方式宣洩,以免觸法。標籤: 合作媒體賴傳媒

獨/汽油彈丟自家!高雄男疑與父親鬧糾紛 竟縱火燒住處遭逮

【Lai傳媒、記者爆料網 金東天/高雄報導】高雄鼓山華泰路24日一處民宅前傳出火警,警消獲報後趕往現場,到場時民眾已經自行撲滅火勢,是一堆木板燃燒。但本報掌握,這起案件,其實是一起縱火案。  警消到場時,民眾已經自撲,現場無火煙。但當下勘查發現,現場有遭汽油潑灑痕跡,警方立即調閱監視器,確認有一名男子丟汽油彈導致起火。 本報掌握,這名男子的縱火處,其實是自己家,疑似是與爸爸有糾紛,事發過後人已經被逮捕,至於詳細情形還有待警方說明。標籤: 合作媒體賴傳媒

救援畫面曝光!紅柴坑漁港遊艇擱淺 海巡消防隊員繩索人力接駁救援17名乘客脫困

【Lai傳媒、記者爆料網/周庭慶/屏東報導】今(26)日下午2時許,屏東縣紅柴坑漁港外約150公尺處小海豚1號遊艇因離岸過近,且適逢低潮期間,紅柴坑安檢所執勤海巡隊員擔心船舶擱淺,立即主動聯繫業者了解狀況。經業者表示,已聯繫另艘小海豚3號前往行拖帶。因現場風浪大,協助拖帶船舶亦不慎受困,最終造成2艘船舶、22人受困。海巡署第八巡防區指揮部立即派遣第六岸巡隊海口責任區、後壁湖責任區及第六三中隊暨所屬機動巡邏站攜帶遙控式動力救生圈、30P橡皮艇等救援裝備前往現場,並同步通報第十四海巡隊及屏東縣消防局第四大隊共同前往救援。   海巡隊員涉水背負遊艇上乘客脫困。翻攝畫面第六岸巡隊共計派遣10車25人2艇,趕赴現場救援。海巡人員到場後,小海豚3號上2名船員已自行棄船脫困上岸,經評估現場風浪較大、海象不佳,橡皮艇下水救援恐有翻覆危險,立即調整救援方式,以確保人員安全。由於現場水深及胸,海巡人員克服現場風浪及水深等不利因素,先以人力背運方式逐一協助老弱婦孺脫困上岸,再利用繩索及人力接駁方式,協助船上17名遊客平安撤離,小海豚1號3名船員已自行脫困,無人員傷亡。 海巡及消防人員以繩索及人力接駁方式協助遊艇上受困旅客脫困。翻攝畫面第六岸巡隊提醒,中秋連假期間,墾丁及恆春地區湧入大量遊客及車潮,從事水域遊憩活動人數增加,民眾從事海域活動前可多加利用「GoOcean 海洋遊憩風險平台」掌握即時海象、風速及海流等資訊,並留意相關警戒訊息,提高風險意識,避免發生危險。如於岸際或港區活動時發現有人溺水,請立即撥打海巡署118報案專線,海巡人員將持續秉持「即時應處、積極救援」原則,全力守護民眾親海活動安全。 遊艇擱淺。翻攝畫面標籤: 合作媒體賴傳媒

松山機場旅客死亡! 要飛日本66歲婦人整理行李突昏倒送醫不治

【Lai傳媒、記者爆料網/周庭慶/台北報導】松山機場驚傳旅客死亡意外!原訂今天上午搭機前往日本的66歲陳姓女子,在國際安檢線後方行李整理區突然昏倒,航警立即到場實施救護,隨後送三軍總醫院松山分院急救,陳女經搶救仍宣告不治,後續檢警相驗調查中。   原訂從台北松山機場飛日本的陳姓婦人,在整理行李時突然昏倒送醫不治(紅圈處)。翻攝畫面 航警局表示,9月26日8時1分許,原訂搭機前往日本的66歲陳姓女子,在台北松山機場國際安檢線後方行李整理區突然昏倒,航警局台北分局獲報後立即通報機場醫護站及營運安全組,現場同仁初步檢視,發現旅客情況危急,立即給予實施心肺復甦術(CPR)與操作自動體外心臟去顫器(AED)即時救護,直至醫護站護理師到達接手,後由松山機場消防隊送三軍總醫院松山分院搶救。 航空警察局台北分局呼籲,國人出國旅遊請隨時注意自身健康狀況,若於機場內身體感到不適,請立即向現場工作人員或航警尋求協助。 標籤: 合作媒體賴傳媒