TestMu AI 推出 Agent Assurance,驗證 AI 智能體能否安全上線

Date:

新產品同時驗證與客戶互動及在系統中執行操作的 AI 智能體,直接從程式碼產生測試情境,根據實際證據評核每項操作,並將所有未能驗證的部分量化為「驗證缺口」

三藩市及印度諾伊達2026年8月19日 /美通社/ — 全球首個 Agentic AI 原生品質工程平台 TestMu AI(前稱 LambdaTest)今日宣佈推出 Agent Assurance,旨在回答所有準備將 AI 智能體上線的工程團隊都要面對的一個問題:這個智能體是否已達到安全上線的要求?Agent Assurance 以單一產品涵蓋兩類智能體:對話式智能體類別可評估透過聊天、語音、電話、視像及圖像與人互動的智能體;全新的自主智能體類別則驗證在系統中執行操作的智能體:包括調用工具、寫入檔案、呼叫 API 及建立 pull request。

目前,大多數團隊在測試自主智能體時,只會參考智能體對自身行動的描述:文字記錄,或評審器根據其最終訊息給出的評分。Agent Assurance 則評核智能體實際造成的結果。只要連接至程式碼庫,Agent Assurance 便會分析智能體的功能,產生一套端到端智能體測試套件,涵蓋功能測試、非功能檢查及對抗性情境。系統會實際調用智能體,並根據觀察所得的證據評核每項準則。相關證據包括:磁碟上實際被修改的檔案、所產生的成果檔案,以及按照智能體自行聲明的可用工具範圍核實的工具調用記錄。

除了「通過」和「不通過」外,Agent Assurance 還會作出第三種判定——無法驗證。這類結果不會計入通過率,而會另行量化為:驗證缺口。報告中的每項結果均建基於實際觀察所得的證據。由於驗證缺口反映智能體對自身行動的記錄完整程度,團隊可透過提高智能體的可觀察性,逐步收窄該缺口。

「工程團隊目前正於風險最高的環節累積驗證債務。智能體對自身行為的描述,是判斷其實際行為時最薄弱的證據——因為在所有相關方之中,它本身最有可能作出錯誤陳述。」TestMu AI 集團工程高級副總裁 Vipul Verma 表示。「這個領域的每項工具都會報告通過率。Agent Assurance 不但報告通過率,亦會顯示自身盲點有多大。唯有同時交代盲點,團隊才能信賴這個數字,並據此決定是否推進發佈。」

藉助 Agent Assurance,團隊可以:

  • 毋須編寫測試即可進行測試——測試套件直接從程式碼庫衍生,實現智能體自動化測試。團隊只需提供調用智能體的方法,無論是指令、HTTP 端點、MCP 伺服器,還是建基於 n8n 等平台的工作流程。
  • 預設涵蓋各類對抗性風險——系統會將提示詞注入、工具誤用及指令覆寫情境納入核心測試類別,而非視為附加功能。
  • 透過 CI 把關發佈——在每條 CI 流程中持續測試智能體,由每次提交程式碼時的智能體冒煙測試,到發佈前的完整測試;可在無介面模式執行的指令及退出碼,能夠區分「智能體執行錯誤」與「測試框架未能進行測試」。
  • 可靠追蹤變更——智能體回歸測試會比較每次運行的差異,分辨新出現的失敗、新近修復及不穩定結果,因為不穩定問題與回歸問題需要截然不同的處理方式。

對話式智能體類別亦正擴展至軟件與人互動的最新介面:出現在鏡頭前的智能體。透過平台全新的 Video Agent Testing(Link)功能,一名擁有逼真面容及聲音的模擬真人會加入視像智能體的即時會話,與其進行自然對話,並按照團隊自訂的成功準則評核智能體。每項判定均可追溯至錄影中支持該判定的確切時刻。任何無法從錄影中核實的項目,均會被明確判定為未達標。對這個以錄影作為證據的類別而言,這是一項嚴格標準:凡評估者未能觀察到的表現,視像智能體一律不獲計分。

對話式智能體類別現已於 TestMu AI 平台正式推出。自主智能體類別現以搶先體驗形式開放,並可透過終端機以 rook 運行。模型會在 TestMu AI 控制器中執行,因此本機毋須配置供應商的 API 金鑰。如欲開始使用,請瀏覽 Link。

TestMu AI 簡介

TestMu AI 是全球首個 Agentic AI 原生品質工程平台,旨在以智能技術為核心,協助機構實現測試自動化並擴展測試規模。TestMu AI 結合自主運作能力,並與現代開發工作流程無縫整合,協助團隊在 AI 優先的世界中,更快交付更可靠、更安全的軟件。

如欲了解更多資訊,請瀏覽 TestMu AI

Share post:

spot_imgspot_img

熱門

相關新聞
Related

快訊/茄萣水產二代4天遭2度攻擊!2嫌逃基隆落網 疑「買命」警追幕後金主

【賴傳媒、記者爆料網 王俊勝、金東天/高雄報導】高雄茄萣區41歲郭姓水產行二代,短短4天內接連遭遇兩起攻擊,第二起案件更有人嗆聲「有人花錢買你的命」,引發外界關注。湖內分局成立專案小組後,經跨縣市追查,已於昨(8)日晚間在基隆市暖暖區先後逮捕陳姓、林姓2名嫌犯,訊後依殺人等罪嫌移送橋頭地檢署,並向法院聲請羈押;警方目前仍持續追查其他共犯及涉案車輛。整起案件要從10月3日下午說起。郭男當天駕車行經茄萣區仁愛路一段與成功路口時,疑遭一輛藍色小貨車先後追撞。雙方下車理論期間,26歲蘇姓男子疑趁郭男背對著他打電話報警時,突然揮拳攻擊,並持利器劃傷郭男左手臂及頸部,傷勢一度距離頸動脈僅約1公分。警方獲報後趕抵現場,當場將蘇男制伏,並在附近發現疑似遭丟棄的刀械。警方調查後,依涉嫌恐嚇、殺人未遂等罪嫌將蘇男移送橋頭地檢署偵辦;郭男原以為首波衝突告一段落,沒想到4天後又在住家附近遇襲。10月7日下午2時許,郭男在茄萣區金鑾路住家附近,突然遭3、4名陌生男子靠近。郭男表示,對方持開山刀等物品攻擊,還朝他噴灑辣椒水,過程中有人撂下「有人花錢買你的命」等語,接著又有一輛白色轎車衝撞,郭男受到輕傷,嫌犯則趁亂逃離現場。警方獲報後立即啟動重大刑案偵辦機制,報請橋頭地檢署檢察官指揮,並結合刑警大隊及基隆市警察局共同追查。專案小組透過蒐證、監視器畫面及涉案車輛線索,逐步掌握嫌犯行蹤,最後在8日晚間7時50分許,於基隆市暖暖區拘捕陳姓嫌犯;同日晚間8時28分許,再將林姓嫌犯查緝到案。警方指出,2名嫌犯經警詢後,已依法移送橋頭地檢署偵辦,並向法院聲請羈押。目前專案小組仍持續追緝其他涉案共犯及相關車輛,將進一步釐清兩起攻擊事件是否有關聯、是否涉及幕後指使,以及郭男所稱「花錢買命」是否有具體事證。湖內分局強調,警方將持續擴大偵辦,掌握所有涉案人員及犯案動機,依法究辦,維護地方治安。警方也提醒,案件仍在偵查階段,相關嫌犯的涉案程度及犯案動機,均應以後續檢警調查結果及司法認定為準。警方表示,案件發生於10月7日下午2時許,地點在茄萣區金鑾路。湖內分局獲報後,隨即啟動重大刑案偵辦機制,抽調偵查隊及相關警力組成專案小組,同時報請橋頭地檢署檢察官指揮,並結合刑警大隊及基隆市警察局協助追查。專案人員接手後,立即針對案發現場及周邊展開調查,積極蒐集相關事證、釐清涉案人員身分,並分析嫌犯可能逃逸路線及藏匿處所。警方透過跨縣市警力合作,逐步掌握相關線索,鎖定陳、林2名男子涉案。經持續追查,警方於10月8日晚間7時50分許,在基隆市暖暖區先拘捕陳姓嫌犯到案;同日晚間8時28分許,再將林姓嫌犯查緝到案。2人落網後被帶回接受警方調查,警詢結束後,依法移送橋頭地檢署偵辦,檢方並向法院聲請羈押。湖內分局指出,目前2名嫌犯的涉案程度、案發經過及犯案動機,仍待檢警進一步調查釐清。專案小組也不敢鬆懈,持續追查其他可能涉案共犯及相關車輛,將所有涉案人員查緝到案。《賴傳媒》提醒您: 犯罪行為、不良行為、危險行為,請勿模仿。標籤: 合作媒體賴傳媒

花蓮東大門夜市驚傳持刀隨機追砍!荷蘭女遊客頭髮被削掉一截 兇嫌落網警方偵訊中

【Lai傳媒、記者爆料網/周庭慶/花蓮報導】花蓮東大門夜市今(8)日晚間驚傳持刀隨機追砍遊客案件!一名男子持西瓜刀及酒瓶闖入先丟擲酒瓶,接著瘋持刀追砍遊客,現場許多遊客及攤商嚇得四處竄逃,其中一名荷蘭籍女遊客頭髮被削掉一截,所幸並未受傷。警方逮捕兇嫌33歲李姓男子,查出他有毒品前科,除漏夜釐清其犯罪動機,並將建請檢方聲押以及通報衛生單位進行後續處理。   花蓮東大門夜市持刀隨機追砍遊客男子落網。翻攝畫面 這起驚悚隨機攻擊案件發生在晚間6時37分左右,攤商表示,李男翻牆闖入後丟擲酒瓶、接著持刀揮舞追砍,現場一片混亂,民眾PO網表示,「我跟先生直接扛著三個小孩+推車直接跑(我的鐵板麵剛上啊)」、「我回過神才覺得還好, 真的還好我今天沒帶小孩」、「我們難得會一次全部小孩一起帶出來⋯ 有夠雖」、「安全第一,回家自己煮」 警方起出犯案的西瓜刀。翻攝畫面  李男犯案後隨即逃離,花蓮警方出動大批警力到場採證及搜捕,晚間7時30分左右,發現李男出現在夜市旁停車場,立即上前壓制逮捕。 大批警力到場搜捕逮獲兇嫌李姓男子。翻攝畫面花蓮縣警察局長范織坤表示,代表縣長徐榛蔚慰問受驚的荷蘭籍遊客,並強調警方在國慶連假期間將加強巡邏及安全維護,讓前來花蓮遊玩的民眾安心。 標籤: 合作媒體賴傳媒

國道3號和美段3車連環追撞!小貨車疑未注意前方釀禍 4人受傷送醫

【Lai傳媒、記者爆料網/彰化報導】國道3號南向191.1公里、彰化和美路段,今(8)日下午5時許發生一起3車連環追撞事故。一輛自用小貨車行駛內側車道時,因未注意前方狀況,追撞前方營業小客車,強大撞擊力道導致營業小客車再向前推撞另一輛自用小客車,造成4人受傷送醫。國道公路警察局第七公路警察大隊指出,事故發生於下午5時許,當時36歲黃姓男子(78年次)駕駛自用小貨車行經國道3號南向內側車道,追撞前方由37歲黃姓男子(77年次)駕駛的營業小客車,營業小客車受到撞擊後,再推撞由64歲吳姓女子(61年次)駕駛的自用小客車,形成3車連環追撞。這起事故造成3名駕駛及1名乘客共4人擦挫傷,均由救護人員送醫治療,傷者意識清楚。警方對3名駕駛實施酒精濃度檢測,酒測值均為0,排除酒駕情事。事故發生後,警方到場處理並進行交通疏導,現場於下午5時35分恢復通車。至於詳細肇事責任,仍待警方進一步調查釐清。國道警方提醒,行駛高速公路時,應隨時注意前方車流變化,並與前車保持足夠安全距離,避免分心或疲勞駕駛,尤其遇到車流減速時,應提前採取煞車措施,以免發生連環追撞事故。標籤: 合作媒體賴傳媒

台東餃子館疑似瓦斯氣爆起火! 3人受傷送醫

【Lai傳媒、記者爆料網/周庭慶/台東報導】位在台東市和平街的1家餃子館今(8)日發生疑似氣爆火警!台東縣消防局下午5時許獲報,該處瓦斯疑似外洩有爆炸聲及明火,派遣台東大隊及所屬台東特搜及大豐分隊等6車16名消防隊員出勤,由副大隊長李志德擔任指揮官。 台東市一家餃子館疑因更換瓦斯鋼瓶不慎,引發氣爆火警意外。翻攝畫面17時46分大李志德回報現場有3人肢體燒燙傷,意識清楚、瓦斯已關閉無明火。18時01分大豐分隊後送1名約60歲、2度15%臉手燒燙傷男子送馬偕醫院。18時04分台東分隊後送2名傷者送馬偕醫院,其中一名58歲女子臉1-2度6-8%傷燙傷,另名43歲女子右手、右膝3%燒燙傷,初步調查疑因更換瓦斯鋼瓶過程發生意外,現場交由火調人員後續調查。 台東市一家餃子館疑因更換瓦斯鋼瓶不慎,引發氣爆火警意外。翻攝畫面標籤: 合作媒體賴傳媒