跳到正文
    Ertas

    最佳資安 LLM(2026年10月)

    最適合資安的 LLM 取決於具體工作。本文依警報分流、偵測工程、威脅情報與漏洞研究提出推薦,並註明每個分數由誰測得。

    By TaskUpdated 2026-10-306 picks

    Introduction

    2026年10月,最適合資安的 LLM 取決於具體工作。在漏洞基準上領先的模型,用來分流 SOC 的警報佇列可能並不合適;而公開排行榜將廠商自行公布的結果與在不同任務子集上的獨立執行混在一起。本期依任務整理這些數字,並註明每個數字由誰測得。所有分數均已於2026年10月30日在來源處查證。

    對防禦方而言,最重要的結論是:開放權重模型已在多項資安任務上迎頭趕上。在 CyberGym 上,一次獨立的同框架執行顯示 Kimi K3 與 GLM-5.3 領先其測試的封閉模型。在警報分流上,一款 9B 開放模型在相同警報上追平了 GPT-4.1。在攻擊類基準上領先的模型都非常龐大,而最強的小型模型結果則集中在範圍較窄、於精心建構的評測框架中執行的防禦任務。本頁將攻擊類基準分數作為第三方的能力測量結果報告,供正在挑選模型的防禦方參考。

    有兩款新版本發布得太晚,未能納入本期的數字。Moonshot 發布了 Kimi K3.1 Pro,並表示在其開放權重版本中,刻意將模型的網路攻擊能力控制在其訓練流程所能達到的水準之下。Mistral 於2026年10月29日發布了 Mistral Large 4 的開放權重,並提到其在防禦性資安方面的進步。目前我們尚未找到這兩款模型的獨立資安測試結果。

    Our Picks

    #1

    Qwen3.5 9B

    Alert-Bench F1,作者執行(2026年10月): 0.952

    在警報分流方面,目前已發表的最強小型模型結果屬於 Qwen3.5 9B,這是一款資安團隊可在自身環境內執行的開放權重模型。在 Alert-Bench 論文(arXiv 2610.10608,2026年10月)中,作者透過一套實際運作的 SIEM 重播企業遙測資料,並在其 AIDA 分流協定下執行每個模型。在同一組 300 則警報的子集上,Qwen3.5 9B 與作為參照的 GPT-4.1 取得相同的 F1 分數 0.952,精確率 0.980,召回率 0.926。該測試中其他開放模型的分數介於 0.098 到 0.777 之間,可見評測框架與模型選擇都很重要。此結果由作者測得;模型以發布時的版本使用,未以任何分流資料進行訓練。

    Strengths

    • 在相同警報上與 GPT-4.1 的 F1 相同,由該基準的作者測得
    • 體積夠小,可在您自己的環境中執行,警報資料得以保持私密
    • 開放權重,團隊可用自己的處置結果進一步訓練

    Trade-offs

    • 僅有一篇論文、一個攻擊情境,且模型外圍有一套結構化協定
    • 完整協定相當耗費 token:在作者的消融實驗中,每則警報約 37,000 個 token
    #2

    Claude Opus 4.6

    CTI-REALM 獎勵分數,Microsoft 執行(2026年3月): 0.637

    偵測工程是將威脅報告轉化為可用的偵測規則,而 CTI-REALM 正是為此打造的基準。Microsoft 的論文(arXiv 2603.13517,2026年3月)測試了 16 種模型配置,全部來自 Anthropic 與 OpenAI。高推理強度下的 Claude Opus 4.6 取得最高獎勵分數 0.637,領先 Opus 4.5 的 0.624 與 Sonnet 4.5 的 0.587。OpenAI 的最佳結果是中等推理強度下的 GPT-5,為 0.572。Microsoft 在同一環境中測量了所有模型。截至2026年10月,尚無開放模型發表 CTI-REALM 分數,因此這項推薦是目前測得的最佳結果,暫時還沒有可供比較的開放模型。

    Strengths

    • 在 Microsoft 測試的 16 種配置中獎勵分數最高
    • 所有模型使用同一評測框架,由該基準的作者執行
    • 在冗長的查詢與測試迴圈中具備強勁的工具使用能力

    Trade-offs

    • 僅提供託管服務,偵測遙測資料須傳送給服務供應商
    • Anthropic 模型每項任務約使用 442,000 到 524,000 個 token,GPT-4.1 則約 120,000 個
    #3

    GLM-5.3

    CyberGym,Proximal 修正後的執行(2026年9月): 93.5%

    Z.ai 的 GLM-5.3 背後同時有政府實驗室與資安公司的獨立資安測試。美國 Center for AI Standards and Innovation(CAISI)稱其為迄今發布的資安能力最強的開放權重模型,並估計在其自有的資安評估中,它落後美國前沿水準約四個月(NIST,2026年9月17日)。在 CyberGym 上,Proximal 將它與封閉模型放在同一評測框架中執行,在該基準的修正版本上測得 93.5%(2026年9月30日)。其前代 GLM-5.2 正是 Hugging Face 在2026年7月的資安事件中,於託管 API 封鎖相關工作後,在自有基礎設施上用於鑑識分析的模型。

    Strengths

    • 除廠商自己的結果外,還有 CAISI 與 Proximal 的獨立結果
    • 開放權重:針對真實攻擊資料的鑑識工作可留在您的環境中
    • 前代模型已在真實的事件應變中獲得驗證

    Trade-offs

    • 模型非常龐大,需要多 GPU 叢集才能提供服務
    • 在 CAISI 的綜合指標上,它落後於目前的美國前沿模型
    #4

    Kimi K3

    CyberGym,Proximal 修正後的執行(2026年9月): 95.6%

    在重現已知漏洞方面,Kimi K3 在 Proximal 的同框架 CyberGym 執行中取得最高分(2026年9月30日)。Proximal 發現原始評分器誤判了部分任務,從 1,507 項中移除 227 項,並對四個模型重新評分:Kimi K3 提升 13.7 個百分點,從 81.9% 升至 95.6%;相較之下,GLM-5.3 為 93.5%,GPT-5.6 Sol 為 91.1%,Claude Fable 5.1(以 Opus 5 作為備援)為 87.8%。Proximal 透過資安存取計畫關閉封閉模型的標準資安護欄後再執行,因此這項比較衡量的是排除拒答因素後的能力。Proximal 也認為 CyberGym 已大致飽和,因此應將這項結果解讀為開放權重模型在此任務上正在追趕,具體名次不必過度看重。

    Strengths

    • 在一次同時測試開放與封閉模型的獨立執行中得分最高
    • 開放權重,適合在自有程式碼上進行漏洞研究的團隊
    • Proximal 修正後的評分器排除了該基準已知的評分錯誤

    Trade-offs

    • 據 Moonshot 表示參數量達 2.8 兆,需要叢集才能提供服務
    • Moonshot 較新的 Kimi K3.1 Pro 刻意壓低了攻擊能力
    #5

    Claude Opus 4.7

    Cybench,Anthropic 系統卡(35 項任務): 96%

    對於搶旗賽(CTF)類型的資安工作,官方 Cybench 排行榜列出 Claude Opus 4.7 的成績為 96%,資料取自 Anthropic 自己的系統卡,涵蓋該基準 40 項任務中的 35 項。Claude Mythos Preview 在同樣的 35 項任務上以 100% 位居榜首,屬於預覽模型;Opus 4.7 則以已發布模型的身分入選本榜。排行榜上最新的開放模型資料來自 2024 年,因此這是一項強勁的封閉模型結果,但沒有同框架的開放模型可供比較。開放模型的 Cybench 分數只以發布文章中的數字形式流傳,本榜單不予收錄。

    Strengths

    • 接近官方 Cybench 排行榜榜首
    • 可透過 Anthropic 的 API 使用
    • 通用推理能力強,適合圍繞某項發現展開的調查工作

    Trade-offs

    • 屬廠商自行公布,且僅涵蓋 40 項任務中的 35 項子集
    • 託管服務的護欄可能拒絕針對真實攻擊資料的鑑識工作
    #6

    Foundation-Sec-8B-Reasoning

    CTI-MCQA,Cisco 模型卡(2026年1月): 0.691

    對於在一般硬體上處理威脅情報問題,Cisco 的 Foundation-Sec-8B-Reasoning 是一款以 8B 基礎模型打造的資安專用模型。根據 Cisco 自己的模型卡(2026年1月28日發布),它在 CTIBench 的 CTI-MCQA 上得分 0.691,GPT-5-Nano 為 0.688;在 CVE 對應 CWE 的映射上得分 0.753,對比 0.672。這使它在知識類基準上與一款小型封閉模型旗鼓相當。它適合資料必須留在內部的結構化、大量問題,較不適合開放式調查。

    Strengths

    • 可在單張工作站等級 GPU 上執行
    • 在 CTI 知識基準上與 GPT-5-Nano 旗鼓相當
    • 以資安文本訓練,開箱即能使用正確的專業術語

    Trade-offs

    • 由 Cisco 自行公布,且比較對象是一款低於前沿水準的小型封閉模型
    • 其基礎模型的訓練資料截至2025年4月,缺少近期的漏洞

    How We Chose

    我們依資安工作將推薦分組:警報分流、偵測工程、漏洞研究與威脅情報知識。每項推薦附有一個分數,並標註基準名稱、執行者與時間。我們優先採用由基準作者或獨立實驗室在同一評測框架中執行所有模型的結果(Alert-Bench、CTI-REALM、Proximal 的 CyberGym 執行、CAISI)。廠商自行公布的結果均已註明,而彙整自發布文章的聚合網站數字則不予採用。

    我們也考量了資安團隊能否在資料所在之處執行模型。Australian Signals Directorate(澳洲訊號局)針對網路防禦者的指引(2026年9月8日)要求各組織讓模型能力「與預期使用情境的需求與價值相稱」,並將 token 消耗與持續營運成本列為考量因素。Hugging Face 2026年7月的資安事件揭露,進一步說明了開放權重在營運上的理由:託管 API 封鎖了其對真實攻擊指令的鑑識分析,於是它在自有基礎設施上執行了一款開放權重的 GLM 模型,沒有任何攻擊者資料或憑證離開其環境。

    Bottom Line

    對於 SOC 的警報佇列,可從在結構化分流協定中執行的小型開放模型著手:Qwen3.5 9B 在 Alert-Bench 上追平了 GPT-4.1。對於偵測工程,Claude Opus 4.6 保有 CTI-REALM 上測得的最佳結果,目前尚無開放模型在該基準上發表結果。對於資料必須留在內部的漏洞研究,GLM-5.3 與 Kimi K3 是開放模型的選擇,但部署所需的資源也最多。對於在一般硬體上處理威脅情報問題,Foundation-Sec-8B-Reasoning 是專用之選。

    成本可從兩個方面降低。開放模型的每 token 價格可以遠低於前沿 API,而每項任務的 token 用量差異很大:在作者的消融實驗中,Alert-Bench 的完整協定每則警報約耗用 37,000 個 token;在 CTI-REALM 上,Anthropic 模型每項任務使用的 token 約為 GPT-4.1 的四倍。以團隊自己的警報與處置結果訓練的模型,可以將重複的協定內容納入模型本身,因此每則警報需要傳送的 token 更少。這正是 Ertas 端點的工作:它以代理的流量訓練新的模型版本,用客戶自己的評估為每個版本評分,並且只有在客戶簽核後才會上線;若新版本未達標準,目前的模型會繼續提供服務。此端點目前僅限受邀使用,我們正在開發更精簡的版本,以開放給更多使用者。

    本文為2026年10月版。排名變動時,我們會發布新的一期,並在本頁頂端附上連結。

    Related Resources

    在您自己的資安資料上執行這些模型

    我們為資安團隊部署 GLM、Kimi 與 Qwen 模型,可執行於我們管理的基礎設施、您自己的雲端租用戶,或地端環境。您的資料保持私密,使用成本更可預測,模型也會在下一次資安事件發生前準備就緒。

    預約通話