跳到正文
    Ertas

    最佳网络安全大语言模型(2026年10月)

    最适合网络安全的大语言模型取决于具体工作。本文按告警分诊、检测工程、威胁情报和漏洞研究给出推荐,并注明每个分数由谁测得。

    By TaskUpdated 2026-10-306 picks

    Introduction

    2026年10月,最适合网络安全的大语言模型取决于具体工作。在漏洞基准上领先的模型,用来分诊 SOC 的告警队列可能并不合适;而公开排行榜把厂商自报结果与在不同任务子集上的独立运行混在一起。本期按任务整理这些数字,并注明每个数字由谁测得。所有分数均已于2026年10月30日在来源处核实。

    对防御方而言,最重要的结论是:开放权重模型已在多项安全任务上追了上来。在 CyberGym 上,一次独立的同框架运行显示 Kimi K3 和 GLM-5.3 领先于其测试的闭源模型。在告警分诊上,一款 9B 开放模型在相同告警上追平了 GPT-4.1。在攻击类基准上领先的模型体量都非常大,而最强的小模型结果则集中在范围较窄、运行于精心构建的评测框架中的防御任务上。本页将攻击类基准分数作为第三方的能力测量结果进行报告,供正在选择模型的防御方参考。

    有两个新版本发布得太晚,未能纳入本期数据。Moonshot 发布了 Kimi K3.1 Pro,并表示在其开放权重版本中,有意将模型的网络攻击能力控制在其训练流程所能达到的水平之下。Mistral 于2026年10月29日发布了 Mistral Large 4 的开放权重,并提到其在防御性网络安全方面的提升。目前我们尚未找到这两个模型的独立网络安全测试结果。

    Our Picks

    #1

    Qwen3.5 9B

    Alert-Bench F1,作者运行(2026年10月): 0.952

    在告警分诊方面,目前已发表的最强小模型结果属于 Qwen3.5 9B,这是一款安全团队可以在自己环境内运行的开放权重模型。在 Alert-Bench 论文(arXiv 2610.10608,2026年10月)中,作者通过一个实时运行的 SIEM 回放企业遥测数据,并在其 AIDA 分诊协议下运行每个模型。在同一个 300 条告警的子集上,Qwen3.5 9B 与作为参照的 GPT-4.1 取得了相同的 F1 分数 0.952,精确率 0.980,召回率 0.926。该测试中其他开放模型的得分在 0.098 到 0.777 之间,可见评测框架和模型选择都很重要。该结果由作者测得;模型按发布时的版本使用,未在分诊数据上做任何训练。

    Strengths

    • 在相同告警上与 GPT-4.1 的 F1 相同,由该基准的作者测得
    • 体量足够小,可以在您自己的环境中运行,告警数据保持私密
    • 开放权重,团队可以用自己的处置结果进一步训练它

    Trade-offs

    • 仅有一篇论文、一个攻击场景,且模型外围有一套结构化协议
    • 完整协议消耗大量 token:在作者的消融实验中,每条告警约 37,000 个 token
    #2

    Claude Opus 4.6

    CTI-REALM 奖励分,Microsoft 运行(2026年3月): 0.637

    检测工程是把威胁报告转化为可用的检测规则,CTI-REALM 正是为此构建的基准。Microsoft 的论文(arXiv 2603.13517,2026年3月)测试了 16 种模型配置,全部来自 Anthropic 和 OpenAI。高推理强度下的 Claude Opus 4.6 取得最高奖励分 0.637,领先于 Opus 4.5 的 0.624 和 Sonnet 4.5 的 0.587。OpenAI 的最佳结果是中等推理强度下的 GPT-5,为 0.572。Microsoft 在同一环境中测量了所有模型。截至2026年10月,尚无开放模型发布 CTI-REALM 分数,因此这一推荐是目前测得的最佳结果,暂时还没有可供对比的开放模型。

    Strengths

    • 在 Microsoft 测试的 16 种配置中奖励分最高
    • 所有模型使用同一评测框架,由该基准的作者运行
    • 在漫长的查询与测试循环中工具使用表现强劲

    Trade-offs

    • 仅提供托管服务,检测遥测数据需要发送给服务商
    • Anthropic 模型每项任务约消耗 442,000 到 524,000 个 token,而 GPT-4.1 约为 120,000 个
    #3

    GLM-5.3

    CyberGym,Proximal 修正后的运行(2026年9月): 93.5%

    Z.ai 的 GLM-5.3 背后既有政府实验室的独立网络安全测试,也有安全公司的独立测试。美国 Center for AI Standards and Innovation(CAISI)称其为迄今发布的网络安全能力最强的开放权重模型,并估计在其自有的网络安全评估中,它落后美国前沿水平约四个月(NIST,2026年9月17日)。在 CyberGym 上,Proximal 将它与闭源模型放在同一评测框架中运行,在该基准的修正版本上测得 93.5%(2026年9月30日)。其前代 GLM-5.2 正是 Hugging Face 在2026年7月的安全事件中,于托管 API 拒绝相关工作后,在自有基础设施上用于取证分析的模型。

    Strengths

    • 除厂商自己的结果外,还有 CAISI 和 Proximal 的独立结果
    • 开放权重:针对真实攻击数据的取证工作可以留在您的环境中
    • 前代模型已在真实的事件响应中得到验证

    Trade-offs

    • 模型非常大,需要多 GPU 集群来提供服务
    • 在 CAISI 的综合指标上,它落后于当前的美国前沿模型
    #4

    Kimi K3

    CyberGym,Proximal 修正后的运行(2026年9月): 95.6%

    在复现已知漏洞方面,Kimi K3 在 Proximal 的同框架 CyberGym 运行中取得最高分(2026年9月30日)。Proximal 发现原评分器判错了部分任务,从 1,507 项中移除 227 项,并对四个模型重新评分:Kimi K3 提升 13.7 个百分点,从 81.9% 升至 95.6%;相比之下,GLM-5.3 为 93.5%,GPT-5.6 Sol 为 91.1%,Claude Fable 5.1(以 Opus 5 作为后备)为 87.8%。Proximal 通过网络安全访问计划关闭了闭源模型的标准网络安全护栏后再运行,因此该比较衡量的是排除拒答因素后的能力。Proximal 还认为 CyberGym 已基本饱和,因此应将这一结果理解为开放权重模型在该任务上正在追赶,具体名次不必过于看重。

    Strengths

    • 在一次同时测试开放与闭源模型的独立运行中得分最高
    • 开放权重,适合在自有代码上做漏洞研究的团队
    • Proximal 修正后的评分器去除了该基准已知的评分错误

    Trade-offs

    • 据 Moonshot 称参数量达 2.8 万亿,需要集群才能提供服务
    • Moonshot 更新的 Kimi K3.1 Pro 有意压低了攻击能力
    #5

    Claude Opus 4.7

    Cybench,Anthropic 系统卡(35 项任务): 96%

    对于夺旗赛(CTF)类的安全工作,官方 Cybench 排行榜列出 Claude Opus 4.7 的成绩为 96%,数据取自 Anthropic 自己的系统卡,覆盖该基准 40 项任务中的 35 项。Claude Mythos Preview 在同样的 35 项任务上以 100% 位居榜首,属于预览模型;Opus 4.7 则作为已发布的模型入选本榜。排行榜上最新的开放模型数据来自 2024 年,因此这是一个强劲的闭源结果,但没有同框架的开放模型可供比较。开放模型的 Cybench 分数只以发布文章中的数字形式流传,本榜单不予收录。

    Strengths

    • 接近官方 Cybench 排行榜榜首
    • 可通过 Anthropic 的 API 使用
    • 通用推理能力强,适合围绕某个发现展开的调查工作

    Trade-offs

    • 为厂商自报,且仅基于 40 项任务中的 35 项子集
    • 托管服务的护栏可能拒绝针对真实攻击数据的取证工作
    #6

    Foundation-Sec-8B-Reasoning

    CTI-MCQA,Cisco 模型卡(2026年1月): 0.691

    对于在普通硬件上处理威胁情报问题,Cisco 的 Foundation-Sec-8B-Reasoning 是一款基于 8B 基础模型构建的安全专用模型。根据 Cisco 自己的模型卡(2026年1月28日发布),它在 CTIBench 的 CTI-MCQA 上得分 0.691,GPT-5-Nano 为 0.688;在 CVE 到 CWE 的映射上得分 0.753,对比 0.672。这使它在知识类基准上与一款小型闭源模型持平。它适合数据必须留在内部的结构化、大批量问题,对开放式调查则不太适合。

    Strengths

    • 可在单块工作站级 GPU 上运行
    • 在 CTI 知识基准上与 GPT-5-Nano 持平
    • 基于安全文本训练,开箱即用就掌握正确的专业术语

    Trade-offs

    • 由 Cisco 自报,且对比对象是一款低于前沿水平的小型闭源模型
    • 其基础模型的训练数据截至2025年4月,缺少近期的漏洞

    How We Chose

    我们按安全工作对推荐进行分组:告警分诊、检测工程、漏洞研究和威胁情报知识。每个推荐附带一个分数,并标注基准名称、运行方和时间。我们优先采用由基准作者或独立实验室在同一评测框架中运行所有模型的结果(Alert-Bench、CTI-REALM、Proximal 的 CyberGym 运行、CAISI)。厂商自报结果均已注明,根据发布文章汇编的聚合网站数据则不予采用。

    我们还考虑了安全团队能否在其数据所在之处运行模型。Australian Signals Directorate(澳大利亚信号局)面向网络防御者的指南(2026年9月8日)要求各组织使模型能力“与预期用例的需求和价值相称”,并将 token 消耗和持续运营成本列为考量因素。Hugging Face 2026年7月的安全事件披露则进一步说明了开放权重在运营上的理由:托管 API 拒绝了其对真实攻击命令的取证分析,于是它在自有基础设施上运行了一个开放权重的 GLM 模型,没有任何攻击者数据或凭据离开其环境。

    Bottom Line

    对于 SOC 的告警队列,可以从运行在结构化分诊协议中的小型开放模型入手:Qwen3.5 9B 在 Alert-Bench 上追平了 GPT-4.1。对于检测工程,Claude Opus 4.6 保持着 CTI-REALM 上测得的最佳结果,目前尚无开放模型在该基准上发布结果。对于数据必须留在内部的漏洞研究,GLM-5.3 和 Kimi K3 是开放模型中的选择,不过部署所需的资源也最多。对于在普通硬件上处理威胁情报问题,Foundation-Sec-8B-Reasoning 是专用之选。

    成本可以从两个方面降低。开放模型的每 token 价格可以远低于前沿 API,而每项任务的 token 用量差异很大:在作者的消融实验中,Alert-Bench 的完整协议每条告警约消耗 37,000 个 token;在 CTI-REALM 上,Anthropic 模型每项任务使用的 token 约为 GPT-4.1 的四倍。用团队自己的告警和处置结果训练的模型,可以把重复的协议内容融入模型本身,从而减少每条告警需要发送的 token。这正是 Ertas 端点的工作:它基于智能体的流量训练新的模型版本,用客户自己的评估为每个版本打分,并且只有在客户签字确认后才会上线;如果新版本未达标,当前模型继续提供服务。该端点目前仅限受邀使用,我们正在开发一个更简化的版本,以便开放给更多用户。

    本文为2026年10月版。排名变化时,我们会发布新的一期,并在本页顶部附上链接。

    Related Resources

    在您自己的安全数据上运行这些模型

    我们为安全团队部署 GLM、Kimi 和 Qwen 模型,可运行在我们管理的基础设施上、您自己的云租户中,或本地部署。您的数据保持私密,使用成本更可预测,模型也会在下一次安全事件发生前准备就绪。

    预约通话