DeepSeek V4.1 Flash 1017 ist das neue #1-Modell unter den offen verfügbaren Modellen im Artificial Analysis Cyber Index. Andere proprietäre Modelle bieten möglicherweise bessere Leistungen bei der Cyber-Abwehr, sind aber nur mit eingeschränktem Zugriff verfügbar
@deepseek_ai hat kürzlich DeepSeek V4.1 Flash 1017 veröffentlicht, ein Update seines Flaggschiff-Open-Weights-Modells DeepSeek V4.1 Flash. Mit einem Artificial Analysis Cyber Index Score von 57% ist DeepSeek V4.1 Flash 1017 das #1-Modell unter den offen verfügbaren Modellen für Cyber-Abwehrfähigkeiten.
Der Artificial Analysis Cyber Index misst die Fähigkeiten bei agentischen Cyber-Abwehr-Aufgaben und besteht aus drei Benchmarks: CWE-Bench-AA, DeepsecBench-AA und CyberGym-E2E-AA. Der Cyber Index bewertet Modelle hauptsächlich über ihre öffentlich zugänglichen APIs und spiegelt somit die Cyber-Fähigkeiten wider, die Entwicklern zur Verfügung stehen.
Viele Modelle, insbesondere proprietäre Modelle von OpenAI, Anthropic und Google, verfügen möglicherweise über stärkere defensive Cyber-Fähigkeiten, stoßen jedoch auf Sicherheitsverweigerungen, die ihre Gesamtwerte mindern. GPT-6 Sol (Daybreak Blue, max), verfügbar über OpenAIs Trusted-Access-Programm, führt den Index an und liegt 32 Punkte über seinem öffentlichen Pendant, bedingt durch weniger Verweigerungen. DeepSeek V4.1 Flash 1017 trifft auf keine Sicherheitsverweigerungen.
Wichtigste Ergebnisse:
➤ DeepSeek V4.1 Flash 1017 erzielt den höchsten Wert unter den öffentlich verfügbaren Modellen im Artificial Analysis Cyber Index und belegt insgesamt Platz #2. DeepSeek V4.1 Flash 1017 (max) erreicht 57% und liegt damit 1 Punkt vor den bisher führenden öffentlich verfügbaren Modellen Grok 4.7 (xhigh) und MiMo-V2.6-Pro. Insgesamt belegt es Platz #2, wobei das Trusted-Access-Modell GPT-6 Sol (Daybreak Blue, max) mit einem Score von 69% mit 12 Punkten Vorsprung führt
➤ DeepSeek V4.1 Flash 1017 verbessert sich gegenüber seinem Vorgänger DeepSeek V4.1 Flash um 16 Punkte. Die 16-Punkte-Verbesserung von DeepSeek V4.1 Flash 1017 (max) von 41% auf 57% wird durch eine erhebliche 53-Punkte-Verbesserung bei CyberGym-E2E-AA von 23% auf 76% getrieben. Bei CWE-Bench-AA und DeepsecBench-AA erreicht es 69% bzw. 25%, gegenüber 68% bzw. 31% bei DeepSeek V4.1 Flash (max)
➤ Mit Kosten pro Aufgabe von $0.42 liegt DeepSeek V4.1 Flash 1017 auf der Capability-vs.-Cost-Pareto-Front. DeepSeek V4.1 Flash 1017 kostet $0.42 pro Aufgabe, mehr als 2x so viel wie MiMo-V2.6-Pro (56%) mit $0.18 pro Aufgabe, aber 4x günstiger als GPT-6 Sol (Daybreak Blue, max, 69%) mit $1.77 pro Aufgabe