List your company

Software Vulnerability Detection on Juliet Suite DBZ (test)

100PrecisionLLMDFA
65.232874.258983.28592.3111Feb 16, 2024

Evaluation results

MethodLinks
LLMDFALLM=gpt-3.5, Phase=Extract2024.02100100100
LLMDFALLM=gpt-4, Phase=Extract2024.02100100100
LLMDFALLM=gemini-1.0, Phase=Extract2024.02100100100
LLMDFALLM=claude-3, Phase=Extract2024.02100100100
LLMDFALLM=gpt-4, Phase=Summarize2024.0295.3298.4397
LLMDFALLM=gpt-3.5, Phase=Summarize2024.0290.9597.5794
LLMDFALLM=gpt-4, Phase=Validate2024.0289.7610095
LLMDFALLM=claude-3, Phase=Summarize2024.0289.2692.3891
LLMDFALLM=claude-3, Phase=Validate2024.0285.7494.5290
LLMDFALLM=gemini-1.0, Phase=Summarize2024.0283.5782.4783
LLMDFALLM=gpt-3.5, Phase=Validate2024.0281.5899.290
LLMDFALLM=gpt-4, Phase=Detection2024.0281.3895.7587
LLMDFALLM=gemini-1.0, Phase=Validate2024.0279.8393.7386
LLMDFALLM=claude-3, Phase=Detection2024.0276.9182.6780
LLMDFALLM=gpt-3.5, Phase=Detection2024.0273.7592.1682
LLMDFALLM=gemini-1.0, Phase=Detection2024.0266.5774.2170