ChatGPT 模型在漏洞检测中的评估【英文版】

英文标题：Evaluation of ChatGPT Model for Vulnerability Detection中文摘要：本技术报告评估了 ChatGPT 和 GPT-3 模型在代码漏洞检测任务上的性能。通过使用 CWE 漏洞的二进制和多标签分类任务对真实世界数据集进行评估，结果表明 ChatGPT 在代码漏洞检测的二进制和多标签分类任务中表现不如一个虚拟分类器。英文摘要：In this technical report, we evaluated the performance of the ChatGPT andGPT-3 models for the task of vulnerability detection in code. Our evaluationwas conducted on our real-world dataset, using binary and multi-labelclassification tasks on CWE vulnerabilities. We decided to evaluate the modelbecause it ha