一种网络安全大数据生成与处理方案.pdf

CERNET第二十六届学术年会论文集 175 一种网络安全大数据生成与处理方案 周东杰1’2，刘保君2，陆超逸2，段海新弘，孔子乔3，郑晓峰2’3 (1．数学工程与先进计算国家重点实验室，河南郑州450001；2．清华大学网络科学与网络空间研究院，北京100084； 3．奇安信集团技术研究院，北京100016) 摘要：网络流量分析与恶意流量识别是网络安全的重要领域，是及时发现网络攻击、保障系统稳定运行的基础。 流量数据集上。这不利于DNS安全威胁的学术研究与进行恶意流量检测方法间横向评估。本文设计了一种基于 现网流量的数据集生成与匿名化处理方案。从数据链路层到应用层对数据包敏感字段进行匿名化处理，在此基础 上开发了一套高效数据处理工具集并开源所有代码。清华大学与奇安信集团举办的首届安全大数据分析比赛 DataCon采用本方案生成竞赛数据集，比赛的成功举行证明了数据生成和处理的有效性，通过公开数据集鼓励相 关学术领域研究者用以学术研究。期望本方案能为今后网络安全大数据竞赛数据处理与赛题拟制提供参考，同时 促进学术研究。 关键词：DNS恶意流量；流量分析；网络安全；流量匿名化；数据竞赛 393．08 040 中图分类号：TP 文献标识码：A 文章编号：2019 AMethodofNetwork DataGenerationand SecurityBig Processing ZH()U url2，I。U Hai—xin弘，KoNG Dong—jieⅢ，I。IUBao—j Chao—yi2，DUAN Zi—qia03， ZHENG Xiao—fen93 (1．State ofMathematical andAdvanced 450001，China； KeyLaboratory Engineering Computing。Zhengzhou 2．InsitituteforNetworkSciencesand 100084．China； Cyberspace，TsinghuaUniversity，Beijing Research 6China) 3．Qi—AnxinGroup，TechnicalInstitute，Beijing+10001 traffic andmalicioustrafficidentificationarenot fornetwork Abstract：Network analysis onlyimportant security， butalsothefoundationof detectionofnetworkattackswhichcanensurestable ofthe timely operationsystem．Net— work fieldlacks ofmalicioustraffic theDNSt