|
基于大数据的网络空间资产探测系统
|
Abstract:
随着网络空间规模的不断扩展以及网络攻击技术的日益复杂化,如何高效地识别、整理和分析网络资产成为网络安全领域的重要研究方向。本文提出了一种基于大数据技术的网络空间资产探测系统,涵盖子域名扫描与活跃性测试、URL资产整理与去重、IP识别、指纹扫描及智能辅助分析等功能模块。系统采用分布式存储和高性能计算技术,以布隆过滤器优化数据去重流程,提升探测效率与精度。实验表明,该系统能够在大规模网络资产探测中实现快速、准确的分析,适用于动态复杂的网络环境。
As cyberspace continues to expand and cyberattacks become increasingly sophisticated, efficiently identifying, organizing, and analyzing cyber assets has become a critical research focus in the field of cybersecurity. This paper proposes and implements a big data-based cyberspace asset detection system that incorporates modules for subdomain scanning, URL asset processing, IP detection, fingerprint recognition, and intelligent analysis. Leveraging distributed storage and high-performance algorithms such as Bloom filters, the system improves detection accuracy and efficiency. Experimental results demonstrate the system’s capability to perform rapid and accurate asset analysis in large-scale network environments, making it suitable for dynamic and complex scenarios.
[1] | 澹台栋良. 面向网络空间安全的搜索引擎研究与实现[D]: [硕士学位论文]. 西安: 西安电子科技大学, 2021. https://doi.org/10.27389/d.cnki.gxadu.2020.000877 |
[2] | 雷雪. Web应用安全-漏洞扫描器的设计与实现[D]: [硕士学位论文]. 西安: 西安电子科技大学, 2021. https://doi.org/10.27389/d.cnki.gxadu.2020.002271 |
[3] | 张鹏, 罗文华. 基于布隆过滤器查找树的日志数据区块链溯源机制[J]. 信息网络安全, 2024, 24(11): 1739-1748. |
[4] | 魏迎. 基于Hadoop技术的大规模数据分布式存储技术研究[J]. 自动化与仪器仪表, 2024(10): 182-186. https://doi.org/10.14016/j.cnki.1001-9227.2024.10.182 |
[5] | 薛梅婷, 俞万刚, 张纪林, 曾艳, 袁俊峰, 周丽. 一种基于动态空间划分和压缩布隆过滤器相结合的分布式元数据负载均衡算法[J]. 计算机工程与科学, 2024, 46(8): 1381-1389. |
[6] | 吕宝路, 梁景普, 欧翰琪, 陈涛. 面向敏感信息检测的Web综合漏洞扫描器实现[J]. 电脑知识与技术, 2020, 16(23): 30-32. https://doi.org/10.14004/j.cnki.ckt.2020.2458 |