《電子技術應用》
您所在的位置:首頁 > 通信与网络 > 设计应用 > 基于聚类的HTTP/HTTPS协议资产发现
基于聚类的HTTP/HTTPS协议资产发现
电子技术应用
马琰1,2,苏马婧1,2,姚旺君1,2,权晓文3,刘红1,2
1.中国信息安全研究院有限公司;2.华北计算机系统工程研究所;3.远江盛邦(北京)网络安全科技股份有限公司
摘要: 网络探测扫描是发现网络资产的重要方法,在探测结果中HTTP/HTTPS协议占比较高,是重要的互联网资产识别来源。随着网络环境的日益复杂,应用HTTP/HTTPS协议的资产种类和数量也在急剧增加,这使得传统基于指纹规则的网络资产识别方法面临着识别效率低、适应性差等问题,无法满足HTTP/HTTPS协议识别的需要。因此,提出了一种新型HTTP/HTTPS协议资产发现方法,通过自动化规则生成器对HTTP/HTTPS协议响应数据进行处理,并基于词频统计和相似度信息对原始数据进行预过滤,利用文本编码模型实现对HTTP/HTTPS协议响应体信息的文本编码和特征融合,结合无监督聚类算法实现对HTTP/HTTPS协议资产的发现。实验结果表明,所提出的方法能够显著提高HTTP/HTTPS协议资产发现效率,提升资产标注速度,并可在无先验知识下发现未知资产。
中圖分類號:TP393.08 文獻標志碼:A DOI: 10.16157/j.issn.0258-7998.256341
中文引用格式: 馬琰,蘇馬婧,姚旺君,等. 基于聚類的HTTP/HTTPS協議資產發現[J]. 電子技術應用,2025,51(11):98-106.
英文引用格式: Ma Yan,Su Majing,Yao Wangjun,et al. HTTP/HTTPS protocol asset discovery based on clustering[J]. Application of Electronic Technique,2025,51(11):98-106.
HTTP/HTTPS protocol asset discovery based on clustering
Ma Yan1,2,Su Majing1,2,Yao Wangjun1,2,Quan Xiaowen3,Liu Hong1,2
1.China Information Security Research Institute Co., Ltd.;2.National Computer System Engineering Research Institute of China;3.WebRAY Tech (Beijing) Co., Ltd.
Abstract: Network probing and scanning is an essential method for discovering network assets, with HTTP/HTTPS protocols representing a significant proportion of the discovery results and serving as a key source for identifying Internet assets. As the network environment becomes increasingly complex, the variety and volume of assets utilizing the HTTP/HTTPS protocol have grown rapidly, which poses challenges for traditional network asset identification methods based on fingerprinting rules. These conventional approaches suffer from low recognition efficiency and poor adaptability, making them inadequate for identifying HTTP/HTTPS protocol assets. Therefore, this paper proposes a novel method for discovering HTTP/HTTPS protocol assets. The approach processes HTTP/HTTPS response data through an automated rule generator, performs pre-filtering of the raw data based on term frequency statistics and similarity information, and applies a text encoding model to encode the HTTP/HTTPS response body and fuse the features. By integrating an unsupervised clustering algorithm, this method enables the discovery of HTTP/HTTPS protocol assets. Experimental results show that the proposed method significantly improves the efficiency of HTTP/HTTPS protocol asset discovery, accelerates asset labeling, and enables the discovery of unknown assets without prior knowledge.
Key words : network asset discovery;HTTP/HTTPS protocols;automated rule generation;unsupervised clustering;Word2Vec;DBSCAN

引言

在數字化轉型的推動下,網絡資產的種類和數量呈指數級增長,網絡安全面臨日益復雜的挑戰。網絡資產不僅包括傳統的網絡設備(如網絡攝像頭、防火墻),還擴展至各種內容管理系統和網絡服務。當前,網絡資產識別主要依賴基于靜態指紋規則匹配的方法,這種方法雖然在已知類型資產的識別中表現良好,但其局限性同樣明顯:首先,指紋規則構建和維護依賴于專家經驗和大量人力資源投入;其次,基于靜態指紋庫的方法在面對新型設備時響應速度緩慢,導致對未知類型資產的識別率顯著降低。這些缺陷限制了當前基于指紋規則匹配的資產識別技術的有效性和適應性。

為解決上述問題,本文創新性地提出了一種針對HTTP/HTTPS協議網絡資產的發現方法,通過自動化規則生成器對主動探測所采集到的HTTP/HTTPS協議數據進行指紋規則生成和數據過濾,配合無監督聚類方法實現對網絡資產數據按共同特征進行劃分,以實現協議的自動發現,此方法可以發現未知資產,提高標注效率。本文提出的自動化規則生成器基于層次化分組策略,逐步對數據集進行細化,提煉具有高區分度的特征字段并構建可以進行粗分類的指紋規則,以過濾掉無共性資產特征的數據。針對HTTP/HTTPS響應頭部字段的多樣性,本文對大規模探測結果數據集進行了統計分析并結合專家經驗,篩選出了21個響應頭部字段用于生成自動化過濾規則,設計了自動化規則生成器;在此基礎上,對經預過濾后的數據,設計了面向HTTP/HTTPS響應體信息的多特征融合資產聚類算法,該算法采用Word2Vec[1]進行特征編碼,將處理后的數據轉化為特征向量,結合特征融合技術與DBSCAN[2]聚類技術,在多維特征空間中進行高效聚類以實現對潛在資產的發現。最后,本文通過實驗驗證了所提方法的有效性。此方法不僅提高了HTTP/HTTPS協議資產發現的效率,還能夠有效發現未知資產,進而提高指紋標注和規則提取的效率。


本文詳細內容請下載:

http://m.tom3567.com/resource/share/2000006847


作者信息:

馬琰1,2,蘇馬婧1,2,姚旺君1,2,權曉文3,劉紅1,2

(1.中國信息安全研究院有限公司,北京 102200;

2.華北計算機系統工程研究所,北京 100083;

3.遠江盛邦(北京)網絡安全科技股份有限公司,北京 100084)


subscribe.jpg

此內容為AET網站原創,未經授權禁止轉載。
主站蜘蛛池模板: 亚洲制服欧美久久| 国产精品成人一区二区| 久久精视频免费在线久久完整在线看| 日韩中文字幕久久| 日本久久久久亚洲中字幕| 国产在线视频不卡| 日韩中文字幕在线播放| 日韩亚洲综合在线| 国产免费一区| 热久久这里只有| 国产精品一区二区a| 日韩中文有码在线视频| 国产精品狠色婷| 精品人妻人人做人人爽| 欧洲日韩成人av| 日韩色av导航| 色在人av网站天堂精品| 日韩中文在线不卡| 亚洲国产精品一区在线观看不卡| 91精品久久久久久久久| 精品国产网站地址| 欧美一级片中文字幕| 91国产在线免费观看| 久久久久久91香蕉国产| 无码免费一区二区三区免费播放 | 久久国产日韩欧美| 欧美婷婷久久| 久章草在线视频| 久久久国产一区二区三区| 久久五月天色综合| 伊人久久大香线蕉午夜av| 91精品国产91久久久| 亚洲国产欧美一区二区三区不卡| 亚洲日本欧美在线| 亚洲欧美日韩精品综合在线观看| 国产区精品在线观看| 国产美女网站在线观看| 国产精品成人播放| 一区二区高清视频| 天天成人综合网| 欧美极品日韩|