国产欧美精品一区二区,中文字幕专区在线亚洲,国产精品美女网站在线观看,艾秋果冻传媒2021精品,在线免费一区二区,久久久久久青草大香综合精品,日韩美aaa特级毛片,欧美成人精品午夜免费影视

基于流式處理架構的日志采集系統的設計與實(shí)現
DOI:
CSTR:
作者:
作者單位:

1.公安部第三研究所 信息安全技術(shù)部;2.上海辰銳信息科技公司 研發(fā)中心

作者簡(jiǎn)介:

通訊作者:

中圖分類(lèi)號:

基金項目:

上海市人才發(fā)展資金資助(No.2020016)、中國博士后科學(xué)基金資助(No.2020M670998)、上海市自然科學(xué)基金資助(No.21ZR1422000)、公安部科技計劃項目資助(No.2019JZX004)


Design and Implementation of Log Collection System Based on Stream Processing Architecture
Author:
Affiliation:

Fund Project:

  • 摘要
  • |
  • 圖/表
  • |
  • 訪(fǎng)問(wèn)統計
  • |
  • 參考文獻
  • |
  • 相似文獻
  • |
  • 引證文獻
  • |
  • 資源附件
  • |
  • 文章評論
    摘要:

    對信息系統運行記錄、操作日志、告警信息的采集問(wèn)題進(jìn)行了研究,提出了一種面向泛政府行業(yè)安全運行管理平臺的統一日志采集系統。采用基于消息隊列的流式處理架構,實(shí)現日志采集、日志處理、日志上報等各個(gè)環(huán)節的解耦;采用標準化接口和插件技術(shù),實(shí)現各種異構日志信息的采集和數據上報;采用消息隊列的流量削峰技術(shù),保證日志傳輸的安全可靠;依據日志流量特征,提出一種支持動(dòng)態(tài)調整消費組的設計模式,滿(mǎn)足系統的高性能要求。整個(gè)系統由日志采集、數據上報、數據管理、系統管理、策略管理、Agent管理、日志源管理模塊和日志采集代理(Agent)子系統組成,可滿(mǎn)足對各類(lèi)安全數據的集中分析、安全威脅感知和智能研判。

    Abstract:

    This paper studies the collection of operation record, operation log and alarm information of information system, and puts forward a unified log collection system for pan-government industry safety operation management platform. The flow processing architecture based on message queue is adopted to realize the decoupling of log collection, log processing and log reporting. Standardized interfaces and plug-ins are used to collect heterogeneous log information and data. The traffic peak clipping technology of message queue is adopted to ensure the safety and reliability of log transmission. According to the characteristics of log traffic, a design mode supporting dynamic adjustment of consumption group is proposed to meet the high performance requirements of the system. The whole system is composed of log collection, data reporting, data management, system management, policy management, Agent management, log source management module and log collection subsystem, which can meet the centralized analysis, security threat perception and intelligent analysis of various security data.

    參考文獻
    相似文獻
    引證文獻
引用本文

邵旭東,樊志杰,張敬鋒,曹志威,周明富,熊已興,張林.基于流式處理架構的日志采集系統的設計與實(shí)現計算機測量與控制[J].,2023,31(4):272-280.

復制
分享
文章指標
  • 點(diǎn)擊次數:
  • 下載次數:
  • HTML閱讀次數:
  • 引用次數:
歷史
  • 收稿日期:2022-12-14
  • 最后修改日期:2022-12-14
  • 錄用日期:2023-02-10
  • 在線(xiàn)發(fā)布日期: 2023-04-24
  • 出版日期:
文章二維碼
安宁市| 五寨县| 五大连池市| 石河子市| 上饶县| 理塘县| 宁国市| 卓尼县| 浙江省| 咸宁市| 营口市| 平泉县| 东乡族自治县| 阜南县| 满城县| 津市市| 屏东市| 沿河| 青海省| 夏河县| 措美县| 延安市| 河源市| 绥江县| 新乡县| 岳西县| 和田县| 新干县| 芦山县| 阳泉市| 竹山县| 满洲里市| 崇州市| 广东省| 宜昌市| 浦城县| 鸡泽县| 稻城县| 溧阳市| 禹州市| 万山特区|