[00257091]一种基于Hadoop的网络安全日志k-means聚类分析系统及方法
交易价格：
面议
所属行业：
分析仪器
类型：
发明专利
技术成熟度：
正在研发
专利所属地：中国
专利号：CN201510553636.3
交易方式：
技术转让
技术转让
技术入股
联系人：
西北大学
进入空间
所在地：陕西西安市
- 服务承诺
- 产权明晰
-
资料保密
对所交付的所有资料进行保密
- 如实描述
技术详细介绍
摘要：一种基于Hadoop的网络安全日志k-means聚类分析系统及方法，包括日志数据获取子系统、日志数据混合机制存储管理子系统、日志数据分析子系统；在数据存储层，采用Hadoop与传统数据仓库协作的混合存储机制存储日志数据，并在数据访问层提供对Hive操作的接口，数据存储层和计算层从Hive引擎接收指令，通过HDFS，配合MapReduce实现对数据的高效查询分析；在对日志数据进行挖掘分析时，采用MapReduce实现k-means算法对其进行聚类挖掘分析；采用Hadoop与传统数据仓库协作架构弥补了传统数据仓库在海量数据处理、存储等方面的不足，同时也使得原来的传统数据仓库物尽所用；采用基于MapReduce的k-means算法进行聚类分析，能及时对日志数据进行安全等级评估和预警。
摘要：一种基于Hadoop的网络安全日志k-means聚类分析系统及方法，包括日志数据获取子系统、日志数据混合机制存储管理子系统、日志数据分析子系统；在数据存储层，采用Hadoop与传统数据仓库协作的混合存储机制存储日志数据，并在数据访问层提供对Hive操作的接口，数据存储层和计算层从Hive引擎接收指令，通过HDFS，配合MapReduce实现对数据的高效查询分析；在对日志数据进行挖掘分析时，采用MapReduce实现k-means算法对其进行聚类挖掘分析；采用Hadoop与传统数据仓库协作架构弥补了传统数据仓库在海量数据处理、存储等方面的不足，同时也使得原来的传统数据仓库物尽所用；采用基于MapReduce的k-means算法进行聚类分析，能及时对日志数据进行安全等级评估和预警。
