大数据与云计算

基于Hadoop的校园网站日志系统的设计与实现

  • 姜开达 ,
  • 章思宇 ,
  • 孙强
展开

网络出版日期: 2015-03-30

摘要

每所高校校园网内成百上千的网站每天产生的Web访问日志量级都以千万计.利用大数据技术对这些海量、实时的数据进行集中搜集和长期存储,并通过后期大数据分析来挖掘这些日志的价值,无论从管理运维角度,还是从信息安全视角都具有实际意义.本文以上海交通大学为例,介绍了利用Hadoop大数据平台,存储并分析校园网内数千网站日志的系统设计和实现.

本文引用格式

姜开达 , 章思宇 , 孙强 . 基于Hadoop的校园网站日志系统的设计与实现[J]. 华东师范大学学报(自然科学版), 2015 , 2015(S1) : 126 -131 . DOI: 10.3969/j.issn.1000-5641.2015.z1.021

文章导航

/