2019年度  第10期


标题:基于Hadoop的用户行为数据分析系统的设计
作者:秦东旭1;徐瑾2;吕明1 张捷1
作者单位:1 南京理工大学自动化学院,江苏 南京 210094;2 重庆望江工业有限公司军品研发中心,重庆 400071
关键字:大数据;用户行为数据;数据分析平台;Hadoop
摘要:随着信息网络技术的发展,网站生成用户行为数据信息以每秒数以百G的数据量增长。数据特征不仅仅是数据量的庞大,而且包含结构化和非结构化的数据。为了从这些用户行为数据中挖掘出有用的信息,需要构建一个数据分析平台,更好地服务用户。Hadoop作为处理海量数据的主流框架,凭借其可靠、稳定、易扩展的优势,成为解决传统数据存储和数据分析的关键技术。主要阐述以Hadoop为主的数据分析系统的结构、设计思想和实现方法。