基于Hadoop的海量数据处理平台
【摘 要】近几年,云计算产业飞速发展,大数据处理技术也在不断成熟。与此同时,国内移动互联网市场规模不断扩大,用户数量己经超过5亿,并带来了海量的移动互联网流量数据。在此背景下,如何基于云计算大数据处理技术来承载海量网络数据处理业务,是一个非常有研究价值的课题。
【关键词】流量数据;Hadoop;数据处理
一、MapReduce分布式处理技术
Hadoop平台的MapReduce框架采用主从架构,由一个JobTracker主节点和多个TaskTracker从节点构成。(剩余2207字)
网站仅支持在线阅读(不支持PDF下载),如需保存文章,可以选择【打印】保存。