大数据Hadoop集群下Sqoop数据传输技术研究
打开文本图片集
摘 要：【目的】Hadoop系统是大数据分布式集群系统，其开源的生态圈中有众多功能组件，通过在大数据Hadoop集群系统上部署Sqoop组件，将本地关系型Mysql数据库中的数据和Hive数据仓库中存储的数据进行快速导入导出，进一步研究数据传输性能。【方法】首先在企业服务器上部署配置Hadoop分布式集群系统，其次在该集群上部署Sqoop组件并测试与Mysql数据库和Hive数据仓库的连通性，最后使用Sqoop技术测试本地Mysql数据库和Hive数据仓库之间的导入和导出。（剩余7575字）