数据湖技术研究综述

打开文本图片集

摘 要：传统存储技术已经不适合大数据时代的数据分析和应用，数据湖概念的出现有效解决了数据存储成本高、灵活性低、异构数据多样化等问题。目前数据湖研究还处于早期阶段，缺乏覆盖数据处理全过程的综述性研究。为了更全面地了解数据湖技术，调查分析了近几年数据湖技术的研究成果。首先，梳理了数据湖发展历程和概念，并与其他类似的概念进行了比较；其次，对数据湖架构进行了调查，并根据架构特征把数据湖关键技术分为存储、数据摄取、数据维护、数据探索、数据治理等部分，分析和讨论了关键技术的最新研究进展、技术方案、研究缺陷以及今后研究方向；最后，调查了数据湖在各个应用领域的典型应用，为各行业数据湖的实施者提供了参考。（剩余38534字）