签到成功

知道了

CNDBA社区CNDBA社区

湖仓一体 概念

2022-10-19 15:13 693 0 转载 大杂烩
作者: dave

湖仓一体是一种新型的开放式架构,打通了数据仓库和数据湖,将数据仓库的高性能及管理能力与数据湖的灵活性融合了起来,底层支持多种数据类型并存,能实现数据间的相互共享,上层可以通过统一封装的接口进行访问,可同时支持实时查询和分析,为企业进行数据治理带来了更多的便利性。http://www.cndba.cn/dave/article/108702http://www.cndba.cn/dave/article/108702

湖仓一体(Data Lakehouse)是当前大数据领域热度最高的词汇,这一概念于2020年首次提出,是数据湖和数据仓库合而为一的新词汇。
业界普遍认为,湖仓一体将成为数据库行业的未来趋势。

http://www.cndba.cn/dave/article/108702
http://www.cndba.cn/dave/article/108702
http://www.cndba.cn/dave/article/108702
http://www.cndba.cn/dave/article/108702

大数据的处理过程是一个提升数据结构化程度和信息密度的过程,不同的数据适合的存储方式也有所不同。诞生于1990年的「数据仓库」适合存储结构化、信息密度高、经过处理后的数据,它的优势是存储规范,易于快速读取,弊端是灵活性不足;诞生于2011年的「数据湖」可以低成本存储任何形式及格式的原始数据,但它的弊端是缺乏结构性,一旦没有被治理好,就会变成数据沼泽。http://www.cndba.cn/dave/article/108702http://www.cndba.cn/dave/article/108702http://www.cndba.cn/dave/article/108702

而「湖仓一体」是一种将数据湖的灵活性和数仓的易用性、规范性、高性能结合起来的新型融合架构,类似于在湖边搭建了很多小仓库,有的负责数据分析,有的运转机器学习,有的来检索音视频等,数据源流都可以从数据湖里轻松获取。

http://www.cndba.cn/dave/article/108702

用户评论
* 以下用户言论只代表其个人观点,不代表CNDBA社区的观点或立场
dave

dave

关注

人的一生应该是这样度过的:当他回首往事的时候,他不会因为虚度年华而悔恨,也不会因为碌碌无为而羞耻;这样,在临死的时候,他就能够说:“我的整个生命和全部精力,都已经献给世界上最壮丽的事业....."

  • 2239
    原创
  • 3
    翻译
  • 547
    转载
  • 186
    评论
  • 访问:6643955次
  • 积分:4249
  • 等级:核心会员
  • 排名:第1名
精华文章
    最新问题
    查看更多+
    热门文章
      热门用户
      推荐用户
        Copyright © 2016 All Rights Reserved. Powered by CNDBA · 皖ICP备2022006297号-1·

        QQ交流群

        注册联系QQ