随着业务的发展,数据流量增大,以及实时数仓的应用越来越广泛,音乐实时数仓的流量越来越大,用户也越来越多,超大流量的消息队列对整体带宽资源、下游的消费任务的稳定性以及计算资源都带来了巨大的挑战。为了解决......
2023-01-18 关键字:企业IT领域掀起实时数仓热潮。然而,只要稍做梳理就会发现,实时数仓格局未定,各种流派群雄逐鹿,还有很多需要进一步探讨的话题方向。......
2022-10-31 关键字:随着互联网以及很多行业线上业务的快速发展,让数据体量以前所未有的速度增长,数据时效性在企业运营中的重要性日益凸现,企业对海量数据的处理有了更高要求......
2022-10-08 关键字:实时数仓的典型特征是,几种技术路线并行,以KAPPA为例,虽然比LAMBDA出来的晚一些,但二者并不是替代关系。同时,数据湖和数据仓库也不是层级替代关系,而是走向融合趋势,比如湖仓一体。......
2022-09-02 关键字:IT168&ITPUB策划了实时数仓系列选题,与业内专家共同探讨新技术、新趋势、新应用。本文为其中一篇,采访嘉宾:偶数科技解决方案部总监张立群。......
2022-08-08 关键字:本文主要介绍了小红书数据流团队基于Apache Iceberg在实时数仓领域的探索与实践。目前小红书对数据湖技术的探索主要分为三个方向,第一个方向是在小红书云原生架构下,对于大规模日志实时入湖的实践,......
2022-08-08 关键字:对大多数企业来说,近实时数仓可能也是一种选择 ,比如:每周进行加载每天执行一次,使数据仓库的用户能够访问更多最新数据,而无需对加载过程或数据模型进行重大修改。......
2022-07-28 关键字: