00问答网
所有问题
当前搜索:
离线数仓和实时数仓区别
聊聊数据仓库中的缓慢变化维度(SCD)
答:
虽然我的主业是
实时
计算和批量计算,并不是数仓,但是在日常工作中绝对少不了与数仓打交道。并且我也算是参与过
离线数仓
建设的,维度建模的基础还是不能忘。本文就作为一篇抄书笔记吧。顾名思义,缓慢变化维度(slowly changing dimension, SCD)就是数据仓库维度表中,那些随时间变化比较不明显,但仍然会...
程序中的Hive具体是干什么用的呢?
答:
所以Hive没法满足数据
实时
查询分析的需求。Hive是由FaceBook研发并开源,当时FaceBook使用Oracle作为
数仓
,由于数据量越来越大,Oracle数仓性能越来越差,没法实现海量数据的
离线
批量分析,因此基于Hadoop研发Hive,并开源给Apacha。由于Hive不能实现数据实时查询交互,Hbase可提供实时在线查询能力,因此Hive和Hbase...
实时
更新是什么意思
答:
实时
更新是指数据源一变化,就会马上同步更新
数仓
或数据中台的数据。这里涉及两个关键点,一是如何实时知道发生变化,二是如何识别变化的数据。【实时】shíshí[副]在某事发生、发展的实际时间同步(做某事):进行~报道|~传递股市行情。实时(realtime)是一个计算机响应的水平,用户感觉足够及时或者是计算机与...
小迈科技 X Hologres:高可用的百亿级广告
实时数仓
建设
答:
在数据驱动的时代,小迈科技通过创新的解决方案,利用Hologres这一阿里云的强大工具,成功构建了一座高可用的百亿级广告
实时数仓
。作为小迈数据团队的核心工程师,李云和雷文联手应对了业务增长带来的挑战,实现了数据实时化和精细化处理的飞跃。他们将Hologres巧妙地融合了实时流处理和
离线
分析,形成了一体化的...
深入剖析OceanBase 4.3的关键功能
答:
4.3版本的应用场景多样,包括TP增强场景、ODS& Serving场景、轻量数仓场景和轻量
实时数仓
场景。通过在现有行存表上建立列存索引,OceanBase在TP库中实现了AP能力。在ODS和Serving场景中,OceanBase可简化大数据处理流程。轻量数仓场景下,全面使用OceanBase可简化ETL流程。轻量实时数仓场景中,OceanBase支持...
...30 倍,云积天赫基于 Apache Doris 构建统一
数仓
的实践
答:
随着业务的飞速增长,云积天赫对数据实时性和灵活性的需求日益增强,原有的基于CDH的大数据平台已难以满足复杂度提升的业务场景。为此,云积天赫引入了Apache Doris作为核心解决方案,逐步发掘出其强大的性能和优势,最终决定将其应用于企业级
实时离线
统一
数仓
的构建。作为AI营销策略领域的领导者,云积天赫...
如何进入大数据领域,学习路线是什么?
答:
第五阶段为分布式计算引擎主要讲解计算引擎、scala语言、spark、数据存储hbase、redis、kudu,并通过某p2p平台项目实现spark多数据源读写。第六阶段为数据存储与计算(实时场景)主要讲解数据通道Kafka、
实时数仓
druid、流式数据处理flink、SparkStreaming,并通过讲解某交通大数让你可以将知识点融会贯通。第七...
数仓
收敛比是什么意思
答:
随着数字化时代的到来,企业获取和处理大量数据已成为不可避免的趋势。
数仓
(Data Warehouse)是企业数据处理的核心,数仓的能力直接影响企业的决策效率和竞争力。在数仓的建设过程中,一个重要指标是数仓收敛比,它是用来评估数仓能否快速收敛和响应决策需要的指标。数仓收敛比越高表示数仓建设越成功,可以支持...
大数据
离线数仓
项目实战 | 新零售分析的10个案例详细解析
视频时间 161:99
淘菜菜 (一):基于Flink和Hologres的
实时数仓
架构升级之路
答:
淘菜菜的实时数仓架构升级之路,从最初的Flink和数据库,历经多阶段发展,最终实现千万RPS写入和几百T数据的高可用支持。作者汪宇(旋宇)分享了淘菜菜在与Hologres合作中的关键步骤和挑战。淘菜菜,作为社区团购业务的主力,其技术架构经历了原始数据库、Flink SQL、Flink+Hologres
实时数仓及
高可用实时数仓2....
<涓婁竴椤
1
2
3
4
5
6
7
8
9
10
涓嬩竴椤
灏鹃〉
其他人还搜