-
实时计算引擎具备哪些特点?使用场景有几类?
- 提问时间:2023/01/17
- 浏览量:290
- 提问者:匿名用户
[1个回答]实时计算引擎具备以下三个特点。(1)实时(Realtime)且无界(Unbounded)的数据流实时计算,面对计算的数据源是实时且流式的。实时计算按照时间发生的顺序,订阅流数据和消费数据。由于数据发生的持续性,数据流将持续且长久的进入实时计算系统。例如,网站的访问点击日志流,只要网站不关闭,将一直不停产生并进入实时计算系统。(2)持续(Continous)且高效的计算实时计算是一种事件触发的计算模式,触发源是上述的无界流式数据。一旦有新的流数据进入实时计算,实时计算立刻发起并进行一次计算任务。(3)流式(Streaming)且实时的数据集成流数据触发一次实时计算的计算结果,直接写入目的数据存储...
标签: 引擎 -
离线计算引擎常见的组件有哪些?主要能力是什么?
- 提问时间:2023/01/17
- 浏览量:210
- 提问者:匿名用户
[1个回答]目前常见的组件主要有:MapReduce、Hive、Spark、Maxcompute等组件。1.MapReduce一种计算模型,用于处理大数据量的计算。其中Map对应数据集上的独立元素进行指定的操作,生成键-值对形式的中间结果,Reduce则对中间结果中相同的键的所有值进行规约,以得到最终结果。2.Hive定义了一种类似sql的查询语言(hql)将sql转化为Mapreduce、Spark等引擎任务在Hadoop上执行。3.Spark开源的数据分析集群计算框架,用于构建大规模,延迟低的数据分析应用。Spark采用Scala语言实现和应用框架,采用基于内存的分布式数据集,优化了迭代式的工作负载以...
标签: 引擎
快速提问
海量报告支持,行业专家解读
海量文库支持,行业专家解答
用户解答榜
-
1
沃巴查芒
68次解答 -
2
每日新报
61次解答 -
3
StartYourFinance
57次解答 -
4
999感冒灵
55次解答 -
5
王中王
1次解答
