Mapreduce中的combiner 和partition的区别
查看答案
相关试题
换一换
Mapreduce中的combiner 和partition的区别
答案
MapReduce框架中，在Map和Reduce之间的combiner的作用是（）
A.对Map的输出结果排序 B.对中间过程的输出进行本地的聚集 C.对中间结果进行混洗 D.对中间格式进行压缩
答案
大数据计算服务的MapReduce中,归并函数是MapReduce计算框架的一种优化,即框架会在map端对相同key值的数据进行本地的合并操作。关于Combiner（归并）,以下说法正确的是？（）
A.Combiner的合理使用,可以减少传输带宽,提升整体性能 B.Combiner是必须的 C.Combiner需要和 partitioner配合使用
答案
什么是Combiner?
答案
使用combiner的原因是（）
A.最多可以有4个Site使用同一PCM链路 B.多个TRXs可以使用同一天线系统 C.手机可以同进收听2个基站的信息 D.发射和传送均由同一天线完成
答案
以下关于ODPSMR中的归并操作（Combiner）的说中,正确的是（）
A.通常下 combiner的处理逻辑和map—致 B.Combiner函数将 shuttle阶段所有key值相等的记录进行归并 C.当map输出数据后,框架会在map端对相同key值的数据进行本地的归并操作 D.Combiner是必领的,可以减少传输带宽
答案
在MapReduce中，分片是（）
A.数据块 B.数据包 C.数据 D.指向数据的引用
答案
关于Combiner组件，下面说法错误的是？（）
A.Combiner组件的引入可减少MapTask输出数据量（磁盘IO） B.Combiner组件的引入可减少Reduce-Map网络传输数据量（网络IO） C.Combiner组件可看作是localreducer D.任何数据处理应用都可以用Combiner组件
答案
MapReduce中的Map和Reduce函数使用()进行输入输出。
A.key/value对 B.随机数值 C.其他计算结果
答案
若不针对MapReduce编程模型中的key和value值进行特别设置，下列哪一项是MapReduce不适宜的运算。
A.Max B.Min C.Count D.Average
答案
热门试题
Hadoop项目包括HDFS、MapReduce和（ ）
链式MapReduce计算中,对任意一个MapReduce作业,Map和Reduce阶段可以有无限个Mapper,但Reducer只能有一个
简述MapReduce的Map阶段和Reduce阶段
KNN算法用MapReduce实现，要进行几轮MapReduce?()
Hadoop中执行MapReduce任务不含哪种方式()。
支持向量机的MapReduce实现要进行几轮MapReduce?()
下列哪个不属于PageRank算法在Pregel和MapReduce中实现方式的区别？
关于MapReduce中Shuffle过程，说法错误的是()。
MapReduce通过TextOutputFormat组件输出到结果文件中
在Hadoop项目结构中，MapReduce指的是什么？
在MapReduce程序中，必须开发Map和Reduce相应的业务代码才能执行程序。
HDFS和MapReduce作为Hadoop的核心组件，下列对它们的描述中错误的是：
阿里云流计算目前可以支持SQL和MapReduce（）
移动云弹性MapReduce分和两个版本（）
MapReduce处理流程中Reduce如何获取Map端结果（）
hadoop中的mapreduce是基于什么运行的计算框架（）
MapReduce编程模型中以下组件哪个是最后执行的？
Mapreduce适用于（ ）。
Mapreduce适用于（ ）
为什么需要MapReduce（）
使用微信扫一扫登录
