白眉大叔谈运维-第163页

MapReduce 二次排序原理?

白眉大叔发布于2023年7月21日

参考答案： 1、简述默认情况下，Map 输出的结果会对 Key 进行默认的排序，但是有时候需要对 Key 排…

大数据运维点赞(201) 评论关闭阅读(611)

白眉大叔发布于2023年7月21日

Hadoop 中通过拆分任务到多个节点运行来实现并行计算，但某些节点运行较慢会拖慢整个任务的运行，Hadoop…

大数据运维点赞(205) 评论关闭阅读(670)

白眉大叔发布于2023年7月21日

Hadoop 的性能调优从哪些方面着手一、硬件方面二、操作系统参数调优三、jvm 层面四…

大数据运维点赞(206) 评论关闭阅读(675)

白眉大叔发布于2023年7月21日

Hadoop 有哪些调度器？我们该如何选择？ hadoop 中常用的调度器有三种： 1)FIFO：（hadoo…

大数据运维点赞(206) 评论关闭阅读(880)

白眉大叔发布于2023年7月21日

https://sqlflow.gudusoft.com/#/

工具点赞(36) 评论关闭阅读(354)

白眉大叔发布于2023年7月21日

命名空间镜像(FSlmage)：HDFS 的目录树及文件/目录元信息是保存在内存中的，如果节点停电或进程崩溃，…

大数据运维点赞(198) 评论关闭阅读(638)

白眉大叔发布于2023年7月21日

hadoop 中目录,文件和块都会以对象的形式保存在 namenode 的内存中, 大概每个对象会占用 150…

大数据运维点赞(200) 评论关闭阅读(614)

白眉大叔发布于2023年7月21日

写数据流程： 1）首先客户端对文件进行切分，切分成数据块，每个数据块默认存储到 3 个节点上 2）在写入数据之…

大数据运维点赞(216) 评论关闭阅读(673)

白眉大叔发布于2023年7月21日

1 副本存储策略： 1、默认的副本策略： BlockPlacementPolicyDefault 1）1st …

大数据运维点赞(224) 评论关闭阅读(699)

白眉大叔发布于2023年7月21日

hdfs 数据块的默认大小是多少？过大过小有什么优缺点？ 1、数据块默认大小 Hadoop2.0 之前，默认数…

大数据运维点赞(205) 评论关闭阅读(709)