月度归档： <span>2023年7月</span>-第5页-白眉大叔

Hadoop 中通过拆分任务到多个节点运行来实现并行计算，但某些节点运行较慢会拖慢整个任务的运行，Hadoop 采用什么机制应对这个情况

白眉大叔发布于2023年7月21日

Hadoop 中通过拆分任务到多个节点运行来实现并行计算，但某些节点运行较慢会拖慢整个任务的运行，Hadoop…

大数据运维点赞(208) 评论关闭阅读(709)

白眉大叔发布于2023年7月21日

Hadoop 的性能调优从哪些方面着手一、硬件方面二、操作系统参数调优三、jvm 层面四…

大数据运维点赞(204) 评论关闭阅读(701)

白眉大叔发布于2023年7月21日

Hadoop 有哪些调度器？我们该如何选择？ hadoop 中常用的调度器有三种： 1)FIFO：（hadoo…

大数据运维点赞(253) 评论关闭阅读(1,101)

白眉大叔发布于2023年7月21日

https://sqlflow.gudusoft.com/#/

工具点赞(39) 评论关闭阅读(387)

白眉大叔发布于2023年7月21日

命名空间镜像(FSlmage)：HDFS 的目录树及文件/目录元信息是保存在内存中的，如果节点停电或进程崩溃，…

大数据运维点赞(232) 评论关闭阅读(808)

白眉大叔发布于2023年7月21日

hadoop 中目录,文件和块都会以对象的形式保存在 namenode 的内存中, 大概每个对象会占用 150…

大数据运维点赞(204) 评论关闭阅读(659)

白眉大叔发布于2023年7月21日

写数据流程： 1）首先客户端对文件进行切分，切分成数据块，每个数据块默认存储到 3 个节点上 2）在写入数据之…

大数据运维点赞(268) 评论关闭阅读(878)

白眉大叔发布于2023年7月21日

1 副本存储策略： 1、默认的副本策略： BlockPlacementPolicyDefault 1）1st …

大数据运维点赞(279) 评论关闭阅读(897)

白眉大叔发布于2023年7月21日

hdfs 数据块的默认大小是多少？过大过小有什么优缺点？ 1、数据块默认大小 Hadoop2.0 之前，默认数…

大数据运维点赞(207) 评论关闭阅读(899)

白眉大叔发布于2023年7月21日

HDFS 具有主/从架构。一个 HDFS 集群包含一个 NameNode（一个主服务器），用于管理文件系统名称…

大数据运维点赞(192) 评论关闭阅读(613)