1. HDFS 属于什么架构
高可用的分布式架构。
2. HDFS 部署后哪些进程?按启动顺序说明
NameNode, DataNode, SecondaryNameNode。
Hadoop 基础架构与运维知识总结。涵盖 HDFS 高可用分布式架构、NameNode/DataNode/SecondaryNameNode 等核心进程及启动顺序。涉及文件存储计算(副本策略)、MapReduce Shuffle 机制、YARN 进程组成(ResourceManager/NodeManager)。包含常用命令行工具如 hdfs dfs、jps、top 的使用场景,以及 HDFS 与 YARN 默认 Web 端口配置(50070/8088)。内容适用于大数据平台基础面试复习与日常运维排查。
高可用的分布式架构。
NameNode, DataNode, SecondaryNameNode。
就近分配(Rack Awareness)。
合并 NameNode 的 edit logs 到 fsimage 文件中。
等同于 hdfs dfs。
在 Map 和 Reduce 中间进行数据重组和洗牌操作。
NodeManager, ResourceManager。
查看 Java 进程及其对应信息。
top
使用 top 右上角的 load average,分别代表 1 分钟、5 分钟、15 分钟的系统平均负载。
可查看系统的 CPU、内存、运行时间、交换分区、执行的线程等信息。

微信公众号「极客日志」,在微信中扫描左侧二维码关注。展示文案:极客日志 zeeklog
暂无推荐文章,稍后可再来查看。
查找任何按下的键的javascript键代码、代码、位置和修饰符。 在线工具,Keycode 信息在线工具,online
JavaScript 字符串转义/反转义;Java 风格 \uXXXX(Native2Ascii)编码与解码。 在线工具,Escape 与 Native 编解码在线工具,online
使用 Prettier 在浏览器内格式化 JavaScript 或 HTML 片段。 在线工具,JavaScript / HTML 格式化在线工具,online
Terser 压缩、变量名混淆,或 javascript-obfuscator 高强度混淆(体积会增大)。 在线工具,JavaScript 压缩与混淆在线工具,online
将字符串编码和解码为其 Base64 格式表示形式即可。 在线工具,Base64 字符串编码/解码在线工具,online
将字符串、文件或图像转换为其 Base64 表示形式。 在线工具,Base64 文件转换器在线工具,online