首页 > 试题广场 >

以下选项中不参与hdfs写流程的组件是

[单选题]
以下选项中不参与hdfs写流程的组件是
  • Client
  • DistributedFileSystem
  • NameNode
  • YARN
hdfs写流程,不需要yarn分配资源?
发表于 2023-05-12 11:14:49 回复(2)
  • 应用程序提交:在客户端将数据写入 HDFS 之前,可能需要先提交一个基于 YARN 的应用程序,以便合理利用集群资源。

  • 数据切片计算:如果数据量较大,需要对数据进行切片,将其分为多个部分进行并行处理。YARN 可以负责管理和分发这些数据切片到不同的计算任务。

  • 资源分配:YARN ResourceManager 根据应用程序的需求和集群中可用的资源,对资源进行分配和调度,以确保应用程序能够顺利地写入数据。

发表于 2023-09-24 08:14:30 回复(0)